El Error
El problema
Al abrir la plantilla de la RFP, te encuentras con 25 filas para indicadores y las completas todas. O el equipo del programa te entrega un documento de diseño con 40 métricas a nivel de producto y te pide que las "incluyas en el marco lógico". O, quizás, heredas una propuesta de una presentación anterior con 35 indicadores y, ante una fecha límite ajustada, decides mantenerlos.
El resultado es un marco lógico donde cada actividad cuenta con dos o tres indicadores, cada resultado tiene cuatro, y la fila de impacto presenta tres mediciones superpuestas del mismo concepto. El plan de M&E subsiguiente declara la recopilación de datos para todos ellos. Sin embargo, el presupuesto de M&E rara vez puede financiar tal volumen. El equipo lo sabe, pues ha presenciado proyectos anteriores donde la mitad de los indicadores nunca se reportaron. A pesar de ello, la propuesta se presenta.
Número recomendado de indicadores por tamaño de programa
| Tamaño del programa | Rango óptimo | Zona de alerta |
|---|---|---|
| Pequeño ($250K-1M, 1-2 años) | 6-12 indicadores | 15+ |
| Mediano ($1M-5M, 2-3 años) | 8-18 indicadores | 22+ |
| Grande ($5M-15M, 3-5 años) | 12-22 indicadores | 28+ |
| Muy grande ($15M+, 5+ años) | 15-25 indicadores | 30+ |
La columna de 'Zona de alerta' no representa un límite estricto. Indica el punto a partir del cual un revisor experimentado probablemente señalará la sección para una evaluación de viabilidad. Mantenerse dentro del rango óptimo no garantiza la calidad de tu marco lógico por sí solo, pero sí elimina una razón sencilla para que te resten puntos.
Causas del problema
Este error se origina por cuatro factores principales. Primero, la presión de la plantilla: si el donante proporciona 25 filas, dejar algunas en blanco puede parecer arriesgado. Segundo, la necesidad de cubrir a los interesados: cada miembro del equipo propone "su" indicador, y nadie desea eliminar la contribución de un colega. Tercero, la falsa sensación de exhaustividad: los equipos confunden una lista extensa de indicadores con un plan de M&E completo, cuando en realidad son conceptos casi opuestos. Cuarto, las propuestas heredadas: los equipos reutilizan marcos lógicos de presentaciones anteriores sin una depuración adecuada, simplemente añadiendo los nuevos indicadores del programa sobre los ya existentes.
El problema de fondo es que una lista extensa de indicadores puede dar una falsa sensación de cobertura. Se tiende a pensar que más indicadores equivalen a una mayor rendición de cuentas. Sin embargo, en la práctica, una lista más larga suele significar que cada indicador se mide con menor rigor, se recopilan menos datos y el sistema pierde credibilidad al reportar resultados parciales como si fueran completos. Un marco lógico con 15 indicadores, reportados impecablemente por cada oficial de M&E, tiene mucho más valor para un donante que uno con 30 indicadores y lagunas trimestrales.
Por Qué Importa
La perspectiva de los revisores
Los revisores de propuestas con experiencia suelen contar los indicadores en los primeros 30 segundos. Un número superior a 25 en un programa de tamaño mediano es una señal de alerta, incluso antes de que hayan leído la descripción de un solo indicador. De ello infieren tres aspectos clave:
- Falta de priorización del equipo. Si todo se considera un indicador clave, en realidad, nada lo es.
- Presupuesto de M&E insuficiente. Treinta indicadores demandan más personal, más ciclos de recopilación de datos y mayor tiempo de análisis del que la mayoría de los presupuestos de propuestas pueden asumir. Si el plan de M&E sugiere lo contrario, el equipo está siendo excesivamente optimista.
- Inutilidad de los datos. Un exceso de indicadores genera demasiado ruido, dificultando su lectura y comprensión. Los donantes buscan un panel de control claro, no una hoja de cálculo abrumadora.
Ninguna de estas impresiones requiere la lectura de la narrativa. El simple recuento de indicadores las genera.
El Impacto presupuestario
El volumen de indicadores incrementa el costo de M&E de forma aproximadamente lineal, pero los presupuestos de M&E rara vez se ajustan para reflejarlo. Un costo base razonable por indicador en un programa típico de salud o educación (que incluye encuestas, desarrollo de medios de verificación, análisis e informes) representa entre el 1% y el 2% del presupuesto de M&E. Treinta indicadores, por tanto, implicarían que el presupuesto de M&E podría cubrir entre el 30% y el 60% de su costo solo en la instrumentación de datos. Esto deja escaso margen para evaluaciones, ACD, eventos de aprendizaje o tiempo del personal.
Los revisores con experiencia en la gestión de programas comprenden esta matemática de inmediato. Cuando tu presupuesto de M&E se sitúa entre el 5% y el 10% del total (lo habitual) y tu número de indicadores es de 30 o más, la proporción simplemente no es viable. En consecuencia, restan puntos por la falta de viabilidad.
La Solución
Cuatro criterios de decisión
Antes de mantener cualquier indicador, somételo a estas cuatro preguntas clave:
- ¿Qué decisión informa este indicador? Nombra la decisión específica: "Este indicador nos informará si debemos escalar la intervención a un nuevo distrito en el Año 3." Si no puedes identificar una decisión clara, elimínalo.
- ¿Existe otro indicador que ya mida esto? Con frecuencia, dos o tres indicadores abordan el mismo cambio de comportamiento. Conserva aquel que cuente con el medio de verificación más robusto y elimina los demás.
- ¿Es factible recopilar estos datos? Si el medio de verificación exige encuestas mensuales a hogares, pero tu presupuesto solo permite líneas de base anuales, el indicador se convierte en un pasivo. Elimínalo o rediséñalo.
- ¿Este indicador corresponde al marco lógico o a un plan de trabajo? Los recuentos a nivel de actividad (como "número de capacitaciones realizadas" o "reuniones llevadas a cabo") suelen ser parte del monitoreo del plan de trabajo, no de un marco lógico destinado a los donantes.
La mayoría de los equipos logran reducir entre el 30% y el 50% de su lista inicial de indicadores al aplicar estas pruebas con honestidad. Utiliza la lista de verificación de indicadores SMART para identificar problemas adicionales en los indicadores que decidas mantener, ya que detecta cuestiones de especificidad y mensurabilidad que los criterios de decisión podrían pasar por alto.
Manejo de indicadores descartados
Los indicadores que se eliminan no desaparecen, sino que se reubican en tres categorías:
- Monitoreo del plan de trabajo: Los recuentos a nivel de actividad se integran en tu diagrama de Gantt o en el rastreador del plan de trabajo, no en el marco lógico principal. Tu oficial de M&E continuará su seguimiento, pero los donantes no los verán en el informe formal.
- Anexo del plan de M&E: Los indicadores secundarios de interés pueden incluirse en un apéndice, etiquetado como "indicadores suplementarios, sujetos a seguimiento si los recursos lo permiten". Esto demuestra que los consideraste sin sobrecargar la matriz principal.
- Preguntas de aprendizaje: Algunos indicadores son, en realidad, preguntas de aprendizaje disfrazadas. Trasládalos a una sección de la agenda de aprendizaje donde puedan informar la adaptación del programa, en lugar de los informes trimestrales.
El marco lógico resultante debería contener entre 8 y 20 indicadores en total, organizados en una jerarquía clara: 1-3 de impacto, 3-6 de resultado y el resto como productos. Esto es lo que esperan los revisores y lo que tu equipo puede realmente cumplir. Para formatos específicos de donantes, consulta la guía de la sección de M&E de la propuesta.
Errores frecuentes
El error de "demasiados indicadores" rara vez se presenta de forma aislada. Generalmente, viene acompañado de estos errores relacionados:
- Confundir métricas de actividad con métricas de resultado. Los recuentos de capacitaciones, reuniones y registros de distribución son actividades, no resultados. Inflan el número de indicadores y diluyen el marco de resultados. Consulta producto vs resultado vs impacto para entender la distinción que aplican los revisores.
- El volumen como sustituto del diseño SMART. A veces, los equipos añaden indicadores porque los existentes son débiles, en lugar de corregirlos. El resultado es una mayor cantidad de indicadores igualmente débiles. Corrige el diseño, no lo disimules.
- Ignorar la viabilidad de los medios de verificación. Un indicador con un medio de verificación inviable no es un indicador medible. Los revisores lo detectan al escanear la columna de MoV; una propuesta con 30 indicadores y 10 métodos de encuesta diferentes fallará solo con esta verificación.
- Indicadores heredados que nunca se depuran. Si has copiado el marco lógico de una propuesta anterior, asume que la mitad de los indicadores no son aplicables a este nuevo programa. Realiza una depuración deliberada, no te limites a añadir nuevos.
- Considerar el marco lógico como un inventario. El marco lógico representa aquello por lo que se te responsabilizará, no un catálogo exhaustivo de todo lo que podrías monitorear. Cualquier elemento que no puedas comprometerte a reportar trimestralmente debe quedar fuera de él.
Ejemplos
Ejemplo débil
Una propuesta de salud de $600K y tres años con 32 indicadores:
- 5 indicadores de impacto, 3 de los cuales son tasas de prevalencia nacionales que el programa no puede influir de manera medible.
- 9 indicadores de resultado, incluyendo tres que miden el "conocimiento de signos de peligro" con formulaciones distintas.
- 18 indicadores de producto, de los cuales 11 son recuentos de actividades (capacitaciones realizadas, reuniones llevadas a cabo, materiales distribuidos).
El plan de M&E promete encuestas trimestrales para el monitoreo de los resultados. El presupuesto de M&E representa el 6% del total. Cuenta con un solo oficial de M&E y no incluye evaluación subcontratada. Los revisores restan puntos por falta de viabilidad.
Ejemplo fuerte
El mismo programa de $600K revisado a 12 indicadores:
- 2 indicadores de impacto: contribución a la mortalidad de menores de 5 años (datos externos MICS, Año 5) y uso sostenido de servicios (encuesta final, Año 3).
- 4 indicadores de resultado: conocimiento de signos de peligro (línea de base más encuesta final a hogares), búsqueda de atención en 48 horas, finalización de la derivación, cobertura de consultas materno-neonatales.
- 6 indicadores de producto: Trabajadores de Salud Comunitarios (TSC) capacitados y activos, visitas domiciliarias completadas por TSC al mes, derivaciones por signos de peligro registradas, visitas de atención prenatal (ANC) en instalaciones apoyadas, visitas de supervisión, sesiones de diálogo comunitario.
Cada indicador cuenta con un medio de verificación específico. Los 20 indicadores eliminados se encuentran en un rastreador del plan de trabajo o en un apéndice de indicadores suplementarios. El presupuesto de M&E cubre la recopilación de datos prometida por el marco lógico. Los revisores valoran positivamente esta sección en términos de viabilidad y priorización.