Indicadores estándar y personalizados en M&E: guía para su uso y combinación óptima

Ventajas de los indicadores estándar: cuándo priorizarlos

Considere el uso de indicadores estándar cuando se cumpla una o varias de las siguientes condiciones:

La conformidad no es negociable. La biblioteca de indicadores de su donante está estipulada en el contrato. Usted debe reportar estos indicadores, independientemente de si se ajustan perfectamente a su programa. Esta es la razón más frecuente para su uso; aproximadamente entre el 30% y el 50% de un plan de M&E suele estar determinado por los requisitos de cumplimiento de donantes, especialmente en el caso de financiaciones bilaterales o multilaterales de gran envergadura.

La comparabilidad es analíticamente importante. Su programa opera en un contexto donde otros ya han medido fenómenos similares, y usted busca que sus resultados sean comparables. Esto es crucial para la credibilidad de las evaluaciones, la toma de decisiones sobre la escalabilidad y la contribución a la base de evidencia existente.

El marco ya cuenta con una metodología validada que, de otro modo, usted tendría que desarrollar. Escalas como las de servicio JMP, las de inseguridad alimentaria HFIAS y los indicadores de hogar tipo DHS incluyen cuestionarios probados, formulaciones de ítems pre-validadas y propiedades psicométricas conocidas. Recrear esto por su cuenta sería costoso y, probablemente, resultaría en una calidad inferior.

El programa se ajusta a los supuestos del marco. Si su programa WASH proporciona acceso a agua en los hogares de una manera que el JMP está diseñado para medir, utilice los indicadores JMP. De igual forma, si su programa de seguridad alimentaria se centra en el consumo a nivel de hogar de una forma que el HFIAS evalúa, emplee los indicadores HFIAS.

Existen datos de referencia externos. Los indicadores estándar suelen incluir valores de referencia (promedios nacionales, estándares mínimos SPHERE, tasas de cobertura JMP). Estos puntos de referencia son de gran utilidad analítica e imposibles de replicar para un indicador personalizado sin la realización de estudios paralelos.

Ventajas de los indicadores personalizados: cuándo son indispensables

Recurra a indicadores personalizados cuando los indicadores estándar no logren capturar la esencia de lo que su programa realmente está logrando.

Su programa está fuera del alcance del marco estándar. Si su programa (por ejemplo, una empresa social que genera medios de vida a través de cadenas de valor de nicho, un modelo innovador de prestación educativa o un programa sensible al conflicto en una nueva geografía) tiene resultados que ningún marco estándar mide adecuadamente. Intentar encajar estos resultados en el indicador estándar más cercano generará datos que, si bien son técnicamente recolectables, resultarán sustantivamente poco informativos.

Su Teoría del Cambio es específica de la ruta. Los indicadores estándar suelen enfocarse en el nivel de resultado o impacto. Si la ruta causal de su programa implica cambios intermedios (como cambios de actitud, adquisición de habilidades o precursores conductuales) que los indicadores estándar no capturan, necesitará indicadores personalizados para esas fases. Para comprender la lógica nivel por nivel, consulte producto vs. resultado vs. impacto.

El costo de medición del indicador estándar es desproporcionado. Un indicador ODS que exige una encuesta nacional de hogares no puede ser recolectado por un programa de $2 millones que opera en solo 3 distritos. En estos casos, el uso de un indicador personalizado adaptado a la escala del programa es justificable, incluso si existe un indicador estándar en teoría.

La definición del indicador estándar falla en el contexto local. El término "hogar" puede referirse a una familia nuclear en un contexto, mientras que en otro puede significar un complejo familiar extendido. De igual forma, una "fuente de agua mejorada" puede excluir los pozos en un marco, pero incluirlos en otro. Si la definición estándar no se alinea con la realidad operativa de su programa, utilizarla de todos modos generará datos inválidos. Es preferible desarrollar un indicador personalizado con una definición localmente apropiada y documentar claramente la justificación.

Necesita una resolución más alta de la que proporciona el estándar. Los indicadores estándar suelen rastrear resultados binarios (por ejemplo, tuvo acceso / no tuvo, logró / no logró). Un programa cuya Teoría del Cambio exige una medición graduada (cuánto acceso, con qué consistencia, en qué subgrupos específicos) requiere indicadores personalizados que ofrezcan una resolución más detallada.

El enfoque híbrido: integrando ambos tipos de indicadores

Los planes de M&E más robustos integran ambos tipos de indicadores. La cuestión no es elegir "cuál", sino determinar "en qué proporción y cómo se interrelacionan".

Una estructura típica incluye:

• Capa de conformidad: 5-15 indicadores estándar requeridos por el donante o el marco regulatorio. Se reportan en los intervalos y el formato exigidos. El esfuerzo de recolección de datos es proporcional al requisito de informe, no mayor.
• Capa de comparabilidad: 3-8 indicadores estándar adicionales elegidos por su valor de referencia externo (ODS, SPHERE, JMP o norma sectorial). Estos no son obligatorios para la conformidad, pero anclan sus resultados a puntos de referencia reconocibles.
• Capa de indicadores personalizados: 8-20 indicadores específicos del programa que miden lo que el programa hace de manera única. Estos rastrean la Teoría del Cambio a los niveles que los indicadores estándar no pueden alcanzar.

Un programa de desarrollo de tamaño mediano suele manejar entre 20 y 40 indicadores en total, distribuidos en todas las capas, con una proporción aproximada de 40-60% estándar (conformidad + comparabilidad) y 40-60% personalizado. Los programas humanitarios tienden a favorecer un mayor número de indicadores estándar (como los estándares de clúster), mientras que los programas innovadores suelen inclinarse más hacia los personalizados.

Para comprender por qué la proporción por sí sola no evita la inflación de indicadores, consulte error de demasiados indicadores.

Cómo construir un mapa de alineación

Para cada indicador personalizado, documente su relación con el indicador estándar pertinente (si existe). Este mapa de alineación es el elemento más crucial del enfoque híbrido.

Estructura:

Beneficios del mapa de alineación:

• Permite a analistas y evaluadores comprender la razón de ser de cada indicador.
• El personal de M&E futuro puede comprender la lógica sin tener que empezar desde cero.
• Los donantes pueden observar cómo los datos específicos del programa complementan los informes de conformidad.
• La comparabilidad se logra de forma intencionada, no por casualidad.

Mantenga el mapa integrado en el plan de M&E, no en un archivo separado que podría extraviarse. Revíselo y actualícelo en cada ciclo de revisión del plan de M&E.

Gestionando la deriva en las definiciones de indicadores

Los indicadores estándar pueden sufrir cambios en sus definiciones. Por ejemplo, SPHERE revisó varios estándares en 2018 y nuevamente en el ciclo de revisión de 2024. El Marco F de USAID se actualiza anualmente, y los indicadores ODS han experimentado revisiones técnicas en la mayoría de los años de reporte.

Esta deriva en las definiciones genera dos problemas específicos:

La comparación histórica se ve comprometida. Sus datos de línea final de 2022, basados en la definición anterior, no serán directamente comparables con los datos de línea final de 2026, que utilizarán la nueva definición. Es fundamental documentar la versión de cada indicador estándar en su plan de M&E (por ejemplo, "ODS 3.8.1 según la revisión de 2024") para que los analistas puedan identificar claramente las rupturas en la comparabilidad.

Los informes del donante cambian a mitad del programa. Un programa multianual podría encontrarse, en su tercer año, con que la lista de indicadores obligatorios del donante ha sido modificada. Es crucial incorporar una contingencia de revisión en el plan de M&E: realizar una verificación de la vigencia de los indicadores en cada ciclo anual del plan de trabajo.

Los indicadores personalizados no sufren esta deriva a menos que usted decida modificarlos. Esto representa una ventaja para la gestión interna del programa, pero una desventaja en términos de comparabilidad externa.

Ejemplos prácticos por sector

Salud: equilibrando PEPFAR MER con resultados específicos del programa, África Oriental

Un programa de VIH que operaba bajo PEPFAR debía reportar 12 indicadores MER para sus informes trimestrales de conformidad. La Teoría del Cambio del programa contemplaba mejoras en la calidad de la atención centrada en el cliente, aspectos que los indicadores MER no medían. El equipo de M&E incorporó 8 indicadores personalizados que abordaban: el respeto percibido por parte del proveedor (escala de 3 ítems), la continuidad de la atención entre diferentes tipos de servicio (proxy: visitas trimestrales consecutivas) y la reducción del estigma en la comunidad en general (encuesta de actitudes en los hogares). El mapeo reveló que los 12 indicadores estándar cubrían productos y resultados de cobertura de servicios, mientras que los 8 indicadores personalizados se enfocaban en la calidad del proceso y los resultados a nivel comunitario que los indicadores estándar no lograban capturar. Los informes diferenciaban claramente ambas capas para asegurar que la conformidad con el donante nunca fuera cuestionada.

WASH: alineación con la escala JMP para un programa de agua rural, África Occidental

Un programa de acceso a agua rural reportó las categorías de la escala de servicio JMP para alinearse con el ODS 6.1 ("servicio básico", "servicio limitado", "sin servicio"). Sin embargo, la gestión del programa requería una resolución más detallada: la Teoría del Cambio del programa incluía la capacidad del comité de agua como un precursor clave para la sostenibilidad del servicio. Por ello, el plan de M&E añadió una Puntuación de Capacidad del Comité de Agua personalizada (0-20, 10 ítems) como indicador adelantado. Cuando la cobertura del servicio básico JMP se estancó en el año 2, la puntuación de capacidad ya estaba señalando comités débiles específicos, lo que permitió al programa intervenir a tiempo. Los indicadores estándar funcionaron como la medida de resultado, mientras que el personalizado actuó como el indicador adelantado.

Educación: estándares INEE + indicadores de aprendizaje personalizados, Asia Meridional

Un programa de educación en emergencias implementó los Estándares Mínimos INEE para asegurar la conformidad y la comparabilidad (en acceso, calidad y coordinación). No obstante, los estándares INEE no medían resultados de aprendizaje específicos a nivel de grado que el programa buscaba abordar. Por consiguiente, el plan de M&E incorporó indicadores de aprendizaje personalizados: puntuaciones de evaluación de alfabetización de 3er grado (EGRA adaptado), habilidades numéricas de 5to grado (EGMA adaptado) y asignación de tiempo de lectura a nivel escolar. Esta combinación ofreció al donante una comparabilidad alineada con INEE respecto a otros programas de educación en emergencias, y a la gestión del programa, datos de resultados de aprendizaje a nivel de aula.

Seguridad alimentaria: HFIAS para cumplimiento, diversidad alimentaria para gestión del programa, Sahel

Un programa de seguridad alimentaria reportó las puntuaciones HFIAS trimestralmente para la conformidad con el donante y la comparabilidad entre programas. Sin embargo, el contexto pastoralista del programa presentaba patrones de migración estacional que el HFIAS solo capturaba parcialmente. Por ello, el equipo de M&E añadió dos indicadores personalizados: una Puntuación de Diversidad Dietética del Hogar desagregada por fase de migración (trashumancia vs. asentado) y un Indicador de Disposición de Activos del Hogar (que rastreaba las ventas por necesidad como alerta temprana). El HFIAS se mantuvo como el estándar comparable, mientras que los indicadores personalizados lograron capturar dinámicas específicas del contexto que el estándar no podía.

Errores frecuentes al elegir indicadores

Error 1: elegir indicadores estándar sin leer las definiciones. El nombre del indicador puede sonar adecuado, pero la especificación técnica podría indicar algo distinto. Por ejemplo, "Hogares con acceso a agua mejorada" en el JMP tiene una definición específica (gestionada de forma segura, básica, limitada, no mejorada) que difiere del significado coloquial. Es crucial leer la definición completa antes de comprometerse con su uso.

Error 2: modificar indicadores estándar en silencio. Si su definición operativa difiere de la establecida en el marco, ya no está utilizando el indicador estándar. Debe usarlo sin modificar o etiquetarlo como un indicador personalizado, incluyendo una nota clara sobre la desviación. Utilizar el nombre de un indicador estándar con una definición alterada genera datos que, aunque parecen comparables, en realidad no lo son.

Error 3: asumir que los indicadores personalizados no necesitan validación. Los indicadores personalizados no son un atajo. Requieren métodos de medición claramente definidos, cuestionarios probados, controles de fiabilidad inter-evaluadores para mediciones complejas y una justificación explícita documentada en el plan de M&E. Afirmar "lo inventamos" no constituye una metodología válida.

Error 4: no hay un mapa de alineación entre lo personalizado y lo estándar. Sin un mapa de alineación, los indicadores personalizados y estándar tienden a divergir en vías paralelas que rara vez se utilizan de forma conjunta. El mapa obliga a plantear la pregunta: ¿por qué existe una versión personalizada si el indicador estándar ya mide este aspecto?

Error 5: demasiados indicadores estándar sin tener en cuenta la adecuación al programa. Un programa que opera en un contexto específico puede verse tentado a adoptar un gran número de indicadores estándar sin evaluar si realmente son pertinentes para sus objetivos y su Teoría del Cambio. Esto puede llevar a la recolección de datos irrelevantes o a una sobrecarga de trabajo.

Error 6: demasiados indicadores personalizados sin tener en cuenta la comparabilidad. Un programa con 20 indicadores personalizados y solo 2 estándar no podrá compararse con prácticamente nada. Los evaluadores externos tendrán dificultades para contextualizar los resultados. Incorpore entre 3 y 5 indicadores estándar para aportar valor de referencia, incluso cuando no sean requeridos por cumplimiento.

Error 7: ignorar las actualizaciones del marco del donante a mitad del programa. Los indicadores estándar evolucionan. Verifique la versión vigente en cada revisión anual del plan de trabajo y reporte de forma explícita las rupturas de comparabilidad en el informe anual.

Error 8: ejecutar la recolección de datos estándar y personalizada como operaciones paralelas. Cuando los constructos se superponen, integre la medición en una única ronda de encuesta o visita de recolección de datos. Realizar dos encuestas trimestrales separadas para los indicadores estándar y los personalizados duplica el costo a cambio de una ganancia de calidad marginal.

Lista de verificación: ¿Indicador personalizado o estándar?

Aplique esta lista durante el desarrollo del plan de M&E para cada indicador candidato.

¿Existe un indicador estándar disponible?

• Se revisó la lista de indicadores obligatorios del donante.
• Se revisaron los marcos sectoriales específicos (SPHERE, ODS, estándares sectoriales).
• Se revisó la biblioteca del donante en busca de indicadores recomendados complementarios.
• Se revisó la definición completa del indicador estándar, no solo su nombre.

¿El indicador estándar se ajusta al programa?

• El constructo se corresponde con la Teoría del Cambio del programa al nivel adecuado.
• El método de medición es viable considerando la escala y el presupuesto del programa.
• La definición se alinea con el contexto local y la realidad operativa.
• La frecuencia de recolección de datos coincide con el ciclo de toma de decisiones.

Si va a utilizar un indicador personalizado en su lugar:

• La razón está documentada (indicador estándar no disponible, ajuste deficiente, costo prohibitivo, resolución insuficiente).
• El método de medición está definido y probado (prueba cognitiva + piloto).
• Se ha mapeado la alineación con el indicador estándar más cercano.
• El enfoque de validación está especificado (fiabilidad inter-evaluadores, validez de constructo o revisión por expertos).

Comprobaciones a nivel de cartera:

• La proporción estándar/personalizado se ajusta al tipo de programa (40-60% de cada uno para la mayoría de los programas de desarrollo).
• No existe duplicación de mediciones (un mismo constructo medido como estándar y como personalizado sin una razón explícita).
• El mapa de alineación está completo en el plan de M&E.
• Todos los requisitos de conformidad del donante se cumplen mediante indicadores estándar sin modificaciones.

Para conocer el flujo de trabajo completo de diseño de indicadores, consulte profundización en indicadores SMART e indicador vs. meta vs. hito. Para la aplicación en la redacción de propuestas, consulte cómo redactar la sección de M&E de la propuesta. Para un flujo de trabajo paso a paso asistido por IA, consulte el playbook de desarrollo de indicadores.