La evaluación formativa se realiza durante la implementación de un programa y tiene como objetivo principal la mejora continua. Su propósito es responder a preguntas clave como: "¿qué está funcionando, qué no y qué ajustes se necesitan hacer mientras aún hay oportunidad de actuar?"
Preguntas clave de la evaluación formativa
La evaluación formativa se enfoca en preguntas prácticas y orientadas a la acción, cruciales para un programa en curso:
- ¿El programa está llegando a sus participantes previstos, en el número y con la intensidad esperados?
- ¿Las actividades se están ejecutando según lo diseñado, o la implementación se ha desviado del modelo original?
- ¿Existen señales tempranas de resultados, incluso si los resultados completos aún no son medibles?
- ¿Qué ajustes en la implementación mejorarían los resultados durante el período restante del programa?
Este conjunto de preguntas difiere fundamentalmente de las que aborda la evaluación sumativa, la cual se pregunta: "¿funcionó el programa en general y justificó la inversión realizada?" La evaluación formativa tiene como función "reparar el coche mientras está en marcha", mientras que la evaluación sumativa busca determinar si el viaje valió la pena.
Cuándo utilizar la evaluación formativa
La evaluación formativa es más valiosa en cinco situaciones:
- Programas en fase inicial, donde los patrones de implementación aún se están estabilizando y los ajustes de rumbo son más fáciles y menos costosos.
- Teorías del Cambio complejas, donde la vía causal presenta múltiples supuestos que requieren ser validados en el campo.
- Innovaciones y proyectos piloto, donde el modelo del programa en sí está siendo probado, no solo ejecutado.
- Contextos de gestión adaptativa, donde el programa está explícitamente diseñado para aprender y ajustarse.
- Programas plurianuales con ciclos de revisión de medio término incorporados en el acuerdo con el donante.
Si un programa es corto, simple y de bajo riesgo, quizás una evaluación formativa no justifique su costo. Sin embargo, en la mayoría de los demás casos, prescindir de ella suele resultar en una falsa economía.
Características de diseño
Las evaluaciones formativas se diseñan priorizando su utilidad práctica, más que el rigor académico. Cuatro características importantes son:
- El momento ideal es a mitad de la implementación, típicamente después de que se haya ejecutado suficiente actividad para generar datos, pero con suficiente antelación para que los hallazgos puedan influir en el período restante del programa.
- La metodología es ágil y práctica. No se busca realizar un ensayo controlado aleatorio. El uso de métodos mixtos, con trabajo de campo cualitativo ligero y datos de monitoreo rutinarios, es el enfoque habitual.
- La prioridad es la capacidad de respuesta y la aplicabilidad inmediata, por encima de la generalizabilidad. La audiencia principal es el equipo del programa, no la comunidad académica.
- Los hallazgos se reincorporan al mismo ciclo del programa que los produjo. Si el informe se entrega una vez que el programa ha finalizado, se convierte en una evaluación sumativa disfrazada de formativa.
Formativa vs. sumativa
| Característica | Formativa | Sumativa |
|---|---|---|
| Momento | Durante la implementación | Al finalizar o después de la finalización del programa |
| Orientación | Mejora | Juicio |
| Audiencia principal | Equipo del programa | Donante, liderazgo, público |
| Método típico | Métodos mixtos, rápidos | Riguroso, a menudo comparativo |
| Uso de los hallazgos | Corregir el rumbo del programa actual | Rendir cuentas de los resultados, informar programas futuros |
La mayoría de los programas de tamaño significativo requieren ambas evaluaciones a lo largo de su ciclo de vida. Responden a preguntas distintas y sirven a propósitos y decisiones diferentes.
Contexto de la propuesta
Es fundamental que los programas plurianuales incluyan tanto evaluaciones formativas (como una revisión de medio término o evaluación de proceso) como sumativas (una evaluación final) en su plan de evaluación. Una propuesta que solo contemple una evaluación al final del proyecto desaprovecha las oportunidades de gestión adaptativa y aprendizaje que los donantes valoran cada vez más, y puede ser interpretada como una señal de que el equipo no tiene previsto aprender durante la implementación.
El momento de la evaluación es crucial. Si se realiza demasiado pronto, el programa podría no haberse estabilizado lo suficiente como para generar datos útiles; los datos serían meramente ruido. Si se realiza demasiado tarde, los hallazgos no podrán influir de manera realista en el ciclo actual del programa. Para un programa de 3 a 5 años, una revisión de medio término entre los meses 18 y 24 es el momento más común y, por lo general, el más adecuado.
Se recomienda presupuestar la evaluación formativa en aproximadamente el 1.5-2% del presupuesto total del programa, y la sumativa en el 2-4%. Subestimar el costo de la evaluación es un error frecuente en las propuestas.
Errores comunes
- Programarla demasiado pronto, antes de que el programa se haya estabilizado lo suficiente como para producir datos interpretables, lo que lleva a evaluar la fricción inicial del programa.
- Que los hallazgos no se integren en el ciclo del programa. El informe se redacta, se archiva y no se implementa ningún cambio. Una evaluación formativa sin un plan de uso es, en esencia, una evaluación sumativa disfrazada.
Temas relacionados
- Evaluación Sumativa: Evaluación al final del programa centrada en el juicio y la rendición de cuentas.
- Evaluación Centrada en el Uso: Evaluación diseñada priorizando cómo se utilizarán sus hallazgos en la práctica.
- Evaluación - Concepto principal que abarca evaluaciones formativas, sumativas y otros tipos de evaluación.
- Evaluación Basada en la Teoría: Prueba de la lógica causal detrás de un programa.
- Gestión Adaptativa: Enfoque de gestión que depende del aprendizaje formativo.