Usted es un especialista experto en recolección de datos de M&E. Evalúe el informe de prueba piloto del instrumento que adjunté o pegué utilizando la rúbrica a continuación.
RÚBRICA DE EVALUACIÓN - Resultados de la Prueba Piloto del Instrumento
Puntúe cada dimensión de 1 a 5 utilizando los siguientes criterios:
DIMENSIÓN 1: Documentación del Alcance del Piloto
| 5 | Los cuatro elementos presentes. El número de participantes está declarado, el desglose demográfico está documentado (sexo, edad, idioma u otros estratos relevantes para el instrumento), el método de selección está nombrado (criterios intencionales, conveniencia u otra justificación), y el lugar y momento del piloto están documentados (dónde y cuándo tuvo lugar el piloto). |
|---|---|
| 4 | Al menos tres de los cuatro elementos presentes. Número y demografía documentados; método de selección o momento parciales. |
| 3 | Al menos dos de los cuatro elementos presentes. Número declarado y otro elemento. |
| 2 | Número de participantes del piloto declarado sin demografía ni justificación de la selección. |
| 1 | Sin alcance del piloto documentado, O alcance tan limitado que no permite probar el instrumento (por ejemplo, un participante para una encuesta de hogares). |
DIMENSIÓN 2: Problemas Identificados
| 5 | Los cuatro elementos presentes. Problemas de comprensión catalogados (ítems, preguntas o términos específicos que los participantes malinterpretaron), problemas de duración y fatiga señalados con referencia cuantitativa cuando es posible (por ejemplo: "la duración promedio de la entrevista fue de 78 minutos frente a una meta de 45 minutos"), problemas de contenido sensible señalados (preguntas que provocaron rechazo, malestar o no respuesta), y fallas en la lógica de saltos o el flujo del instrumento documentadas. |
|---|---|
| 4 | Al menos tres de los cuatro elementos presentes. Varios tipos de problemas catalogados; un tipo parcial. |
| 3 | Al menos dos de los cuatro elementos presentes. Algunos problemas documentados pero de forma genérica. |
| 2 | Problemas mencionados sin especificidad (por ejemplo: "algunas preguntas eran confusas"). |
| 1 | Sin problemas identificados, O el informe del piloto declara que no hay problemas a pesar de fallas evidentes en el instrumento. |
DIMENSIÓN 3: Revisiones Documentadas
| 5 | Los cuatro elementos presentes. Cada problema identificado emparejado con una revisión específica (cambio de redacción, ítem añadido o eliminado, lógica de saltos modificada, sección reestructurada), justificación para cada revisión, ítems intencionalmente no revisados señalados con su justificación (por ejemplo: "se conservó la redacción original para la comparabilidad entre períodos"), y el instrumento final revisado está referenciado o adjunto. |
|---|---|
| 4 | Al menos tres de los cuatro elementos presentes. Problemas emparejados con revisiones; justificación o ítems no revisados parciales. |
| 3 | Al menos dos de los cuatro elementos presentes. Revisiones mayores documentadas pero revisiones menores o justificación ausentes. |
| 2 | Revisiones mencionadas genéricamente ("se actualizó el instrumento") sin especificidad por ítem. |
| 1 | Sin revisiones documentadas, O revisiones no vinculadas a los problemas identificados. |
DIMENSIÓN 4: Retroalimentación de Traductores y Encuestadores
| 5 | Los cuatro elementos presentes. La retroalimentación de los encuestadores está recogida y resumida (qué fue difícil de administrar, qué resultó incómodo), la retroalimentación de los traductores está recogida cuando hay traducción de por medio (términos que no se traducen bien, problemas de pertinencia cultural), se incluyen ejemplos específicos (no solo un resumen), y el mecanismo de retroalimentación está documentado (sesión de debriefing, formulario estructurado, notas escritas). |
|---|---|
| 4 | Al menos tres de los cuatro elementos presentes. Retroalimentación de encuestadores y traductores recogida; ejemplos o mecanismo parciales. |
| 3 | Al menos dos de los cuatro elementos presentes. Retroalimentación de encuestadores incluida pero retroalimentación de traductores ausente (cuando aplica la traducción), o viceversa. |
| 2 | Retroalimentación del lado de la administración mencionada sin ejemplos ni mecanismo. |
| 1 | Sin retroalimentación de encuestadores ni de traductores. |
DIMENSIÓN 5: Declaración de Preparación para el Campo
| 5 | Los cuatro elementos presentes. Declaración explícita de preparación para el campo (el instrumento está listo, está condicionalmente listo, o requiere más revisiones), problemas pendientes listados si los hay con su resolución planificada, persona responsable de la decisión de preparación nombrada (por ejemplo: líder de investigación, responsable MEL), y cualquier prueba adicional planificada antes del despliegue está documentada. |
|---|---|
| 4 | Al menos tres de los cuatro elementos presentes. Preparación declarada con problemas pendientes; responsable o pruebas adicionales parciales. |
| 3 | Al menos dos de los cuatro elementos presentes. Preparación declarada pero problemas pendientes vagos. |
| 2 | El informe del piloto termina con revisiones pero sin una evaluación explícita de preparación. |
| 1 | Sin declaración de preparación para el campo, O resultados del piloto no utilizados para informar la decisión de lanzamiento. |
FORMATO DE SALIDA:
Devuelva su evaluación como una tabla seguida de un resumen:
| Dimensión | Puntaje (1-5) | Evidencia del Informe del Piloto | Revisión Prioritaria |
|---|---|---|---|
| Documentación del Alcance del Piloto | |||
| Problemas Identificados | |||
| Revisiones Documentadas | |||
| Retroalimentación de Traductores y Encuestadores | |||
| Declaración de Preparación para el Campo |
Total: X/25 Nivel: Sólido (22-25) / Adecuado (17-21) / Requiere Revisión (11-16) / Revisión sustancial (5-10) Revisión más importante: [Una oración específica] Recomendación de preparación para el campo: [Listo para campo / Campo con condiciones declaradas / Repetir piloto antes del campo / Revisión mayor del instrumento requerida]
Para cualquier dimensión puntuada con 1 o 2, añada una breve explicación y un ejemplo concreto de revisión.
INFORME DE PRUEBA PILOTO DEL INSTRUMENTO A EVALUAR:
(Vea el documento adjunto o pegado.)
Documento a revisar: Adjunto, o pegado abajo. Base todo lo anterior en ese material y no invente detalles que no aparezcan en él.