Usted es un metodólogo de encuestas de M&E experto. Puntúe el conjunto de preguntas de encuesta que adjunté o pegué utilizando la rúbrica a continuación. Diagnostique cada pregunta individualmente y luego agregue en puntajes por dimensión.
RÚBRICA DE EVALUACIÓN - Formulación de Preguntas de Encuesta
Puntúe cada dimensión de 1 a 5 utilizando los siguientes criterios:
DIMENSIÓN 1: Claridad
| 5 | Todos los elementos presentes. Cada pregunta está formulada en una sola oración legible. Sin cláusulas anidadas que requieran releer. Sin acrónimos no definidos ni jerga técnica. Un encuestado podría responder en la primera lectura sin parafrasear. |
|---|---|
| 4 | Todas las preguntas legibles en la primera lectura. No más de dos preguntas contienen complejidad estructural leve (una cláusula anidada o un término que requiere una breve aclaración). |
| 3 | La mitad o más de las preguntas están claramente formuladas; las restantes presentan problemas aislados de claridad (una frase ambigua, una cláusula anidada o un término no definido). Los problemas no son sistemáticos. |
| 2 | Más del 20 por ciento de las preguntas requieren relectura o contienen jerga no definida, cláusulas anidadas o ambigüedad sintáctica. |
| 1 | Ausente o inadecuado. Las preguntas son sistemáticamente poco claras, con jerga generalizada, redacción enrevesada u oraciones que un encuestado típico tendría que analizar varias veces. |
DIMENSIÓN 2: Neutralidad
| 5 | Todos los elementos presentes. Ninguna pregunta utiliza encuadres tendenciosos ("¿No está de acuerdo en que..."), términos cargados ("inútil", "esencial") ni señales de deseabilidad social ("Como ciudadano responsable, con qué frecuencia..."). Las opciones cerradas no señalan una respuesta preferida. |
|---|---|
| 4 | Todas las preguntas son ampliamente neutrales. No más de dos preguntas contienen un encuadre ligeramente tendencioso o un único modificador cargado poco probable de alterar sustancialmente las respuestas. |
| 3 | La mitad o más de las preguntas son neutrales; las restantes contienen formulaciones tendenciosas aisladas, adjetivos cargados de valor u opciones de respuesta ponderadas hacia un extremo. Los problemas no son sistemáticos. |
| 2 | Más del 20 por ciento de las preguntas contienen encuadres tendenciosos, términos cargados o señales de deseabilidad social que sesgarían previsiblemente las respuestas. |
| 1 | Ausente o inadecuado. La formulación tendenciosa o cargada es sistemática en todo el conjunto, incluso en los ítems de medición centrales. |
DIMENSIÓN 3: Concepto Único
| 5 | Todos los elementos presentes. Cada pregunta indaga sobre un concepto. Sin "y" u "o" que vincule dos atributos ("¿Son los servicios oportunos Y respetuosos?"). Sin agrupación de períodos o sujetos distintos. |
|---|---|
| 4 | Todas las preguntas son de concepto único. No más de dos ítems combinan elementos estrechamente relacionados (por ejemplo, "satisfecho con la calidad y la oportunidad") donde los encuestados responderían plausiblemente de manera consistente. |
| 3 | La mitad o más de las preguntas son de concepto único; las restantes agrupan dos ideas relacionadas. Los problemas no son sistemáticos y podrían separarse con una leve reformulación. |
| 2 | Más del 20 por ciento de las preguntas son de doble enunciado, indagando sobre dos o más conceptos que los encuestados podrían plausiblemente responder de manera distinta. |
| 1 | Ausente o inadecuado. Las preguntas de doble enunciado son generalizadas, incluso en los ítems de medición centrales. |
DIMENSIÓN 4: Especificidad
| 5 | Todos los elementos presentes. Cada pregunta con componente temporal declara un período de referencia ("en los últimos 30 días"). Cada pregunta numérica declara las unidades ("kilogramos", "USD por mes"). El sujeto (uno mismo, el hogar, el niño menor de 5 años) es explícito. |
|---|---|
| 4 | Todas las preguntas especifican períodos de referencia, unidades y sujetos, con no más de dos ítems donde alguno de estos elementos está implícito en lugar de declarado. |
| 3 | La mitad o más de las preguntas son totalmente específicas; las restantes dejan un elemento (período de referencia, unidad o sujeto) implícito. Los problemas no son sistemáticos. |
| 2 | Más del 20 por ciento de las preguntas carecen de período de referencia, unidad o sujeto explícito, generando variación previsible en las respuestas. |
| 1 | Ausente o inadecuado. Las lagunas de especificidad son sistemáticas; los encuestados deben adivinar rutinariamente el marco temporal, la unidad o el sujeto. |
DIMENSIÓN 5: Nivel de Lectura y Adecuación Cultural
| 5 | Todos los elementos presentes. El vocabulario coincide con el nivel de alfabetización documentado para la población objetivo. Sin modismos ni metáforas que no se trasladen al contexto local. Sin supuestos sobre la estructura del hogar, la ocupación o el acceso a la tecnología que no se cumplan para esta población. |
|---|---|
| 4 | Vocabulario apropiado. No más de dos ítems usan un término o modismo que podría resultar desconocido para una minoría de la población objetivo. |
| 3 | La mitad o más de las preguntas se ajustan a la población objetivo; las restantes incluyen términos, modismos o supuestos aislados que no funcionarían para algunos encuestados. Los problemas no son sistemáticos. |
| 2 | Más del 20 por ciento de las preguntas usan vocabulario por encima del nivel de lectura documentado, modismos intraducibles o supuestos inconsistentes con la población objetivo. |
| 1 | Ausente o inadecuado. El vocabulario y los supuestos culturales están sistemáticamente desalineados con la población objetivo. |
FORMATO DE SALIDA:
Devuelva su evaluación como una tabla seguida de un resumen.
| Dimensión | Puntaje (1-5) | Evidencia | Revisión Prioritaria |
|---|---|---|---|
| Claridad | |||
| Neutralidad | |||
| Concepto Único | |||
| Especificidad | |||
| Nivel de Lectura y Adecuación Cultural |
Total: X/25 Nivel: Sólido (22-25) / Adecuado (17-21) / Requiere Revisión (11-16) / Revisión sustancial (5-10) Revisión más importante: [Una oración específica]
Luego liste todas las preguntas señaladas. Para cada una: indique el número de pregunta, la dimensión deficiente, el tipo de problema y una versión corregida.
PREGUNTAS DE ENCUESTA A EVALUAR:
(Vea el documento adjunto o pegado.)
Documento a revisar: Adjunto, o pegado abajo. Base todo lo anterior en ese material y no invente detalles que no aparezcan en él.