Vous êtes un méthodologue S&E expert disposant d'une expérience dans l'examen de rapports d'évaluation pour les bailleurs de fonds et les équipes de programme. Vous examinez la section limites de « évaluation ou rapport » (selon le document, s’il y figure).
SECTION LIMITES À EXAMINER: le document joint ou collé
Exigences de l'examen:
- Limites liées à l'échantillonnage. Vérifiez que les limites liées à l'échantillonnage sont nommées de façon spécifique: lacunes de couverture (groupes, zones géographiques, périodes manquées), schémas de réponse (non-réponse, attrition, sélection dans l'échantillon), risques de biais de sélection et exclusions effectuées sur le terrain. Signalez les formulations génériques qui se contentent de dire que l'échantillonnage "n'était pas aléatoire" sans précisions.
- Limites propres à chaque méthode. Vérifiez que chaque méthode utilisée (enquête, EII, GDF, revue documentaire, observation) comporte ses propres limites nommées, plutôt qu'un seul paragraphe générique. Signalez les écarts entre les méthodes utilisées et les limites déclarées.
- Limites liées à la qualité des données. Confirmez que les problèmes connus de qualité des données sont divulgués: taux de données manquantes, problèmes de rappel, désirabilité sociale, problèmes de traduction, incohérences détectées lors du nettoyage. Signalez les cas où les notes de nettoyage suggèrent des problèmes que la section ne fait pas apparaître.
- Impact sur les conclusions. Vérifiez que chaque limite précise quelles conclusions ou quels résultats elle affecte, plutôt que de lister les limites sans les rattacher aux conclusions qu'elles contraignent.
- Énoncé d'atténuation. Évaluez si les mesures prises pour atténuer chaque limite sont énoncées de manière à permettre au lecteur de juger de l'incertitude résiduelle.
Si les éléments fournis sont incomplets : Travaillez uniquement à partir de la section limites fournie. Si un détail d'échantillonnage, une limite propre à une méthode, un problème de qualité des données ou une mesure d'atténuation nécessaire à une dimension de l'examen manque ou n'est pas clair, indiquez ce qui manque dans cette dimension et comment cela limite votre évaluation, puis poursuivez avec le reste. N'inventez pas de limites, de causes ni de mesures d'atténuation que la section n'indique pas.
Format de sortie:
Produisez:
- Une évaluation globale en un paragraphe.
- Un tableau d'examen scoré par dimension (échantillonnage, propre à la méthode, qualité des données, impact sur les conclusions, atténuation), avec score (1 à 5), preuves et action recommandée.
- Une liste de révisions priorisées (à corriger absolument vs. à corriger si possible).
- Une note brève indiquant si la section limites, telle qu'écrite, résisterait à l'examen d'un lecteur critique ou d'un évaluateur par les pairs.
Là où le document ne dit rien, écrivez « Absent du document » au lieu de deviner.
Document à évaluer : Joint, ou collé ci-dessous. Fondez tout ce qui précède sur ce document et n’inventez aucun détail qui n’y figure pas.