TermÉvaluation4 min read

Meta-Evaluation

The systematic evaluation of an evaluation's quality, assessing whether it met professional standards and produced credible, useful findings.

Définition

La méta-évaluation est l'évaluation systématique de la qualité d'une évaluation — essentiellement, évaluer l'évaluation. Elle examine si le processus d'évaluation a respecté les normes professionnelles (telles que les critères OECD-DAC ou les normes de qualité de l'UNEG) et si ses conclusions sont crédibles, utiles et adaptées à l'objectif. Plutôt que de juger le programme évalué, une méta-évaluation juge l'évaluation elle-même.

La méta-évaluation sert de mécanisme d'assurance qualité, offrant la certitude que les conclusions de l'évaluation peuvent être utilisées pour la prise de décision. Elle peut être menée en interne par le personnel d'assurance qualité, en externe par des évaluateurs indépendants, ou par des processus d'examen par les pairs.

Pourquoi Cela Compte

La méta-évaluation comble un écart critique dans les systèmes de S&E : sans évaluation de la qualité, les organisations peuvent prendre des décisions importantes basées sur des conclusions d'évaluation défectueuses ou biaisées. Une évaluation mal conduite peut gaspiller des ressources, induire les parties prenantes en erreur et même causer des dommages si les décisions sont basées sur des conclusions incorrectes.

Pour la conformité aux bailleurs, de nombreux financeurs (y compris USAID et le Fonds Mondial) exigent des preuves que les évaluations répondent aux normes de qualité minimales avant d'accepter les conclusions à des fins de redevabilité. La méta-évaluation fournit cette assurance systématiquement plutôt que par un jugement ad hoc.

Au-delà de la conformité, la méta-évaluation génère un apprentissage organisationnel sur les pratiques d'évaluation. En identifiant les problèmes de qualité récurrents — tels qu'une méthodologie faible, un engagement insuffisant des parties prenantes, ou un rapportage intempestif — les organisations peuvent améliorer leurs pratiques d'achat, de supervision et d'utilisation des évaluations au fil du temps.

Dans la Pratique

La méta-évaluation évalue généralement une évaluation par rapport à des critères de qualité établis. Les critères OECD-DAC (pertinence, cohérence, efficacité, efficience, impact, durabilité) constituent le cadre le plus courant, bien que les quatre normes de qualité de l'UNEG (utilité, faisabilité, propriété, exactitude) soient également largement utilisées.

Les approches courantes incluent :

  • Revue post-complétion : Un réviseur qualité désigné évalue le rapport final d'évaluation et les termes de référence par rapport aux critères de qualité, souvent en utilisant une grille d'évaluation de notation standardisée. C'est la forme la plus courante, généralement complétée en 1 à 3 jours.

  • Évaluation de la qualité externe : Un évaluateur indépendant qui n'a pas mené l'évaluation originale fournit un jugement externe, souvent requis pour les évaluations à enjeux élevés ou la conformité aux bailleurs.

  • Examen par les pairs : D'autres évaluateurs ou praticiens de la S&E examinent l'évaluation, apportant un point de vue frais et une expertise de domaine.

  • Vérifications de qualité en temps réel : Lors d'évaluations multi-phases, des points de contrôle qualité évaluent la méthodologie et les premiers résultats avant la conclusion de l'évaluation, permettant des corrections de trajectoire.

Les produits de la méta-évaluation incluent généralement une note de qualité (réussite/échec ou notée), des conclusions spécifiques sur les forces et faiblesses, et des recommandations pour améliorer les évaluations futures. Pour les décisions à enjeux élevés, les organisations peuvent exiger que les évaluations atteignent un seuil de qualité minimum (par ex., 80% sur tous les critères) avant d'utiliser les conclusions pour l'allocation de ressources ou la refonte du programme.

Sujets Connexes

Lectures Complémentaires