Critères d'Évaluation (DAC)

Quand Utiliser

Les critères d'évaluation OECD-DAC sont le cadre le plus largement adopté pour structurer les évaluations de développement. Utilisez-les lorsque :

• Conception des termes de référence d'évaluation — La plupart des bailleurs (CRS, FICR, USAID, Fonds Mondial) s'attendent à ce que les évaluations abordent les cinq critères du CAD. Vos questions d'évaluation doivent correspondre directement à ces critères.
• Structuration des rapports d'évaluation — Les critères fournissent une organisation logique pour présenter les constatations. Chaque critère devient une section de votre rapport d'évaluation.
• Respect des exigences des bailleurs — De nombreuses politiques de bailleurs exigent explicitement des évaluations basées sur les critères du CAD. La Politique 3 du CRS, par exemple, mandate que les évaluations examinent la pertinence, l'efficacité, l'efficience, l'impact et la durabilité.
• Comparaison des évaluations entre programmes — L'utilisation d'un cadre commun vous permet de synthétiser les constatations de plusieurs évaluations et d'identifier des leçons transversales.
• Conduite d'évaluations centrées sur l'utilisation — Les critères aident les parties prenantes à se concentrer sur les questions les plus importantes concernant le mérite et la valeur d'un programme.

Les critères du CAD sont moins utiles lorsque vous avez besoin d'un cadre d'évaluation plus spécialisé (par exemple, l'analyse de contribution pour les questions d'attribution, ou la récolte des résultats pour les résultats imprévus). Dans de tels cas, les critères du CAD peuvent toujours être appliqués dans ces méthodes comme structure de rapportage.

Comment Cela Fonctionne

Les critères d'évaluation OECD-DAC fournissent un cadre complet pour juger du mérite et de la valeur des interventions de développement. Cinq critères interdépendants forment le cœur du cadre :

Pertinence — Le degré auquel les objectifs et la conception de l'intervention s'alignent sur les besoins des bénéficiaires, les priorités des pays partenaires et les stratégies des bailleurs. Une intervention pertinente adresse le bon problème de la bonne manière pour les bonnes personnes. La pertinence demande : Est-ce le bon programme pour ce contexte ?

Efficience — La relation entre les produits et les ressources consommées. Les interventions efficaces atteignent des résultats maximaux avec des entrées minimales, évitant le gaspillage des ressources financières, humaines et temporelles. L'efficience demande : Obtenons-nous le plus de valeur de ce que nous investissons ?

Efficacité — Le degré auquel les objectifs de l'intervention ont été atteints, ou sont attendus d'être atteints. Ce critère se concentre sur le degré d'atteinte des résultats par rapport aux cibles déclarées. L'efficacité demande : Avons-nous fait ce que nous avons dit que nous ferions ?

Impact — Les effets à long terme positifs et négatifs, primaires et secondaires, produits par l'intervention, directement ou indirectement, intentionnels ou non. L'impact regarde au-delà des produits immédiats pour évaluer les changements plus larges dans la vie des bénéficiaires et les systèmes dans lesquels ils opèrent. L'impact demande : Quelle différence durable avons-nous faite ?

Durabilité — La continuation des bénéfices de l'intervention après la fin du financement externe. La durabilité examine si les bénéfices perdureront grâce à une appropriation locale continue, des arrangements institutionnels, des mécanismes financiers et des considérations environnementales. La durabilité demande : Les bénéfices dureront-ils ?

Ces critères ne sont pas des étapes séquentielles mais des dimensions interdépendantes qui ensemble fournissent une évaluation holistique. Une intervention peut être efficace (atteindre les objectifs) mais pas durable (les bénéfices cessent quand le financement s'arrête), ou efficiente (coût faible) mais pas pertinente (adresser le mauvais problème). La valeur du cadre du CAD réside dans l'exigence que les évaluateurs considèrent les cinq dimensions plutôt que de se concentrer étroitement sur la livraison des produits.

Composants Clés

Une évaluation bien construite utilisant les critères du CAD comprend ces éléments essentiels :

• Questions d'évaluation liées aux critères — Chacun des cinq critères du CAD doit avoir au moins une question d'évaluation dédiée. Par exemple : "Dans quelle mesure l'intervention était-elle pertinente pour les besoins des bénéficiaires ?" ou "Quelle est la preuve de la durabilité à long terme des résultats ?"
• Sources de preuves pour chaque critère — Différents critères nécessitent des preuves différentes. La pertinence tire des retours des parties prenantes et de l'analyse contextuelle. L'efficience nécessite des données financières et opérationnelles. L'efficacité et l'impact reposent sur les indicateurs de résultats et d'impact. La durabilité a besoin de données longitudinales et d'analyse institutionnelle.
• Définitions claires de chaque critère — Bien que les critères du CAD aient des définitions standard, chaque évaluation doit les opérationnaliser pour le contexte spécifique. Que signifie "durabilité" pour cette intervention particulière ? Quel horizon temporel définit "l'impact" ?
• Pondération ou priorisation — Tous les critères ne portent pas un poids égal dans chaque évaluation. Une évaluation d'urgence humanitaire peut prioriser la pertinence et l'efficience sur la durabilité à long terme. Documentez votre justification pour toute pondération différentielle.
• Intégration des thèmes transversaux — Les évaluations modernes intègrent le genre, l'environnement et la redevabilité au sein de chaque critère. Par exemple, évaluer si les bénéfices ont atteint les femmes et les groupes marginalisés fait partie de la pertinence et de l'efficacité.
• Perspectives des parties prenantes — Chaque critère doit incorporer les vues de différents groupes de parties prenantes. Les bénéficiaires peuvent juger la pertinence différemment que les bailleurs. Documentez ces perspectives et les tensions éventuelles.
• Cadre de notation — Une approche cohérente pour noter chaque critère (par exemple, très pertinent, modérément pertinent, pas pertinent) permet la comparaison entre évaluations et une communication claire des constatations.

Bonnes Pratiques

Assurez-vous que les cinq critères sont abordés dans la conception de l'évaluation. L'évaluation doit utiliser les critères d'évaluation pertinents : pertinence, efficacité, efficience, impact et durabilité. Chaque critère doit avoir des questions d'évaluation dédiées qui guident la collecte et l'analyse des données.

Déduisez les questions d'évaluation des critères. Les questions d'évaluation doivent refléter les critères d'évaluation pertinents (pertinence, efficacité, efficience, impact et durabilité). Cela assure que l'évaluation aborde systématiquement toutes les dimensions de mérite et de valeur.

Limitez le nombre de questions d'évaluation. Essayez de ne pas avoir trop de questions d'évaluation — un maximum de 5-7 questions principales suffira. Il vaut mieux avoir quelques bons indicateurs que trop de mauvais. Concentrez-vous sur la réponse aux questions clés plutôt que d'étaler les ressources sur de nombreuses enquêtes superficielles.

Considérez soigneusement la conception de l'évaluation. Les considérations clés incluent : Quelles sont les questions d'évaluation ? Quel est l'objet de l'évaluation (ce qui doit être évalué) ? Quelles méthodes (qualitatives, quantitatives, mixtes) ? Quelle est la portée ? Quel niveau de rigueur est approprié ? Quelles ressources sont disponibles ? Équilibrez la rigueur méthodologique avec les contraintes pratiques.

Évitez une dépendance excessive à la participation dans l'évaluation. Bien que les approches participatives aient de la valeur, une dépendance excessive peut être chronophage, coûteuse, difficile à gérer, et peut manquer d'un équilibre sain de perspective extérieure si elle devient une auto-évaluation pure. Maintenez une indépendance externe appropriée tout en incorporant les contributions des parties prenantes.

Équilibrez la portée avec les ressources. Une évaluation avec une grande portée mais des ressources très limitées peut être pire qu'aucune évaluation du tout si elle conduit à des conclusions superficielles car les cotes des évaluateurs deviennent peu fiables. Assurez-vous que la conception de l'évaluation correspond aux ressources disponibles pour produire des constatations crédibles.

Intégrez les thèmes transversaux tout au long. Évaluez la sensibilité au genre, la durabilité environnementale et les mécanismes de redevabilité au sein de chaque critère plutôt que comme des sections séparées. Par exemple, évaluez si l'intervention était pertinente pour les besoins des femmes dans le cadre de l'évaluation de la pertinence.

Utilisez des échelles de notation cohérentes. Développez une grille claire pour noter chaque critère (par exemple, échelle 1-5 avec des ancres définies) pour assurer que les cotes sont comparables entre évaluations et que les parties prenantes comprennent ce que signifient les différentes cotes.

Erreurs Courantes

Traiter les critères comme une liste de contrôle. Les critères du CAD ne sont pas des cases à cocher mais des dimensions interdépendantes nécessitant une analyse réfléchie. Simplement lister les constatations sous chaque critère sans explorer les connexions (par exemple, comment les décisions d'efficience ont affecté l'efficacité) manque la valeur holistique du cadre.

Ressources insuffisantes pour des cotes crédibles. S'il n'y a pas assez de ressources pour couvrir l'univers entier de l'enquête, utiliser un univers partiel limiterait la capacité de généraliser les données d'enquête (et les résultats de l'évaluation) à l'univers plus petit. Cela sape la crédibilité des cotes d'efficacité et d'impact.

Sur-souligner la participation au détriment de l'indépendance. Évitez une dépendance excessive à la participation dans l'évaluation — elle peut être chronophage, coûteuse, difficile à gérer, et peut manquer d'un équilibre sain de perspective extérieure si elle devient une auto-évaluation. L'indépendance externe est cruciale pour des constatations crédibles.

Conclusions superficielles d'évaluations sous-financées. Une évaluation avec une grande portée mais des ressources très limitées peut être pire qu'aucune évaluation du tout si elle conduit à des conclusions superficielles car les cotes des évaluateurs deviennent peu fiables. Mieux vaut réduire la portée et produire des constatations crédibles que tout faire mal.

Ignorer la durabilité dans les évaluations à court terme. De nombreuses évaluations se concentrent uniquement sur les produits et résultats immédiats sans évaluer si les bénéfices continueront. La durabilité nécessite de regarder au-delà de la période d'évaluation pour considérer les arrangements institutionnels, les mécanismes financiers et l'appropriation locale.

Confondre efficacité et impact. L'efficacité mesure si les résultats attendus ont été atteints ; l'impact évalue les changements plus larges et à plus long terme incluant les effets inattendus. Une intervention peut être efficace (atteindre les cibles) tout en ayant un impact limité ou même négatif (les conséquences inattendues l'emportent sur les avantages).

Appliquer les critères sans adaptation contextuelle. Les critères sont standard mais leur application doit être contextualisée. Ce qui constitue "pertinence" pour une intervention de santé diffère de la programmation de gouvernance. Définissez chaque critère opérationnellement pour votre évaluation spécifique.

Exemples

Programme de santé — Afrique subsaharienne

Un programme de prévention du paludisme de 5 ans a été évalué en utilisant les cinq critères du CAD. L'évaluation de pertinence a trouvé que l'intervention s'alignait bien avec les priorités nationales de santé et les besoins communautaires, avec 90% des bénéficiaires rapportant que l'intervention répondait à leurs préoccupations de santé les plus pressantes. L'analyse d'efficience a révélé que le coût par moustiquaire distribuée était de 15% sous le budget grâce à des chaînes d'approvisionnement rationalisées. Les constatations d'efficacité ont montré que 75% des cibles de résultats ont été atteintes, avec une incidence du paludisme réduite de 40% dans les zones cibles. L'évaluation d'impact a identifié des effets positifs inattendus : réduction des dépenses médicales des ménages et amélioration de la scolarisation des enfants. L'évaluation de durabilité a trouvé des résultats mitigés — les réseaux de travailleurs de santé communautaires ont montré une forte appropriation locale, mais la dépendance aux médicaments financés par les bailleurs a soulevé des inquiétudes sur l'accès à long terme. La force de l'évaluation était de connecter explicitement les décisions d'efficience (investissements dans la chaîne d'approvisionnement) aux résultats d'efficacité, démontrant comment les choix opérationnels ont affecté les résultats du programme.

Programme de gouvernance — Asie du Sud-Est

Une initiative de démocratie et de gouvernance a fait face à des défis pour démontrer l'impact en raison des longues périodes requises pour le changement politique. L'équipe d'évaluation a adapté le cadre du CAD par : (1) définir des indicateurs d'impact intermédiaires qui pouvaient être mesurés dans la période du programme, (2) utiliser le traçage de processus pour documenter la contribution aux changements de politique, et (3) incorporer les perceptions des parties prenantes sur la pertinence à travers des groupes de discussion avec des fonctionnaires gouvernementaux et la société civile. Le critère de pertinence a incorporé une évaluation qualitative de l'alignement avec les priorités de gouvernance locales. L'efficience a inclus une analyse de la rentabilité comparée aux interventions de gouvernance alternatives. L'efficacité a mesuré à la fois la livraison des produits et l'atteinte des résultats. L'impact a utilisé l'analyse de contribution pour évaluer le rôle du programme dans les changements de politique observés. La durabilité a examiné l'institutionnalisation des réformes dans les structures gouvernementales. Cette adaptation a démontré comment les critères du CAD pouvaient être appliqués de manière flexible tout en maintenant leur valeur analytique fondamentale.

Programme d'éducation — Asie du Sud

Une évaluation de programme de formation des enseignants s'est concentrée lourdement sur l'efficacité (mesurer les changements dans les pratiques d'enseignement) mais a initialement négligé la durabilité. Les retours des parties prenantes ont révélé que bien que les enseignants formés aient amélioré les pratiques pendant la période financée, beaucoup sont revenus aux méthodes précédentes après la fin du financement en raison du manque de soutien continu au développement professionnel. L'évaluation a été révisée pour inclure une évaluation de durabilité, examinant les arrangements institutionnels pour la formation continue, les allocations budgétaires pour le développement professionnel, et les structures d'incitation de carrière. Cette révision a transformé l'évaluation d'une simple évaluation d'efficacité en une analyse plus complète de savoir si l'intervention produirait un changement durable. L'évaluation révisée a recommandé d'établir un fonds de formation durable, qui a été subséquemment incorporé dans la conception de suivi du programme.

Comparé à

Les critères du CAD sont l'un des plusieurs cadres d'évaluation. Différences clés :