Evaluation Terms of Reference

Quand Utiliser

Les termes de référence d'une évaluation (ToR) sont le document approprié lorsque vous commandez une évaluation — interne ou externe — et que vous devez établir des attentes claires concernant ce qui sera évalué, pourquoi, comment, et quels produits sont attendus. Utilisez-le lorsque :

• Commander une évaluation externe — pour solliciter des propositions d'évaluateurs qualifiés et servir de base au contrat d'évaluation. Les ToR indiquent aux évaluateurs potentiels ce dont vous avez besoin et leur permettent de proposer leur approche, leur méthodologie et leurs honoraires.

• Aligner les parties prenantes avant la planification de l'évaluation — pour s'assurer que toutes les parties prenantes internes sont d'accord sur l'objectif, le périmètre et les questions clés de l'évaluation avant d'investir dans le processus d'évaluation. Des ToR bien développés préviennent la dérive du périmètre et les attentes conflictuelles ultérieures.

• Spécifier les exigences des évaluateurs — pour définir les compétences, l'expérience et les qualifications requises de l'équipe d'évaluation. Ceci est critique lors de la sélection des évaluateurs par appel d'offres concurrentiel.

• Établir le calendrier et les produits de l'évaluation — pour fixer des attentes claires quant au moment où l'évaluation aura lieu, quels rapports et autres produits sont attendus, et quand ils sont dus.

Les termes de référence d'une évaluation sont moins utiles lorsque vous déterminez toujours s'il est nécessaire de procéder à une évaluation (réalisez d'abord une évaluation de faisabilité) ou lorsque vous devez développer les questions et critères d'évaluation (ceux-ci devraient être éclairés par le processus de développement des ToR mais peuvent être affinés lors de la planification de l'évaluation).

Comment Cela Fonctionne

Le développement des termes de référence d'une évaluation suit un processus structuré. La séquence compte — chaque section s'appuie sur la précédente et informe la suivante.

1. Définir l'objectif et les objectifs de l'évaluation. Commencez par articuler pourquoi cette évaluation est menée. S'agit-il d'une exigence de conformité ? D'une opportunité d'apprentissage ? D'un exercice de redevabilité ? L'objectif guide tout le reste. Soyez spécifique : "Évaluer l'efficacité du programme de santé maternelle et identifier des leçons pour la mise à l'échelle" est opérationnel ; "Évaluer le projet" ne l'est pas. Cette section devrait également préciser le type d'évaluation (formative, sommative, à mi-parcours, finale, d'impact, etc.).

2. Spécifier ce qui sera évalué. Définissez l'objet de l'évaluation — le programme, le projet ou l'intervention évalués. Incluez la période, le périmètre géographique, les populations cibles et toute composante ou activité spécifique incluse ou exclue du périmètre. Cela empêche les évaluateurs de faire des hypothèses sur ce qu'ils devraient examiner.

3. Formuler les questions d'évaluation. Celles-ci devraient découler directement de l'objectif et être alignées avec les critères d'évaluation de l'OCDE/DAC (pertinence, efficacité, efficience, impact, durabilité). Les questions sont le cœur des ToR — elles déterminent quelles données seront collectées et comment elles seront analysées. Assurez-vous qu'elles sont suffisamment spécifiques pour guider la méthodologie mais suffisamment flexibles pour permettre l'innovation des évaluateurs.

4. Définir les exigences méthodologiques. Spécifiez quelles approches méthodologiques sont requises ou préférées. L'évaluation aura-t-elle besoin d'une composante comparative ? D'une profondeur qualitative ? D'une rigueur quantitative ? D'approches participatives ? Des contraintes sur les méthodes de collecte de données ? Cette section devrait équilibrer spécificité et permettre aux évaluateurs de proposer leur approche optimale.

5. Spécifier les qualifications des évaluateurs et la composition de l'équipe. Définissez les compétences requises de l'équipe d'évaluation. Quelle expérience sectorielle est nécessaire ? Quelle expertise méthodologique ? Exigences linguistiques ? Connaissance du contexte local ? Spécifiez si un évaluateur externe est requis, si des partenaires locaux doivent être inclus, et toute exigence de diversité pour l'équipe.

6. Établir le calendrier et les produits. Spécifiez quand l'évaluation devrait avoir lieu, les jalons clés et tous les produits attendus (rapport d'inception, outils de collecte de données, rapport provisoire, rapport final, présentation, etc.). Incluez la date limite de l'évaluation et toute exigence de rapportage des bailleurs qui dicte le calendrier.

7. Définir les lignes de rapportage et l'engagement des parties prenantes. Spécifiez à qui l'évaluation rendra compte, qui devrait être consulté pendant l'évaluation, et comment les retours des parties prenantes seront intégrés. C'est ici que vous spécifiez les exigences d'engagement des parties prenantes et assurez que l'évaluation est centrée sur l'utilisation.

Éléments Clés

Des termes de référence d'évaluation bien construits incluent ces éléments essentiels :

• Contexte et antécédents — une description concise du programme ou du projet évalué, incluant ses objectifs, son historique de mise en œuvre et son statut actuel. Cela fournit aux évaluateurs le contexte dont ils ont besoin pour comprendre ce qu'ils évaluent.

• Objectif et objectifs — une déclaration claire de pourquoi l'évaluation est menée et ce qu'elle vise à accomplir. Cela guide toutes les autres sections et assure que l'évaluation remplit sa fonction prévue.

• Périmètre de l'évaluation — définition explicite de ce qui est inclus et exclu de l'évaluation, incluant le périmètre géographique, la période, les composantes du programme et les groupes de population. Un périmètre clair prévient la dérive du périmètre et les attentes irréalistes.

• Questions d'évaluation — les questions spécifiques que l'évaluation répondra, généralement organisées par critère d'évaluation (pertinence, efficacité, efficience, impact, durabilité). Ce sont le cœur des ToR.

• Exigences méthodologiques — spécifications pour l'approche d'évaluation, incluant les méthodes requises, les exigences d'échantillonnage, les outils de collecte de données et les approches d'analyse. Cette section devrait spécifier les exigences tout en permettant l'innovation des évaluateurs.

• Qualifications des évaluateurs — description détaillée des compétences, de l'expérience et des qualifications requises de l'équipe d'évaluation. Cela forme la base de la sélection des évaluateurs.

• Produits et calendrier — une liste complète des produits attendus avec des échéances, incluant le rapport d'inception, les instruments de collecte de données, les rapports provisoires et finaux, les présentations et tout autre produit requis.

• Rapportage et engagement des parties prenantes — spécification de qui l'évaluation rendra compte, comment les parties prenantes seront engagées, et comment les constats de l'évaluation seront diffusés et utilisés.

• Budget et logistique — toute contrainte budgétaire, soutien logistique fourni, et considérations pratiques que les évaluateurs doivent connaître lors de la proposition de leur approche.

Meilleures Pratiques

Commencer la planification de l'évaluation tôt. La planification de l'évaluation doit spécifier ce qui sera évalué, pourquoi, par qui, quand, et comment les résultats seront utilisés. Reliez les questions d'évaluation aux données de suivi lorsque possible. Commencez ce processus au début du programme, pas à la fin.

Développer les ToR avant la sélection des évaluateurs. La planification de l'évaluation devrait commencer au début du programme, et les ToR devraient être développés avant de sélectionner les évaluateurs. Cela assure que vous avez une clarté sur vos besoins avant d'engager des parties externes.

Assurer que les questions d'évaluation sont bien formulées. Les questions d'évaluation devraient être développées et convenues au début de la planification de l'évaluation. Elles devraient être dérivées de l'objectif de l'évaluation et alignées avec les critères de l'OCDE/DAC. Des questions bien formulées guident la méthodologie et assurent que l'évaluation répond à ce qui compte.

Être spécifique sur les compétences des évaluateurs. Lors de la sélection d'évaluateurs externes, pesez la familiarité avec le type de projet, l'expérience dans le type d'évaluation réalisé, la connaissance du contexte local, et l'expertise méthodologique. Incluez des évaluateurs externes pour assurer une distance saine et l'objectivité.

Inclure des approches participatives. Les plans d'évaluation devraient proposer des approches d'évaluation participative qui engagent les parties prenantes tout au long du processus. Cela augmente l'appropriation et l'utilisation des constats.

Spécifier le personnel approprié. Le plan d'évaluation doit proposer un plan de dotation approprié pour sa mise en œuvre, qu'il soit interne ou externe. Considérez la complexité de l'évaluation, l'expertise requise et la capacité organisationnelle lors de la détermination des besoins en personnel.

Équilibrer spécificité et flexibilité. Les ToR devraient spécifier les exigences clairement mais permettre aux évaluateurs de proposer leur méthodologie optimale. Un ToR trop prescriptif limite l'innovation des évaluateurs ; un ToR trop vague conduit à des propositions qui ne répondent pas à vos besoins.

Assurer des ressources adéquates pour le périmètre. Une évaluation avec un périmètre large mais des ressources très limitées peut être pire qu'aucune évaluation du tout si elle conduit à des conclusions superficielles. Assurez que le budget et le calendrier de l'évaluation sont adéquats pour répondre adéquatement aux questions clés. Trois semaines sont généralement insuffisantes pour une évaluation significative.

Erreurs Courantes

Développer les ToR après la sélection des évaluateurs. L'échec le plus courant est de sélectionner les évaluateurs en premier puis de développer les ToR pour correspondre à leurs propositions, plutôt que de définir vos besoins en premier puis de sélectionner les évaluateurs qui peuvent les satisfaire. Cela inverse la séquence appropriée et peut conduire à des évaluations qui ne répondent pas à vos questions.

Rédiger des questions d'évaluation trop larges ou trop étroites. Les questions d'évaluation trop larges ("Le projet a-t-il été un succès ?") ne peuvent pas être répondues rigoureusement. Les questions trop étroites manquent la vue d'ensemble. Les questions devraient être suffisamment spécifiques pour guider la collecte de données mais suffisamment larges pour capturer des aperçus significatifs.

Établir des calendriers irréalistes. Les évaluations finales de projet devraient être planifiées au moins six mois avant l'achèvement du projet pour permettre un temps suffisant pour la collecte de données, l'analyse et le rapportage. Compresser une évaluation dans les dernières semaines d'un projet conduit à un travail précipité et à des constats superficiels.

Ne pas spécifier les qualifications des évaluateurs. Un ToR qui ne spécifie pas clairement les compétences requites conduit à des propositions d'évaluateurs qui peuvent être méthodologiquement solides mais manquent d'expertise sectorielle ou de connaissance du contexte local. Cela peut résulter en des évaluations qui manquent des facteurs contextuels importants.

Utiliser l'évaluation pour résoudre des conflits internes. Les évaluations ne devraient pas être utilisées pour résoudre des conflits internes ou médier entre des points de vue conflictuels sur la valeur ou l'orientation future d'un projet. Cela sape l'objectivité de l'évaluation et peut conduire à des constats politisés.

Établir des calendriers inadéquats pour le périmètre. Le périmètre de travail de l'évaluation devrait être centré sur seulement quelques questions clés et inclure les ressources (temps, personnel, budget) pour y répondre adéquatement. Trois semaines sont généralement insuffisantes pour une évaluation significative.

Ignorer l'utilisation dès le départ. Un ToR qui ne spécifie pas comment les constats seront utilisés, qui sont les utilisateurs principaux, et comment les parties prenantes seront engagées risque de produire une évaluation qui reste sur une étagère. Assurez que les ToR spécifient la planification de l'utilisation comme partie du processus d'évaluation.

Exemples

Santé — Afrique subsaharienne (Évaluation Finale)

Un programme de santé maternelle financé par USAID dans trois pays nécessitait une évaluation finale six mois avant la fermeture du projet. Les ToR spécifiaient : (1) cinq questions d'évaluation alignées avec les critères de l'OCDE/DAC, (2) une conception mixte nécessitant des données quantitatives sur les résultats et des études de cas qualitatives, (3) des qualifications des évaluateurs incluant une expertise en santé maternelle et une expérience avec les évaluations USAID, (4) un calendrier détaillé avec rapport d'inception (2 semaines), collecte de données (6 semaines), et rapport final (2 semaines), et (5) des exigences explicites d'engagement des parties prenantes incluant des ateliers de validation dans chaque pays. Les ToR ont été développés trois mois avant la sélection des évaluateurs, permettant un processus d'appel d'offres concurrentiel qui a résulté en un consortium d'évaluateurs internationaux et locaux. L'évaluation a identifié des leçons clés pour la mise à l'échelle qui ont éclairé la conception du programme de suivi.

Gouvernance — Asie du Sud-Est (Évaluation à Mi-Parcours)

Un programme de gouvernance travaillant avec des organisations de la société civile a commandé une évaluation à mi-parcours pour évaluer les progrès et éclairer les décisions de gestion adaptative. Les ToR ont mis l'accent sur les approches participatives, nécessitant des entretiens avec les partenaires gouvernementaux, les bénéficiaires OSC et les représentants des bailleurs. Il a été spécifié que l'évaluation devrait utiliser la récolte des résultats comme méthode principale pour capturer à la fois les résultats planifiés et imprévus. Les qualifications des évaluateurs nécessitaient une expérience avec l'évaluation participative et la programmation de la gouvernance. Le calendrier incluait un atelier de validation à mi-parcours pour assurer que les constats éclairent les ajustements du programme avant la fermeture du projet. L'évaluation a révélé des résultats imprévus significatifs par des voies d'influence informelles, conduisant à l'adaptation du programme.

Éducation — Asie du Sud (Évaluation d'Impact)

Un programme éducatif financé par une fondation nécessitait une évaluation d'impact quasi-expérimentale pour évaluer les résultats d'apprentissage. Les ToR spécifiaient des exigences méthodologiques rigoureuses incluant une conception de groupe de comparaison, une analyse de puissance pour la taille de l'échantillon, et une collecte de données longitudinales. Il a été requis que les évaluateurs aient une expérience avec l'évaluation d'impact dans l'éducation et des capacités d'analyse statistique. Les ToR ont également spécifié que l'évaluation devrait inclure une analyse coût-efficacité. La sélection des évaluateurs était basée sur des propositions techniques démontrant une expertise méthodologique, avec une proposition budgétaire distincte. L'évaluation résultante a fourni des preuves solides sur l'efficacité du programme qui ont éclairé les décisions de mise à l'échelle.

Comparé à

Les termes de référence d'une évaluation sont l'un de plusieurs documents utilisés dans la planification et la gestion de l'évaluation. Les différences clés :

Indicateurs Pertinents

12 indicateurs à travers 5 cadres majeurs de bailleurs (USAID, DFID, UNDP, IFRC, Global Fund) se rapportent au développement et à l'utilisation des termes de référence d'évaluation :

• Moment du développement des ToR — "Proportion d'évaluations avec des termes de référence développés avant la sélection des évaluateurs" (USAID)
• Approches participatives — "Pourcentage de termes de référence d'évaluation qui incluent des approches participatives" (UNDP)
• Spécification des compétences des évaluateurs — "Proportion de termes de référence d'évaluation qui spécifient les compétences requises des évaluateurs" (DFID)
• Adéquation du calendrier — "Temps moyen entre le développement des ToR et l'achèvement de l'évaluation" (IFRC)

Outils Connexes

• Modèle de Termes de Référence d'Évaluation — Modèle guidé pour développer des termes de référence d'évaluation complets avec vérifications intégrées pour les éléments clés
• Matrice de Notation des Évaluateurs — Outil pour évaluer et comparer les propositions des évaluateurs conformément aux exigences des termes de référence

Sujets Connexes

• Matrice d'Évaluation — Le document qui cartographie les questions d'évaluation vers les sources de données et les méthodes
• Critères d'Évaluation (CAD) — Les cinq critères de l'OCDE/DAC qui devraient structurer les questions d'évaluation
• Sélection des Évaluateurs — Processus de sélection des évaluateurs qualifiés basé sur les exigences des termes de référence
• Planification de l'Évaluation — Le processus plus large de