Quand utiliser les Termes de Référence (TdR) d'évaluation ?
Les Termes de Référence (TdR) d'une évaluation sont le document clé à élaborer lorsque vous commanditez une évaluation (interne ou externe) et que vous avez besoin de définir clairement ce qui sera évalué, pourquoi, comment, et quels livrables sont attendus. Ils sont particulièrement utiles pour :
-
Commander une évaluation externe : Ils permettent de solliciter des propositions d'évaluateurs qualifiés et constituent la base du contrat d'évaluation. Les TdR informent les évaluateurs potentiels de vos besoins et leur donnent les éléments pour soumettre leur approche, leur méthodologie et leurs honoraires.
-
Aligner les parties prenantes avant la planification : Ils garantissent que toutes les parties prenantes internes s'accordent sur l'objectif, le périmètre et les questions clés de l'évaluation avant d'engager des ressources. Des TdR bien élaborés évitent les dérives de périmètre et les attentes divergentes par la suite.
-
Spécifier les exigences des évaluateurs : Ils définissent les compétences, l'expérience et les qualifications attendues de l'équipe d'évaluation. C'est un point crucial lors de la sélection des évaluateurs via un appel d'offres concurrentiel.
-
Établir le calendrier et les livrables : Ils fixent des attentes claires concernant le déroulement de l'évaluation, les rapports et autres livrables attendus, ainsi que leurs échéances.
Les TdR d'évaluation sont moins pertinents si vous n'avez pas encore décidé de la nécessité d'une évaluation (réalisez d'abord une évaluation de faisabilité) ou si vous êtes encore en phase de développement des questions et critères d'évaluation (ces derniers doivent être éclairés par le processus d'élaboration des TdR, mais peuvent être affinés lors de la planification de l'évaluation).
| Scénario | Utiliser les Termes de Référence d'Évaluation ? | Alternative pertinente |
|---|---|---|
| Commander une évaluation externe | Oui | - |
| S'interroger sur la nécessité d'une évaluation | Non | Évaluation de Faisabilité |
| Développer les questions d'évaluation | Parallèlement | Questions d'Évaluation |
| Sélectionner un évaluateur interne | Oui, version simplifiée | - |
| Réaliser une revue d'apprentissage post-évaluation | Non | Leçons Apprises |
Processus d'élaboration des Termes de Référence (TdR)
L'élaboration des Termes de Référence d'une évaluation suit un processus structuré. La séquence est cruciale : chaque section s'appuie sur la précédente et éclaire la suivante.
-
Définir la finalité et les objectifs de l'évaluation. Commencez par expliciter la raison d'être de cette évaluation. S'agit-il d'une exigence de conformité, d'une opportunité d'apprentissage ou d'un exercice de redevabilité ? La finalité guide l'ensemble du processus. Soyez précis : "Évaluer l'efficacité du programme de santé maternelle et identifier les leçons pour sa mise à l'échelle" est opérationnel ; "Évaluer le projet" ne l'est pas. Cette section doit également spécifier le type d'évaluation (formative, sommative, à mi-parcours, finale, d'impact, etc.).
-
Spécifier l'objet de l'évaluation. Définissez clairement ce qui sera évalué : le programme, le projet ou l'intervention. Précisez la période couverte, le périmètre géographique, les populations cibles, ainsi que toute composante ou activité spécifique incluse ou exclue du périmètre. Cela évite aux évaluateurs de faire des suppositions sur ce qu'ils doivent examiner.
-
Formuler les questions d'évaluation. Celles-ci doivent découler directement de la finalité de l'évaluation et s'aligner sur les critères d'évaluation de l'OCDE/CAD (Pertinence, Cohérence, Efficacité, Efficience, Impact, Durabilité). Les questions constituent le cœur des TdR : elles déterminent les données à collecter et la manière de les analyser. Veillez à ce qu'elles soient suffisamment spécifiques pour guider la méthodologie, tout en étant assez flexibles pour permettre l'innovation de la part des évaluateurs.
-
Définir les exigences méthodologiques. Spécifiez les approches méthodologiques requises ou privilégiées. L'évaluation nécessitera-t-elle une composante comparative, une analyse qualitative approfondie, une rigueur quantitative, ou des approches participatives ? Y a-t-il des contraintes sur les méthodes de collecte de données ? Cette section doit trouver un équilibre entre la précision des exigences et la liberté laissée aux évaluateurs de proposer leur approche optimale.
-
Spécifier les qualifications des évaluateurs et la composition de l'équipe. Définissez les compétences requises pour l'équipe d'évaluation. Quelle expérience sectorielle est indispensable ? Quelle expertise méthodologique ? Quelles sont les exigences linguistiques ? La connaissance du contexte local ? Précisez si un évaluateur externe est requis, si des partenaires locaux doivent être inclus, et toute exigence en matière de diversité pour l'équipe.
-
Établir le calendrier et les livrables. Spécifiez la période de l'évaluation, les étapes clés et tous les livrables attendus (rapport initial, outils de collecte de données, rapport provisoire, rapport final, présentation, etc.). Incluez la date limite de l'évaluation et toute exigence de rapportage des bailleurs de fonds qui influence le calendrier.
-
Définir les lignes hiérarchiques et l'engagement des parties prenantes. Spécifiez à qui l'évaluation rendra compte, qui doit être consulté pendant le processus, et comment les retours des parties prenantes seront intégrés. C'est dans cette section que vous définissez les exigences d'engagement des parties prenantes et que vous vous assurez que l'évaluation est axée sur l'utilisation.
Composantes clés des Termes de Référence
Des Termes de Référence d'évaluation bien structurés comprennent ces éléments essentiels :
-
Contexte et historique : Une description concise du programme ou projet évalué, incluant ses objectifs, son historique de mise en œuvre et son statut actuel. Cela fournit aux évaluateurs le contexte nécessaire pour comprendre l'objet de leur travail.
-
Finalité et objectifs : Une déclaration claire de la raison d'être de l'évaluation et de ce qu'elle vise à accomplir. Cela guide toutes les autres sections et garantit que l'évaluation remplit sa fonction prévue.
-
Périmètre de l'évaluation : Définition explicite de ce qui est inclus et exclu de l'évaluation, y compris le périmètre géographique, la période, les composantes du programme et les groupes de population. Un périmètre clair prévient la dérive et les attentes irréalistes.
-
Questions d'évaluation : Les questions spécifiques auxquelles l'évaluation répondra, généralement organisées par critère d'évaluation (Pertinence, Cohérence, Efficacité, Efficience, Impact, Durabilité). Elles constituent le cœur des TdR.
-
Exigences méthodologiques : Spécifications concernant l'approche d'évaluation, incluant les méthodes requises, les exigences d'échantillonnage, les outils de collecte de données et les approches d'analyse. Cette section doit préciser les exigences tout en laissant une marge d'innovation aux évaluateurs.
-
Qualifications des évaluateurs : Description détaillée des compétences, de l'expérience et des qualifications requises pour l'équipe d'évaluation. Cela constitue la base de la sélection des évaluateurs.
-
Livrables et calendrier : Une liste exhaustive des livrables attendus avec leurs échéances, incluant le rapport initial, les instruments de collecte de données, les rapports provisoires et finaux, les présentations et tout autre produit requis.
-
Rapportage et engagement des parties prenantes : Spécification des destinataires du rapport d'évaluation, des modalités d'engagement des parties prenantes, et de la manière dont les conclusions de l'évaluation seront diffusées et utilisées.
-
Budget et logistique : Toute contrainte budgétaire, soutien logistique fourni et considérations pratiques que les évaluateurs doivent connaître lors de la soumission de leur proposition.
Bonnes pratiques pour les TdR d'évaluation
Anticiper la planification de l'évaluation. La planification de l'évaluation doit spécifier ce qui sera évalué, pourquoi, par qui, quand, et comment les résultats seront utilisés. Reliez les questions d'évaluation aux données de suivi lorsque cela est possible. Démarrez ce processus dès le début du programme, et non à la fin.
Élaborer les TdR avant la sélection des évaluateurs. La planification de l'évaluation doit débuter au lancement du programme, et les TdR doivent être élaborés avant de sélectionner les évaluateurs. Cela garantit une clarté de vos besoins avant d'engager des parties externes.
S'assurer que les questions d'évaluation sont bien formulées. Les questions d'évaluation doivent être développées et validées au début de la planification de l'évaluation. Elles doivent découler de la finalité de l'évaluation et s'aligner sur les critères de l'OCDE/CAD. Des questions bien formulées guident la méthodologie et garantissent que l'évaluation répond aux enjeux importants.
Être précis sur les compétences des évaluateurs. Lors de la sélection d'évaluateurs externes, évaluez la familiarité avec le type de projet, l'expérience dans le type d'évaluation à réaliser, la connaissance du contexte local et l'expertise méthodologique. Incluez des évaluateurs externes pour garantir une distance saine et l'objectivité.
Intégrer des approches participatives. Les plans d'évaluation doivent proposer des approches participatives qui engagent les parties prenantes tout au long du processus. Cela favorise l'appropriation et l'utilisation des conclusions.
Spécifier le personnel adéquat. Le plan d'évaluation doit prévoir un plan de dotation approprié pour sa mise en œuvre, qu'elle soit interne ou externe. Tenez compte de la complexité de l'évaluation, de l'expertise requise et de la capacité organisationnelle lors de la détermination des besoins en personnel.
Équilibrer spécificité et flexibilité. Les TdR doivent énoncer clairement les exigences tout en permettant aux évaluateurs de proposer leur méthodologie optimale. Des TdR trop prescriptifs limitent l'innovation des évaluateurs ; des TdR trop vagues conduisent à des propositions qui ne répondent pas à vos besoins.
Assurer des ressources adéquates pour le périmètre. Une évaluation avec un périmètre large mais des ressources très limitées peut être pire qu'aucune évaluation si elle aboutit à des conclusions superficielles. Assurez-vous que le budget et le calendrier de l'évaluation sont suffisants pour répondre adéquatement aux questions clés. Trois semaines sont généralement insuffisantes pour une évaluation significative.
Exemples concrets
Santé - Afrique subsaharienne (Évaluation Finale)
Un programme de santé maternelle financé par l'USAID dans trois pays a requis une évaluation finale six mois avant la clôture du projet. Les TdR spécifiaient : (1) cinq questions d'évaluation alignées sur les critères de l'OCDE/CAD, (2) une conception mixte exigeant des données quantitatives sur les résultats et des études de cas qualitatives, (3) des qualifications pour les évaluateurs incluant une expertise en santé maternelle et une expérience des évaluations USAID, (4) un calendrier détaillé avec rapport initial (2 semaines), collecte de données (6 semaines) et rapport final (2 semaines), et (5) des exigences explicites d'engagement des parties prenantes, y compris des ateliers de validation dans chaque pays. Les TdR ont été élaborés trois mois avant la sélection des évaluateurs, permettant un processus d'appel d'offres concurrentiel qui a abouti à un consortium d'évaluateurs internationaux et locaux. L'évaluation a identifié des leçons clés pour la mise à l'échelle qui ont éclairé la conception du programme de suivi.
Gouvernance - Asie du Sud-Est (Évaluation à Mi-Parcours)
Un programme de gouvernance collaborant avec des organisations de la société civile a commandité une évaluation à mi-parcours pour évaluer les progrès et éclairer les décisions de gestion adaptative. Les TdR mettaient l'accent sur les approches participatives, exigeant des entretiens avec les partenaires gouvernementaux, les OSC bénéficiaires et les représentants des bailleurs de fonds. Il était spécifié que l'évaluation devait utiliser la récolte des résultats comme méthode principale pour capter à la fois les résultats planifiés et imprévus. Les qualifications des évaluateurs requéraient une expérience en évaluation participative et en programmation de la gouvernance. Le calendrier incluait un atelier de validation à mi-parcours pour s'assurer que les conclusions éclairent les ajustements du programme avant sa clôture. L'évaluation a révélé des résultats imprévus significatifs via des voies d'influence informelles, menant à l'adaptation du programme.
Éducation - Asie du Sud (Évaluation d'Impact)
Un programme éducatif financé par une fondation a requis une évaluation d'impact quasi-expérimentale pour évaluer les résultats d'apprentissage. Les TdR spécifiaient des exigences méthodologiques rigoureuses, incluant une conception de groupe de comparaison, une analyse de puissance pour la taille de l'échantillon et une collecte de données longitudinales. Il était exigé que les évaluateurs aient une expérience en évaluation d'impact dans le domaine de l'éducation et des capacités d'analyse statistique. Les TdR spécifiaient également que l'évaluation devait inclure une analyse coût-efficacité. La sélection des évaluateurs était basée sur des propositions techniques démontrant une expertise méthodologique, avec une proposition budgétaire distincte. L'évaluation a fourni des preuves solides sur l'efficacité du programme, éclairant ainsi les décisions de mise à l'échelle.
Comparaison avec d'autres documents clés
Les Termes de Référence d'une évaluation sont l'un des nombreux documents utilisés dans la planification et la gestion de l'évaluation. Voici les différences clés :
| Caractéristique | Termes de Référence d'Évaluation | Matrice d'Évaluation | Rapport initial | Plan de S&E |
|---|---|---|---|---|
| Objectif principal | Commander une évaluation et sélectionner des évaluateurs | Cartographier les questions d'évaluation vers les sources de données | Détailler l'approche d'évaluation après sélection | Guider le système global de S&E |
| Quand est-il élaboré ? | Avant la sélection des évaluateurs | Pendant la planification de l'évaluation | Après la sélection des évaluateurs, avant la collecte de données | Lors de la conception du programme |
| Public cible | Évaluateurs potentiels, comité de sélection | Équipe d'évaluation, parties prenantes internes | Équipe d'évaluation, parties prenantes | Équipe du programme, bailleurs |
| Niveau de détail | Exigences et attentes | Cartographie question-preuve | Spécificités méthodologiques | Orientation complète sur le S&E |
| Propriété | Organisation commanditaire | Équipe d'évaluation (avec l'apport des parties prenantes) | Évaluateur externe | Gestion du programme |
Indicateurs pertinents
12 indicateurs, issus de 5 cadres majeurs de bailleurs de fonds (USAID, DFID, UNDP, IFRC, Global Fund), sont liés à l'élaboration et à l'utilisation des Termes de Référence d'évaluation :
- Moment de l'élaboration des TdR : "Proportion d'évaluations dont les termes de référence sont élaborés avant la sélection des évaluateurs" (USAID)
- Approches participatives : "Pourcentage de termes de référence d'évaluation qui intègrent des approches participatives" (UNDP)
- Spécification des compétences des évaluateurs : "Proportion de termes de référence d'évaluation qui spécifient les compétences requises des évaluateurs" (DFID)
- Adéquation du calendrier : "Délai moyen entre l'élaboration des TdR et l'achèvement de l'évaluation" (IFRC)
Sujets connexes
- Matrice d'Évaluation : Le document qui cartographie les questions d'évaluation vers les sources de données et les méthodes.
- Critères d'Évaluation (CAD) : Les cinq critères de l'OCDE/CAD qui devraient structurer les questions d'évaluation.
- Sélection des Évaluateurs : Processus de sélection des évaluateurs qualifiés basé sur les exigences des termes de référence.
- Planification de l'Évaluation : Le processus plus large de...