En un coup d'œil
Les huit sections principales
Un plan S&E&A complet couvre huit sections. L'ordre est important : chaque section dépend des précédentes.
| # | Section | Contenu | Longueur typique |
|---|---|---|---|
| 1 | Description du programme et référence au modèle logique | Brève description du programme, lien vers la Théorie du Changement et le cadre logique, portée et période du plan S&E&A | 1-2 pages |
| 2 | Cadre et gouvernance S&E&A | Qui est responsable du plan, comment fonctionnent les révisions, comment les données alimentent les décisions | 1-2 pages |
| 3 | Sélection des indicateurs et fiches de référence | Liste complète des indicateurs avec Fiches de Référence des Indicateurs de Performance (FRIP) pour chacun | 6-12 pages + annexe |
| 4 | Plan de collecte et d'analyse des données | Méthodes, calendrier, responsabilités, instruments | 3-5 pages + annexe |
| 5 | Approche de la qualité des données | Comment les cinq dimensions de la qualité sont protégées | 2-3 pages |
| 6 | Plan d'évaluation | Évaluations prévues, questions clés, méthodologie, utilisation | 2-4 pages |
| 7 | Agenda d'apprentissage | Questions d'apprentissage prioritaires, plan de preuves par question | 2-3 pages |
| 8 | Personnel, budget et calendrier de révision | Structure de l'équipe S&E&A, budget annuel S&E&A, calendrier de révision | 1-2 pages |
Les plans de moins de 15 pages manquent généralement de détails essentiels pour l'avenir ; ceux de plus de 50 pages dupliquent souvent l'information entre le texte narratif et les tableaux. Visez 15 à 30 pages pour le corps principal, en incluant les instruments détaillés et les fiches de référence des indicateurs en annexes.
Pour la définition conceptuelle, voir plans S&E&A. Pour les programmes de l'USAID spécifiquement, voir plan de gestion de la performance pour la structure ADS 201.
L'ordre de leur élaboration
Élaborez les sections dans cet ordre. Ignorer cet ordre est la cause la plus fréquente des échecs de plans S&E&A.
- Description du programme et référence au modèle logique en premier. Ancrez le plan dans la conception du programme. Si la Théorie du Changement ou le cadre logique présente des lacunes (confusion de niveaux, hypothèses manquantes, parcours irréalistes), identifiez-les avant de rédiger les indicateurs.
- Cadre et gouvernance S&E&A en second. Décidez qui est responsable du plan et comment il sera révisé avant toute sélection d'indicateurs. C'est la section la plus souvent négligée, et pourtant celle qui détermine la pertinence continue du plan.
- Sélection des indicateurs et fiches de référence en troisième. C'est la section la plus importante et celle qui exige le plus de discipline. Voir plongée approfondie dans les indicateurs SMART et indicateurs personnalisés vs standards pour le cadre de décision.
- Plan de collecte et d'analyse des données en quatrième. Une fois les indicateurs définis, nommez les méthodes, le calendrier et les responsabilités.
- Approche de la qualité des données en cinquième. Les cinq dimensions de la qualité (validité, fiabilité, actualité, précision, intégrité) appliquées aux indicateurs et méthodes spécifiques. Voir les 5 dimensions de la qualité des données.
- Plan d'évaluation en sixième. Évaluations planifiées avec des questions claires, une méthodologie et une utilisation prévue. Voir comment rédiger un TdR d'évaluation.
- Agenda d'apprentissage en septième. Questions d'apprentissage prioritaires, plan de preuves par question. Voir agenda d'apprentissage.
- Personnel, budget et calendrier de révision en dernier. Une fois que vous connaissez la charge de travail des indicateurs et des évaluations, vous pouvez dimensionner l'équipe et budgétiser le travail.
La rédaction d'indicateurs avant la finalisation du modèle logique est la cause première la plus fréquente de la refonte des plans S&E&A. La tentation est grande, car les indicateurs donnent l'impression d'un travail de "vrai S&E". Résistez à cette tentation ; corrigez d'abord le modèle logique.
Indicateurs et données
Section 3 : sélection des indicateurs et fiches de référence
La section des indicateurs est la plus grande et celle que les examinateurs des bailleurs lisent en premier. Structurez-la comme un tableau récapitulatif avec des fiches de référence détaillées.
Composantes du tableau récapitulatif :
| Indicateur | Niveau | Type (standard/personnalisé) | Situation de référence | Cible Année 1 | Cible Année 2 | Cible finale | Source de données | Fréquence |
|---|
Une ligne par indicateur. Généralement 15 à 30 indicateurs pour un programme de taille moyenne. Au-delà de 30, on observe généralement un gonflement du nombre d'indicateurs (voir erreur : trop d'indicateurs).
Composantes de la fiche de référence des indicateurs de performance (FRIP) par indicateur :
- Titre et définition de l'indicateur (la définition complète, pas seulement le nom)
- Unité de mesure et formule de calcul
- Désagrégation (sexe, âge, géographie, autres éléments pertinents pour le programme)
- Source de données et méthode de collecte (spécifique : "enquête annuelle auprès des ménages, module CAP, septembre")
- Partie responsable (par rôle, pas par nom)
- Fréquence de collecte et date limite de rapport
- Valeur de la situation de référence et année
- Cibles pour chaque année du programme
- Approche de la qualité des données pour cet indicateur
- Notes sur les choix de définition, les mises en garde ou les limitations connues
Les FRIP se trouvent en annexe, une par indicateur. 1 à 2 pages chacune. C'est le document que le personnel de terrain consulte réellement sur le terrain. Rédigez-les pour la clarté et l'utilité pratique, et non pour la seule élégance de l'examen du bailleur.
Pour la qualité des indicateurs, voir plongée approfondie dans les indicateurs SMART. Pour le mélange personnalisé/standard, voir indicateurs personnalisés vs standards. Pour les fiches de référence spécifiquement, voir fiche de référence d'indicateur.
Section 4 : plan de collecte et d'analyse des données
Pour chaque indicateur, cette section répond à : quel instrument, quel calendrier, quelle responsabilité, quelle analyse.
Contenu standard :
- Calendrier de collecte de données (chronologie visuelle montrant toutes les rondes de collecte sur la durée du programme)
- Inventaire des instruments (enquête de situation de référence, enquête finale, formulaires de suivi, outils qualitatifs, extractions de données administratives)
- Approche des opérations sur le terrain (choix numérique/papier, recrutement des enquêteurs, structure de supervision)
- Plan d'analyse (qui analyse quoi, quand, produisant quels résultats)
- Plan de diffusion (rapports internes, rapports aux bailleurs, retours des bénéficiaires, publications publiques)
Vérification de la profondeur : Un lecteur non familier avec le programme devrait pouvoir identifier, à partir de cette seule section, la date de la prochaine activité de collecte de données, la personne responsable et l'instrument utilisé. Si la réponse est ambiguë, c'est que la section est trop superficielle.
Pour la sélection des méthodes de collecte de données, voir collecte de données sur papier vs numérique. Pour l'échantillonnage, voir comment choisir la taille de l'échantillon.
Qualité et évaluation
Section 5 : approche de la qualité des données
La qualité des données n'est pas une pratique isolée ; c'est un ensemble de contrôles appliqués aux cinq dimensions de la qualité (validité, fiabilité, actualité, précision, intégrité). Cette section doit détailler les contrôles spécifiques que le programme mettra en œuvre, et non se contenter d'un langage générique sur l'assurance qualité des données.
Composantes requises :
- Calendrier prévu des Évaluations de la Qualité des Données (AQD) (généralement annuelles ou semi-annuelles)
- Approche de la fiabilité inter-évaluateurs pour les indicateurs subjectifs ou basés sur le jugement
- Calendrier de formation et de recyclage des enquêteurs
- Exigences de la piste d'audit des données (qui peut modifier les valeurs soumises, comment les changements sont enregistrés)
- Contrôles d'intégrité aux points de pression (rapports liés à la performance, incitations basées sur les cibles)
Voir comment réaliser une AQD pour le processus formel d'AQD, et les 5 dimensions de la qualité des données pour le cadre que ces contrôles protègent.
Une erreur fréquente : cette section se contente de copier un langage générique sur la qualité des données à partir d'un modèle, sans apporter de spécificités concernant les indicateurs, les méthodes ou les points de pression propres au programme. Les examinateurs des bailleurs le repèrent immédiatement.
Section 6 : plan d'évaluation
Chaque programme pluriannuel nécessite au moins un examen à mi-parcours et une évaluation finale de projet. Certains programmes ajoutent des évaluations de situation de référence, de processus ou d'impact.
Pour chaque évaluation prévue, spécifiez :
- Objectif et type (situation de référence / mi-parcours / fin de projet / impact / processus)
- Calendrier (mois/année, lié aux jalons du programme)
- Questions clés de l'évaluation (3-5 prioritaires, voir comment rédiger un TdR d'évaluation)
- Méthodologie (type de conception, sources de données, approche analytique)
- Type d'évaluateur (interne, externe, mixte) et exigences d'indépendance
- Budget (coût total incluant le travail de terrain, l'analyse, le rapport)
- Utilisation prévue (quelles décisions l'évaluation éclairera-t-elle)
Les plans d'évaluation qui ne précisent pas l'utilisation prévue des résultats aboutissent à des rapports non lus. Chaque évaluation doit être explicitement liée à une décision que le programme prendra différemment en fonction de ses résultats.
Apprentissage et opérations
Section 7 : agenda d'apprentissage
L'Agenda d'apprentissage est la section la plus récente du plan S&E&A standard, formalisée par le cadre CLA de l'USAID et désormais attendue par la plupart des bailleurs bilatéraux. Il ne s'agit pas d'une simple liste de questions de recherche, mais d'un ensemble priorisé de 3 à 7 questions auxquelles le programme s'engage à répondre délibérément grâce à son système S&E.
Chaque question d'apprentissage nécessite :
- La question elle-même (spécifique, à laquelle on peut répondre, pertinente pour la décision)
- Pourquoi elle est importante pour le programme (quelle décision éclaire-t-elle)
- Quelles preuves y répondront (données provenant de quels indicateurs ou méthodes)
- Quand la réponse est nécessaire (date limite de décision)
- Qui agira sur la réponse (rôle avec autorité)
L'Agenda d'apprentissage différencie un programme qui traite le S&E comme une fonction de conformité d'un programme qui le traite comme une fonction d'aide à la décision. Les examinateurs des bailleurs remarquent cette distinction.
Voir agenda d'apprentissage pour le cadre conceptuel et des exemples.
Section 8 : personnel, budget et calendrier de révision
Cette dernière section dimensionne l'opération S&E&A en fonction du plan qu'elle vient de spécifier.
Personnel : Structure de l'équipe par rôle (gestionnaire S&E&A, agent de données, équipe d'enquêteurs, soutien à l'analyse). Niveau d'effort (ETP) par rôle. Lignes hiérarchiques. Pour les programmes plus importants, structure du comité consultatif ou de pilotage S&E&A.
Budget : Budget annuel S&E&A en % du budget du programme (généralement 5-10% pour les programmes de taille moyenne, 3-7% pour les plus grands). Catégories principales détaillées : personnel, collecte de données (par ronde × rondes), évaluations, AQD, technologie, diffusion. Coûts de rapport de conformité aux bailleurs.
Calendrier de révision : Cadence d'examen trimestriel, révision majeure annuelle, conditions qui déclenchent une révision en cours de cycle. Approche de contrôle de version (versions datées, journal des modifications, autorité de signature).
Les plans S&E&A qui sous-estiment leur budget ou leurs besoins en personnel ne peuvent pas exécuter le plan qu'ils décrivent. C'est une lacune fréquente dans les propositions : des plans ambitieux sans les ressources correspondantes.
Erreurs et liste de contrôle
Exemples sectoriels
Santé : programme de prévention du VIH de 3 ans, Afrique de l'Est
Taille du programme : 4,2 millions de dollars, 2 districts, 12 sites de prestation de services. Structure du plan S&E&A : 22 pages de corps principal, 8 indicateurs avec FRIP (4 standards PEPFAR MER, 4 personnalisés), 8 fiches de référence d'indicateurs en annexe (2 pages chacune), calendrier d'AQD trimestriel, une AQD annuelle sur tous les sites, examen à mi-parcours au 18e mois, évaluation finale au 34e mois, 4 questions d'apprentissage (adoption des services par âge, qualité des soins centrés sur le client, efficacité de la formation des prestataires, stigmatisation au niveau communautaire). Personnel S&E&A : 1 gestionnaire S&E&A + 1 agent de données, 7% du budget du programme, 6 enquêteurs de terrain pour les rondes de collecte de données périodiques.
Éducation : programme d'éducation des filles de 5 ans, asie du sud
Taille du programme : 8,5 millions de dollars, 60 écoles. Structure du plan S&E&A : 28 pages de corps principal, 18 indicateurs (12 standards alignés INEE/ODD, 6 résultats d'apprentissage personnalisés), 18 FRIP en annexe, évaluation annuelle des apprentissages + visites de suivi trimestrielles, situation de référence interne + évaluation externe à mi-parcours + évaluation externe finale, 5 questions d'apprentissage (rétention des filles à la puberté, efficacité de l'engagement parental, transfert de la formation des enseignants, effets du calendrier de paiement des allocations, attitudes communautaires sur l'enseignement secondaire). Budget S&E&A 6,5% du total, équipe S&E&A de 3 personnes + budget d'évaluateur externe réservé.
WASH : programme rural d'eau et d'assainissement de 4 ans, Afrique de l'Ouest
Taille du programme : 6,8 millions de dollars, 80 villages. Le plan S&E&A utilise les indicateurs de l'échelle de service JMP pour l'alignement avec l'ODD 6, ainsi que 4 indicateurs personnalisés sur la capacité des comités de l'eau et les pratiques d'hygiène des ménages. Collecte de données : enquête annuelle auprès des ménages (n=1 600 dans 30 villages échantillonnés, conception en grappes avec DEFF 1,8), suivi trimestriel de la fonctionnalité des points d'eau, tests semestriels de la qualité de l'eau sur un sous-ensemble échantillonné. L'agenda d'apprentissage se concentre sur les facteurs favorisant la durabilité des comités au-delà de la fin du programme. Évaluations à mi-parcours et finales, toutes deux externes. Budget S&E&A 8% du total, reflétant l'intensité élevée de la collecte de données.
Sécurité alimentaire : programme de moyens de subsistance de 3 ans, région pastorale du sahel
Taille du programme : 3,1 millions de dollars, 20 communautés. Le plan S&E&A aborde la migration saisonnière (transhumance vs sédentaire) comme variable de désagrégation pour la majorité des indicateurs. HFIAS + FCS standards pour les résultats de sécurité alimentaire ; indicateurs personnalisés sur la diversité alimentaire des ménages et le suivi des ventes de détresse (indicateurs avancés de rétablissement de la sécurité alimentaire). Collecte de données trimestrielle, synchronisée avec les phases de migration. Examen à mi-parcours au 18e mois, évaluation finale au 34e mois, toutes deux internes. L'agenda d'apprentissage se concentre sur les interventions de subsistance qui génèrent des gains durables en matière de sécurité alimentaire à travers les cycles de sécheresse. Budget S&E&A 9% du total, reflétant la complexité du contexte pastoral.
Pièges courants
Piège 1 : La rédaction d'indicateurs avant la finalisation du modèle logique. Les indicateurs sont l'opérationnalisation du modèle logique. Si ce dernier évolue, les indicateurs devront également changer. Corrigez d'abord la Théorie du Changement et le cadre logique. Résistez à la tentation de rédiger les indicateurs prématurément.
Piège 2 : confondre le plan S&E&A avec le cadre logique. Le cadre logique est une composante essentielle du plan S&E&A ; le plan lui-même est le document opérationnel qui transforme ce cadre en un système de mesure fonctionnel. Un plan S&E&A qui n'est qu'un cadre logique avec un formatage supplémentaire n'est pas un véritable plan S&E&A.
Piège 3 : tableaux d'indicateurs sans FRIP. Lister les indicateurs dans un tableau sans les fiches de référence détaillées laisse toutes les questions de fond sans réponse : que signifie "amélioré", qui collecte cette donnée, comment est-elle désagrégée ? Les FRIP sont la partie du plan qui est réellement utilisée ; les omettre rend le plan purement ornemental.
Piège 4 : pas de section gouvernance. Le plan nomme les indicateurs mais ne précise pas qui révise le plan, qui approuve les changements et qui a l'autorité d'agir sur les résultats. Sans gouvernance, le plan devient un document inopérant.
Piège 5 : pas d'Agenda d'apprentissage, ou un agenda d'apprentissage qui est une liste de souhaits de recherche. Les questions d'apprentissage doivent être liées à des décisions concrètes. Une liste de "choses intéressantes que nous aimerions savoir" relève de la curiosité, non d'un agenda d'apprentissage. Priorisez.
Piège 6 : budget désaligné avec le plan. Le plan spécifie des enquêtes annuelles auprès des ménages, des AQD trimestrielles et un examen externe à mi-parcours. Or, le budget ne prévoit des fonds que pour la moitié de ces activités. Il faut soit réduire l'ambition du plan, soit augmenter le budget ; ne soumettez pas un plan sur-spécifié avec des opérations sous-financées.
Piège 7 : copie de modèle sans ajustement spécifique au programme. Un plan S&E&A copié d'un programme antérieur, avec le nom du programme modifié et les indicateurs vaguement mis à jour, échoue à tout examen significatif. Les examinateurs des bailleurs et les évaluateurs externes identifient ce schéma dès les 5 premières pages.
Piège 8 : traiter le plan S&E&A comme un document unique. Un plan rédigé, soumis et jamais révisé devient obsolète dès la deuxième année. Intégrez la révision dans le cycle annuel du plan de travail et assurez son application.
Liste de contrôle de l'exhaustivité du plan S&E&A
Utilisez cette liste avant de soumettre le plan au bailleur, de lancer une évaluation ou de le transférer à un nouveau gestionnaire S&E&A.
Section 1-2 (Ancrage) :
- Théorie du Changement et cadre logique référencés par version et date
- Portée, période et version du plan S&E&A documentées
- Gouvernance nommée : qui est responsable, qui révise, qui approuve les changements
- Cadence de révision spécifiée (minimum annuel, déclencheurs de révision en cours de cycle)
Section 3 (Indicateurs) :
- Le tableau récapitulatif des indicateurs couvre tous les niveaux du programme (produit, résultat, impact/objectif)
- FRIP présentes pour chaque indicateur (les 10 composantes)
- Ratio standard/personnalisé défendable (généralement 40-60% chacun)
- Situations de référence collectées ou étude de situation de référence prévue avant l'engagement des cibles
- Cibles réalistes et ancrées à la situation de référence
Section 4 (Données) :
- Calendrier de collecte de données sur toute la durée du programme
- Faisabilité de la méthode vérifiée (budget + capacité)
- Plans d'échantillonnage spécifiés avec effet de plan appliqué
- Le plan d'analyse nomme qui fait quoi
Section 5-6 (Qualité + évaluation) :
- Calendrier d'AQD spécifié
- Cinq dimensions de la qualité abordées avec des contrôles spécifiques
- Chaque évaluation a une déclaration d'utilisation prévue
- Exigences d'indépendance de l'évaluateur spécifiées
Section 7-8 (Apprentissage + opérations) :
- L'agenda d'apprentissage contient 3 à 7 questions prioritaires avec les décisions nommées
- Le personnel S&E&A est dimensionné en fonction de la charge de travail du plan
- Le budget S&E&A est dimensionné en fonction du plan (% du programme total)
- Calendrier de révision en place
Pour les fondements conceptuels, voir plans S&E&A, cadre logique et Théorie du Changement. Pour savoir comment cela se connecte à la rédaction de propositions, voir comment rédiger la section S&E d'une proposition. Pour consulter les espaces de travail actuels, voir le catalogue des playbooks.