Vue d'ensemble
| Situation de référence | Intermédiaire | Finale | |
|---|---|---|---|
| Quand | Avant ou au tout début du programme | À mi-parcours (généralement 12-18 mois après le début) | À la fin ou près de la fin du programme |
| Objectif | Établir les valeurs de départ pour tous les indicateurs | Vérifier les progrès, permettre des corrections de cap | Mesurer les résultats finaux par rapport à la situation de référence |
| Obligatoire ? | Presque toujours (les bailleurs de fonds l'attendent) | Facultatif (recommandé pour les programmes de 3 ans et plus) | Presque toujours |
| Coût typique | 15-25% du budget total S&E | 10-15% du budget S&E | 15-25% du budget S&E |
| Qui l'utilise | Équipe de programme (pour la définition des cibles), bailleurs de fonds (pour l'approbation des indicateurs) | Équipe de programme (pour les ajustements), bailleurs de fonds (pour le suivi des progrès) | Tous les acteurs (rapport final, évaluation, apprentissage) |
Contenu de chaque enquête
Les trois types d'enquêtes doivent impérativement mesurer les mêmes indicateurs en utilisant une méthodologie identique. C'est un point crucial. Si votre enquête de référence a recours à des entretiens en face à face et votre enquête finale à des sondages téléphoniques, la comparaison des résultats perdra en fiabilité. Il est donc essentiel de figer la conception de votre enquête avant la situation de référence et de ne plus la modifier.
L'enquête de référence collecte les valeurs initiales de chaque indicateur de résultat et de produit figurant dans votre cadre logique ou votre plan de S&E. Elle recueille également des informations contextuelles (démographie, moyens de subsistance, accès aux services) essentielles pour comprendre votre population cible et interpréter les résultats ultérieurs. Les enquêtes de référence ne se limitent pas aux données quantitatives. Les données qualitatives issues de groupes de discussion ou d'entretiens apportent un éclairage contextuel que les sondages ne peuvent saisir, tels que les dynamiques de pouvoir communautaires, les obstacles perçus et les définitions locales du bien-être.
L'enquête à mi-parcours collecte les mêmes valeurs d'indicateurs que l'enquête de référence afin de vérifier les progrès réalisés. Elle représente une opportunité d'identifier les problèmes précocement : si les indicateurs n'évoluent pas, vous pouvez ajuster votre approche avant qu'il ne soit trop tard. Une enquête à mi-parcours bien conçue recueille également des données sur la mise en œuvre (bénéficiaires atteints, activités réalisées) pour expliquer l'émergence ou l'absence de résultats.
L'enquête finale collecte les valeurs ultimes de tous les indicateurs. La différence entre les valeurs de référence et les valeurs finales constitue le résultat mesuré de votre programme. L'enquête finale doit également documenter les effets imprévus (positifs et négatifs) et les indicateurs de durabilité.
Moment idéal pour l'enquête de référence
Idéalement, la collecte des données de référence devrait être achevée avant le début des activités du programme, ou au plus tard dans les quatre à six premières semaines. Chaque semaine de retard risque de « contaminer » vos valeurs initiales avec les effets précoces de l'intervention. Intégrez la conception de l'enquête de référence et la collecte de données dans votre plan de démarrage de projet afin d'éviter qu'elle ne soit reportée en raison de retards d'approvisionnement ou d'un recrutement de personnel lent. Si les conditions sur le terrain rendent une collecte précoce impossible, documentez précisément quelles activités avaient déjà débuté et dans quelles localités, afin de pouvoir en tenir compte lors de la comparaison avec l'enquête finale.
L'utilité de l'enquête à mi-parcours
Une enquête à mi-parcours est un investissement judicieux lorsque :
- La durée du programme est de 3 ans ou plus. Attendre l'enquête finale pour identifier les problèmes peut faire perdre de précieuses années.
- Le bailleur de fonds l'exige. Certains contrats imposent la collecte de données à mi-parcours.
- Vous pratiquez la gestion adaptative. L'enquête à mi-parcours fournit les preuves nécessaires pour ajuster le cap en cours de programme.
- Les indicateurs préliminaires suggèrent des problèmes. Si les données de suivi régulier sont stables ou en déclin, une enquête à mi-parcours peut aider à en diagnostiquer les causes.
Une enquête à mi-parcours n'est probablement pas utile lorsque :
- Le programme dure moins de 2 ans. Le temps de collecter, analyser et agir sur les données à mi-parcours, le programme pourrait être déjà presque achevé.
- Le budget est contraint. Une enquête de référence et une enquête finale robustes sont plus précieuses qu'un ensemble de trois enquêtes (référence, mi-parcours, finale) de qualité médiocre.
- Les données de suivi régulier sont suffisantes. Si votre système de suivi suit les indicateurs clés de manière trimestrielle, une enquête à mi-parcours formelle pourrait s'avérer redondante.
Échantillon panel vs. coupe transversale répétée
Une décision de conception cruciale : allez-vous interroger les mêmes personnes lors de l'enquête de référence et de l'enquête finale (panel), ou tirerez-vous un nouvel échantillon aléatoire à chaque fois (coupe transversale répétée) ? Utilisez le calculateur d'échantillonnage pour déterminer la taille d'échantillon appropriée à chaque approche.
| Panel (mêmes personnes) | Coupe transversale répétée (nouvel échantillon) | |
|---|---|---|
| Avantage | Mesure le changement au niveau individuel ; nécessite un échantillon plus petit pour une puissance statistique équivalente | Pas de problème d'attrition ; logistique simplifiée |
| Inconvénient | Les individus déménagent, décèdent, refusent de participer (attrition) ; le suivi engendre des coûts | Ne permet pas de mesurer le changement individuel ; nécessite un échantillon plus grand |
| Idéal pour | Programmes de moins de 3 ans, populations à faible mobilité, lorsque la démonstration d'un changement individuel est requise | Programmes de plus de 3 ans, populations à forte mobilité, lorsque le changement au niveau de la population est suffisant |
| Risque d'attrition | Élevé si la population est mobile (visez moins de 20% d'attrition) | Aucun |
Solutions en cas de situation de référence manquante
Cela arrive fréquemment. Le programme a pu démarrer avant la mise en place du S&E, ou l'enquête de référence, bien que planifiée, a été retardée au-delà de son point d'utilité.
Option 1 : enquête de référence rétrospective. Ajoutez des questions de rappel à votre prochaine collecte de données : "Avant le début du programme, votre ménage... ?" Cette approche est efficace pour les questions factuelles (ex: "Aviez-vous des latrines ?") mais moins fiable pour les questions subjectives ou numériques (ex: "Quel était votre revenu il y a 18 mois ?").
Option 2 : données secondaires. Utilisez des sources de données existantes comme valeurs de référence substituts : enquêtes nationales (EDS, MICS), dossiers d'établissements, données d'inscription scolaire, statistiques gouvernementales. Indiquez clairement les limites dans votre rapport : ces sources peuvent couvrir des périodes, des zones géographiques ou des populations différentes de celles de votre programme.
Option 3 : groupe de comparaison. Si vous pouvez identifier une population similaire n'ayant pas bénéficié du programme, ses valeurs actuelles peuvent servir d'estimation de ce à quoi votre groupe cible aurait ressemblé avant l'intervention.
Option 4 : enquête de référence tardive avec des cibles ajustées. Si le programme vient de débuter et que les activités n'ont pas encore atteint la majorité des bénéficiaires, une enquête menée dans les deux ou trois premiers mois peut encore servir de situation de référence raisonnable pour la plupart des indicateurs.
Quelle que soit l'approche choisie, documentez les limitations dans votre analyse et expliquez comment elles affectent la fiabilité de vos conclusions.
Pièges à éviter
Erreur 1 : modifier la méthodologie entre les enquêtes. Si votre enquête de référence a eu recours à des visites à domicile et votre enquête finale à des sondages téléphoniques, toute différence dans les résultats pourrait être imputable au changement de méthode, et non à votre programme. Utilisez la même approche d'échantillonnage, le même questionnaire et la même méthode de collecte de données.
Erreur 2 : collecter l'enquête de référence trop tard. Si votre enquête de référence est menée six mois après le début du programme, alors que les activités ont déjà démarré, vos valeurs de "situation de référence" peuvent déjà refléter les effets précoces de l'intervention. Collectez les données de référence avant ou pendant le premier mois d'activités.
Erreur 3 : l'absence de groupe de comparaison. Sans groupe de comparaison, il est impossible de distinguer les effets du programme des facteurs externes. Si la fréquentation scolaire s'est améliorée à l'échelle nationale en raison d'une politique gouvernementale, votre enquête finale montrera une amélioration qui n'est pas liée à votre programme.
Erreur 4 : collecter l'enquête finale trop tôt. Certains résultats mettent du temps à se concrétiser. Si votre programme se termine en décembre et que vous collectez les données de l'enquête finale en octobre, vous risquez de manquer des résultats qui émergent durant la période de mise en œuvre finale.
Erreur 5 : Des tailles d'échantillon incohérentes. Si votre enquête de référence a interrogé 500 ménages mais que votre enquête finale n'en a atteint que 300 (en raison de contraintes budgétaires), l'enquête finale aura une puissance statistique moindre. Planifiez et budgétisez des tailles d'échantillon cohérentes pour tous les cycles.
Aide à la décision
- Votre programme dure 2 ans ? Dans ce cas, évitez l'enquête à mi-parcours. Investissez plutôt ce budget dans une enquête de référence et une enquête finale plus robustes, avec des tailles d'échantillon adéquates.
- Le programme dure 3 ans ou plus et vise une gestion adaptative ? Planifiez une enquête à mi-parcours au 18e mois. Prévoyez trois mois pour l'analyse et la prise de décision avant le prochain cycle de mise en œuvre.
- Vous travaillez avec une population mobile (pasteurs, migrants urbains) ? Optez pour une conception par coupe transversale répétée. Le suivi par panel dans des environnements à forte mobilité engendre des problèmes d'attrition coûteux.
- Le budget ne permet que deux cycles de collecte de données ? Priorisez toujours l'enquête de référence et l'enquête finale. Une enquête à mi-parcours sans situation de référence est inutile. Une situation de référence sans enquête finale est presque aussi problématique.