Quand Utiliser
La conception de la situation de référence est l'approche appropriée lorsque vous devez établir un point de départ clair pour mesurer le changement. Utilisez-la lorsque :
- Définition des cibles des indicateurs — Les équipes de conception manquent souvent d'informations suffisantes pour proposer avec confiance des cibles spécifiques lors de la rédaction de propositions. Au lieu de cela, les cibles des indicateurs doivent être définies à l'issue d'une étude de base du projet et incluses dans le Plan d'Indicateurs du programme.
- Mesurer l'impact du programme — Vous devez comparer les conditions finales aux conditions initiales pour évaluer si votre intervention a produit un changement.
- Éclairer l'adaptation du projet — Vous souhaitez des données de base qui informent directement des décisions critiques durant la mise en œuvre, et non uniquement pour le rapportage aux bailleurs.
- Répondre aux exigences des bailleurs — Les bailleurs comme l'USAID, CRS et FCDO exigent la documentation des valeurs de base dans le Tableau de Suivi de la Performance des Indicateurs (IPTT) ou l'équivalent du bailleur.
- Projets de plus longue durée — Pour les projets de 18 mois et plus, conduisez une situation de référence dans les 6 premiers mois ; pour les projets plus courts, conduisez la situation de référence avant le début ou au plus tard 3 mois après le début de la mise en œuvre.
La conception de la situation de référence est moins utile lorsque :
- Projets très courts — La documentation des valeurs de base n'est pas requise pour les projets d'une durée inférieure à trois ans.
- Vous avez besoin uniquement de suivi de routine — Pour le suivi d'activité continu, la collecte de données de suivi de routine suit un flux de travail différent.
- Réponse d'urgence rapide — Pour une réponse d'urgence immédiate, une évaluation rapide des besoins avec une méthodologie différente et plus rapide est requise.
| Scénario | Utiliser la Conception de Situation de Référence ? | Meilleure Alternative |
|---|---|---|
| Nouveau projet mesurant l'évolution dans le temps | Oui | — |
| Définition des cibles des indicateurs | Oui | — |
| Projet à court terme (<3 ans) | Optionnel | Suivi de routine |
| Évaluation rapide d'urgence | Non | Évaluation Rapide des Besoins |
| Suivi post-distribution | Non | Flux de travail PDM |
| Comprendre les résultats imprévus | Non | Récolte des Résultats |
Comment Cela Fonctionne
La conception de la situation de référence suit plusieurs principes fondamentaux qui la distinguent des autres activités de collecte de données :
Utilité décisionnelle en premier. Chaque point de données collecté doit servir une décision spécifique et identifiée. Si vous ne pouvez pas articuler quelle décision de projet spécifique chaque indicateur informera, questionnez sa nécessité. Ce principe empêche la dysfonction courante de situations de référence riches en données mais pauvres en informations qui collectent des données excessives et non essentielles.
Compter le fardeau. La collecte de données n'est pas gratuite. Chaque indicateur ajouté à une enquête de base représente des coûts en termes de temps, d'argent et de ressources humaines. Évaluez le fardeau (temps, coût, complexité, fatigue des participants) de la collecte de chaque point de données. Si le fardeau l'emporte sur la valeur dérivée de l'information d'une décision critique, contestez ou rejetez l'indicateur. C'est une application fondamentale du principe de conscience du fardeau.
Relier à la structure. Assurez-vous que la collecte de données s'aligne sur la logique du projet, les indicateurs définis et toute exigence structurelle pertinente (par exemple, modules du bailleur). La situation de référence doit soutenir l'analyse et le rapportage ultérieurs, et non créer des données difficiles à coder et analyser.
La comparabilité est essentielle. Concevez les méthodes de situation de référence et finale pour être aussi identiques que possible afin de permettre des comparaisons valides. Documentez tout écart nécessaire. Si la situation de référence et finale utilisent des méthodologies, outils ou définitions différents, les comparaisons deviennent sans signification.
Les situations de référence et finale ne sont pas des évaluations. Les études de situation de référence et finale ne sont pas des évaluations en soi, mais une partie importante de l'évaluation du changement. Elles contribuent généralement à l'évaluation du projet/programme (par exemple, une évaluation finale ou d'impact), mais peuvent également contribuer au suivi des changements sur des projets/programmes de plus longue durée.
Éléments Clés
Une conception de situation de référence bien construite comprend ces éléments essentiels :
- Identification des décisions — Une liste documentée et priorisée des décisions clés du projet que les données de la situation de référence informeront. Cela va au-delà des catégories larges vers des questions précises sur les informations nécessaires pour chaque décision.
- Sélection des indicateurs — Une liste concise et documentée d'indicateurs essentiels liés aux décisions. Chaque indicateur sélectionné doit être directement lié à une décision priorisée, avec le fardeau de la collecte de données pour chaque indicateur démontrablement justifié par sa pertinence décisionnelle.
- Méthodologie de collecte de données — Les méthodes les plus appropriées et rentables pour collecter chaque point de données (par exemple, enquêtes ménagères, entretiens avec informateurs clés, groupes de discussion, observation directe, revue de données secondaires). Les méthodes doivent être claires, concises, non ambiguës et culturellement sensibles.
- Stratégie d'échantillonnage — Une base d'échantillonnage représentative avec des calculs de taille d'échantillon appropriés, des procédures de sélection des répondants et une couverture géographique. Pour les indicateurs nécessitant des données statistiquement solides, assurez un échantillonnage représentatif et des intervalles de confiance.
- Outils de collecte de données — Outils brouillons (questionnaires, guides d'entretien, listes de contrôle) qui sont clairs, concis, faciles à administrer et minimisant le fardeau pour les répondants et les enquêteurs.
- Protocoles de gestion des données — Comment les données seront collectées, saisies, nettoyées, stockées et sécurisées. Spécifiez les formats de données, les règles de validation et les contrôles de qualité.
- Plan d'assurance qualité — Procédures pour la formation des enquêteurs, la supervision, la vérification des données et les vérifications ponctuelles pour assurer l'exactitude et la fiabilité des données.
- Procédures de consentement éclairé — Formulaires de consentement éclairé clairs, simples et culturellement appropriés et scripts de consentement verbal expliquant l'objectif de la collecte de données, comment les données seront utilisées, les mesures de confidentialité, les risques et avantages potentiels, et le droit du participant de refuser ou de se retirer à tout moment sans pénalité.
- Approbation éthique — Clearance éthique formelle de l'organe d'examen désigné avant le début de la collecte de données.
Meilleures Pratiques
Collecter les données de situation de référence au bon moment. Les données de situation de référence doivent être collectées au tout début d'un projet ou dès que possible après le début. Pour les projets plus longs (18+ mois), conduisez une situation de référence dans les 6 premiers mois ; pour les projets plus courts, conduisez la situation de référence avant le début ou au plus tard 3 mois après le début de la mise en œuvre.
Lier chaque indicateur à une décision. Pour chaque indicateur de base proposé, demandez : "Si ces données montrent X, quelle décision prendrons-nous différemment ?" Si vous ne pouvez pas répondre à cela, l'indicateur est probablement un candidat pour le retrait ou la révision. Cela assure que la situation de référence sert d'outil dynamique pour l'adaptation, et non simplement d'enregistrement historique.
Inclure les valeurs de situation de référence ou les plans pour tous les indicateurs. Vous devez inclure les valeurs de situation de référence ou les plans pour la situation de référence pour les indicateurs qui en ont besoin. Tout comme chaque résultat a besoin d'au moins un indicateur de performance, chaque indicateur a besoin d'une cible, et chaque cible a besoin d'une situation de référence.
Intégrer les plans de situation de référence dans les documents de projet. Les plans de situation de référence doivent être intégrés dans le Plan d'Investissement du Bailleur (DIP), reflétés dans le Tableau de Suivi de la Performance des Indicateurs (IPTT), et clairement liés aux indicateurs dans le Plan de SEA qui nécessitent une situation de référence.
Définir les cibles après l'achèvement de la situation de référence. Les équipes de conception n'auront souvent pas d'informations suffisantes pour proposer avec confiance des cibles spécifiques. Au lieu de cela, les cibles des indicateurs doivent être définies à l'issue d'une étude de base du projet et incluses dans le Plan d'Indicateurs du programme. À l'issue d'une évaluation de base du projet, les décideurs du projet définissent les cibles des indicateurs. Ces cibles doivent être informées par les résultats de la situation de référence, le calendrier du projet, les ressources humaines et financières consacrées au projet, et la perméabilité ou la difficulté du contexte, y compris les niveaux d'incertitude.
Sélectionner des méthodes de collecte de données appropriées. Sélectionnez des méthodes de collecte de données de base qui s'alignent et soutiennent la conception d'évaluation globale, sont appropriées pour les indicateurs donnés, et répondent aux exigences des bailleurs. Les méthodes doivent être les plus efficaces et efficaces pour rassembler les données requises tout en minimisant le fardeau des répondants et des enquêteurs.
Documenter correctement les valeurs de situation de référence. Une fois la valeur de base d'un indicateur déterminée, enregistrez la valeur et la date de collecte dans la colonne 'valeur de base' du Plan d'Indicateurs. Les projets doivent documenter les valeurs de base dans le Tableau de Suivi de la Performance des Indicateurs, ou IPTT, ou l'équivalent du bailleur.
Collecter les informations de situation de référence avant le début des activités du projet. Les informations de base pour tous les indicateurs doivent être mesurées et rapportées avant le début des activités du projet. Cela assure que vous avez un véritable point de départ pour mesurer le changement.
Erreurs Courantes
Collecter des données sans utilité décisionnelle. L'échec le plus courant est de concevoir une situation de référence qui collecte des données uniquement pour le rapportage aux bailleurs sans un plan clair pour comment elle informera les décisions. Lorsque chaque point de données ne peut pas être lié à une décision de projet spécifique, vous avez créé un fardeau d'excès qui gaspille des ressources.
Utiliser des méthodologies différentes en situation de référence et finale. Si la situation de référence et finale utilisent des méthodes, outils ou définitions différents, les comparaisons deviennent sans signification. Concevez les deux moments temporels pour être aussi identiques que possible afin de permettre des comparaisons valides. Documentez tout écart nécessaire.
Sauter les tests pilotes. Se précipiter pour déployer sans test pilote conduit à des erreurs majeures et coûteuses sur le terrain. Un test pilote doit identifier systématiquement les problèmes de clarté des outils, de flux, de longueur et d'adéquation culturelle avant le déploiement complet.
Sous-estimer les délais d'examen éthique. Les délais d'examen éthique peuvent varier considérablement et peuvent nécessiter un suivi proactif. Sous-estimer le temps requis pour l'examen et l'approbation conduit à un décalage du calendrier du projet.
Collecter la situation de référence après le début du projet. Pour les projets où la situation de référence est menée après que la mise en œuvre a commencé, vous avez déjà perdu la capacité de mesurer les conditions initiales réelles. Les informations de base doivent être mesurées avant le début des activités du projet.
Ne pas documenter les valeurs de situation de référence. Une fois les valeurs de base déterminées, elles doivent être enregistrées dans le Plan d'Indicateurs. Sans documentation appropriée, vous ne pouvez pas suivre les progrès par rapport aux cibles ou démontrer le changement aux bailleurs.
Traiter la situation de référence comme une évaluation. Les études de situation de référence et finale ne sont pas des évaluations en soi. Elles sont des parties importantes de l'évaluation du changement et contribuent à l'évaluation du projet/programme, mais elles ne constituent pas une évaluation complète.
Exemples
Moyens de Subsistance Agricoles — Afrique de l'Est
Un programme de résilience agricole de 5 ans au Kenya et en Ouganda a développé une conception de situation de référence qui liait explicitement chaque indicateur à une décision de projet critique. L'équipe a identifié cinq décisions clés : quelles cultures promouvoir pour le lien de marché, quels types de formation les agriculteurs ont besoin, quels obstacles d'accès au marché existent, quels groupes d'agriculteurs sont les plus réceptifs aux nouvelles techniques, et comment allouer les ressources. Pour chaque décision, ils ont collecté uniquement les données nécessaires pour l'informer. Lorsque le suivi à mi-parcours a révélé que la tenure foncière était la contrainte contraignante (et non la disponibilité des semences comme prévu), le programme a redirigé les ressources en conséquence. La situation de référence a fonctionné comme un outil de diagnostic, et non simplement comme un artefact de conception.
Eau, Assainissement et Hygiène — Asie du Sud
Un programme d'eau et d'assainissement au Bangladesh a conçu des enquêtes de situation de référence et finale pour être identiques en méthodologie, outils et approche d'échantillonnage. Cela a permis une comparaison valide des résultats de santé entre les moments temporels. L'évaluation a trouvé que la communication pour le changement de comportement était responsable de 60 % des améliorations de santé, tandis que les infrastructures contribuaient à 40 %. Sans la conception comparable situation de référence-finale, cette découverte serait restée invisible.
Protection — Afrique de l'Ouest
Un programme de protection en Sierra Leone a initialement planifié une situation de référence complète avec 80 indicateurs. En utilisant une approche première décision, l'équipe a cartographié chaque indicateur à une décision de projet et a trouvé que seuls 25 indicateurs informaient directement des choix critiques. Ils ont collecté les 55 indicateurs restants comme des données "agréables à savoir" via des sources secondaires dans la mesure du possible, réduisant le temps d'enquête de 90 minutes à 45 minutes et libérant des ressources pour une analyse plus approfondie des données essentielles.
Comparé à
La conception de la situation de référence est l'une des plusieurs approches pour établir les conditions initiales. Les différences clés :
| Caractéristique | Conception de Situation de Référence | Évaluation Rapide des Besoins | Conception d'Enquête |
|---|---|---|---|
| Objectif principal | Mesurer les conditions initiales pour l'évaluation du changement | Identification des besoins de réponse d'urgence immédiate | Méthodologie d'enquête générale |
| Fenêtre temporelle | 4-8 semaines | Jours à 2 semaines | Varie selon la portée |
| Profondeur | Complète, liée aux décisions | Limitée, priorisée | Varie selon la conception |
| Échantillonnage | Représentatif, statistiquement rigoureux | Souvent intentionnel ou de commodité | Dépend des objectifs |
| Idéal pour | Mesurer l'impact du programme | Réponse d'urgence | Collecte de données générale |
| Comparaison | Conçu pour la comparaison situation de référence-finale | Non conçu pour la comparaison | Dépend de la conception |
Indicateurs Pertinents
18 indicateurs sur 4 cadres majeurs de bailleurs (USAID, CRS, FCDO, ECHO) se rapportent à la conception de la situation de référence et à son utilisation :
- Documentation de la situation de référence — "Proportion des indicateurs avec des valeurs de base documentées collectées avant le début du projet" (USAID)
- Lien décisionnel — "Pourcentage de la collecte de données de base liée à des décisions de projet spécifiques" (FCDO)
- Calendrier de la situation de référence — "Évaluation de la situation de référence achevée dans les 6 mois suivant le début du projet pour les projets de 18+ mois" (CRS)
- Documentation IPTT — "Valeurs de base documentées dans le Tableau de Suivi de la Performance des Indicateurs (IPTT)" (USAID)
Outils Connexes
- Modèle de Rapport de Situation de Référence — Modèle structuré pour documenter la méthodologie, les résultats et les recommandations de la situation de référence
- Outil de Conception d'Enquête — Outil interactif pour concevoir des enquêtes de situation de référence et finale comparables
Sujets Connexes
- Sélection d'Indicateurs — Sélectionner les bons indicateurs pour votre situation de référence
- Indicateurs SMART — S'assurer que les indicateurs de base sont mesurables et spécifiques
- Méthodes d'Échantillonnage — Choisir un échantillonnage approprié pour votre situation de référence
- Conception d'Enquête — Concevoir des outils de collecte de données efficaces
- Charge de Collecte de Données — Minimiser le fardeau des répondants et des enquêteurs
- Définition des Cibles — Définir des cibles basées sur les résultats de la situation de référence
- Suivi vs Évaluation — Comprendre où la situation de référence s'inscrit dans le système S&E
Lectures Complémentaires
- Études de Situation de Référence et Finale : Un Guide Pratique — BetterEvaluation. Guide complet pour concevoir et mettre en œuvre des études de situation de référence et finale.
- Politique de Suivi et Évaluation des Performances de l'USAID — USAID. Exigences des bailleurs pour la documentation et le rapportage de la situation de référence.
- Politiques et Procédures SEA du CRS — CRS. Normes organisationnelles pour le calendrier et la documentation de l'évaluation de la situation de référence.
- Le Manuel de la Situation de Référence — UNDP. Guidance pratique pour les praticiens sur la conception et la mise en œuvre de la situation de référence.