Enquêtes, entretiens, groupes de discussion : quelle méthode choisir en S&E ?

Quand privilégier chaque méthode

Enquêtes

Idéal pour :

• Mesurer les indicateurs de situation de référence et de fin de projet
• Quantifier la prévalence de comportements, pratiques ou conditions au sein d'une population
• Comparer différents groupes (traitement vs contrôle, hommes vs femmes, régions)
• Suivre les évolutions dans le temps grâce à des mesures standardisées
• Rapporter aux bailleurs de fonds (la plupart des indicateurs exigent des données quantitatives)

Ne convient pas pour :

• Comprendre des motivations ou des expériences complexes en profondeur
• Explorer des sujets pour lesquels vos connaissances sont insuffisantes pour formuler des questions pertinentes
• Sujets sensibles où les répondants pourraient ne pas s'exprimer honnêtement
• Très petites populations (moins de 50 personnes ; des entretiens seraient plus appropriés)

Considérations pratiques :

• Une base de sondage est indispensable : une liste de la population cible ou une méthode pour la constituer. Utilisez un calculateur d'échantillon pour déterminer le nombre de répondants réellement nécessaire.
• Une conception d'enquête de qualité demande du temps et un pré-test rigoureux. Ne négligez pas cette étape.
• Les enquêteurs requièrent une formation (1 à 3 jours minimum).
• Les plateformes de collecte de données mobiles telles que KoboToolbox, ODK ou SurveyCTO minimisent les erreurs de saisie et accélèrent l'analyse.
• Prévoyez toujours un budget pour les non-réponses. Échantillonnez 15 à 20 % de plus que votre cible initiale.

Entretiens avec informateurs clés (EIC)

Idéal pour :

• Comprendre le "pourquoi" des résultats quantitatifs
• Recueillir les perspectives d'experts ou de parties prenantes clés (gestionnaires de programme, leaders communautaires, fonctionnaires)
• Explorer des sujets sensibles (violences basées sur le genre, corruption, dynamiques politiques) où l'anonymat et la confidentialité sont primordiaux
• Analyser les processus de programme et les défis de mise en œuvre
• Phase de conception initiale d'un programme, lorsque les connaissances sont insuffisantes pour élaborer un questionnaire d'enquête

Ne convient pas pour :

• Mesurer la prévalence ou l'ampleur (vous ne pouvez pas affirmer "60% des bénéficiaires" sur la base de 15 entretiens)
• Comparer des groupes de manière statistique
• Sujets où la perspective individuelle est moins pertinente que les dynamiques sociales (privilégiez alors les GD)

Considérations pratiques :

• La qualité de l'enquêteur est capitale. Un enquêteur inexpérimenté obtiendra des données superficielles, quel que soit le guide. Investissez dans le recrutement ou la formation de la personne adéquate.
• Enregistrez et transcrivez les entretiens avec les informateurs clés (avec leur consentement) pour une analyse systématique.
• Les entretiens doivent être semi-structurés : prévoyez un guide avec des questions clés, mais laissez la conversation s'adapter aux besoins.
• Généralement, 12 à 20 entretiens sont suffisants pour un groupe de parties prenantes donné. La saturation des données est souvent atteinte entre le 12ème et le 16ème entretien.
• Prévoyez 2 à 4 heures par entretien (incluant le déplacement, la préparation, le débriefing et la prise de notes).

Groupes de discussion (GD)

Idéal pour :

• Comprendre les expériences partagées et les normes sociales (ex: "Que pense la communauté de...")
• Explorer les points de convergence et de divergence au sein d'un groupe
• Générer des idées pour la conception de programmes (dans une approche participative)
• Comprendre les processus de décision collective au sein des groupes
• Recueillir de nombreuses perspectives de manière efficiente (8 personnes en 90 minutes, contre plus de 8 heures pour 8 entretiens individuels)

Ne convient pas pour :

• Sujets sensibles ou stigmatisés (les participants pourraient hésiter à s'exprimer ouvertement en groupe)
• Sujets où les dynamiques de pouvoir risquent de museler certains participants (ex: mélanger gestionnaires et personnel de terrain, ou leaders communautaires et membres ordinaires)
• Obtenir des données au niveau individuel (les données des GD reflètent les dynamiques de groupe, non les points de vue individuels)
• Situations où la confidentialité est cruciale

Considérations pratiques :

• Séparez les groupes de discussion en fonction de caractéristiques pertinentes : hommes et femmes séparément, différents groupes d'âge, différentes zones géographiques.
• Un groupe de 6 à 10 participants est idéal. Moins de 5 limite la richesse de la discussion. Plus de 10 rend la modération complexe.
• Un facilitateur qualifié est indispensable. La facilitation est une compétence distincte de l'entretien.
• Prévoyez toujours un preneur de notes en plus du facilitateur.
• Enregistrez avec consentement. La transcription est chronophage mais indispensable pour une analyse rigoureuse.
• Offrez des rafraîchissements, mais évitez les incitations financières qui pourraient biaiser la participation.

Options à distance et numériques

Depuis la pandémie de COVID-19, la collecte de données à distance est devenue une pratique courante. Les enquêtes téléphoniques sont efficaces pour des questionnaires courts (moins de 20 minutes) auprès de populations disposant d'un accès téléphonique fiable. Les enquêtes en ligne permettent d'atteindre rapidement les populations urbaines connectées, mais introduisent un biais de couverture significatif dans les zones rurales ou à faible revenu. Les EIC à distance, via appel vidéo, peuvent produire des données presque aussi riches que les entretiens en personne, à condition que l'informateur dispose d'une connexion stable et d'un espace privé. Les GD à distance sont les plus complexes à mener : les dynamiques de groupe sont altérées en visioconférence, les voix dominantes s'imposent plus facilement, et les coupures de connectivité perturbent la conversation. N'ayez recours aux GD à distance que lorsque le face-à-face est absolument impossible, et limitez la taille du groupe à 6 participants. Quel que soit le mode choisi, ne mélangez jamais les répondants à distance et en personne au sein du même exercice de collecte de données. Le mode d'administration influence les réponses, et ce mélange introduirait un biais incontrôlable.

Combiner les approches

La plupart des évaluations intègrent deux ou trois de ces méthodes. Voici les combinaisons les plus courantes :

Enquête + EIC (la plus courante) L'enquête fournit les données quantitatives, que les entretiens permettent d'expliquer. Menez d'abord l'enquête pour identifier les tendances, puis interrogez les informateurs clés afin de comprendre les raisons de ces tendances. Par exemple, si votre enquête révèle que seulement 35 % des agriculteurs formés ont adopté une nouvelle technique, les EIC menés auprès des agents de vulgarisation agricole et des agriculteurs non-adoptants vous éclaireront sur la nature de l'obstacle : est-ce un manque de connaissances, le coût, le régime foncier ou un autre facteur ?

Enquête + GD La logique est similaire, mais les GD permettent de saisir les perspectives au niveau communautaire et les dynamiques sociales que les entretiens individuels ne peuvent pas toujours révéler. Cette combinaison est particulièrement efficace lorsque les résultats du programme dépendent de comportements collectifs : assainissement total piloté par la communauté, groupes d'épargne villageois ou comités de gestion des ressources naturelles. L'enquête vous fournira les taux d'adoption, tandis que les GD vous indiqueront quelles pressions sociales ou normes de groupe sont à l'origine de ces taux.

Les trois Pour des évaluations exhaustives, l'utilisation des trois méthodes est recommandée. L'enquête permet de mesurer les indicateurs. Les EIC recueillent les perspectives des experts et des parties prenantes. Les GD, quant à eux, saisissent les normes et expériences au niveau communautaire. C'est l'approche standard pour la plupart des évaluations à mi-parcours et finales. Planifiez le séquençage de manière délibérée : privilégiez les méthodes qualitatives si vous êtes en phase exploratoire, et l'enquête si vous testez des hypothèses.

Envisagez de compléter toute combinaison par des méthodes d'observation directe lorsque vous devez vérifier les comportements auto-déclarés par rapport à la réalité. Les déclarations concernant le lavage des mains, l'utilisation des latrines ou les pratiques agricoles sont notoirement peu fiables. L'observation ajoute une couche de vérification qui consolide vos conclusions.

Exemples par secteur

Programme de nutrition mesurant la diversité alimentaire. Pour quantifier la prévalence d'une diversité alimentaire minimale chez les femmes en âge de procréer, une enquête auprès des ménages (n=380+) est nécessaire. Elle vous fournira l'indicateur clé. Cependant, ce chiffre seul n'expliquera pas les raisons d'une faible diversité alimentaire. Complétez par 15 EIC menés auprès d'agents de santé et de volontaires communautaires en nutrition afin d'identifier les obstacles au changement alimentaire, tels que l'accès au marché, la disponibilité saisonnière ou les processus de décision des ménages concernant les achats alimentaires.

Programme de moyens de subsistance pour les jeunes évaluant les résultats de la formation professionnelle. Menez une enquête auprès de 500 diplômés à l'aide d'un questionnaire structuré, couvrant leur statut d'emploi, l'évolution de leurs revenus et l'application de leurs compétences six mois après la formation. Ensuite, organisez 6 GD (3 masculins, 3 féminins) pour comprendre comment les diplômés perçoivent le marché du travail, quels obstacles ils rencontrent et si le contenu de la formation correspondait aux attentes réelles des employeurs. Les GD révéleront des schémas que l'enquête ne peut pas capter, tels que la stigmatisation sociale associée à certains métiers, le rôle des réseaux de pairs dans la recherche d'emploi ou les disparités de genre dans l'accès au capital de démarrage.

Analyse comparative des coûts

Ces estimations correspondent à une évaluation de programme typique dans un pays à faible revenu. Les coûts réels fluctuent en fonction de l'accessibilité géographique, des exigences linguistiques et du recours à du personnel interne ou à des consultants externes. Elles constituent une base de planification budgétaire fiable.

Le facteur de coût prédominant pour les enquêtes est la géographie. Les populations rurales dispersées et difficilement accessibles peuvent doubler, voire tripler, les coûts de collecte de données. Pour les EIC et les GD, les principaux postes de dépense sont la transcription et la traduction. Il est essentiel de budgétiser ces deux éléments dès le départ.

Pièges à éviter

Piège 1 : utiliser les enquêtes de manière universelle. Si votre question d'évaluation est "pourquoi les agriculteurs n'adoptent-ils pas de nouvelles techniques ?", une enquête basée sur des questions fermées vous fournira une liste de réponses prédéfinies. Un entretien, en revanche, révélera les véritables raisons, y compris celles que vous n'auriez pas envisagées d'inclure dans le questionnaire.

Piège 2 : ignorer les dynamiques de pouvoir dans les groupes de discussion. Ne regroupez jamais le personnel du programme et les bénéficiaires dans un même GD. Évitez également de mélanger les leaders communautaires avec les membres ordinaires de la communauté, surtout pour des sujets sensibles. La composition du groupe influence fortement ce que les participants oseront exprimer.

Piège 3 : poser des questions suggestives lors des entretiens. La question "Ne pensez-vous pas que le programme a été utile ?" n'est pas appropriée pour la recherche. Privilégiez des questions ouvertes et neutres, telles que : "Comment décririez-vous votre expérience avec le programme ?".

Piège 4 : surcharger les questionnaires d'enquête. Une enquête ménage de 90 minutes engendre la fatigue des répondants, et la qualité des données chute drastiquement après 30 à 40 minutes. Maintenez les enquêtes en dessous de 45 minutes. Éliminez impitoyablement toute question dont vous ne pouvez justifier la nécessité et l'utilisation de la réponse. Le guide de référence sur la conception d'enquêtes peut vous aider à structurer et à optimiser votre questionnaire.

Piège 5 : omettre le pré-test. Chaque enquête, guide d'entretien et guide de GD doit impérativement être pré-testé auprès de personnes similaires à vos futurs répondants. Le pré-test permet de déceler les questions ambiguës, les erreurs de traduction et les estimations de temps irréalistes. Prévoyez 2 à 3 jours pour cette phase de pré-test et de révision.

Piège 6 : interpréter les données des GD comme des opinions individuelles. L'affirmation "Les participants ont déclaré préférer les nouvelles semences" ne signifie pas que chaque individu partage cette préférence. Cela indique que cette déclaration a émergé de la discussion de groupe. Certains individus ont pu être en désaccord mais sont restés silencieux. Il est crucial de rapporter les résultats des GD comme des perspectives de groupe, et non comme des points de vue individuels.

Guide de décision

1. "Je dois rendre compte de mes indicateurs au bailleur de fonds." Vous aurez besoin d'une enquête. La majorité des rapports d'indicateurs exigent des données quantitatives, avec des numérateurs et des dénominateurs clairement définis.

2. "Je dois comprendre pourquoi une action fonctionne ou non." Vous aurez besoin d'EIC et/ou de GD. Les entretiens sont adaptés pour les perspectives individuelles et les connaissances d'experts, tandis que les GD sont pertinents pour les dynamiques au niveau communautaire.

3. "Je conçois un nouveau programme et je ne sais pas quelles questions poser." Commencez par des EIC et des GD pour explorer le contexte, puis élaborez une enquête en vous basant sur les informations recueillies.

4. "Je réalise une évaluation finale." Vous aurez probablement besoin des trois méthodes : une enquête pour la mesure des indicateurs, des EIC avec les parties prenantes et le personnel du programme, et des GD avec les groupes de bénéficiaires.

5. "Le budget est très contraint." Si vous ne pouvez vous permettre qu'une seule méthode, choisissez-la en fonction de votre question principale. Besoin de données chiffrées ? Optez pour une enquête. Besoin de comprendre en profondeur ? Privilégiez les EIC. Si votre budget permet deux méthodes, la combinaison enquête + EIC vous offrira la base de preuves la plus polyvalente.