Aperçu général
Les 7 étapes clés de la conception
Construisez un questionnaire dans cet ordre. Chaque étape dépend des précédentes. Sauter des étapes est la cause principale de la plupart des échecs de questionnaire.
| # | Étape | Ce qui se passe |
|---|---|---|
| 1 | Définir le plan d'analyse | Définir les tableaux et comparaisons que le questionnaire doit générer ; chaque indicateur est lié à un résultat analytique planifié. |
| 2 | Mapper les questions aux indicateurs | Associer une ou plusieurs questions par indicateur, avec des options de réponse adaptées à l'analyse prévue. |
| 3 | Rédiger les questions en langage simple | Formuler des questions simples, directes, non ambiguës ; un concept par question ; utiliser des échelles de réponse appropriées. |
| 4 | Structurer et séquencer | Regrouper logiquement les questions, placer les sujets sensibles en fin de questionnaire, planifier la logique de saut. |
| 5 | Traduire et rétro-traduire | Faire appel à un traducteur indépendant, comparer avec l'original anglais, résoudre les divergences. |
| 6 | Entretien cognitif (5-10 répondants) | Tester la compréhension du répondant, la capacité à paraphraser, détecter les ambiguïtés. |
| 7 | Test pilote sur le terrain (30-50 répondants) | Tester le protocole complet, y compris l'administration, le timing et la logistique. |
Ce n'est qu'après avoir franchi l'étape 7 qu'un questionnaire est prêt pour la collecte de données à grande échelle. Ignorer les étapes 5 à 7 est une cause fréquente d'erreurs évitables qui s'incrustent dans les données collectées.
Pour le concept plus large de conception d'enquête, voir la conception d'enquête.
La conception axée sur le plan d'analyse
L'erreur la plus courante en conception de questionnaire est de commencer par les questions en espérant que l'analyse suivra. Adoptez l'approche inverse.
La première étape consiste à élaborer une ébauche des résultats analytiques que le programme devra produire pour la situation de référence, les évaluations à mi-parcours et finales, ainsi que pour les rapports aux bailleurs de fonds. Chaque tableau de résultats doit spécifier :
- L'indicateur rapporté
- Les désagrégations (sexe, âge, lieu, statut de vulnérabilité, etc.)
- La comparaison (situation de référence vs fin de projet, traitement vs contrôle, urbain vs rural)
- La forme du résultat attendu (pourcentage, moyenne, nombre, score d'échelle)
Une fois le tableau analytique esquissé, travaillez à rebours : quelle question, formulée de quelle manière, avec quelles options de réponse, générerait précisément cette donnée dans le tableau ? Chaque question doit être directement liée à une cellule analytique spécifique. Les questions qui ne peuvent pas être rattachées sont candidates à la suppression.
Cette approche de conception inversée présente deux avantages majeurs. Elle réduit la longueur du questionnaire en éliminant les questions « qui semblaient pertinentes » mais qui n'auraient jamais été analysées. De plus, elle met en évidence les lacunes des indicateurs dès la phase de conception : si une ligne du tableau analytique ne correspond à aucune question générant les données nécessaires, cette lacune est identifiée avant la collecte sur le terrain, et non après.
Formulation des questions
Principes de rédaction des questions
Une fois les questions définies, leur formulation doit être claire. Huit principes permettent d'obtenir des données plus fiables.
Un seul concept par question. La question « Avez-vous suivi une formation sur l'hygiène et pratiquez-vous ce que vous avez appris ? » en contient deux. Séparez-les : « Au cours des 12 derniers mois, avez-vous suivi une formation sur l'hygiène ? » et « [Si oui] Au cours des 7 derniers jours, avez-vous pratiqué le lavage des mains aux moments critiques recommandés ? »
Langage simple, sans jargon. La question « À quelle fréquence vous engagez-vous dans des activités génératrices de revenus ? » est inefficace si les répondants ne savent pas précisément ce qui est inclus. Préférez une formulation concrète : « Au cours des 7 derniers jours, avez-vous effectué un travail contre paiement ou des biens ? »
Cadres temporels précis. « Assistez-vous régulièrement aux réunions communautaires ? » est une question vague. « Au cours des 3 derniers mois, à combien de réunions communautaires avez-vous assisté ? » est mesurable.
Évitez les doubles négations. « Êtes-vous en désaccord avec le fait que le programme ne devrait pas s'étendre ? » risque de dérouter la moitié des répondants. Reformulez positivement : « Le programme devrait-il s'étendre ? »
Évitez les formulations suggestives ou orientées. « Dans quelle mesure êtes-vous satisfait de la précieuse formation que vous avez reçue ? » présuppose une réponse positive. Préférez une formulation neutre : « Comment évalueriez-vous la formation que vous avez reçue ? »
Unités concrètes. « Combien de terres cultivez-vous ? » est ambigu (hectares, acres, unité locale ?). Précisez : « Combien de terres cultivez-vous, en hectares ou en acres (veuillez préciser) ? » pour une donnée exploitable.
Échelles de réponse avec un point médian neutre pour les attitudes. Les échelles de Likert à 5 points (fortement en désaccord, en désaccord, neutre, d'accord, fortement d'accord) sont généralement plus efficaces que les échelles à choix forcé à 4 points pour mesurer les attitudes dans la plupart des contextes culturels.
Pas d'hypothèses implicites. « Combien d'enfants avez-vous à l'école ? » suppose que le répondant a des enfants et qu'ils sont en âge d'être scolarisés. Commencez par une question de filtrage, ou structurez ainsi : « Avez-vous des enfants en âge d'être scolarisés ? [Si oui] Combien sont actuellement inscrits ? »
Options de réponse et échelles de mesure
Les options de réponse sont aussi cruciales que la formulation des questions. Voici trois principes directeurs.
Catégories exhaustives et mutuellement exclusives. Chaque réponse possible doit s'inscrire dans une seule et unique catégorie. Ajoutez une option « autre (préciser) » en cas d'incertitude. Ne forcez pas les répondants à choisir l'approximation la plus proche.
Adaptez l'échelle à l'analyse. Les échelles ordinales (catégories classées) permettent des analyses différentes de celles des échelles d'intervalle ou de ratio. Si vous envisagez de calculer des moyennes et d'effectuer des régressions, des échelles d'intervalle sont nécessaires ; pour des pourcentages, une échelle ordinale suffit.
Privilégiez les nombres aux libellés pour les quantités. Demander « Quel âge avez-vous ? » avec des options comme 18-29, 30-44, 45-59, 60+ fait perdre en précision. Enregistrez l'âge exact et regroupez-le lors de l'analyse si le tableau analytique l'exige. Il est toujours possible de regrouper des données précises, mais impossible de désagréger des données déjà regroupées.
Structure de l'instrument
Structure et déroulement du questionnaire
Un questionnaire bien structuré débute par des questions à faible risque, regroupe les contenus thématiquement liés et place les éléments sensibles après l'établissement d'une relation de confiance.
Ouverture (10-20% de la durée) : Introduction, consentement, filtrage démographique, questions contextuelles à faible risque. Cette section d'échauffement permet d'établir le rythme de l'entretien.
Blocs de contenu principaux (60-70% de la durée) : Regroupés par thème, avec des transitions fluides entre les blocs. Chaque bloc doit être introduit par une phrase de transition (par exemple, « Maintenant, j'aimerais vous poser des questions sur l'accès à l'eau de votre ménage... »).
Contenu sensible (10-15% de la durée, placé en fin de questionnaire) : Revenu, état de santé, VBG, statut juridique, activités illégales. Ces questions doivent être posées après l'établissement d'une relation de confiance et lorsque le répondant est à l'aise. Le consentement éclairé doit avoir clairement indiqué que toute question peut être ignorée sans conséquence.
Dans chaque bloc, progressez du général au spécifique, des questions fermées aux questions ouvertes, et du simple au complexe. Une séquence inverse entraîne la fatigue des répondants et un taux d'abandon élevé.
Logique de saut et cheminement
La logique de saut (ou routage) permet aux répondants de ne répondre qu'aux questions pertinentes, en ignorant celles qui ne les concernent pas. Une logique de saut mal conçue est une source majeure de données manquantes et de confusion pour les enquêteurs.
Règle de conception : chaque saut doit être visuellement clair sur le questionnaire papier, ou appliqué de manière programmatique dans les outils numériques. Les sauts ambigus (par exemple, « Si non, passez à la section C » sans indiquer où commence la section C) entraînent une administration incohérente.
Le test de la logique de saut fait partie intégrante du pré-test. Les entretiens cognitifs révèlent si les répondants comprennent la transition ; le test pilote sur le terrain vérifie si la logique complète fonctionne correctement en pratique. Les outils numériques valident automatiquement cette logique, tandis que le format papier exige une rigueur accrue de l'enquêteur.
Filtrez les répondants dès le début si nécessaire. Si le questionnaire cible les adultes employés, commencez par des questions sur le statut d'emploi et mettez fin à l'entretien ou redirigez les répondants inéligibles. Faire passer des répondants non éligibles à travers 30 minutes de questions non pertinentes gaspille du temps sur le terrain et génère des données inexploitables.
Pré-test et traduction
Entretiens cognitifs
L'entretien cognitif est une phase de pré-test axée sur la compréhension des questions. 5 à 10 répondants de la population cible parcourent le projet de questionnaire à voix haute, tandis qu'un enquêteur sonde leur compréhension et la manière dont ils formulent leurs réponses.
Questions types pour l'entretien cognitif :
- « Selon vous, que demande cette question ? »
- « Comment êtes-vous arrivé à votre réponse ? »
- « Y a-t-il des mots ou des phrases dans la question qui n'étaient pas clairs ? »
- « Différentes personnes interpréteraient-elles cette question différemment ? »
Ce qu'il révèle : les formulations ambiguës, les décalages culturels, les difficultés à formuler une réponse, les problèmes de séquencement des questions. Ce qu'il ne révèle pas : les problèmes de déroulement (gestion par l'enquêteur, timing, logistique). C'est précisément le rôle du test pilote sur le terrain.
Menez les entretiens cognitifs dans la langue cible avec des locuteurs natifs de la population concernée. Un entretien cognitif mené en anglais pour un questionnaire en swahili manquera la plupart des erreurs de compréhension liées à la traduction.
Traduction et rétro-traduction
La traduction est le point de rencontre entre la conception du questionnaire en anglais et la réalité locale, et c'est souvent là que de nombreuses erreurs prennent racine.
Processus :
- Rédaction en anglais
- Traduction dans la ou les langues cibles par un traducteur qualifié
- Rétro-traduction indépendante de la langue cible vers l'anglais
- Comparaison de l'anglais original avec l'anglais rétro-traduit ; identification des divergences
- Résolution des divergences (auteur original + traducteur + rétro-traducteur)
- Entretiens cognitifs dans la langue cible avec des locuteurs de la population cible
Erreurs de traduction courantes : mots équivalents ayant des connotations différentes ; concepts culturellement spécifiques sans équivalent direct (composition du ménage, termes de parenté, normes de confidentialité) ; expressions idiomatiques intraduisibles littéralement ; termes techniques nécessitant une adaptation ou une explication dans la langue cible.
La rétro-traduction seule ne suffit pas à détecter toutes ces erreurs ; l'entretien cognitif dans la langue cible est essentiel pour révéler les décalages conceptuels. Prévoyez du temps et un budget pour ces deux étapes.
Test pilote sur le terrain
Le test pilote sur le terrain est une mise à l'épreuve du protocole complet : il implique 30 à 50 répondants de la population cible, les enquêteurs réels, la logistique, le timing et les outils numériques (ou papier) qui seront utilisés. Ce n'est pas un entretien cognitif, mais un test du déroulement opérationnel.
Ce que le pilote révèle :
- La durée réelle du questionnaire en pratique (souvent plus longue que prévu)
- La cohérence des enquêteurs dans la gestion de la logique de saut, les relances et l'enregistrement des réponses
- Les problèmes liés à l'instrument (bugs du formulaire numérique, erreurs d'impression)
- Les signes de fatigue des répondants (lorsque les réponses deviennent plus courtes)
- Les goulots d'étranglement du flux de travail (examen enquêteur-superviseur, synchronisation des données, contrôles qualité)
Modifications après le pilote : Les tests pilotes génèrent généralement 5 à 15 révisions du questionnaire (formulation, ordre, logique de saut). Les données issues du pilote ne sont généralement pas intégrées à l'ensemble de données principal, sauf si l'instrument final est resté inchangé.
Prévoyez 1 à 2 semaines entre la fin du pilote et le début de la collecte de données à grande échelle. Ce délai est nécessaire pour la révision, la recompilation de l'instrument (si numérique) et la nouvelle formation des enquêteurs sur la version finale.
Pièges et liste de contrôle
Exemples par secteur
Santé : questionnaire sur les connaissances en soins périnatals, Afrique de l'Est
Un programme de santé maternelle a élaboré un questionnaire de 28 minutes pour évaluer les connaissances et pratiques en matière de soins périnatals chez les femmes enceintes. Le plan d'analyse exigeait une désagrégation par groupe d'âge (15-19, 20-24, 25+) et par zone géographique (urbaine/rurale). Les entretiens cognitifs menés auprès de 8 répondantes ont révélé une difficulté majeure : le terme « périnatal » n'avait pas d'équivalent direct dans la langue locale, et la traduction initiale utilisait un mot signifiant uniquement « après la naissance ». L'équipe a donc révisé le questionnaire pour séparer les questions sur la grossesse, l'accouchement et les périodes postnatales, améliorant ainsi la précision de la mesure, bien que cela ait ajouté 3 minutes à la durée totale. Le test pilote, mené auprès de 42 répondantes, a montré un taux de fatigue de 18% dans le dernier bloc ; l'équipe a alors déplacé deux questions de faible priorité de ce bloc vers une visite de suivi.
Éducation : enquête sur la scolarisation et la fréquentation scolaire, Asie du Sud
Une enquête de situation de référence pour un programme d'éducation a recueilli auprès des parents des informations sur la scolarisation et la fréquentation scolaire des enfants. Le projet initial utilisait une variable binaire « fréquente l'école ». Les entretiens cognitifs ont révélé des interprétations divergentes : certains répondants considéraient toute inscription, d'autres la présence au cours des 30 derniers jours, et d'autres encore la fréquentation régulière. L'équipe a donc révisé le questionnaire pour inclure trois questions distinctes (jamais inscrit, actuellement inscrit, fréquenté au cours des 7 derniers jours), permettant ainsi à l'analyse de distinguer ces trois concepts de résultats. La rétro-traduction a par ailleurs mis en évidence une erreur de traduction de « fréquentation régulière », qui avait été rendue par un mot signifiant « quotidiennement sans exception » plutôt que « la plupart des jours ».
WASH : enquête sur les pratiques d'eau des ménages, Afrique de l'Ouest
Un programme WASH a élaboré un questionnaire sur l'eau et l'hygiène des ménages. Le test pilote, mené auprès de 35 ménages, a révélé que les définitions des catégories de « source d'eau améliorée » (selon les échelles JMP) ne correspondaient pas clairement aux types de sources locales. Les « puits non protégés » et les « forages avec risque de contamination de surface » étaient classés de manière incohérente par les enquêteurs. L'équipe a donc intégré une liste de contrôle d'observation, calibrée localement, que les enquêteurs devaient utiliser en complément de l'auto-déclaration des répondants, améliorant ainsi la fiabilité des données. La durée totale du pilote était de 38 minutes, dépassant l'objectif de 30 minutes ; l'équipe a alors décidé de déplacer trois modules de faible priorité (pratiques d'hygiène aspirationnelles) vers une étude de suivi distincte, plutôt que de les supprimer.
Sécurité alimentaire : enquête saisonnière auprès des pasteurs, Sahel
Un programme de sécurité alimentaire, en concevant une enquête pour les communautés pastorales, a jugé les entretiens cognitifs indispensables. Les questions initiales sur les « mois d'insécurité alimentaire » (basées sur la structure HFIAS standard) ne correspondaient pas aux schémas saisonniers des pasteurs (saison sèche/humide/transhumance plutôt que mois calendaires). L'équipe a donc révisé le questionnaire pour utiliser des marqueurs saisonniers (pré-migration, migration, post-migration et saison des pluies) que les répondants pouvaient identifier de manière fiable, tout en maintenant la compatibilité avec l'échelle HFIAS grâce à une cartographie structurée. La rétro-traduction a par ailleurs détecté une traduction erronée du terme « lacune alimentaire » par « mort de faim », ce qui avait entraîné des taux de non-réponse alarmants lors du pilote.
Pièges courants
Piège n°1 : commencer par le questionnaire, pas par le plan d'analyse. Les questions qui ne sont pas rattachées à un résultat analytique produisent généralement des données inutilisables. Construisez à rebours, à partir des tableaux prévus, et non vers l'avant à partir de « sujets importants ».
Piège n°2 : sauter l'entretien cognitif. Un questionnaire qui n'a jamais été pré-testé avec des répondants de la population cible comportera des erreurs de compréhension au niveau des questions, indétectables depuis le bureau. Prévoyez 1 à 2 jours d'entretiens cognitifs avant tout test pilote.
Piège n°3 : se passer du test pilote. Les entretiens cognitifs testent les questions ; le pilote teste le déroulement. Les deux sont nécessaires. Sauter le pilote, c'est laisser surgir les problèmes de cohérence des enquêteurs, de timing et de logistique au moment de la collecte à grande échelle.
Piège n°4 : questions à double dimension. Une question, un concept. « Avez-vous suivi une formation ET la mettez-vous en pratique ? » est en réalité deux questions déguisées en une.
Piège n°5 : formulations suggestives ou orientées. Les questions qui présupposent la réponse (« dans quelle mesure avez-vous apprécié... ») génèrent des données biaisées. Une formulation neutre est plus difficile à rédiger, mais indispensable.
Piège n°6 : regrouper les quantités à la collecte. L'âge, le revenu, le temps et les variables de comptage doivent être collectés sous forme de nombres, et non de catégories. Le regroupement peut se faire à l'analyse ; l'inverse est impossible.
Piège n°7 : placer les questions sensibles trop tôt. Le revenu, les VBG, le statut juridique et l'état de santé doivent venir après l'établissement d'une relation de confiance. Un placement précoce génère des refus et de la non-réponse.
Piège n°8 : traduire sans rétro-traduction. Une traduction unidirectionnelle laisse passer des erreurs systématiques. La rétro-traduction et l'entretien cognitif dans la langue cible sont les deux garde-fous indispensables.
Piège n°9 : négliger le test de la logique de saut. La logique de saut doit être explicitement testée à la fois lors des entretiens cognitifs et lors du test pilote. Des sauts ambigus génèrent des données manquantes irrécupérables.
Piège n°10 : absence de script de consentement éclairé aligné sur le questionnaire. Le consentement doit correspondre à ce que le questionnaire demande réellement, y compris les avertissements sur les questions sensibles et la possibilité de passer une question. Voir la liste de contrôle d'éthique évaluative pour les exigences relatives au script de consentement.
Liste de contrôle avant la collecte de données
Parcourez cette liste avant la formation des enquêteurs.
Conception :
- Plan d'analyse rédigé en premier, avec une mise en correspondance indicateur-question
- Chaque question est traçable jusqu'à un résultat analytique précis
- Durée du questionnaire dans la fenêtre cible pour la méthode (30-45 min en personne)
- Aucune question à double dimension, suggestive ou ambiguë
- Options de réponse exhaustives et mutuellement exclusives
Traduction :
- Traduction effectuée dans toutes les langues cibles par des traducteurs qualifiés
- Rétro-traduction réalisée de manière indépendante et divergences résolues
- Entretien cognitif en langue cible conduit
Pré-test :
- Entretiens cognitifs réalisés avec 5 à 10 répondants de la population cible par langue
- Test pilote sur le terrain mené avec 30 à 50 répondants selon le protocole complet
- Révisions intégrées et instrument finalisé
Protocole :
- Logique de saut testée à la fois dans les entretiens cognitifs et lors du pilote
- Questions sensibles placées en fin de questionnaire et alignées avec le script de consentement
- Formation des enquêteurs couvrant les cas limites d'interprétation, et non uniquement l'instrument
- Plan de mesure de la concordance inter-évaluateurs spécifié
Logistique :
- Impression papier ou déploiement de l'instrument numérique testés
- Flux de travail de revue par le superviseur défini
- Protocole de synchronisation ou de collecte des données confirmé
- L'approbation éthique reflète la version finale de l'instrument
Pour les sujets connexes, voir papier vs numérique pour la collecte de données, la liste de contrôle d'éthique évaluative, les 5 dimensions de la qualité des données et enquêtes vs entretiens vs groupes de discussion. Pour consulter les espaces de travail actuels, voir le catalogue des playbooks.