Critères d'évaluation
Tous les éléments présents. Lacunes de couverture, schémas de réponse, biais de sélection et exclusions opérées lors de la collecte énoncés avec précisions et chiffres lorsque pertinent.
Au moins trois des quatre éléments présents. La plupart des enjeux d'échantillonnage nommés ; un élément partiel ou générique.
Au moins deux des quatre éléments présents. Limites d'échantillonnage nommées mais vagues.
Formule générique (« l'échantillon n'était pas aléatoire ») sans précisions.
Absent ou inadéquat. Aucune limite d'échantillonnage déclarée malgré des lacunes évidentes.
Tous les éléments présents. Chaque méthode a ses limites énoncées de façon spécifique (taux de réponse aux enquêtes, dynamiques des entretiens ou groupes de discussion, disponibilité des documents, effets d'observation). Les limites correspondent aux méthodes réellement employées.
Au moins trois des quatre éléments présents. La plupart des méthodes couvertes ; une méthode traitée de façon générique.
Au moins deux des quatre éléments présents. Certaines méthodes traitées avec précision ; d'autres regroupées dans des formules génériques.
Paragraphe générique unique ne distinguant pas les méthodes.
Absent ou inadéquat. Aucune limite spécifique aux méthodes.
Tous les éléments présents. Données manquantes quantifiées, problèmes de rappel reconnus, désirabilité sociale déclarée, difficultés de traduction ou d'interprétation énoncées, incohérences de nettoyage nommées.
Au moins trois des quatre éléments présents. La plupart des enjeux déclarés ; un élément partiel.
Au moins deux des quatre éléments présents. Certains enjeux déclarés ; d'autres omis.
« Globalement bonne » ou similaire sans précisions.
Absent ou inadéquat. Aucune limite de qualité des données.
Tous les éléments présents. Chaque limite rattachée à des constats ou conclusions spécifiques. Direction du biais nommée lorsqu'inférable. Constats à lire avec une prudence particulière signalés. Constats non affectés notés.
Au moins trois des quatre éléments présents. La plupart des limites rattachées aux constats ; un élément partiel.
Au moins deux des quatre éléments présents. Certaines limites rattachées aux constats ; d'autres listées séparément.
Limites listées dans une section autonome sans lien avec des constats spécifiques.
Absent ou inadéquat. Aucune analyse de l'effet sur les constats.
Tous les éléments présents. Chaque limite assortie d'une atténuation concrète. Incertitude résiduelle nommée. Lorsque l'atténuation n'était pas possible, dit honnêtement. Atténuations précises plutôt qu'aspirationnelles.
Au moins trois des quatre éléments présents. La plupart des limites assorties d'atténuations ; un élément partiel.
Au moins deux des quatre éléments présents. Certaines atténuations énoncées ; d'autres laissées comme limites brutes.
Intentions génériques (« nous avons essayé de minimiser cela ») sans précisions.
Absent ou inadéquat. Aucune déclaration d'atténuation.
Interprétation du score
| Total (sur 25) | Niveau | Prochaine étape |
|---|---|---|
| 22-25 | Solide | La déclaration des limites est crédible. Ajustements mineurs uniquement. |
| 17-21 | Adéquat | Aborder les dimensions signalées avant la remise du rapport final. |
| 11-16 | Nécessite une révision | Révision substantielle requise. Utilisez l'invite de Révision comme note de révision. |
| 5-10 | Révision substantielle | La section des limites compromet la crédibilité du rapport. Reprenez avant remise. |