Documenter l'échec d'un programme

Vous êtes un évaluateur expert et spécialiste de l'apprentissage. Évaluez la section des leçons apprises que je vais fournir à l'aide de la rubrique ci-dessous. Considérez les leçons apprises comme un produit autonome : une section utile doit aider les lecteurs travaillant sur des programmes similaires à prendre de meilleures décisions, et non simplement résumer ce que cette équipe a fait.

RUBRIQUE D'ÉVALUATION - Qualité des Leçons Apprises Évaluez chaque dimension de 1 à 5 selon les critères suivants :

DIMENSION 1 : Base Factuelle

• Score 5 : Chaque leçon cite le constat, le point de données ou l'événement spécifique dont elle découle. Le lecteur peut retracer chaque leçon jusqu'aux preuves contenues dans le rapport. Lorsque plusieurs constats étayent une leçon, tous sont cités. Les leçons qui contredisent les données apparentes précisent ce qui a été concilié et comment.
• Score 4 : Au moins 80 pour cent des leçons citent leur constat ou preuve source. Les autres sont des déductions plausibles à partir du corps du rapport, mais le lien est implicite plutôt qu'explicite.
• Score 3 : Environ la moitié des leçons sont traçables jusqu'à des constats. Les autres se lisent comme des impressions générales de l'auteur. Certaines leçons semblent cohérentes avec le rapport mais aucun lien direct n'est établi.
• Score 2 : La plupart des leçons semblent refléter l'opinion de l'auteur sans preuves documentées. Les citations de constats sont rares ou absentes. La section se lit comme un commentaire détaché de l'analyse.
• Score 1 : Les leçons ne peuvent être rattachées à rien dans le rapport. Aucune base factuelle n'est montrée.

DIMENSION 2 : Spécificité

• Score 5 : Chaque leçon est spécifique à un contexte, un mécanisme ou une condition. Chaque leçon nomme la population, le secteur, le type d'intervention ou la condition opérationnelle à laquelle elle s'applique. Aucune leçon ne pourrait être copiée-collée dans le rapport d'un programme sans lien et conserver son sens.
• Score 4 : Au moins 80 pour cent des leçons sont spécifiques en ce sens. Quelques-unes dérivent vers des affirmations générales, mais l'essentiel reste ancré.
• Score 3 : Environ la moitié des leçons sont spécifiques. Les autres se lisent comme génériques (« les partenariats comptent », « le contexte est important », « la qualité des données est essentielle ») sans préciser ce qui les a fait s'appliquer ici.
• Score 2 : La plupart des leçons sont des platitudes génériques qui pourraient être insérées dans n'importe quel rapport de programme. La spécificité est rare.
• Score 1 : Toutes les leçons sont des platitudes sans aucune spécificité.

DIMENSION 3 : Généralisabilité

• Score 5 : Chaque leçon précise explicitement son périmètre d'applicabilité. Le lecteur sait si une leçon s'applique uniquement à ce programme, à des programmes similaires (et ce qui les rend similaires) ou au secteur dans son ensemble. Les conditions aux limites sont nommées lorsque pertinent.
• Score 4 : Au moins 80 pour cent des leçons précisent leur périmètre. Quelques-unes laissent le périmètre implicite, mais le contexte environnant le rend déductible.
• Score 3 : Certaines leçons nomment leur périmètre ; d'autres non. Le lecteur doit deviner si une leçon est une observation ponctuelle ou un principe plus large.
• Score 2 : Le périmètre est rarement abordé. Les leçons sont présentées sans indication de leur généralisabilité.
• Score 1 : Aucune leçon ne précise son périmètre. Le lecteur ne peut pas dire lesquelles pourraient s'appliquer ailleurs.

DIMENSION 4 : Contre-leçons

• Score 5 : Les leçons sur ce qui n'a pas fonctionné, ce qui s'est révélé plus difficile que prévu, ce qui a produit des effets imprévus ou négatifs, et ce que l'équipe ferait différemment, sont mises en avant avec le même poids que les succès. La section se lit comme un produit d'apprentissage équilibré, et non comme un artefact promotionnel.
• Score 4 : Les contre-leçons sont présentes et significatives, même si elles peuvent recevoir un peu moins d'espace que les leçons de succès. Les difficultés et les faux pas ne sont pas dissimulés.
• Score 3 : Une ou deux contre-leçons apparaissent, mais sont formulées avec ménagement ou noyées dans le texte. Le ton dominant reste orienté vers le succès.
• Score 2 : Les contre-leçons sont presque absentes. Les difficultés, lorsqu'elles sont mentionnées, sont reformulées comme des opportunités ou des facteurs externes plutôt que comme des leçons.
• Score 1 : Aucune contre-leçon. La section se lit comme un récit de réussite.

DIMENSION 5 : Formulation orientée action

• Score 5 : Chaque leçon est formulée de sorte qu'un lecteur puisse en déduire une action ou une décision. Les leçons précisent ce qu'il faut faire différemment, ce qu'il faut conserver, ce qu'il faut arrêter ou ce qu'il faut tester. Verbes et décisions sont visibles.
• Score 4 : Au moins 80 pour cent des leçons sont orientées action. Quelques-unes restent observationnelles, mais l'essentiel est prêt à la décision.
• Score 3 : Environ la moitié des leçons sont orientées action. Les autres sont des observations passives qui laissent le lecteur incertain quant à l'usage à en faire.
• Score 2 : La plupart des leçons sont des observations passives ou des constats descriptifs. Peu suggèrent une action.
• Score 1 : Les leçons sont uniquement descriptives. Aucune formulation orientée action.

FORMAT DE SORTIE : Retournez votre évaluation sous forme de tableau suivi d'un résumé :

Total : X/25 Niveau : Solide (22-25) / Adéquat (17-21) / Nécessite une révision (11-16) / Révision substantielle (5-10) Révision la plus importante : [Une phrase spécifique]

Pour toute dimension notée 1 ou 2, ajoutez une brève explication et un exemple de révision concret à partir d'une des leçons du document.

LEÇONS APPRISES À ÉVALUER : [Collez ici votre section des leçons apprises]

Vous êtes un évaluateur expert et spécialiste de l'apprentissage. Examinez la section des leçons apprises que je vais fournir et corrigez chaque problème situé en dessous du seuil Bon (4) de la rubrique Qualité des Leçons Apprises.

CE QU'IL FAUT RECHERCHER ET CORRIGER :

Problèmes de preuves : Leçons non rattachées à des constats ou données. Leçons qui semblent refléter l'opinion de l'auteur sans documentation. Ajoutez une citation de constat ou de point de données spécifique à chaque leçon, ou signalez-la comme « observation d'un seul auteur » lorsqu'aucune preuve n'existe.

Problèmes de spécificité : Platitudes génériques (« les partenariats comptent », « le contexte est important », « la qualité des données est essentielle »). Réécrivez chaque platitude pour nommer le contexte, la population, le mécanisme ou la condition qui a fait s'appliquer la leçon ici.

Problèmes de généralisabilité : Périmètre d'applicabilité absent. Ajoutez une phrase pour chaque leçon précisant si elle s'applique uniquement à ce programme, à des programmes similaires (et ce qui les rend similaires) ou au secteur dans son ensemble.

Problèmes de contre-leçons : La section se lit comme un récit de réussite. Ajoutez au moins deux contre-leçons couvrant ce qui n'a pas fonctionné, ce qui a été plus difficile que prévu ou ce que l'équipe ferait différemment. Donnez-leur un poids équivalent dans la formulation.

Problèmes de formulation : Observations passives. Réécrivez chaque leçon passive avec un verbe d'action (faire, arrêter, conserver, tester, changer, différer) et la décision qu'elle implique.

FORMAT DE SORTIE : Pour chaque problème identifié :

• Dimension : [quelle dimension]
• Leçon concernée : [citation ou paraphrase]
• Problème : [une phrase décrivant ce qui ne va pas]
• Version révisée : [la leçon corrigée]

Puis fournissez la section complète des leçons apprises révisée intégrant toutes les corrections.

LEÇONS APPRISES À RÉVISER : [Collez ici votre section des leçons apprises]