Critères d'Évaluation
La chaîne causale est explicite à chaque lien de l'activité à l'objectif. Chaque lien a une justification énoncée. Un évaluateur non familier avec le programme peut suivre la logique sans informations supplémentaires.
La chaîne causale est explicite à chaque niveau avec pas plus de deux liens supposés plutôt qu'énoncés. La logique globale est plausible.
La chaîne causale est présente mais la moitié ou plus des liens sont supposés plutôt qu'énoncés. Un évaluateur peut suivre la direction générale mais doit compléter plusieurs étapes.
La moitié ou plus des extrants ne mènent pas clairement à leurs effets énoncés, OU la direction causale est incorrecte à un ou plusieurs niveaux.
Aucune logique causale claire. Les activités et les effets semblent sans rapport.
Tous les indicateurs nomment une métrique spécifique, une unité mesurable, une population cible et une période temporelle. Chacun mesure directement l'énoncé du résultat. Désagrégation spécifiée le cas échéant.
Tous les indicateurs répondent aux critères SMART avec pas plus de 20 pour cent manquant un seul élément (généralement la dimension temporelle ou la spécificité).
La moitié ou plus des indicateurs sont entièrement SMART ; le reste manquent d'un ou plusieurs éléments (dimension temporelle, spécificité ou alignement direct avec le résultat). La collecte de données est faisable mais nécessite des clarifications.
La moitié ou plus des indicateurs sont des mesures indirectes, OU les indicateurs ne s'alignent pas avec leurs énoncés de résultats, OU les dimensions temporelles ou la désagrégation sont systématiquement absentes.
Indicateurs vagues, immesurables ou ne correspondant pas aux énoncés des résultats.
Hypothèses énoncées à chaque niveau d'effet et d'objectif. Chacune est spécifique (pas « stabilité politique »), vérifiable et véritablement externe au contrôle du programme.
Hypothèses présentes à chaque niveau d'effet et d'objectif. Pas plus de deux sont vagues, mais les dépendances majeures sont identifiées.
Hypothèses présentes à la moitié ou plus des niveaux d'effet et d'objectif. Celles listées sont reconnaissables comme des conditions externes mais la moitié ou plus sont énoncées de manière trop générale pour être surveillées ou sont trivialement vraies.
Hypothèses présentes à moins de la moitié des niveaux d'effet et d'objectif, OU la moitié ou plus sont trivialement vraies ou sont des activités du programme.
Aucune hypothèse énoncée, ou tous les éléments énoncés sont des activités du programme.
Structure standard à quatre niveaux (activité, extrant, effet, objectif). Chaque niveau est constamment différencié. Aucun élément au mauvais niveau.
Structure standard reconnaissable. Pas plus de deux éléments au mauvais niveau.
Structure standard reconnaissable mais au moins trois éléments au mauvais niveau. La distinction entre les extrants et les effets est appliquée de manière incohérente.
La moitié ou plus des éléments sont au mauvais niveau, OU extrants et effets sont systématiquement confondus.
Aucune hiérarchie reconnaissable. Tous les résultats listés à un seul niveau.
Chaque indicateur a une source de vérification nommée spécifique, une fréquence de collecte et une méthode. Partie responsable désignée par indicateur. Chaque niveau de résultat a au moins un indicateur.
Chaque indicateur a une source. Pas plus de 20 pour cent manquent de fréquence ou de partie responsable. Tous les niveaux de résultats couverts.
Chaque indicateur a une source, mais les sources sont génériques pour la moitié ou plus (par exemple, « dossiers de projet »). Au moins un de (fréquence, partie responsable, méthode) manque pour la moitié ou plus des indicateurs.
La moitié ou plus des indicateurs ont des sources génériques ou n'en ont aucune, OU plusieurs niveaux de résultats manquent entièrement d'indicateurs.
Aucune source de vérification documentée. Les niveaux de résultats majeurs n'ont pas d'indicateurs.
Interprétation des Scores
| Total (sur 25) | Niveau | Prochaine Étape |
|---|---|---|
| 22-25 | Solide | Raffinements mineurs uniquement |
| 17-21 | Adéquat | Traiter les dimensions signalées avant la soumission |
| 11-16 | Nécessite une Révision | Retour à l'équipe de conception avec la sortie de l'IA comme note de révision |
| 5-10 | Révision Substantielle | Faciliter un atelier de conception avant toute nouvelle rédaction |