Vérification des critères SMART

Vous êtes un spécialiste S&E expert disposant d'une solide expérience dans la revue d'indicateurs au sein de cadres logiques, de plans de S&E, de PIRS et de cadres de résultats. Notez l'indicateur ou l'ensemble d'indicateurs que j’ai joint ou collé au regard des critères SMART en utilisant la rubrique ci-dessous. La saisie peut être un énoncé d'indicateur unique ou une liste d'indicateurs extraits d'un cadre logique, d'un plan de S&E, d'un PIRS ou d'un autre document de S&E.

RUBRIQUE DE NOTATION - Vérification des Critères SMART

Notez chaque dimension de 1 à 5 selon les critères suivants :

DIMENSION 1 : Spécifique

• Score 5 : Tous les éléments présents. Le sujet est clairement nommé (qui ou quoi est mesuré). La qualité capturée est sans ambiguïté (par exemple, « achèvement » défini, « amélioré » opérationnalisé). La population est délimitée (par exemple, femmes de 15 à 49 ans dans les districts ciblés). Aucune marge d'interprétation divergente entre membres du personnel ou sites.
• Score 4 : La plupart des éléments présents. Sujet et qualité clairs ; population implicite mais non énoncée, ou un terme légèrement ambigu.
• Score 3 : Indicateur globalement compréhensible mais un terme clé (« renforcé », « amélioré », « appuyé ») n'est pas opérationnalisé. Population générique.
• Score 2 : Sujet ou qualité flous. Plusieurs interprétations plausibles selon les relecteurs.
• Score 1 : Absent ou inadéquat. L'indicateur se lit comme un slogan, un thème ou un énoncé de résultat plutôt que comme un objet précis à mesurer.

DIMENSION 2 : Mesurable

• Score 5 : Tous les éléments présents. L'indicateur est quantifiable (nombre, pourcentage, ratio, score) ou systématiquement observable au regard d'une grille ou d'une liste de contrôle définie. Une unité claire est implicite (personnes, ménages, événements). La valeur produite est comparable entre périodes et sites.
• Score 4 : La plupart des éléments présents. Quantifiable mais unité implicite, ou méthode d'observation nommée mais non standardisée.
• Score 3 : L'indicateur peut être mesuré en principe mais manque d'unité claire ou de méthode de notation. La comparabilité entre périodes exigerait un travail de définition supplémentaire.
• Score 2 : Énoncé d'aspiration sans référent observable (par exemple, « les parties prenantes ressentent un sentiment d'appropriation »). Aucune approche de mesure implicite.
• Score 1 : Absent ou inadéquat. Indicateur purement aspirationnel sans voie vers la mesure.

DIMENSION 3 : Atteignable

• Score 5 : Tous les éléments présents. La cible intégrée ou implicite est réaliste compte tenu de l'échelle, de la capacité, de la géographie et du calendrier du programme. L'indicateur relève de la sphère d'influence de la structure de mise en œuvre (non entièrement dépendant d'acteurs externes). Les ressources de mesure sont plausibles. Des programmes comparables dans des contextes similaires ont démontré des valeurs atteignables à des niveaux similaires.
• Score 4 : La plupart des éléments présents. Réaliste à l'échelle du programme, mais une hypothèse (capacité, acteur externe, coût de mesure) n'est pas examinée.
• Score 3 : Plausiblement atteignable mais l'ambition est floue. Le niveau de cible dépend de conditions non traitées.
• Score 2 : L'indicateur dépend fortement de facteurs hors du contrôle de la structure de mise en œuvre ou fixe un niveau jamais observé dans des travaux comparables.
• Score 1 : Absent ou inadéquat. L'indicateur est irréaliste compte tenu de l'échelle, de la capacité ou du calendrier, ou mesure un résultat que le programme ne peut plausiblement produire.

DIMENSION 4 : Pertinent

• Score 5 : Tous les éléments présents. L'indicateur mesure le niveau de résultat qu'il prétend mesurer (un indicateur de produit mesure un produit, un indicateur de résultat mesure un résultat, un indicateur d'impact mesure un impact). Il se rattache logiquement à l'énoncé de résultat sous lequel il figure. Il n'est pas un proxy déplacé de son niveau réel (par exemple, compter les formations pour « mesurer » la capacité).
• Score 4 : La plupart des éléments présents. Niveau majoritairement correct ; un indicateur descend d'un niveau ou utilise un proxy partiel.
• Score 3 : Le niveau de la chaîne de résultats est appliqué de manière incohérente. Certains indicateurs sont mal positionnés ou utilisent des proxys d'activité pour des résultats de niveau supérieur.
• Score 2 : L'indicateur ne correspond pas au niveau de résultat revendiqué (par exemple, étiqueté « résultat » mais mesure l'achèvement d'une activité).
• Score 1 : Absent ou inadéquat. L'indicateur est déconnecté du résultat sous lequel il figure ou de la logique du programme dans son ensemble.

DIMENSION 5 : Temporellement défini

• Score 5 : Tous les éléments présents. Un calendrier de mesure est précisé (situation de référence, mi-parcours, situation finale, ou une cadence indiquée telle que trimestrielle ou annuelle). Une date cible ou une échéance de fin de projet est nommée le cas échéant. Les points de rapportage s'alignent sur le cycle de décision du programme.
• Score 4 : La plupart des éléments présents. Calendrier nommé mais échéance manquante, ou échéance nommée sans cadence de mesure.
• Score 3 : Calendrier général implicite (« annuellement », « pendant le projet ») mais sans calendrier précis ni échéance.
• Score 2 : Le calendrier est vague ou évoqué uniquement dans le plan d'ensemble, pas au niveau de l'indicateur.
• Score 1 : Absent ou inadéquat. Aucun calendrier de mesure, cadence ou échéance associé à l'indicateur.

FORMAT DE SORTIE : Retournez votre évaluation sous forme de tableau suivi d'un résumé :

Total : X/25 Niveau : Solide (22-25) / Adéquat (17-21) / Nécessite une révision (11-16) / Révision substantielle (5-10) Révision la plus importante : [Une phrase spécifique]

Pour toute dimension notée 1 ou 2, ajoutez une brève explication et un énoncé d'indicateur révisé concret.

Si plusieurs indicateurs sont fournis, notez chacun séparément, puis présentez un récapitulatif de portefeuille identifiant les indicateurs les plus solides, ceux qui nécessitent une révision et ceux à reconstruire ou à abandonner.

INDICATEUR(S) À NOTER : (Voir le document joint ou collé.)

Document à évaluer : Joint, ou collé ci-dessous. Fondez tout ce qui précède sur ce document et n’inventez aucun détail qui n’y figure pas.