Indicateurs SMART

Quand Utiliser

Les indicateurs SMART constituent la base d'un suivi et évaluation fiables. Utilisez ce cadre lorsque :

• Conception de nouveaux indicateurs — lors du développement du programme, avant de s'engager dans la collecte de données, pour s'assurer que chaque indicateur produira des informations exploitables
• Examen des indicateurs existants — dans le cadre de la sélection des indicateurs ou des examens à mi-parcours, pour identifier quels indicateurs nécessitent une révision ou un remplacement
• Formation du personnel S&E — comme outil pratique pour renforcer les capacités de conception d'indicateurs au sein des équipes
• Dépannage des problèmes de qualité des données — lorsque les indicateurs produisent des résultats incohérents, ambigus ou inutilisables
• Préparation des propositions aux bailleurs — pour démontrer la qualité des indicateurs et renforcer les soumissions de propositions

Les indicateurs SMART sont moins utiles lorsque vous devez capturer des résultats complexes et émergents qui ne s'insèrent pas dans des cadres de mesure rigides (utilisez plutôt récolte des résultats ou changement le plus significatif) ou lorsque vous menez des évaluations rapides où la vitesse prime sur la précision.

Comment cela fonctionne

Le cadre SMART fournit cinq critères que chaque indicateur doit satisfaire. Ces critères fonctionnent ensemble — un indicateur qui ne satisfait que certains critères produira toujours des données peu fiables.

1. Spécifique. L'indicateur définit clairement ce qui est mesuré, y compris la quantité, la qualité, le lieu et la population cible. Un indicateur spécifique ne laisse aucune place à l'interprétation quant à ce qui constitue un résultat positif ou négatif. « Nombre d'agriculteurs formés » est spécifique ; « capacité améliorée des agriculteurs » ne l'est pas.

2. Mesurable. L'indicateur favorise une évaluation précise et cohérente. Deux collecteurs de données différents devraient arriver à la même mesure en observant la même situation. Cela nécessite des définitions claires de tous les termes et des méthodes de mesure explicites. « Pourcentage de ménages ayant accès à une eau salubre » est mesurable ; « meilleur accès à l'eau » ne l'est pas.

3. Atteignable. L'indicateur est atteignable compte tenu des ressources, du temps et de la capacité organisationnelle disponibles. Un indicateur atteignable reflète des attentes réalistes quant à ce qui peut être mesuré et quels résultats sont possibles dans le cadre du programme. « Réduction de 100 % du paludisme » peut ne pas être atteignable ; « réduction de 50 % des cas de paludisme » pourrait l'être.

4. Pertinent. L'indicateur s'aligne sur les résultats qu'il est censé mesurer et fournit des informations utiles pour la prise de décision. Un indicateur pertinent répond à un besoin d'information réel plutôt que de mesurer quelque chose simplement parce qu'il est facile à compter. « Nombre de sessions de formation tenues » n'est pas pertinent pour les résultats d'apprentissage ; « Pourcentage de participants appliquant de nouvelles compétences trois mois plus tard » l'est.

5. Temporellement défini. L'indicateur spécifie quand la cible doit être atteinte, créant une urgence et permettant le suivi des progrès. Les indicateurs temporellement définis incluent des délais clairs ou des intervalles de mesure. « Amélioration de la fréquentation scolaire » n'est pas temporellement défini ; « taux de fréquentation de 90 % d'ici la fin de l'année scolaire » l'est.

Le cadre SMART n'est pas un exercice de conception ponctuel. Utilisez-le de manière itérative : rédigez des indicateurs, testez-les contre les cinq critères, révisiez en fonction des lacunes, et re-testez. Ce processus prend généralement 15-30 minutes par indicateur lors de la conception du programme.

Composantes clés

Un indicateur SMART bien construit comprend ces éléments essentiels :

• Définition claire — Chaque terme de l'indicateur doit être défini de sorte qu'il ne puisse y avoir de malentendu. La définition doit être suffisamment détaillée pour que différentes personnes à différents moments collectent des données identiques lorsqu'elles reçoivent la tâche.

• Population cible — L'indicateur spécifie qui ou quoi est mesuré. Cela inclut les critères d'inclusion/exclusion et toute segmentation (par genre, âge, lieu, etc.).

• Méthode de mesure — L'indicateur décrit comment la mesure sera effectuée, y compris les sources de données, les outils de collecte et les méthodes de calcul.

• Situation de référence et cibles — L'indicateur inclut une valeur de situation de référence (état actuel) et des valeurs de cibles (état souhaité) à des moments spécifiques (mi-parcours, situation finale).

• Plan de désagrégation — L'indicateur spécifie comment les données seront décomposées par catégories pertinentes (genre, âge, lieu, statut de handicap, etc.) pour assurer un suivi et une analyse équitables.

• Fréquence et calendrier — L'indicateur spécifie quand les mesures auront lieu et à quelle fréquence les données seront collectées.

• Vérifications de la qualité des données — L'indicateur inclut des mécanismes pour vérifier l'exactitude des données, tels que des vérifications ponctuelles, la triangulation ou la validation par rapport à des sources indépendantes.

Meilleures pratiques

Commencez par les besoins d'information, pas par la commodité de mesure. Avant de créer des indicateurs, explorez s'il existe des indicateurs standards et validés qui peuvent être réutilisés. Demandez-vous « Quelles informations ai-je besoin et pourquoi ? » Considérez les exigences des bailleurs, le suivi de projet, les besoins d'apprentissage et les besoins de prise de décision.

Utilisez la liste de contrôle des indicateurs SMART. Évaluez systématiquement chaque indicateur contre les cinq critères SMART. De nombreuses organisations utilisent une liste de contrôle ou une matrice de notation pour assurer une application cohérente. Cela empêche d'accepter des indicateurs qui semblent bons mais échouent à un examen plus approfondi.

Définissez les termes avec précision. Les indicateurs mal réfléchis sont pires que pas d'indicateurs du tout car ils peuvent être impossibles à mesurer, produire des informations inexactes et gaspiller des ressources. Définissez chaque terme de telle sorte que deux personnes le mesureraient de la même manière. Si l'information ne peut être obtenue, l'indicateur est inutile et doit être supprimé ou reformulé.

Suivez un processus structuré de formulation des indicateurs. Une approche pratique : (1) Identifier l'indicateur, (2) Spécifier le groupe cible, (3) Quantifier, (4) Définir la qualité, (5) Spécifier le temps. Cette séquence assure que tous les éléments essentiels sont capturés systématiquement.

Utilisez une conception axée sur l'objectif. Lors de l'identification des indicateurs, commencez par demander quelles informations sont nécessaires et pourquoi. Cela empêche l'échec courant de mesurer des choses qui sont faciles à compter mais pas utiles.

Erreurs courantes

Mesurer ce qui est facile, pas ce qui compte. L'échec le plus courant est de sélectionner des indicateurs parce que les données sont facilement disponibles plutôt que parce qu'ils répondent à des questions importantes. « Nombre de sessions de formation tenues » est facile à compter mais ne vous dit rien sur la réalisation de l'objectif de la formation. Liez toujours les indicateurs à des besoins d'information spécifiques.

Laisser les termes non définis. De nombreux indicateurs utilisent des termes vagues comme « amélioré », « renforcé », « meilleur » ou « augmenté » sans spécifier ce que cela signifie en termes mesurables. « Amélioration de la santé maternelle » pourrait signifier n'importe quoi, de la réduction de la mortalité à l'augmentation de la fréquentation des soins prénatals. Définissez chaque terme avec précision.

Définir des cibles irréalistes. Un indicateur peut être SMART mais échouer tout de même si la cible est inatteignable. Cela crée de fausses attentes et expose les programmes à un échec perçu. Assurez-vous que les cibles sont ambitieuses mais réalistes compte tenu des ressources et du délai disponibles.

Confondre les produits avec les résultats. « Nombre d'agriculteurs formés » est un indicateur de produit ; « Pourcentage d'agriculteurs formés adoptant de nouvelles techniques six mois plus tard » est un indicateur de résultat. Les deux peuvent être valides, mais ils mesurent des choses différentes. Assurez-vous que votre indicateur correspond au niveau de résultats que vous suivez.

Ignorer la qualité des données dès le départ. Un indicateur qui ne peut pas être mesuré de manière fiable est inutile. Avant de finaliser les indicateurs, vérifiez que les sources de données existent, que les méthodes de collecte sont faisables et que les mécanismes d'assurance qualité sont en place.

Créer trop d'indicateurs. Environ 5 indicateurs par niveau de résultats sont généralement suffisants. Plus d'indicateurs diluent la concentration, augmentent la charge de collecte de données et submergent la capacité d'analyse. Priorisez la qualité plutôt que la quantité.

Exemples

Programme de moyens d'existence agricoles

Indicateur faible : « Productivité agricole améliorée »

Cet indicateur échoue sur les cinq critères SMART : « Amélioré » est non défini, « productivité » est ambigu, aucune population cible spécifiée, aucun cadre temporel.

Indicateur SMART : « Pourcentage d'agriculteurs familiaux (moins de 2 hectares) dans le Karamoja atteignant des rendements de cultures d'au moins 2 tonnes/hectare pour le maïs résistant à la sécheresse d'ici la fin de la saison des pluies 2026, mesuré par des enquêtes ménagères. »

Cet indicateur est Spécifique (agriculteurs familiaux, maïs résistant à la sécheresse), Mesurable (2 tonnes/hectare, pourcentage), Atteignable, Pertinent et Temporellement défini.

Programme Eau, Assainissement et Hygiène

Indicateur faible : « Meilleur accès à l'eau potable »

Indicateur SMART : « Proportion de ménages ayant accès à des sources d'eau améliorées à moins de 1 kilomètre, situation de référence 35 %, cible 75 % d'ici le mois 24. »

Programme Éducation

Indicateur faible : « Résultats d'apprentissage améliorés »

Indicateur SMART : « Pourcentage d'élèves de 3e année atteignant une compétence minimale (70 %+ à l'évaluation de lecture) en langue locale, désagrégé par genre et handicap, situation de référence 42 %, cible 65 % d'ici l'année 2. »

Comparé à

Les indicateurs SMART sont l'une des plusieurs approches de conception d'indicateurs. Les différences clés :

Les indicateurs SMART fonctionnent en parallèle avec ces approches : utilisez une conception axée sur l'objectif pour identifier ce que vous devez mesurer, utilisez la sélection d'indicateurs pour choisir parmi les options, et utilisez les critères SMART pour assurer que chaque indicateur sélectionné est bien défini.

Indicateurs pertinents

23 indicateurs sur 5 cadres majeurs de bailleurs (USAID, DFID, UNDP, Global Fund, EU) concernent la qualité des indicateurs et la conception SMART :

• Qualité des indicateurs — « Proportion des indicateurs de programme répondant aux critères de qualité SMART au stade de la conception » (USAID)
• Qualité de la définition des indicateurs — « Pourcentage d'indicateurs avec des définitions claires et non ambiguës qui assurent une collecte de données cohérente » (DFID)
• Révision des indicateurs — « Nombre d'indicateurs révisés après un examen de la qualité pendant la mise en œuvre du programme » (UNDP)
• Alignement des besoins d'information — « Proportion d'indicateurs liés à des besoins d'information spécifiques et documentés » (Global Fund)
• Utilisation d'indicateurs standardisés — « Pourcentage d'indicateurs qui sont standardisés ou adaptés de sources validées » (EU)

Outils connexes

• Modèle de spécification d'indicateur — Modèle complet pour documenter tous les éléments d'un indicateur SMART incluant définitions, méthodes de mesure, situations de référence et cibles
• Auto-test de qualité des indicateurs — Liste de contrôle pour évaluer les indicateurs selon les critères SMART et identifier les domaines d'amélioration
• Modèle de conception d'indicateurs axée sur l'objectif — Modèle guidé pour commencer la conception d'indicateurs à partir des besoins d'information plutôt que de la commodité de mesure

Sujets connexes

• Sélection d'indicateurs — Processus de choix parmi plusieurs options d'indicateurs
• Définition des cibles — Définition de cibles réalistes et ambitieuses pour les indicateurs SMART
• Conception de la situation de référence — Établissement des valeurs actuelles pour les indicateurs SMART
• Assurance qualité des données — Assurer que les indicateurs SMART produisent des données fiables et cohérentes
• Plans de SEA — Opérationnalisation des indicateurs SMART dans les cadres de suivi
• Cadre de Résultats — Organisation des indicateurs SMART à travers les niveaux de résultats

Lectures complémentaires

• Le Plan d'Indicateurs — Guide MEAL-DPro pour développer des plans d'indicateurs complets avec des critères SMART
• Fiche de référence des indicateurs de performance (PIRS) — Modèle standard de l'USAID pour la spécification des indicateurs, incorporant les critères SMART
• BetterEvaluation : Indicateurs — Collection de ressources de conception d'indicateurs et de cadres SMART de la communauté d'évaluation