La Récolte des Résultats : Identifier et Vérifier les Changements Réels

Quand utiliser la Récolte des Résultats ?

La Récolte des Résultats est la méthode idéale pour saisir ce qui s'est réellement passé, au-delà des résultats initialement prévus. Elle est particulièrement pertinente lorsque :

• Les résultats sont imprévisibles : votre programme évolue dans un contexte complexe et dynamique où il est difficile de prédire tous les changements susceptibles de survenir.
• Vous devez démontrer la contribution : l'attribution causale est impossible (plusieurs acteurs influencent le même changement), mais vous devez démontrer la contribution de votre programme.
• Les parties prenantes doivent définir le succès : vous souhaitez que les participants et les acteurs de terrain identifient eux-mêmes ce qui compte, plutôt que d'imposer des indicateurs externes.
• Vous êtes en milieu ou en fin de mise en œuvre : le programme est suffisamment avancé pour que des résultats émergent et puissent être documentés.
• Vous avez besoin de preuves crédibles : vous avez besoin de preuves crédibles, c'est-à-dire des résultats vérifiés et triangulés, plutôt que de simples déclarations ou hypothèses.

La Récolte des Résultats est moins adaptée pour le suivi en temps réel des progrès par rapport à des cibles prédéfinies (pour cela, privilégiez le suivi), pour la phase de conception avant l'émergence de résultats, ou lorsque l'objectif est d'établir une attribution causale par des méthodes expérimentales ou quasi-expérimentales.

Comment fonctionne la Récolte des Résultats ?

La Récolte des Résultats repose sur un processus itératif en six étapes. Chaque étape est construite sur la précédente, et le cycle peut être répété tout au long de la vie du programme.

1. Concevoir la récolte. Avant de collecter des données, identifiez les utilisateurs de la récolte et les questions auxquelles ils souhaitent obtenir des réponses. Ceci garantit que la récolte sera utile et pertinente, au-delà d'un simple intérêt académique. Définissez la portée : quelle période, quels composants du programme, quels acteurs de terrain (individus ou groupes que le programme cherche à influencer).

2. Formuler des questions pertinentes. Collaborez avec les utilisateurs de la récolte pour élaborer des questions spécifiques qui guideront la collecte de données. Par exemple : "Quels résultats significatifs sont apparus au cours de l'année écoulée ?" "Quels résultats ont eu le plus d'impact ?" "Comment le programme a-t-il contribué à chaque résultat ?" Ces questions orientent la collecte et l'analyse des informations.

3. Identifier les résultats. Recherchez systématiquement les preuves de changements chez les acteurs de terrain. Consultez diverses sources : documents du programme, rapports d'évaluation, communiqués de presse, entretiens avec les parties prenantes, médias sociaux et observation directe. Un résultat est tout changement de comportement, de relations, d'actions, de politiques ou de pratiques des acteurs de terrain. Documentez chaque résultat potentiel avec le plus de détails possible.

4. Vérifier les résultats. Pour chaque résultat documenté, obtenez une vérification indépendante. Cette étape est cruciale pour la qualité et distingue la Récolte des Résultats d'une simple collecte d'informations. Communiquez directement avec l'agent du changement (la personne ou le groupe à l'origine du résultat) pour examiner sa description. Recueillez l'avis d'une ou plusieurs personnes indépendantes et compétentes concernant le résultat. Confirmez que le résultat s'est réellement produit et rassemblez les preuves étayant cette affirmation.

5. Analyser et interpréter. Pour les résultats vérifiés, déterminez si et comment le programme y a contribué. Utilisez l'analyse de contribution : établissez le lien entre les activités du programme et le résultat, identifiez d'autres facteurs contributifs, et évaluez l'importance relative du programme par rapport à ces facteurs. Analysez les tendances et les schémas à travers les résultats : quels types de résultats sont les plus courants, quels acteurs de terrain sont les plus réceptifs, quels facteurs contextuels facilitent ou contraignent les résultats.

6. Soutenir l'utilisation des résultats. Présentez les résultats de la récolte aux parties prenantes dans des formats qui facilitent la prise de décision. Proposez des pistes de discussion basées sur les preuves. Facilitez la réflexion sur ce que les résultats impliquent pour la stratégie du programme, l'allocation des ressources et la conception future. La récolte n'est complète que lorsque ses résultats sont effectivement utilisés pour l'apprentissage et l'adaptation.

Éléments Clés

Une Récolte des Résultats bien menée intègre ces éléments essentiels :

• Définition claire de la portée : des limites claires quant à ce qui est inclus (période, composantes du programme, acteurs de terrain) et ce qui est exclu.
• Engagement des parties prenantes : les utilisateurs de la récolte sont identifiés et impliqués dès le début pour garantir la pertinence des résultats.
• Descriptions des résultats : des récits détaillés pour chaque résultat, incluant : ce qui a changé, qui a changé, quand cela s'est produit, les preuves du changement et la contribution du programme.
• Processus de vérification : une triangulation systématique via une communication directe avec les agents du changement et des sources indépendantes.
• Analyse de contribution : une évaluation structurée de la manière dont le programme a contribué à chaque résultat, en reconnaissant les autres facteurs contributifs.
• Analyse des schémas : une synthèse des résultats pour identifier les tendances, les thèmes communs et les implications stratégiques.
• Recommandations actionnables : des résultats présentés de manière à favoriser l'apprentissage et l'adaptation du programme.
• Documentation des preuves : toutes les affirmations sont étayées par des preuves vérifiables, avec des sources clairement documentées.

Meilleures Pratiques

Commencez avec la fin en tête. Identifiez les utilisateurs de la récolte et leurs besoins en information avant de collecter la moindre donnée. Une récolte qui ne répond pas aux questions des parties prenantes est un exercice académique plutôt qu'un véritable outil d'apprentissage. Impliquez les gestionnaires de programme, les bailleurs de fonds et les bénéficiaires dans la définition de ce que sont des résultats utiles.

Formulez des questions pertinentes dès le départ. Élaborez des questions spécifiques et actionnables qui guideront la récolte. De bonnes questions sont suffisamment spécifiques pour orienter la collecte de données, tout en étant suffisamment ouvertes pour saisir les résultats inattendus. Par exemple : "Quels résultats significatifs sont apparus au cours de l'année écoulée ?" "Quels résultats ont été les plus précieux pour les bénéficiaires ?" "Comment le programme a-t-il contribué aux changements de politiques ?"

Impliquez directement les agents du changement. Les évaluateurs doivent communiquer directement avec les personnes à l'origine de chaque résultat pour examiner leurs descriptions. Ce dialogue garantit l'exactitude, saisit les nuances que les documents pourraient omettre et favorise l'appropriation des résultats. L'agent du changement est la source première d'information sur ses actions et leurs motivations.

Triangulez chaque résultat. Ne vous fiez jamais à une seule source de preuves. Obtenez une vérification indépendante auprès d'une ou plusieurs personnes compétentes concernant le résultat. Vérifiez les descriptions des résultats en les confrontant aux documents du programme, aux rapports de tiers et aux preuves observables. C'est cette vérification qui confère sa crédibilité à la Récolte des Résultats.

Documentez le processus de récolte. Tenez des registres clairs de la manière dont chaque résultat a été identifié, vérifié et analysé. Cette documentation renforce la crédibilité des résultats et permet à d'autres de comprendre le fondement des conclusions. Elle constitue également un capital de connaissances pour les futures récoltes.

Concentrez-vous sur la contribution du programme, pas l'attribution causale. Soyez explicite sur le rôle du programme dans la production de chaque résultat, tout en reconnaissant les autres facteurs contributifs. Utilisez l'analyse de contribution pour démontrer le lien logique entre les activités du programme et les changements observés. Évitez de revendiquer un crédit excessif pour les résultats où le programme n'était qu'une des nombreuses influences.

Soutenez l'utilisation réelle des résultats. Ne vous contentez pas de produire un rapport pour le classer. Proposez des pistes de discussion basées sur les preuves. Facilitez des sessions de réflexion avec les parties prenantes. Reliez les résultats aux décisions du programme concernant la stratégie, les ressources ou la conception. Une récolte qui n'est pas utilisée ne crée pas de valeur.

Pièges Courants

Collecter des résultats sans vérification. L'erreur la plus fréquente est de considérer la Récolte des Résultats comme une simple collecte d'informations. Sans vérification systématique par triangulation et engagement direct avec les agents du changement, il est impossible de distinguer les résultats revendiqués des résultats réels. Ceci mine toute la crédibilité de la récolte.

Démarrer sans but clair. Démarrer une récolte sans identifier les utilisateurs ou des questions pertinentes conduit à une collecte de données non ciblée et à des résultats que les parties prenantes ne jugent pas utiles. La récolte devient alors un exercice académique plutôt qu'un outil d'apprentissage.

Confondre les résultats avec les activités. Un résultat est un changement de comportement, de relations, de politiques ou de pratiques des acteurs de terrain. Documenter les activités du programme (par ex., "organisé 10 sessions de formation") ne relève pas de la Récolte des Résultats. L'accent doit être mis sur ce qui a changé en conséquence, et non sur ce que le programme a réalisé.

Revendiquer une contribution excessive. Affirmer que le programme a directement causé un résultat sans preuve de son rôle, ou sans reconnaître d'autres facteurs contributifs, mine la crédibilité. Soyez précis sur la contribution du programme tout en reconnaissant la complexité du changement dans le monde réel.

Ignorer les résultats négatifs ou non intentionnels. Se focaliser uniquement sur les résultats positifs crée une image biaisée. Les résultats négatifs ou non intentionnels sont souvent aussi précieux pour l'apprentissage que les positifs. Une récolte complète documente tous les résultats significatifs, quelle que soit leur nature.

Ne pas boucler la boucle sur les résultats. Produire un rapport de récolte et le laisser sans suite, sans faciliter la discussion ou l'action, gaspille l'investissement réalisé. La récolte doit être liée à l'apprentissage et à l'adaptation du programme pour générer de la valeur.

Exemples

Programme de Gouvernance - Afrique de l'Ouest

Un programme de démocratie et de gouvernance en Sierra Leone avait initialement élaboré une Théorie du Changement linéaire, supposant que les organisations de la société civile (OSC) formées influenceraient la politique par des canaux de plaidoyer formels. Après 18 mois, le programme a mené une récolte des résultats pour saisir ce qui s'était réellement passé. La récolte a révélé une voie émergente : les OSC formées influençaient le gouvernement local par des relations informelles et des réseaux personnels, plutôt que par le plaidoyer formel. Ce résultat imprévu était significatif, mais n'avait pas été pris en compte dans la conception initiale. Le programme a révisé sa Théorie du Changement pour inclure cette voie émergente et a ajusté son suivi afin de saisir l'influence informelle. La récolte a démontré que la Récolte des Résultats peut révéler des changements importants qui, autrement, resteraient invisibles.

Extension Agricole - Afrique de l'Est

Un programme de moyens de subsistance agricoles de 5 ans au Kenya et en Ouganda cherchait à démontrer sa contribution aux résultats en matière de sécurité alimentaire, dans un contexte marqué par de nombreuses interventions parallèles. Le programme a mené des récoltes annuelles de résultats, impliquant les agriculteurs, les agents de vulgarisation et les responsables locaux en tant qu'agents du changement. Chaque cycle de récolte a identifié 15 à 20 résultats vérifiés, allant de l'adoption de nouvelles variétés résistantes à la sécheresse par des agriculteurs individuels à l'ajustement des budgets de vulgarisation agricole par les décideurs régionaux. L'analyse de contribution a montré que le programme était un contributeur significatif, mais non exclusif, à la plupart des résultats. Sur trois cycles de récolte, le programme a accumulé 87 résultats vérifiés, fournissant des preuves crédibles de sa contribution là où l'attribution causale était impossible. Les bailleurs de fonds ont accepté les résultats de la récolte comme preuves valides de l'impact du programme.

Systèmes de Santé - Asie du Sud

Un programme de renforcement des systèmes de santé au Bangladesh a utilisé la Récolte des Résultats pour saisir les changements observés à plusieurs niveaux, tant dans les établissements que dans les communautés. La récolte a impliqué des travailleurs de santé, des gestionnaires d'établissements, des responsables de district et des comités de santé communautaires en tant qu'agents du changement. Un résultat significatif documenté fut un changement de politique au niveau du district : après que les travailleurs de santé se soient organisés autour de défis partagés identifiés lors des activités du programme, le bureau de santé du district a révisé les politiques d'allocation du personnel pour faire face au sous-effectif chronique dans les établissements ruraux. La récolte des résultats a retracé ce changement jusqu'aux réseaux d'apprentissage par les pairs facilités par le programme, démontrant ainsi sa contribution malgré la présence de nombreux autres facteurs.