Quand Utiliser
L'évaluation développementale (DE) est la bonne approche lorsque le programme est encore en cours de conception, lorsque les objectifs et les stratégies sont véritablement émergents, et lorsque l'adaptation en temps réel est plus importante que la preuve de ce qui a déjà été construit. Développée par Michael Quinn Patton, la DE a été conçue pour l'espace entre l'évaluation formative (qui suppose un programme relativement stable) et l'évaluation sommative (qui nécessite un programme terminé).
Utilisez-la lorsque :
- Le programme est une innovation sociale — l'équipe découvre véritablement ce qui fonctionne par itération ; il n'y a pas de modèle établi à tester ou à mettre à l'échelle
- L'environnement est très complexe — les changements politiques, les évolutions du marché ou les dynamiques sociales émergentes signifient que le programme doit s'adapter continuellement pour rester pertinent
- Les objectifs évoluent — la théorie du changement du programme est construite et testée pendant la mise en œuvre, non appliquée depuis un document de conception
- Les retours en temps réel sont plus précieux qu'un rapport final — l'équipe du programme a besoin de pensée évaluative intégrée à leur travail, pas d'un verdict externe à la fin
- Le DFID ou des bailleurs similaires soutiennent la programmation adaptative — un nombre croissant de bailleurs financent explicitement la DE dans le cadre des investissements de gestion adaptative
La DE n'est pas appropriée pour les programmes établis avec une théorie du changement stable, pour les évaluations où la redevabilité du bailleur nécessite une comparaison avant/après définie, ou pour les situations où l'indépendance de l'évaluateur doit être maintenue entièrement (la nature intégrée de la DE crée des défis de limites de rôle).
| Scénario | Utiliser l'Évaluation Développementale ? | Meilleure Alternative |
|---|---|---|
| Programme en innovation active | Oui | — |
| Programme stable, testant l'efficacité | Non | Évaluation d'Impact |
| Comprendre pourquoi les résultats varient | Non | Évaluation Réaliste |
| Le bailleur exige un verdict sommatif | Non | Formative + Sommative |
| Le programme a besoin de données de performance | En parallèle | Plans de SEA |
| Apprentissage en réponse d'urgence | Oui | — |
Comment Cela Fonctionne
Contrairement à l'évaluation conventionnelle, qui opère sur une séquence programme-ensuite-évaluation, l'évaluation développementale est simultanée au développement du programme. L'évaluateur est un partenaire de réflexion, pas un observateur externe.
Étape 1 : Établir le rôle et les limites de l'évaluateur
L'évaluateur DE est intégré à l'équipe du programme — participant aux réunions d'équipe, contribuant aux discussions stratégiques, et fournissant des retours évaluatifs en temps réel. Les limites doivent être explicitement négociées : l'évaluateur maintient l'indépendance intellectuelle et la perspective évaluative même en travaillant aux côtés de l'équipe.
Étape 2 : Soutenir le développement de la théorie
Dans les programmes complexes, la théorie du changement est elle-même émergente. La première contribution de l'évaluateur est souvent d'aider l'équipe à rendre explicite et testable leur théorie implicite.
Étape 3 : Concevoir un suivi en temps réel
Identifier les incertitudes critiques dans la théorie émergente et concevoir des processus de collecte de données légers et rapides qui peuvent informer les décisions en semaines, pas en mois. Ce n'est pas un système de S&E complet — c'est une collecte de données ciblée pour répondre aux questions spécifiques avec lesquelles l'équipe du programme est aux prises maintenant.
Étape 4 : Fournir des retours évaluatifs continus
Le résultat principal de la DE n'est pas un rapport — c'est un flux continu de pensée évaluative alimentant les décisions du programme. Cela peut être un bref mémo après une consultation des parties prenantes, une analyse de motifs à partir d'observations de visites sur le terrain, ou une synthèse des signaux de résultats précoces.
Étape 5 : Documenter l'apprentissage et l'affinement de la théorie
Avec le temps, le processus DE génère un registre évolutif de ce qui a été essayé, ce qui a été appris, et comment la théorie du programme a changé. Cette documentation devient la base pour l'évaluation sommative ultérieure et pour partager l'apprentissage avec le domaine plus large.
Composantes Clés
- Évaluateur intégré — un évaluateur professionnel travaillant comme partenaire d'apprentissage au sein de l'équipe du programme, pas comme un examinateur externe
- Processus de retours en temps réel — méthodes de collecte et de synthèse de données légères produisant des résultats en jours ou semaines
- Théorie du changement vivante — une théorie de programme explicitement documentée et régulièrement mise à jour capturant ce qui a été appris
- Documentation de l'innovation — enregistrement systématique de ce qui est essayé, adapté et abandonné, et pourquoi
- Clarté des rôles — accord explicite entre l'évaluateur, l'équipe du programme et le financeur sur ce qu'est et n'est pas la DE
- Rapport d'évaluation développementale — documentation périodique de l'apprentissage et du développement de la théorie (pas un rapport d'évaluation traditionnel)
- Intégration avec la gestion adaptative — les résultats DE doivent être connectés aux processus de prise de décision, pas seulement circulés comme documents
Meilleures Pratiques
Clarifier le rôle DE avant de commencer. Les évaluateurs DE qui ne sont pas clairs sur leur rôle deviennent soit capturés (ils cessent d'évaluer et soutiennent juste l'équipe) soit marginalisés (l'équipe cesse de s'engager avec eux). Négocier et documenter le rôle de l'évaluateur explicitement au début du programme.
Utiliser la ToC comme hypothèse de travail, pas comme cadre fixe. La théorie du programme en DE est une hypothèse sur la façon dont le changement se produira. Chaque expérience de mise en œuvre est une opportunité de tester et d'affiner — pas de mesurer la performance par rapport à elle.
Ne pas compter uniquement sur le suivi de routine. Les données de routine vous disent ce qui se passe, pas pourquoi — et dans les programmes émergents, le "pourquoi" est la question critique. La DE nécessite des méthodes qui sondent les mécanismes, pas seulement suivre les indicateurs.
Conduire des évaluations en temps réel pendant les urgences et les pivots. Lorsque le contexte du programme change de manière dramatique — une crise politique, un changement de financement, un échec majeur de mise en œuvre — un examen DE rapide peut fournir la pensée évaluative nécessaire pour naviguer le changement.
Documenter ce qui n'a pas été poursuivi. La contribution la plus sous-utilisée de l'évaluation développementale est de documenter le chemin non pris — les hypothèses rejetées, les stratégies abandonnées, et les raisons. Cet apprentissage est souvent invisible dans les rapports d'évaluation conventionnels.
Erreurs Courantes
Traiter la DE comme une excuse pour éviter la rigueur. L'absence de résultats pré-spécifiés ne signifie pas que tout est permis. La DE nécessite toujours une collecte de données systématique, un raisonnement transparent, et un rapport honnête de ce qui ne fonctionne pas.
Brouiller l'indépendance de l'évaluateur. Lorsque l'évaluateur devient un membre de facto du personnel du programme, il perd la distance évaluative qui rend sa contribution précieuse. L'évaluateur devrait pouvoir dire "cela ne fonctionne pas" sans craindre de saper sa position dans l'équipe.
Utiliser le langage DE pour l'évaluation formative conventionnelle. La DE n'est pas juste "évaluation faite tôt". C'est une approche spécifique pour les programmes véritablement complexes et émergents. Appliquer l'étiquette à une évaluation formative standard déforme les deux.
Négliger de connecter les résultats DE aux décisions. La pensée évaluative qui reste dans le carnet de l'évaluateur ne sert personne. Construire des boucles de rétroaction explicites entre les résultats DE et les processus de prise de décision du programme.
Ne pas planifier la transition vers l'évaluation sommative. La DE génère une documentation précieuse du développement du programme. Planifier dès le début comment cela sera utilisé lorsque le programme atteindra un point où l'évaluation sommative est appropriée.
Exemples
Innovation sociale, Canada. Une fondation nationale au Canada a utilisé l'évaluation développementale pour soutenir un fonds d'innovation sociale de cinq ans testant de nouveaux modèles pour l'emploi des jeunes dans les communautés marginalisées. L'équipe DE intégrée a assisté aux réunions stratégiques trimestrielles, a conduit des observations ethnographiques rapides sur les sites de mise en œuvre, et a produit des notes d'apprentissage mensuelles. Au cours des 18 premiers mois, l'évaluation a documenté sept révisions de théorie alors que les bénéficiaires découvraient quelles stratégies d'engagement des employeurs produisaient des placements durables versus des placements à court terme. Ces résultats ont été partagés à travers le portefeuille, permettant aux bénéficiaires d'apprendre les uns des autres en quasi temps réel.
Programme de santé adaptatif, Afrique de l'Est. Un programme de renforcement des systèmes de santé adaptatif financé par le DFID en Ouganda a utilisé la DE pour soutenir une équipe travaillant dans trois districts politiquement complexes. L'évaluateur a documenté comment la théorie du programme a changé d'un focus côté offre (formation des travailleurs de santé) à un focus côté demande (engagement communautaire) en 12 mois alors que l'équipe répondait aux établissements refusant de mettre en œuvre des changements. La documentation DE a fourni la base de preuves pour un examen de conception à mi-programme que le bailleur a approuvé sans exiger le processus d'évaluation externe habituel.
Réponse d'urgence, Asie du Sud. Suite à une réponse cyclonique au Bangladesh, une grande ONG internationale a utilisé une évaluation développementale rapide en temps réel pour évaluer quels mécanismes de coordination produisaient une allocation efficace des ressources versus lesquels créaient des goulots d'étranglement. L'évaluation a duré six semaines parallèlement à la réponse. Trois changements de coordination ont été mis en œuvre pendant la période d'évaluation sur la base des résultats, chacun documenté et testé en temps réel. Le rapport final a été complété pendant la phase de réponse plutôt qu'après.
Comparé À
| Approche | Phase du Programme | Rôle de l'Évaluateur | Résultat Principal |
|---|---|---|---|
| Évaluation Développementale | Pendant l'innovation | Partenaire intégré | Apprentissage en temps réel |
| Évaluation Formative | Pendant la mise en œuvre stable | Conseiller externe | Recommandations d'amélioration |
| Évaluation Sommative | Post-programme | Évaluateur externe | Verdict d'efficacité |
| Évaluation Centrée sur l'Utilisation | N'importe quand | Externe avec focus utilisateur | Résultats pertinents pour la décision |
| Évaluation Réaliste | Post ou pendant | Analyste externe | Théorie de niveau intermédiaire |
Indicateurs Pertinents
16 indicateurs à travers les cadres du DFID, UNDP, et fondation. Exemples clés :
- Nombre d'adaptations de programme formellement documentées comme informées par les résultats DE
- Note de qualité du processus d'engagement évaluateur-équipe (notée par les deux parties)
- Fréquence des retours en temps réel fournis à l'équipe du programme (cible : au moins mensuel)
- Degré d'affinement de la théorie du changement documenté sur la période d'évaluation
Outils Connexes
- Constructeur de Modèle Logique MEStudio — pour développer et mettre à jour la théorie du changement vivante
- Planificateur d'Évaluation — pour structurer l'approche de suivi DE et la collecte de données en temps réel
Sujets Connexes
- Gestion Adaptative — la pratique de gestion de programme que la DE est conçue pour soutenir
- Évaluation Centrée sur l'Utilisation — une approche connexe où les besoins des utilisateurs prévus dirigent toutes les décisions d'évaluation
- Agendas d'Apprentissage — les priorités d'apprentissage structurées qui peuvent ancrer la collecte de données DE
- Théorie du Changement — le cadre vivant que la DE teste et affine continuellement
- Changement le Plus Significatif — une méthode complémentaire pour capturer les résultats inattendus ou transformateurs pendant la DE
Lectures Complémentaires
- Patton, M.Q. (2011). Évaluation Développementale : Application des Concepts de Complexité pour Renforcer l'Innovation et l'Utilisation. New York : Guilford Press. Le texte fondateur.
- Patton, M.Q., McKegg, K., & Wehipeihana, N. (2016). Exemplaires d'Évaluation Développementale : Principes en Pratique. New York : Guilford. Études de cas de 12 évaluations DE.
- Gamble, J. (2008). Un Guide Pratique d'Évaluation Développementale. Montreal : McConnell Foundation. Une introduction concise pour les praticiens.
- DFID (2014). Élargir la Gamme de Conceptions et de Méthodes pour les Évaluations d'Impact. Couvre les approches développementales parallèlement aux conceptions expérimentales.