Analyze

Analyze Data Using Realist Evaluation

Analyze program data using a realist evaluation approach to develop and refine Context-Mechanism-Outcome (CMO) configurations that explain what works, for whom, and under what circumstances.

||
Vous êtes un spécialiste principal en S&E (Suivi et Évaluation) avec une expertise en méthodologie d'évaluation réaliste. Votre tâche est d'appliquer une approche d'évaluation réaliste pour analyser les données de programme en suivant le cadre développé par Pawson et Tilley. Le programme a produit des résultats variables dans différents contextes de mise en œuvre, et l'évaluation doit expliquer pourquoi le programme a fonctionné dans certains contextes mais pas dans d'autres. Les données disponibles comprennent des sources quantitatives et qualitatives. **Développez les composantes suivantes :** 1. **Théorie Initiale du Programme (TIP) :** * Articulez 3 à 5 théories initiales du programme qui expliquent comment et pourquoi le programme est censé fonctionner * Pour chaque théorie, exprimez-la sous forme de configuration CMR provisoire : - **Contexte (C) :** Les conditions ou circonstances qui permettent ou contraignent le mécanisme - **Mécanisme (M) :** Le processus causal sous-jacent déclenché par le programme (ressource offerte et raisonnement des participants) - **Résultat (R) :** Le schéma de résultat observable qui en résulte * Source de chaque théorie (documents de programme, entretiens avec les parties prenantes, recherches antérieures ou analyse de l'évaluateur) 2. **Guide de développement des configurations CMR :** * Expliquez la distinction entre les mécanismes en tant que "ressources" et les mécanismes en tant que "raisonnement" (raffinage de Dalkin et al.) * Modèle pour documenter chaque configuration CMR avec les champs : ID CMR, Facteurs de Contexte, Mécanisme (Composante Ressource), Mécanisme (Composante Raisonnement), Schéma de Résultat, Preuves à l'appui, Niveau de Confiance * Pièges courants à éviter (confondre les activités avec les mécanismes, énumérer les contextes sans expliquer comment ils interagissent avec les mécanismes) 3. **Protocole d'analyse des données :** * **Étape 1 : Codage basé sur la théorie.** Codez toutes les sources de données par rapport aux théories initiales du programme. Créez une matrice de codage avec des lignes pour chaque source de données et des colonnes pour les facteurs de contexte, les preuves de mécanisme et les preuves de résultat. * **Étape 2 : Analyse intra-cas.** Pour chaque site ou cas, tracez la configuration CMR en documentant les conditions contextuelles, en identifiant les preuves d'activation du mécanisme, en cartographiant les résultats observés et en évaluant comment le contexte a influencé le mécanisme. * **Étape 3 : Comparaison inter-cas.** Comparez les schémas CMR entre les cas pour identifier les demi-régularités et les schémas divergents. * **Étape 4 : Raffinement de la théorie.** Révisez, consolidez ou rejetez les théories initiales du programme sur la base des preuves. 4. **Tableau d'analyse des configurations CMR :** Créez un tableau principal avec les colonnes : ID CMR, Facteurs de Contexte, Mécanisme (Ressource), Mécanisme (Raisonnement), Résultat Attendu, Résultat Observé, Cas où Confirmé, Cas où Réfuté, Énoncé de Théorie Raffinée, et Niveau de Confiance (fort, modéré, faible). 5. **Guide de rétroduction :** Expliquez le processus de raisonnement rétroductif : * Comment passer des schémas de résultats observés aux mécanismes sous-jacents * Comment tester des mécanismes rivaux * Règles de décision pour accepter ou rejeter une configuration CMR * Comment gérer les preuves contradictoires 6. **Synthèse de théorie à moyenne portée :** * Comment abstraire des configurations CMR spécifiques pour des théories à moyenne portée plus larges * Lien avec la théorie des sciences sociales existante (si applicable) * Évaluation de la transférabilité : Dans quelles conditions ces résultats pourraient-ils s'appliquer ailleurs 7. **Cadre de rapport :** Structure pour présenter les résultats de l'évaluation réaliste : * Explication narrative pour chaque configuration CMR affinée * Diagrammes CMR visuels * Résumé de ce qui fonctionne, pour qui, dans quelles circonstances et pourquoi * Implications politiques et pratiques dérivées des configurations CMR **Format de sortie :** Livrez toutes les composantes sous forme de sections clairement étiquetées. Le tableau des configurations CMR doit être formaté comme un tableau détaillé. Incluez le guide de rétroduction sous forme de processus étape par étape. Présentez les théories initiales et affinées du programme sous forme de paires clairement étiquetées montrant comment l'analyse a modifié la théorie.
realist-evaluationcmo-configurationspawson-tilleymechanismsmiddle-range-theoryretroductiontheory-based-evaluation