Objectif
Examiner certains des obstacles à l’évaluation des projets de santé ancrés dans la mise en œuvre adaptative et les approches de conception centrée sur l’humain (HCD).
Resources
- Mise en œuvre de programmes de santé sexuelle et reproductive des adolescents adaptés et centrés sur les jeunes : enseignements tirés du projet Adolescents 360 en Tanzanie, en Éthiopie et au Nigeria (2016-2020).
- Défis et opportunités dans l’évaluation de programmes intégrant une conception centrée sur l’humain : leçons tirées de l’évaluation d’Adolescents 360
- Suivi et évaluation : 5 vérifications factuelles pour la gestion adaptative
- Comment suivre et évaluer un programme adaptatif : 7 points à retenir
- Essai contrôlé randomisé (ECR) — Étude d’impact (2018-2021)
Présentateurs
Anne LaFond
Directrice, Centre d’information, de surveillance et d’évaluation de la santé (CHIME) & Conseillère principale, HCDExchange
Divya Datta
Directrice de la stratégie de conception et de l’innovation, Vihara Innovation Network
Matthew Wilson
Directeur adjoint de projet, Adolescents 360
Fifi Ogbondeminu
Directeur adjoint de projet, Adolescents 360
Hanieh Khosroshah
Concepteur principal de produits, YLabs
Laetitia Kayitesi
Chargée de recherche, YLabs
Combiner les approches de HCD et de perspectives des adolescents (IA) pour obtenir des preuves solides et un plus grand impact des programmes
- Grâce à l’approche de mise en œuvre adaptative, les résultats des tests de routine auprès des utilisateurs permettent d’élaborer des itérations du programme.
- L’application de la HCD pendant les phases de mise en œuvre et d’évaluation de l’intervention se prête bien à l’apprentissage adaptatif et à l’itération, permettant l’introduction continue de nouvelles informations.
- La HCD peut favoriser la durabilité à long terme et la rentabilité de l’intervention en s’attaquant aux problèmes de mise en œuvre tôt et souvent, plutôt que de se fier uniquement aux résultats finaux.
Défis des évaluations conventionnelles des résultats
- Le modèle de l’intervention et la stratégie de mise en œuvre ne sont pas connus dès le départ.
- Les praticiens ne peuvent pas présumer de la cohérence du modèle d’intervention et de la stratégie de mise en œuvre au fur et à mesure qu’ils évoluent pendant la durée du projet.
- La documentation sur le processus de conception itératif, la prise de décision, les tests en cours de route est soit absente, soit incompatible avec une évaluation acceptable.
- Priorités et styles d’apprentissage différents selon les disciplines, d’où un langage commun limité.
- Limitations des ressources financières
“Le rêve serait de voir toutes les disciplines apporter leurs forces individuelles, mais que les frontières s’estompent, que de petites équipes interdisciplinaires, hybrides, de conception et de mesure travaillent ensemble au quotidien, optimisant les stratégies de mise en œuvre pour les résultats”.
– Divya Datta
Atténuer les difficultés pour évaluer rigoureusement les interventions d’IA et de HCD
- Garder l’« essence » de l’intervention à l’esprit.
- Les modèles d’évaluation doivent également être réactifs et adaptatifs.
- Les responsables de la mise en œuvre doivent également avoir une bonne compréhension des protocoles d’évaluation.
- Les responsables de la mise en œuvre doivent gérer l’adaptation de manière efficace.
- Penser au-delà des évaluations de résultats
- Les évaluateurs doivent disposer des ressources nécessaires pour concilier les résultats issus de différentes approches d’évaluation.
Solutions suggérées
- Améliorer la capacité des créateurs et des équipes de conception à comprendre et à prendre en compte les indicateurs de réussite des programmes. Par exemple, en impliquant les équipes de conception dans les discussions sur l’élaboration du programme qui sont fondées sur la théorie du changement (TdC).
- Promouvoir la collaboration entre les équipes de conception et de recherche pour trouver le bon équilibre. Cette collaboration aidera les équipes de projet à identifier et à s’aligner sur les principaux objectifs de recherche, en utilisant des données quantitatives et qualitatives, pour mesurer l’impact du projet et identifier les défis actuels.
- Utilisation d’approches d’évaluation rapides et utilitaires dans les phases de conception pour étayer les hypothèses créatives et le développement de prototypes dans le processus de conception et relier les efforts aux indicateurs.
- Passage à des évaluations agiles, adaptatives et axées sur l’utilité.
- Améliorer les capacités de documentation afin d’enregistrer chaque changement et adaptation effectués.
- Il ne suffit pas d’être capable de s’adapter à la mise en œuvre, les praticiens doivent faire preuve de souplesse dans les processus.