La présente publication est le fruit d’une brève conversation avec Jamie Gamble (consultant du Carrefour DEC), qui a pris la parole lors du webinaire du 8 mai sur l’évaluation évolutive.

Barb Riley (directrice scientifique du Carrefour) : Jamie, le 8 mai, nous avons eu droit à un aperçu impressionnant de l’évaluation évolutive. Merci. Au cours du webinaire, vous avez décrit différentes « situations d’évaluation évolutive ». Par la suite, le Carrefour a échangé avec vous un peu plus de détails sur les projets du FI-PSM, y compris les adaptations en cas de pandémie. Pourriez-vous nous brosser un portrait de ce à quoi pourrait ressembler l’évaluation évolutive, ne serait-ce qu’en ne donnant que quelques d’exemples?

Jamie : Une situation probable est la modification du contenu ou du mode de livraison en réaction à la COVID-19 – par exemple, si des services en personne sont maintenant offerts en ligne, ou sont adaptés pour tenir compte de la distanciation physique. Cela pourrait également signifier la mise en place de nouveaux matériels qui répondent aux problèmes de santé mentale qui sont aggravés par la pandémie. Dans tous ces cas, une approche d’évaluation évolutive d’une nouvelle activité peut aider ceux qui y travaillent à apprendre rapidement et à s’adapter. Un petit travail initial, puis un mini-examen de suivi après une nouvelle activité peuvent aider à préciser la réflexion et à tenir tout le monde au courant des apprentissages et des prochaines étapes. Plus vous serez en mesure d’exprimer clairement ce que vous faites et pourquoi vous le faites, mieux ce sera. Par exemple, si vous assistez à un atelier virtuel pour la première fois, vous penserez peut-être : « Nous savons que X était une partie essentielle de ce que nous offrions auparavant, et nous savons que ce sera un véritable défi en ligne, et voici ce que nous allons essayer de répondre à cela ». Le truc ici n’est pas de mettre au point un modèle logique lourd ou une documentation élaborée, mais d’être clair et explicite sur la stratégie et certaines des hypothèses que vous avez sur la façon dont elle fonctionnera et pourquoi elle fonctionnera d’une certaine manière. L’étape suivante consiste à faire un compte rendu de ce qui s’est passé peu après. Certains préfèrent le faire immédiatement pendant qu’il est encore frais; d’autres trouvent qu’il est utile de prendre un peu de temps pour y réfléchir. Il n’y a pas de règle absolue, mais n’attendez pas trop longtemps. Il est utile d’avoir un peu de structure pour ces comptes rendus, car l’idéal est de commencer à les intégrer dans votre pratique d’évaluation au fil du temps. Les questions « Quoi? » et « Et alors? » présentées dans les diapositives du webinaire sur l’évaluation évolutive [hyperlien] sont un exemple de structure. Les comptes rendus après action sont un autre type de structure. Voici quelques questions que vous pourriez poser :

• Nous pensions que X pourrait se produire de cette façon. Quels sont les éléments qui confirment nos hypothèses? Quels sont les éléments qui ont remis en cause certaines de nos hypothèses? Qu’est-ce qui nous a surpris, le cas échéant?
• Y a-t-il d’autres preuves que nous avons, ou pourrions rassembler, qui nous aideraient à mieux comprendre ce qui a fonctionné et ce qui n’a pas fonctionné?
• Qu’est-ce que cela signifie que nous pourrions avoir besoin de faire plus, moins, de changer, de nous adapter, d’arrêter, de créer la prochaine fois que nous le ferons?

C’est également une bonne idée d’inclure une brève vérification du processus. Ce mini-cycle d’évaluation évolutive a-t-il fonctionné pour nous? Devrions-nous le refaire et, si oui, faire quelque chose de différent?

Une autre situation courante est l’adaptation d’un programme pour répondre aux besoins uniques d’un public différent, par exemple l’adaptation du soutien en matière de santé mentale qui répond aux besoins uniques des nouveaux arrivants ou de la communauté LGBTQ+. Il peut s’agir d’une organisation ou d’une initiative ayant l’expérience de différents publics qui élargissent leurs services, ou d’une organisation ayant l’expérience de servir une communauté particulière, qui élargit maintenant la portée de son soutien à la promotion de la santé mentale. Dans les deux cas, la sagesse des concepteurs de programmes consiste à combiner leur compréhension d’un contexte unique, l’adaptation d’une pratique fondée sur des données probantes à la situation et les adaptations du contenu et de l’approche qui permettent d’obtenir les meilleurs résultats pour les personnes desservies. Ces adaptations sont mieux orientées par une bonne compréhension des principes et des limites, et au fil du temps, par l’observation, la collecte de preuves et l’apprentissage de la combinaison optimale. Vous vous posez peut-être les questions suivantes :

• Quels sont les principes essentiels qui guident notre travail dans ce domaine? Dans quelle mesure et de quelle manière sommes-nous en mesure de réussir à travailler dans le cadre de ces principes? Y a-t-il des moments où ils sont particulièrement difficiles, et si oui, que pouvons-nous en apprendre (sur les principes ou sur ce que nous devrions faire)?
• Dans quelle mesure et de quelle manière appliquons-nous une pratique fondée sur des données probantes? Y a-t-il des moments où nous nous en écartons, et si oui, quelles en sont les conséquences? Comment cette pratique est-elle appliquée au mieux dans notre contexte?

Ce sont deux situations courantes, et bien sûr il y en a d’autres. Comment envisagez-vous d’appliquer l’évaluation évolutive? Faites-le-nous savoir, et nous pourrons les explorer dans de prochains messages.

Barb : Compte tenu de votre expérience de travail avec différents groupes sur l’évaluation évolutive, comment pourriez-vous suggérer que nous soutenions les efforts liés à l’évaluation évolutive dans le cadre des projets du FI-PSM?

Jamie : Voici trois idées pour soutenir l’évaluation évolutive :

1. Faites-en une activité d’équipe. La réflexion commune, le débat, le dialogue et la pensée critique aident à développer une compréhension commune de ce qui est appris et de sa pertinence pour le travail. Ils contribuent également à faire de l’évaluation une pratique et une aptitude au sein de cette équipe.
2. Faites en sorte que ce soit simple. Plus la collecte et l’analyse des données peuvent être intégrées à l’activité naturelle d’un projet et au fonctionnement d’une organisation, mieux c’est. Si ça commence à être difficile, ça a tendance à s’arrêter là. De temps à autre, vous devrez peut-être retrousser vos manches pour approfondir la question, mais il est préférable de réserver ça pour les moments clés.
3. Rappelez aux gens la nature du travail adapté. Il peut s’agir de directeurs, de membres du conseil d’administration, de membres de la communauté, de personnes au service du projet, de partenaires, de bailleurs de fonds, etc. De temps en temps, mettez-les au courant des enseignements tirés et des progrès réalisés. Cela permet aux gens de vous accompagner tout au long de ce processus.

Barb : Merci pour ces conseils judicieux, Jamie! Merci également de travailler avec le Carrefour sur les autres formes de soutien à l’évaluation évolutive. Pour ceux qui souhaitent explorer certaines de ces formes de soutien à l’évaluation évolutive, consultez le site Web du Carrefour pour prendre connaissance des notes liées aux ressources sur l’évaluation évolutive et visitez le forum en ligne sur l’évaluation évolutive. Le forum peut être un lieu privilégié pour apprendre les uns des autres, faire part de vos expériences dans l’application de l’évaluation évolutive et répondre à toutes les questions qui se posent. Le Carrefour et Jamie seront là avec vous!