Expérimenter l’évaluation formative en recherche participative à visée transformative
L’évaluation formative a pour objectif d’aider les porteurs d’un projet de recherche/innovation à anticiper les actions à conduire et les parties prenantes à impliquer dans le but de produire du changement et à terme, des impacts sociétaux.
Le consortium ÉQUIPACT a expérimenté la méthode d’évaluation formative ASIRPA de cette recherche-action (2022-2024). Asirpa temps réel ( Asirpa tr) la réflexivité et l’apprentissage entre les membres d’un projet. Elle leur donne des outils pour orienter leurs actions Ces outils tiennent compte du haut degré d’incertitude et de complexité qu’ils rencontrent et de la multiplicité des parties prenantes à intéresser pour induire les transformations escomptées.
Auteurs(s)
Programme
Lieu de réalisation : Paris, Montpellier, Saint-Etienne,
Budget : 100000
Organisme(s)
UMR Lisis Laboratoire interdisciplinaire sciences innovation sociétés
Marne la Vallée Cédex – 77454UMR CNRS-ESIEE Paris-INRAE-Université Gustave Eiffel Cité Descartes – Bois de l’Etang – Champ-sur-Marne
•
ORIGINE ET CONTEXTE
La démarche ASIRPA temps réel est issue de l’approche ASIRPA d’évaluation ex post des impacts de la recherche, laquelle a permis d’éclairer les mécanismes qui produisent les impacts (https://asirpa.hub.inrae.fr/). Cette démarche a déjà été expérimentée avec des villes dans des processus de co-création avec les habitants (Matt et al, 2023 ; van Diss et al., 2024) et avec des parties prenantes dans des systèmes agroécologiques
Objectifs
- ASIRPA temps réel permet d’analyser, en temps réel, la trajectoire d’un projet ou d’un programme de recherche pour en amplifier les impacts sociétaux.
- Il s’agit d’un outil d’aide à l’apprentissage, à la coordination et à la réflexivité des acteurs impliqués. Les interactions qu’il suscite favorise les échanges entre utilisateurs et contribue à la création d’une communauté de pratiques.
ACTIONS MISES EN OEUVRE
- Plusieurs ateliers (présentiels et en visio) ont été organisés avec les partenaires du projet ÉQUIPACT. Ils ont permis de construire un chemin d’impact et de le réviser au cours du projet de recherche-action. Le chemin d’impact est l’élément clé de la méthode ASIRPA temps réel. Il permet aux acteurs de visualiser la route à parcourir pour atteindre les impacts sociétaux qu’ils ont envisagés collectivement. Cela implique d’identifier les ressources à mobiliser, les actions à réaliser, les acteurs clés à impliquer, et des freins et leviers à l’action.
Public cible :
- Organisations du tiers secteur, collectivités territoriales, établissements publics de recherche et d’innovation, financeurs de projets de recherche participative
Ressources humaines mobilisées :
- 18 salariés
- 4 bénévoles
Budget :
- Budget total du projet ÉQUIPACT : 594 976€ (en prévisionnel)
- Budget financé par l’ANR : 244 056€
- Autofinancement :env. 250 000€ (en prévisionnel)
- Financements publics complémentaires : 8 000€
Résultats et impacts, quantitatifs et qualitatifs
Résultats :
- Publications scientifiques en cours, présentation de la méthode dans les réseaux concernés,et production de guides méthodologiques (consulter les bases de données ouvertes HAL et ZENODO).
Apprentissages par les membres du consortium :
- Le consortium a offert à ses membres les ressources d’une formation par les pairs. Dans chaque structure partenaire, ils ont organisé une réflexion interne. Ils ont aussi communiqué sur le projet dans leurs organisations (auprès de professionnels et bénévoles) et dans leurs réseaux territoriaux (Occitanie, Bretagne, Ile de France).
Impacts :
- À évaluer dans les 10 ans à venir
Essaimage :
- Des partenaires du projet ÉQUIPACT expérimentent la méthode ASIRPA temps réel dans démarches de recherche.
Originalité
S’appuyer sur une méthode d’évaluation formative « en temps réel » permet de ne pas perdre de vue les objectifs du projet, d’adapter les actions à l’évolution du contexte général, et d’anticiper l’implication de nouveaux acteurs afin de garantir la production de changement à court terme, et d’impacts sociétaux à plus long terme.
Partenariat(s)
- Membres du consortium (outre coordinateurs)
Associations : CREFAD (éducation populaire), Traces (médiation scientifique), Les Petits Débrouillards Île de France (éducation populaire et médiation scientifique), Tela Botanica (protection de l’environnement et médiation scientifique), RESOLIS (solidarité internationale), Fab’lim (justice alimentaire), CCSTI Caen Le Dôme (médiation scientifique), HC-Ecrac (entreprise scientifique)
Acteurs académiques : LISIS, MSH Sud Montpellier, Réseau des zones ateliers du CNRS
Acteurs publics : Muséum de Toulouse
- Financements :
- Agence nationale de la recherche, appel à projet Sciences avec et pour la société.
- Co-financements de certains partenaires du projet, FONJEP Recherche Djepva
- Fonds propres pour la plupart des partenaires TSR et acteurs privés (50%)
Retour d’expérience
Difficultés et/ou obstacles rencontrés pendant la mise en œuvre :
Recommandations :
- Développer un programme de formation adapté
- Essaimer l’évaluation formative dans les réseaux de la recherche participative
- Créer des enveloppes de financement et durée de financement aussi longues que celles prévues dans le financement scientifique par appel à projet.
Solutions adoptées pour répondre aux difficultés et/ou obstacles :
- Défaut d’appropriation de la démarche ASIRPAtr par les membres du consortium. La démarche demande un certain de temps de familiarisation (finalités, concepts, outils proposés). Elle nécessite donc une forme de pérennisation au fil de projets de recherche.
- Défaut d’utilisation des acquis de la démarche ASIRPAtr par le comité de pilotage du projet de recherche, bien que l’un des coordinateurs d’EQUIPACT ait été l’animatrice d’ASIRPA temps réel. A ce propos, c’est la première fois que cette situation était expérimentée. D’habitude, l’équipe d’animatrices ASIRPAtr ne contribue pas aux actions mises en oeuvre dans le projet de recherche. C’est une équipe d’accompagnement à la co-création à visée transformative.
Améliorations futures possibles :
- L’animateur de la démarche ASIRPAtr ne devrait pas être impliqué dans le pilotage du projet. Il doit s’assurer de la continuité entre diagnostic collectif et actions mises en œuvre en lien avec le COPIL. En quelque sorte, c’est un tiers qui veille au respect des décisions collectives pour atteindre les impacts visés.
- Le COPIL devrait piloter le projet en faisant référence au plan d’action validé puis révisé lors des ateliers réflexifs. Cela constituerait un deuxième espace de réflexivité autour de la démarche Asirpa tr tout au long du projet.
Recommandations :
- Introduire aux concepts et à la démarche ASIRPA temps réel dans les formations aux recherches participatives, au même titre que les méthodes d’intelligence collective
- Essaimer l’évaluation formative dans les réseaux de la recherche participative
- La démarche ASIRPA temps réel permet d’installer du changement au sein des membres du projet, et de leurs réseaux. Ces apprentissages ne dépendent pas seulement de l’usage itératif de la méthode, il est nécessaire que les acteurs aient une capacité de réflexivité vis-à-vis de la diversité de valeurs, d’intérêts et de connaissances qu’ils rencontrent au cours du processus de recherche.
Présentation des facteurs de réussite et conseils pour une généralisation ou un essaimage :
L’utilisation d’ASIRPA temps réel doit s’envisager dans la continuité de projets de recherche visant à produire du changement et, à terme, de l’impact sociétal.
Références
Bibliographie scientifique
Van Dis, R., Matt, M., Lhoste, E., Bundgaard, L., Loconto, A. M. 2023. « Social Learning from Co-creation: Cities on an environmental mission », The International Journal of Sociology of Agriculture and Food, 29, 1, 73-79.
Matt Mireille, Robinson D.K.Robinson, Joly Pierre-benoit, Renée Van Dis, Laurence Colinet, 2023. »ASIRPAReal-Time in the making or how to empower researchers to steer research towards desired societal goals. »
https://doi.org/10.1093/reseval/rvad004
Van Dis, Renée. Re-envisioning Responsible Research: The Inextricable Role of TranslationThe case of ASIRPA Real-Time in the French 0-Pesticides mission. Diss. Université Gustave Eiffel, 2023.
Joly P.B., Matt M., Robinson DKR. 2019. “Research Impact Assessment: from ex post to real-time assessment”, fteval Journal, 47, 35-40, https://doi.org/10.22163/fteval.2019.326
Joly P.B., Matt M., 2017 “Towards a new generation of research impact assessment approaches”. J Technol Transf (2017). https://doi.org/10.1007/s10961-017-9601-0
Partager sur
Copyright: Licence Creative Commons Attribution 3.0
Pour citer un texte publié par RESOLIS:
Petit Monique, « Atelier 44, un atelier de menuiserie où l’esprit et le geste ne font qu’un », **Journal RESOLIS**