Cartographie des usages de l'Ă©valuation d'impact

Des Ă©valuations d'impact : pour quoi faire ? Retrouvez ici la cartographie des usages de l'Ă©valuation d'impact - sous licence libre.

Carte

Cette carte est le fruit d’une collaboration de recherche menĂ©e en 2021-2022 entre l’Agence Française de DĂ©veloppement, Quadrant Conseil et Strategic Design Scenarios. Elle part de la question suivante : Comment se redonner du choix dans les approches d’évaluation d’impact, au-delĂ  des seules approches contrefactuelles et alors qu’une diversitĂ© de mĂ©thodes existe aujourd'hui ?

L’approche engagĂ©e ici, incluant dĂ©marche Ă©valuative et dĂ©marche de design des politiques publiques, visait Ă  travailler sur un moment clĂ© de la commande d’évaluation d’impact, celui lors duquel s’établit un « champ des possibles » en matiĂšre d’approches d’évaluation dans l’interaction entre chargé·e d’évaluation et commanditaire potentiel·le.

Il s’agit d’un moment lors duquel le projet d’évaluation est encore trĂšs incertain. Les commanditaires ont une vue encore limitĂ©e de ce qu’ils ou elles veulent, de leurs besoins, des approches qui pourraient y rĂ©pondre. Les chargé·es d’évaluation doivent alors tĂątonner pour identifier une approche qui peut convenir, Ă  partir d’un rĂ©pertoire d’approches souvent limitĂ© (en raison de leur connaissance des dites approches, de l’expĂ©rience qu’ils et elles en ont, de ce qui se fait ou non Ă  l’AFD, etc.).

Une façon de dĂ©passer cette situation consistait Ă  ne pas entrer dans ce dialogue par le prisme des approches, mais d’abord par les usages concrets que les agents de l’AFD et les autres parties prenantes font des Ă©valuations. C’est ce Ă  quoi s’est attachĂ© cette recherche-action, qui a permis d’explorer, Ă  travers des cold cases et une cartographie conceptuelle ces usages concrets.

La cartographie conceptuelle est un outil permettant de grouper et de hiĂ©rarchiser collectivement des Ă©noncĂ©s au moyen de mĂ©thodes statistiques. De cette façon, nous avons recueilli une liste d'une cinquantaine d'usages concrets, rĂ©duits Ă  une trentaine collectivement ; deux groupes, l'un composĂ© des Ă©valuateurs/rices du dĂ©partement Évaluation, et l'autre des diffĂ©rents services de l'AFD (potentiellement commanditaires), ont regroupĂ© librement ces usages dans des groupes qu'ils ont nommĂ©s. Ces regroupements ont ensuite Ă©tĂ© traitĂ©s statistiquement pour faire apparaĂźtre des grappes d'usage, discutĂ©es ensuite pour faire apparaĂźtre des groupes d'usages cohĂ©rents. Cette approche, inductive, permet d'Ă©viter d'imposer des catĂ©gories d'usage d'ordre administratif ou bien issu du champ disciplinaire de l'Ă©valuation pour faire ressortir des catĂ©gories "indigĂšnes" au groupe impliquĂ©.

Loin des mots d’ordre de « redevabilitĂ© » et d’« apprentissage », les usages qui se dessinent pour l’AFD relĂšvent ainsi du stratĂ©gique, du pilotage, de l’amĂ©lioration continue et du dialogue. Les approches d’évaluation d’impact ont ensuite Ă©tĂ© raccrochĂ©es Ă  ces usages potentiels, pour offrir un « champ des possibles » pertinent en matiĂšre d’évaluation d’impact. Au final, la carte est conçue comme un outil pĂ©dagogique : elle permet, au sein des dĂ©partements d’évaluation, de rĂ©flĂ©chir aux usages effectifs que les services font des Ă©valuations, et notamment d’impact, et de monter collectivement en capacitĂ© Ă  proposer des rĂ©ponses pertinentes Ă  ces besoins.

L'approche est reproductible, avec l'idée que les types d'usage apparus à l'AFD renvoient à des catégories propres à cette agence : quelle typologie apparaßtrait dans d'autres agences ?

Évaluation RTBFoods

jeudi 02 mars 2023

Du outcome harvesting dans une Ă©valuation de projet

Des fiches pour distinguer l'Ă©valuation d'autres pratiques voisines

jeudi 19 janvier 2023

Quelles distinctions entre l'Ă©valuation et les pratiques voisines ?

🃏 Cartographie des usages de l'Ă©valuation d'impact

mardi 01 novembre 2022

Quelle démarche pour une cartographie des usages de l'évaluation d'impact ?

📚 Trois articles d'Ă©valuation (nÂș8, 15 octobre 2022)

samedi 15 octobre 2022

Un numĂ©ro trĂšs trĂšs lutte – pour l'Ă©quitĂ© raciale, entre objectivistes et subjectivistes, et oldies but goodies pour faire entendre l'Ă©valuation dans un contexte politisĂ©.

📚 Évaluer les politiques locales d'Ă©galitĂ© femmes-hommes

mardi 04 octobre 2022

Publication

🚂 EES 2022: It’s not (only) you, it’s me (too)

dimanche 17 juillet 2022

Feedback on the European Evaluation Society Conference in Copenhagen

🚂 EES 2022 - C’est pas (que) toi, c’est moi (aussi)

mardi 12 juillet 2022

Retour sur la conférence de la société européenne d'évaluation à Copenhague

📚 Trois articles d'Ă©valuation (nÂș7, 15 juin 2022)

mercredi 15 juin 2022

Dans ce numéro, cinéma à tous les étages : La Revanche des Sith, Octobre rouge et 120 battements par minute... ou presque

🎙 L'Ă©valuation des contrats de ville

mercredi 01 juin 2022

Publication

📚 L'Ă©valuation en contexte de dĂ©veloppement

mardi 31 mai 2022

Publication

đŸŽ„ Cinq choses Ă  savoir sur les initiatives de transition

lundi 02 mai 2022

Vidéo

💡 Recherche et action publique : il faut ĂȘtre deux pour danser le tango

vendredi 25 mars 2022

Publication

📚 Trois articles d'Ă©valuation (nÂș6, 15 mars 2022)

mardi 15 mars 2022

Dans ce numéro, la cartographie des controverses rencontre la science comportementale, et la recherche l'action publique.

💡 Qu'attendre de la recherche pour Ă©clairer l'action publique

jeudi 20 janvier 2022

Publication

📚 Trois articles d'Ă©valuation (nÂș5, 15 dĂ©cembre 2021)

mercredi 15 décembre 2021

Numéro spécial Anthologie

Citations relatives Ă  l'Ă©valuation des politiques publiques

lundi 20 septembre 2021

Des citations inspirantes pour qui Ă©value.

📚 Trois articles d'Ă©valuation (nÂș4, 15 septembre 2021)

mercredi 15 septembre 2021

Dans ce numĂ©ro, Ă©valuation et bureaucratie, l'ultime combat, enquĂȘter avec d'autres ĂȘtres, et oldiesbutgoodies, on sauve le monde avec Bob Stake !

💡 Glossaires de l'Ă©valuation

dimanche 12 septembre 2021

Liste de glossaires

💡 7 bonnes raisons de prendre en compte l'Ă©galitĂ© entre les femmes et les hommes dans ma pratique d'Ă©valuation

vendredi 09 juillet 2021

Oldies but goodies (Karine Sage)

📚 Trois articles d'Ă©valuation (nÂș3, 15 mai 2021)

samedi 15 mai 2021

Dans ce numéro, des échecs, des échecs, des échecs, l'évaluation pleinement décrite et pleinement jugée et la réception des politiques du handicap. Pas de oldiesbutgoodies, mais ça reviendra pour le numéro 4 !

💡 Les Ă©valuations participatives, plus facile Ă  dire qu'Ă  faire

jeudi 29 avril 2021

Nouvel article publié (Thomas Delahais)

Quatre jeux de cartes d'Ă©valuation francophones

mardi 27 avril 2021

À l'occasion de la sortie de Strateval, nous revenons sur 3 autres jeux de cartes autour de l'Ă©valuation

💡 Qu'est-ce que l'analyse militante apporte Ă  l'Ă©valuation des politiques publiques ?

jeudi 08 avril 2021

Nouvel article publié (Marc Tevini)

📚 Trois articles d'Ă©valuation (nÂș2, 15 fĂ©vrier 2021)

lundi 15 février 2021

Dans ce numĂ©ro, Ă©valuation fĂ©ministe quĂ©saco, apprentissage et redevabilitĂ© mĂȘme combat ? et oldiesbutgoodies, des Ă©lĂ©ments pour une sociologie de l'Ă©valuation... C'est le sommaire de ce numĂ©ro 2.

đŸ“œ L'Ă©valuation des politiques sociales, de quoi parle-t-on ?

vendredi 15 janvier 2021

Introduction au séminaire de l'IRTS HDF du 26/01.

đŸ“œ L'analyse de contribution en pratique

mardi 15 décembre 2020

Introduction Ă  la formation Ă  l'analyse de contribution

📚 Trois articles d'Ă©valuation (nÂș1, 15 novembre 2020)

dimanche 15 novembre 2020

Dans ce numéro, plongée en pleine guerre froide avec la Realpolitik de l'évaluation, des idées pour professionnaliser l'évaluation, et oldiesbutgoodies, de quoi se demander ce que les évaluateurs et les évaluatrices défendent dans leur métier... C'est le sommaire de ce numéro 1.

đŸ“œ L'Ă©valuation participative, plus facile Ă  dire qu'Ă  faire

lundi 09 novembre 2020

Intervention de T Delahais au CongrÚs de la SEVAL organisé par le GREVAL à Fribourg, le 4 septembre 2020.

💡 En situation anormale, l'Ă©valuation doit devenir la norme

jeudi 29 octobre 2020

Contribution de T Delahais et M Tevini en réponse à l'appel de la SFE, "Ce que la crise sanitaire nous apprend sur l'utilité et les pratiques d'évaluation".

💡 Comment Ă©valuer la transition

vendredi 23 octobre 2020

Nouvel article publié (Thomas Delahais, Karine Sage, Vincent Honoré)

💡 Quels mĂ©canismes Ă  l'Ɠuvre dans les innovations ?

mardi 06 octobre 2020

Nouvel article publié (Agathe Devaux-Spatarakis)

📚 Trois articles d'Ă©valuation (v0, 30 juillet 2020)

jeudi 30 juillet 2020

À l'honneur pour cette Ă©dition, la sagesse pratique des Ă©valuateurs et des Ă©valuatrices, soit « la capacitĂ© de faire les bons choix, au bon moment, pour les bonnes raisons » ; ce que les mots et concepts de l'Ă©valuation perdent et gagnent Ă  leur traduction d'une langue Ă  l'autre et oldies but goodies, une piqĂ»re de rappel quant Ă  la vocation dĂ©mocratique de l'Ă©valuation en France... C'est le sommaire de ce numĂ©ro 0.