VF Referentiel RC Simple-1

PILOTER LE CHANGEMENT
Comment suivre et évaluer les appuis

au renforcement des capacités ?
UN RÉFÉRENTIEL MÉTHODOLOGIQUE
CO-CONSTRUIT À PARTIR D’EXPÉRIENCES
OUEST-AFRICAINES
Cet ouvrage a été réalisé dans le cadre d’un chantier piloté conjointement par l’Agence française de développement (AFD),
le Bureau organisation et méthodes du Sénégal (BOM) et l’Agence luxembourgeoise pour la Coopération au développement
(LuxDev), avec la facilitation du cabinet Espelia.
Pilotage du chantier : Pierre-Arnaud Barthel (AFD), Ibrahima Ndiaye (BOM), Yann Nachtman (LuxDev)
Coordination technique & rédaction: Mathilde Mouton & Astrid Villepelet, Espelia
Contributions & relecture: Benjamin Buclet & Irène Sesmaisons, Espelia
Conception graphique & illustration : Anne-Charlotte de Lavergne
Photos : © LuxDev
Date de publication : février 2022
Nous remercions également toutes les personnes qui ont contribué à alimenter le référentiel en nous partageant
leurs idées et leurs retours d’expérience : Abdoulaye Ndiaye et Saidou Diaw (Bureau organisation et méthodes, Sénégal),
Abdoulaziz Kane et Aminata Diop (Seneval), Pelagie Kabre (Secrétariat permanent de la modernisation de l’administration et
de la bonne gouvernance, Burkina Faso), Celso Herminio Sores Ribeiro et Goreth Carvalho (Instituto nacional de estatistica,
Cap Vert), Amadou Saley Oumarou et Gado Kone (Haut-Commissariat à la modernisation de l’Etat, Niger), Ngone Ndeye,
Mamadou Tall et Yakhya Cisse (Agence de développement municipal, Sénégal), Boubacar Diallo (Observatoire de l’Emploi et
de la formation, Mali), Saliou Ngom, Ngone Faye et Dielia Ba (Cellule d’études et de la planification du ministère de l’Emploi, de
la formation professionnelle et de l’insertion, Sénégal), Coulibaly Dame (Ministère de la santé et de l’action sociale, Sénégal),
Paul Ouedraogo (Ministère de l’Environnement, de l’économie verte et du changement climatique, Burkina Faso), Alioune Diop
(ONAS, Sénégal), Ngone Tall (Ministère de l’Economie, du plan et de la coopération, Sénégal), Ibrahim Traore et Yempabo Naba
(BOAD), Naceur Chraitihisni (CIFOIT), Coudy Dia, Josaphat Millogo, Julien Patipe, Mireille Hounsa, Evariste Lodi, Mor Gueye,
Frédéric Rouffe, Benjamin Mackay (LuxDev), Laura Amaya, Léa Macias, Aurélie Donne, Aude Delescluse, Bruno de Reviers
(AFD).
PRÉFACE
Comment mieux suivre les appuis au renforcement des ments et bénéfices des appuis ont été appréhendés au niveau
capacités ? Comment s’assurer que ceux-ci contribuent individuel, au niveau des organisations ainsi qu’au niveau sys-
aux changements espérés en termes de plus grande per- témique (gouvernance et environnement institutionnel). Une
formance des organisations mais aussi des systèmes aux- attention a également été donnée à l’agenda des Objectifs du
quels ils participent ? Comment ainsi être en mesure de développement durable et qu’ils signifient en matière de chan-
mieux piloter l’évolution de nos métiers, nos organisations, gements et trajectoires aux trois niveaux évoqués.
nos politiques publiques ?
Résolument tourné vers l’action, ce référentiel est avant tout
destiné aux praticiens, qu’ils soient maîtres d’ouvrage, accom-
A partir d’un groupe composé au départ du Bureau organisa- pagnants techniques ou spécialistes du suivi & évaluation. Il
tion et méthodes (BOM) du Sénégal, de l’Agence française de propose à la fois une démarche dont la motivation est éloignée
développement (AFD) et de l’Agence luxembourgeoise pour la des pratiques classiques et des méthodes et outils à mobiliser
Coopération au développement (LuxDev), la dynamique s’est en fonction du profil et du contexte des appuis à construire ou
progressivement élargie en Afrique de l’Ouest et a associé en cours de mise en œuvre.
une pluralité d’acteurs : institutions partenaires d’Afrique de
l’Ouest (Burkina Faso, Cap Vert, Mali, Niger et Sénégal), colla- Un module de formation a également été développé de manière
borateurs de nos deux agences, experts et accompagnants du complémentaire et des « coachs » ont été formés dans les pays
changement. L’ensemble du processus a été facilité avec brio, partenaires. Ces derniers peuvent éventuellement être sollici-
par Espelia, notre cabinet de conseil partenaire. Nous remer- tés pour l’organisation de sessions de formation.
cions ici tous les intervenants pour leur intérêt et leurs contri-
butions. Nous espérons que cette dynamique se renforcera et
pourra se développer au-delà de ce premier chantier conjoint ! NOUS ESPÉRONS QUE VOUS TROUVEREZ DANS
Il s’agit donc d’un référentiel construit collectivement et issu
CE RÉFÉRENTIEL DES RÉPONSES PRATIQUES ET
d’un processus de concertation et de co-conception qui s’est CONCRÈTES POUR AMÉLIORER VOS DISPOSITIFS
déroulé au cours de l’année 2021. Grâce à un atelier de cadrage DE SUIVI & ÉVALUATION ET LES RENDRE MOTI-
réalisé en virtuel entre janvier et mars, les enjeux, besoins et VANTS POUR VOS ÉQUIPES ET VOS PARTENAIRES
bonnes pratiques ont pu être clairement identifiés. De manière
itérative, les contenus se sont ensuite construits et organi-
EN CAPTANT LES CHANGEMENTS AUXQUELS VOS
sés, avant de faire l’objet d’actions de formation. Les change- ACTIONS CONTRIBUENT. BONNE LECTURE !
Pour l’AFD, Marie BJORNSON-LANGEN, Pour le BOM, Pour LuxDev,

Directrice du département Transition politique Ibrahima NDIAYE Gaston SCHWARTZ
et citoyenne, Direction des opérations Directeur général Directeur général
PRÉAMBULE
À L’ORIGINE DU RÉFÉRENTIEL : UNE ENVIE x accroître la redevabilité des interventions, notamment

COMMUNE D’AMÉLIORER LE SUIVI DES pour justifier les ressources humaines et financières
dédiées à ces activités,
CHANGEMENTS INDUITS PAR LES APPUIS
AU RENFORCEMENT DES CAPACITÉS x capitaliser les leçons tirées des appuis en cours pour
améliorer la conception et le dimensionnement des futurs
Ces dernières années, l‘Agence française de développement appuis.
(AFD) et la Coopération luxembourgeoise (dont LuxDev est
l’agence de coopération pour le volet bilatéral) ont, en complé- Cette ambition commune a donné lieu au lancement d’un
ment de leur activité « traditionnelle » d’investissement, élargi chantier de réflexion sur le suivi & évaluation des change-
leur périmètre d’intervention en développant leur mission d’ap- ments accompagnés en Afrique de l’Ouest. Celui-ci a, dès le
pui aux politiques publiques. Les deux agences ont par ailleurs départ, été conçu en partenariat avec le Bureau organisation
été amenées à répondre aux demandes croissantes de leurs et méthodes (BOM) de la République du Sénégal, dont un pôle
partenaires en matière d’accompagnement technique. Ces est spécialisé dans le renforcement des capacités de l’adminis-
demandes les ont conduites à développer des activités d’ap- tration publique. Il s’est appuyé sur les retours d’expérience des
pui au renforcement des capacités, diversifiées géographi- agences et de leurs partenaires porteurs de projets au Séné-
quement et sectoriellement. Ces nouvelles activités visent une gal, au Mali, au Burkina Faso, au Niger et au Cap Vert, pour per-
montée en puissance, une autonomisation et un changement mettre une définition commune des besoins et favoriser le par-
durable des systèmes sectoriels et des partenaires soute- tage d’expérience.
nus dans le cadre des programmes financés. Ces approches
orientées changement ont notamment été développées en UN RÉFÉRENTIEL MÉTHODOLOGIQUE
Afrique de l’Ouest francophone et au Cap Vert, où les besoins CO-CONSTRUIT, POUR UN S&E MOTIVANT
de consolidation structurelle et institutionnelle sont particuliè-
Animé par le cabinet Espelia, le chantier a abouti à l’élaboration
rement prégnants.
du présent référentiel méthodologique, co-construit avec l’en-
Face à la montée en puissance de ce type d’intervention, mesu- semble des parties prenantes de la démarche.
rer les résultats des appuis au renforcement des capacités
Il vise à sortir des sentiers battus du suivi & évaluation et à
devient un enjeu majeur, aussi bien pour les agences que pour
compléter les méthodes classiques axées sur les résultats,
les maîtrises d’ouvrage et les partenaires nationaux des sec-
pour proposer des méthodologies innovantes et adaptées
teurs appuyés. En effet, si certains changements sont faciles
au suivi des petits et grands changements induits par les
à constater (appui à la création d’une institution ou évolution
appuis au renforcement des capacités.
de cadres juridiques par exemple), d’autres sont peu percep-
tibles car trop diffus, longs, complexes, et difficilement objec- Il vise surtout à faire du S&E une activité motivante pour les
tivables à partir des méthodes de suivi classiques. Le recours à porteurs de projets, leur permettant de mieux s’approprier les
des approches et outils méthodologiques adaptés est donc un actions de renforcement des capacités, de conforter leur pilo-
enjeu de taille pour : tage et d’entraîner l’ensemble de leurs équipes dans une dyna-
mique de changement choisie.
x améliorer le pilotage des projets d’appui au RC, en ana-
lysant les changements induits par les activités mises en Nous vous invitons donc à faire preuve d’ouverture au cours de
œuvre à court et moyen terme, sa lecture, et de créativité dans sa mise en œuvre.
LISTE DES SIGLES & ABRÉVIATIONS
AFD Agence française de développement
AOC Approche Orientée Changement
AT Assistance Technique
BOM Bureau organisation et méthodes
CAD Comité d’Aide au Développement de l’OCDE
CAF Cadre d’Auto-évaluation de la Fonction publique
CARS Cadre d’Auto-évaluation de la Responsabilité Sociétale
DSE Dispositif de Suivi & Evaluation
DSE-M Dispositif de Suivi & Evaluation Motivant, tenant compte des recommandations formulées
dans le présent support
CDDS Cadre pour un Développement Durable Stratégique (Framework for Strategic Sustainable
Development en anglais)
GES Gaz à Effet de Serre
PIC Programme Indicatif de Coopération
PTF Partenaire Technique et Financier
RC Renforcement des capacités
REX Retour d’Expérience
S&E Suivi & Evaluation

6
SOMMAIRE
AVANT DE DÉMARRER 8
1. De quoi parle-t-on ? 9
2. Pourquoi ce référentiel ? 11
2.1. Suivre et évaluer les changements : un besoin d’outillage spécifique 11
2.2. Pour des DSE-Motivants ! 15
2.3. Ce référentiel est fait pour vous si… 15
3. Que vais-je y trouver ? Comment m’en servir ? 15
3.1. Ce que ce référentiel est, ce que ce référentiel n’est pas 15
3.2. Comment il s’organise 16
3.3. Tuto pratique à l’usage des lecteurs 17
CHAPITRE 1
GUIDE MÉTHODOLOGIQUE 18-19

1. Quelles méthodes d’analyse qualitatives privilégier pour suivre et analyser les changements ?
Comment les déployer ? 20
1.1. Analyse qualitative : de quoi parle-t-on ? 20
1.2. Faire de la place à l’inattendu 23
1.3. Déployer ces méthodes dans le temps : le parcours du DSE-M 24
1.4. Des méthodes spécifiques aux différents types d’appui 25
1.5. Ce qu’il faut retenir pour réussir son analyse qualitative 26
2. Quels indicateurs retenir ? Pour quels changements attendus ? 27

2.1. 4 types d’indicateurs pour 4 niveaux de suivi 27
2.2. Le suivi des indicateurs dans le parcours du DSE-M 29
2.3. Intégrer les spécificités des indicateurs de RC 29
2.4. Bonnes pratiques et retours d’expérience 31
2.5. Les ingrédients clés pour bien choisir ses indicateurs 33
3. Organisation & moyens : quels prérequis ? 34

3.1. S’appuyer sur les dispositifs de suivi nationaux 34
3.2. Conforter ou mettre en place les moyens humains et matériels nécessaires au pilotage du DSE-M 35
3.3. Définir clairement les rôles et les responsabilités des parties prenantes 36
3.4. La check-list de départ 37
4. Défis environnementaux et climatiques : quels besoins en matière de RC ? Quel impact sur le S&E ? 38
7
PRÉSENTATION DE LA BOÎTE À OUTILS DU RÉFÉRENTIEL (CHAPITRES 2, 3 ET 4) 41
CHAPITRE 2
FICHES MÉTHODES 44-45

1. Méthode du « changement le plus significatif » 46
2. Méthode de la récolte des incidences 48
3. Méthode de Kirkpatrick 50
4. Méthode d’évaluation de la capacité organisationnelle 52
5. Cadre d’auto-évaluation de la fonction publique (CAF) 55
6. Cadre d’analyse sectoriel de l’Union Européenne 58
7. Cadre pour un développement durable stratégique 60
8. Cadre d’auto-évaluation de la responsabilité sociétale 62
CHAPITRE 3
OUTILS 64-65
1. Grille de questions pour guider l’analyse qualitative 66
2. Déroulé type d’un atelier de collecte et d’analyse de données qualitatives 68
3. Outils pour le S&E au niveau individuel 70
4. Matrice d’indicateurs 76
5. Guide pour un mini-diagnostic rapide des capacités de S&E des porteurs de projets 79
6. Fiche de poste générique pour un(e) responsable de S&E des appuis au RC 80
CHAPITRE 4
CAS PRATIQUES 82-83

Cas pratique n°1 : Déploiement d’un programme de formation individuelle 84
Cas pratique n°2 : Accompagnement à la transformation d’une organisation 86
Cas pratique n°3 : Appui à un projet de réforme sectorielle 88
8 AVANT DE DÉMARRER
AVANT DE DÉMARRER
1. De quoi parle-t-on ?
Dans ce référentiel, les CAPACITÉS sont entendues RENFORCEMENT DES CAPACITÉS (RC) : désigne
comme les aptitudes des individus, des organisations l’ensemble des processus par lesquels les individus,
et de la collectivité à gérer leurs affaires avec succès 1. les organisations et la collectivité dans son ensemble
libèrent, créent, consolident, adaptent et préservent
les capacités au fil des ans 2.
Le RC peut s’exercer à plusieurs niveaux :
au niveau individuel, par des actions de formation,
paysage institutionnel…). A ce niveau, le RC peut se concré-
d’encadrement, de coaching ou de mentorat,
tiser par un appui à la conduite de politiques publiques (ex :
au niveau organisationnel, par la transforma- réforme sectorielle) ou bien par la modernisation de l’action
tion des organisations (développement stratégique, publique de manière plus générale.
pilotage, structuration…), à travers un appui direct
Ces 3 niveaux3 se nourrissent mutuellement et sont étroite-
par des moyens dédiés (ex : assistance technique,
ment imbriqués. En effet, une action de formation individuelle
prestations…), ou bien un échange d’expérience,
peut contribuer à améliorer le fonctionnement d’une organisa-
au niveau systémique, un système étant entendu tion. De la même façon, un programme de transformation orga-
comme l’environnement dans lequel évoluent les nisationnelle peut avoir un impact sur la gouvernance et l’orga-
individus et les organisations (ex : filière, secteur, nisation d’un secteur, et inversement.
Appuis à la conduite de politiques

publiques, Etablissement de SYSTÉMIQUE
NIVEAU réseaux, Accords de coopération
SYSTÉMIQUE
NIVEAU Appui au développement

ORGANISATIONNEL stratégique, au pilotage et à la ORGANISATIONNEL
structuration des organisations
NIVEAU
INDIVIDUEL
Formation, Encadrement, Coaching, INDIVIDUEL
Mentorat
Exemples d’activités de renforcement des capacités rencontrées aux différents niveaux
1. Définition donnée par le CAD de l’OCDE. 2. Idem

3. Catégorisation proposée par la FAO :
https://www.fao.org/capacity-development/resources/videos/videos-01/fr/
Ces approches « invitent les acteurs impliqués à s’interroger

sur leur vision d’un futur commun et sur leurs positions respec-
LES APPUIS AU RENFORCEMENT DES CAPACITÉS
tives ». Autrement dit, elles fédèrent les acteurs autour d’une
englobent les initiatives des partenaires (nationaux ou
vision commune et positive du changement souhaité, avec
extérieurs) des porteurs de projets pour accompagner
pour objectif de les amener à prendre part à ce changement,
le développement des capacités et les processus de
en considérant que les acteurs sont le fondement du change-
changement.
ment social et de sa pérennité.
Dans ce cadre, le changement peut être défini comme un
processus de transformation durable et observable, ayant un
Dans le référentiel, nous nous concentrerons sur les appuis au
impact sur le fonctionnement d’un individu, d’une organisation,
RC financés par des partenaires techniques et financiers exté-
d’un secteur ou d’une société.
rieurs. Soulignons que, si les appuis au renforcement des capa-
cités ont longtemps été adossés aux projets d’investissement
financés par ces derniers, ils sont aujourd’hui bien davantage
LE SUIVI & ÉVALUATION (S&E) combine deux types
intégrés à des processus d’accompagnement du changement,
d’activités :
envisagés sur la durée et indépendamment de la temporalité
des investissements financés. x une activité continue de suivi (monitoring & reporting)
tout au long de l’intervention,
Les appuis au renforcement des capacités se réfèrent de
plus en plus aux approches orientées changement (AOC), x des séquences d’évaluation généralement conduites
entendues par le F3E4 comme « un ensemble d’outils et de par une expertise externe qui interviennent à mi-par-
méthodes pour planifier, suivre et évaluer des actions dont cours et au terme de l’intervention.
le but est d’accompagner des processus de changement5».
IDENTIFICATION FORMULATION LANCEMENT MISE EN ŒUVRE CLÔTURE
Définition de la logique d’intervention Révision de la logique d’intervention
Évaluation ex-ante Évaluation Évaluation

(baseline) à mi-parcours finale
Suivi, veille et pilotage
Processus & étapes du S&E
4. Le F3E est un réseau apprenant d’acteurs et d’actrices de la solidarité et de la coopération

internationale ayant pour mission d’impulser une amélioration des pratiques et de renforcer
les compétences de ces derniers. Il se veut référent en matière d’évaluation des pratiques dans
la sphère francophone.
5. https://f3e.asso.fr/decouvrir-le-f3e/que-faisons-nous/nos-sujets/changement-ap-
proches-orientees-changement-aoc/#:~:text=Les%20%C2%AB%20approches%20
orient%C3%A9es%20changement%20%C2%BB%20sont,accompagner%20
des%20processus%20de%20changement.
Le référentiel vise à favoriser la mise en place d’un proces-

sus dynamique de S&E des appuis au RC en phase de mise en Enfin, un DISPOSITIF DE SUIVI & ÉVALUATION (DSE) est
œuvre (monitoring et reporting). Il ne porte pas directement sur un système qui précise les règles et modalités d’action
la pratique de l’évaluation (ex-ante, à mi-parcours ou ex-post) du suivi & évaluation, relatives aux moyens humains et
mais permet de la faciliter . financiers impliqués, à l’organisation du travail, aux flux
d’information, au calendrier ou aux outils/méthodes à
Le référentiel vise à améliorer les DSE dans leur en- suivre.
semble, et donc à agir sur chacune de ces composantes.
2. Pourquoi ce référentiel ?
2.1. Suivre et évaluer les changements : un besoin d’outillage

spécifique
Mesurer ces changements implique de choisir des indicateurs
Comme indiqué en préambule, les changements induits par les
appuis au RC sont particuliers à plusieurs titres : adaptés, mais aussi et surtout de mobiliser des méthodes
d’appréciation qualitatives, qui permettent de saisir la sub-
x de par leur nature (acquisition de savoir-faire et savoir-être tilité des changements opérés et de compléter les enseigne-
par les individus, changement de pratique, transformation ments qu’offrent les indicateurs quantitatifs.
organisationnelle, évolution du schéma de gouvernance
Le caractère non-linéaire des processus de changement
d’un secteur…), ces changements sont souvent diffus,
appelle également à porter un regard critique sur ces
lents, complexes et peu tangibles,
derniers.
x les processus de changement ne sont pas linéaires.
x Comment est-on passé d’une situation donnée à une autre ?
En effet, il est difficile de prédire l’impact de telle ou telle
action sur des individus, des organisations ou des systèmes. x Quelle a été l’influence du contexte – environnement,
Les processus de changement, ou chemins de changement acteurs, facteurs – sur les changements observés ?
(voir encadré plus bas), sont susceptibles de varier dans le
x Quelles sont les hypothèses/risques susceptibles d’influen-
temps, de même que d’un contexte à l’autre. Une mise à jour
cer l’intervention ?
régulière des activités est donc nécessaire.
Il s’agit de saisir les petits (ou grands) pas ayant mené à une
situation donnée, pour comprendre les processus et éventuelle-
ment ajuster la logique d’intervention au fil de l’eau.
THÉORIE DU CHANGEMENT ET CHEMINS DE CHANGEMENT :
Suivre et évaluer les changements implique de pouvoir formuler non seulement les changements attendus mais aussi
les processus de changement, aussi appelés « chemins de changement ». Pour ce faire, il est recommandé de s’appuyer
sur la Théorie du Changement (ToC).
Une théorie du changement (ToC) est une vision explicitement documentée (et donc évaluable) de la façon dont on pense
que le changement doit se produire (Rick Davies, 2008). Elle offre une vision dynamique des changements visés, et per-
met d’appréhender leur complexité ainsi que la multiplicité des facteurs susceptibles de les influencer.
Elle permet, à partir d’une vision positive et partagée du futur souhaité, de définir les changements visés et d’identifier
les étapes pour y parvenir. Elle facilite ainsi la définition de la logique d’intervention et l’identification des rôles et res-
ponsabilités des parties prenantes.
1. Quoi ? 2. Qui ? 3. Comment ? 4. Quelle

Définir le changement Analyser le contexte Expliciter le processus contribution ?
auquel on s’intéresse dans lequel se produit par lequel se produit Faire le lien
le changement : le changement, et les entre le processus et
acteurs et facteurs valeurs qui sous-tendent l’intervention et planifier
le raisonnement celle-ci.
… puis la façon
Expliciter sa vision du changement… d’y contribuer
Les différentes étapes de mise en œuvre de la Théorie du Changement

Source : Schéma adapté du guide du F3E sur l’accompagnement des processus de changement complexes
Elle repose plus précisément sur :

x la définition d’un objectif de changement de long terme (ou changement final), réalisable sur une période de 10 à 15
ans, et dont l’atteinte nécessite généralement la collaboration des acteurs qui font partie d’un même système social,
x l’explicitation d’un certain nombre de changements intermédiaires (objectifs de changement des acteurs composant
le système), qui sont autant de préconditions pour l’atteinte de l’objectif de changement de long terme,
x la formulation d’hypothèses concernant la façon dont le changement pourrait advenir (hypothèses sur le contexte et
le système dans lequel l’intervention se déroulera, hypothèses concernant les liens de cause à effet supposés entre
les changements intermédiaires et l’objectif de changement final),
x la définition de stratégies appelées « théories d’action » pour chacun des acteurs clés du système, indiquant les acti-
vités à mettre en œuvre et les extrants attendus au niveau de chacun des acteurs pour contribuer aux changements
intermédiaires, et in fine à l’atteinte de l’objectif de changement de long terme.
La ToC permet de visualiser toute la complexité des processus de changement, et de penser des logiques d’inter-
vention en phase avec cette complexité, comparativement au cadre logique qui offre une vision plus réductrice des
interventions et n’invite pas à s’interroger sur les processus de changement.
Le cadre logique reste toutefois très utile pour traduire la stratégie explicitée dans la ToC en étapes pratiques, néces-
saires pour suivre et mettre en oeuvre les activités.
Il est donc possible d’utiliser les deux outils de façon complémentaire : la ToC comme outil de formulation de la vision
stratégique et de la logique d’une intervention, le cadre logique pour la mise en œuvre opérationnelle de l’intervention.
CADRE LOGIQUE VS ToC,
CADRE LOGIQUE ToC

> part des problèmes > part d’une vision positive
> lien de cause à effet linéaire > pensée logique mais non linéaire
> quatre étapes : > autant d’étapes que cela est nécessaire
- activités > vision large plus systémique
- résultats
- effets
- impact
> centré sur le projet
FORCE DE CETTE APPROCHE FORCE DE CETTE APPROCHE

Traduire une stratégie en étapes Expliciter toute une stratégie d’intervention
pratiques & capter la complexité
PROPOSITION DE COMBINER LES DEUX APPROCHES
Analyse comparative des approches ToC et cadre logique

Source : Schéma adapté du manuel LuxDev sur la démarche d’accompagnement du changement
Le cas échéant, il est important de veiller à la correspondance entre les deux outils, comme illustré dans le schéma
ci-dessous.
CHEMINS DE
CHANGEMENT
Défi 4 Défi 1 Objectif global
Vision Objectif spécifique
Résultat Résultat Résultat

Défi 3 Défi 2 1 2 3
Exemple de correspondance possible entre ToC et cadre logique

Source : schéma adapté du guide du F3E sur le S&E des approches orientées changement
Enfin, le niveau de complexité de la ToC, et donc de la démarche associée, peut être adapté aux moyens et à la complexité
de l’intervention, d’une démarche associant toutes les parties prenantes d’un secteur, facilitée par un prestataire exté-
rieur, à une méthodologie plus simple réunissant quelques acteurs stratégiques. Il est également possible d’utiliser l’ou-
til en cours d’exécution, pour ajuster les objectifs et/ou la logique d’intervention.
Pour en savoir plus sur la théorie du changement :
x Guide LuxDev sur le renforcement des capacités pour accompagner le changement
x Manuel LuxDev sur la démarche d’accompagnement du changement
x Guide AFD pour améliorer la structuration des projets visant le RC et leur évaluation
x Guide du F3E sur l’accompagnement des processus de changement « complexes »
x Guide du F3E sur le S&E des approches orientées changement
2.2. Pour des DSE-Motivants !

x placer le S&E dans une logique de progression, d’encoura-
gement et de valorisation des équipes projets, là où il est
Ce référentiel vise également à faire du S&E des appuis au RC souvent vécu comme un processus de contrôle ou d’audit
une activité motivante, utile et entrainante pour les équipes par les principaux intéressés,
projets. Il vous permettra de :
x ancrer le S&E dans les dispositifs nationaux de S&E,
x accéder à des outils simples et adaptables, pour favoriser la bonne appropriation de ce dernier par les
x faire du S&E un outil de dialogue et d’apprentissage, en acteurs nationaux.
encourageant la participation. En effet, un DSE participa-
tif permet de confronter l’appréciation des changements et
Dans la suite du référentiel nous parlerons de DSE-M pour
des chemins de changements par les parties prenantes et
DSE « Motivant » car c’est bien de cela dont il s’agit : vous
de faire émerger une compréhension commune des diffi-
motiver et encourager vos équipes à s’impliquer !
cultés rencontrées et des façons d’y remédier,
2.3. Ce référentiel est fait pour vous si…

Ce référentiel s’adresse à tous les porteurs de projets bénéfi- Il s’adresse plus précisément à vous si :
ciant d’appuis au RC financés par des partenaires techniques
x vous vous interrogez sur les effets des activités de renfor-
et financiers extérieurs (ministères, opérateurs, collectivités,
cement des capacités mises en œuvre et souhaitez en amé-
agences de développement…), de même qu’à leurs accompa-
liorer la mesure,
gnants (institutions spécialisées, assistants techniques, etc.).
x vous percevez des changements à l’œuvre mais peinez à les
Il propose des outils et méthodes éprouvés et présente de
mesurer et souhaitez pouvoir en rendre compte,
bonnes pratiques pour améliorer ou mettre en place un DSE
motivant. x vous avez mis en place un dispositif de S&E mais vous vous
interrogez sur sa pertinence et son adéquation,
x vous vous apprêtez à mettre en place un programme d’ap-
pui au renforcement des capacités et souhaitez anticiper le
S&E lié à celui-ci.
3. Que vais-je y trouver ? Comment m’en servir ?
3.1. Ce que ce référentiel est, ce que ce référentiel n’est pas
CE QUE CE RÉFÉRENTIEL EST CE QU’IL N’EST PAS

x Un support méthodologique pour construire des x Un guide sur le S&E axé sur les résultats
dispositifs de S&E adaptés au RC x Un guide sur le RC et ses déclinaisons opérationnelles
x Une bibliothèque d’outils et de méthodes adaptés x Un guide sur la conduite ou l’accompagnement

au RC individuel, organisationnel ou systémique du changement
3.2. Comment il s’organise ?
1. UN RÉFÉRENTIEL EN PLUSIEURS PARTIES 2. TROIS NIVEAUX D’APPUI, DE MULTIPLES

Le référentiel se compose de plusieurs parties. COMBINAISONS POSSIBLES
Comme expliqué plus haut, les appuis au RC peuvent porter sur
Un guide méthodologique (chapitre 1) contenant des 3 niveaux (individuel, organisationnel, systémique), et se maté-
rialiser à travers différents types d’interventions (projets/pro-
CHAPITRE 1
recommandations et bonnes pratiques concernant les

outils & méthodes à privilégier, les indicateurs de suivi grammes, financements budgétaires, réformes de politique
du RC, le processus et l’organisation à mettre en place publique…), portant sur tout ou partie de ces 3 niveaux.
pour effectuer son S&E, formulées sur la base de la lit- En effet, en fonction de la nature des interventions, ces 3 types
térature existante mais aussi et surtout des retours d’appui peuvent se combiner. Par exemple, un programme d’in-
d’expérience des parties prenantes du chantier. Sont vestissement en infrastructures incluant une composante
également proposés dans cette partie : des encadrés renforcement des capacités pourra comporter des appuis au
sur « ce qu’il faut retenir » , ainsi qu’une check-list niveau individuel (formation des équipes en charge de la ges-
de départ listant les principales conditions à réunir en tion des infrastructures), organisationnel (appui à la structu-
début de projet pour un S&E réussi. ration de l’organisation en charge de la gestion des infrastruc-
tures) ou systémique (évolution du cadre réglementaire du
secteur par exemple).
La majorité des recommandations contenues dans le guide
méthodologique et certains outils et fiches méthodes sont
valables pour les 3 niveaux de RC. A l’inverse, d’autres éléments
sont spécifiques à certains niveaux de RC, en particulier dans
Des fiches méthodes (chapitre 2) décrivant de façon les chapitres 2, 3 et 4. Ils sont repérables par les étiquettes
CHAPITRE 2
plus détaillée Les méthodes évoquées dans le cha- suivantes.

pitre 1, accompagnées de recommandations concer-
nant leur mise en œuvre. Des liens vers ces fiches
méthodes sont indiqués dans le chapitre 2.
Des outils (chapitre 3) pour mettre en pratique les

CHAPITRE 3
recommandations du guide dès demain (ex : fiche de

poste d’un(e) chargé(e) de S&E, matrice d’indicateurs,
déroulé type d’un atelier de collecte et d’analyse des
changements…). Des renvois vers ces outils sont éga-
lement à retrouver dans le guide méthodologique.
Ces étiquettes vous permettent d’aller piocher les

recommandations et les outils/méthodes les plus appro-
priés à vos interventions. Suivez donc les étiquettes pour
composer le DSE correspondant à votre intervention !
CHAPITRE 4
Des cas pratiques (chapitre 4) pour illustrer la mise

en application du guide dans le cadre d’interven-
tions-types aux trois niveaux de RC.
3. UN QUESTIONNEMENT TRANSVERSAL
Les défis environnementaux et climatiques actuels imposent Le chapitre 1.4 du référentiel propose ainsi des outils pour inté-
de développer de nouvelles compétences et de nouveaux grer ces enjeux dans la formulation des changements attendus,
métiers. Elles amènent également les organisations à revoir aussi bien au niveau individuel qu’aux niveaux organisationnel
leur stratégie et leurs pratiques, et bousculent les politiques et systémique, de même que dans le S&E du RC. Ce chapitre est
publiques et les cadres réglementaires nationaux. une bonne base de réflexion sur les capacités à renforcer pour
Il est donc essentiel d’intégrer ces enjeux à la formulation des atteindre les objectifs de développement durable permettant
changements visés à travers les appuis au RC, et de suivre & d’assurer la transition écologique et solidaire.
évaluer ces changements pour mieux répondre à ces nouveaux
défis.
3.3. Tuto pratique à l’usage des lecteurs
Il est possible de naviguer dans le référentiel de plusieurs façons.
En fonction de la nature de votre projet : En fonction de votre niveau de maîtrise du sujet :
x si votre projet porte sur l’un des 3 niveaux de RC évo- x vous souhaitez améliorer un dispositif existant ou
qués : en prenant ce niveau comme fil conducteur construire un DSE de bout en bout (besoin global/ques-
(suivez les étiquettes !) , tion de méthode) : commencez par le guide méthodo-
logique (chapitre 1),
CHAPITRE 1
x vous êtes au point sur la méthode mais cherchez de l’ins-

piration pour mettre en pratique/concrétiser vos idées :
aller directement aux cas pratiques (chapitre 4),
CHAPITRE 4
x vous avez besoin d’un outil/une méthode adaptée aux

spécificités de votre projet : allez directement aux
chapitres 2 et 3.
x si vous avez un projet hybride : en allant piocher des
idées aux différents niveaux. CHAPITRE 2 CHAPITRE 3
18
CHAPITRE 1
CONCEVOIR ET METTRE EN ŒUVRE

SON DSE-M : RECOMMANDATIONS
& BONNES PRATIQUES
CE CHAPITRE RÉPOND À LA QUESTION SUIVANTE :
comment passer d’une logique de suivi d’indicateurs axés

sur des résultats à une logique de suivi de changements
complexes et diffus ?
19
CE QUESTIONNEMENT GÉNÉRAL SE DÉCLINE EN 4 SOUS-QUESTIONS.
Quelles méthodes d’analyse

qualitatives peut-on mobiliser
Quels sont les indicateurs les
pour analyser les changements
plus adaptés au suivi
et mieux comprendre les chemins
des changements visés ?
de changement ?
Quelle organisation et Quelles sont les capacités à

quels moyens faut-il prévoir renforcer pour relever les défis
pour assurer le S&E des environnementaux et climatiques
changements ? de notre temps ? Comment suivre
& évaluer ces capacités ?
VOUS TROUVEREZ NOTAMMENT DANS CE CHAPITRE.
REX OUTILS FICHES

MÉTHODES
Des recommandations et bonnes Un inventaire d’outils et de méthodes de S&E qualitatifs adaptés aux
pratiques en réponse à ces différents types d’appui.
questions, alimentées par des
retours d’expérience.
PARCOURS MATRICE CHECK-LIST

TYPE D’INDICATEURS
Une proposition de parcours Un renvoi vers une matrice Une check-list des prérequis pour
type pour le déploiement de ces d’indicateurs adaptés au suivi des réussir le S&E de son appui au RC.
méthodes. changements (voir version détaillée
au chapitre 3).
CHAPITRE
20 1 GUIDE MÉTHODOLOGIQUE
1. Quelles méthodes d’analyse qualitatives privilégier

pour suivre et analyser les changements ?
Comment les déployer ?
1.1. Analyse qualitative : Comme l’explique le F3E dans son guide sur le S&E des
de quoi parle-t-on ? Approches Orientées Changement, l’analyse qualitative des
changements revient à observer des évolutions d’acteurs
(individuels et/ou collectifs), qui peuvent concerner :
Comme expliqué dans le chapitre Avant de démarrer 2.1, la x des comportements, états d’esprit, représentations,
principale difficulté du S&E des appuis au RC réside dans la
nécessité de suivre des changements complexes et diffus, qui x des relations entre les acteurs (collaboration, rapports de
ne sont pas toujours assortis de résultats tangibles et faci- force, etc.),
lement objectivables (ex : améliorer les services rendus par x des connaissances, des savoir-faire, une organisation, des
une organisation, améliorer les savoir-être et savoir-faire des règles, des actions ou pratiques (que l’acteur ne faisait pas
agents, améliorer la gouvernance d’une politique publique). avant, ou qu’il faisait différemment).
Le suivi de ces changements se fait grâce à des méthodes Pour mesurer ces changements, il est pertinent :
d’analyse qualitative reposant sur la qualification et l’éva-
x de donner la parole, de manière organisée, aux acteurs clés
luation des changements par les principaux acteurs et/ou
du projet et de son environnement,
bénéficiaires des appuis.
x de porter un regard pluriel sur le projet, les acteurs, l’en-
vironnement, et ainsi prêter attention aux petits et grands
changements.
Comportements,
états d’esprits,
représentations
Il s’agit ensuite de trouver un équilibre entre les témoignages
Actions ou
pratiques Relations individuels et collectifs d’une part, et de récolter des indices
(que l’acteur entre acteurs pour compléter ces témoignages et rendre les changements
ne faisait (collaboration,
rapports de observés plus « tangibles » (ex : exemple de mise en applica-
pas avant, ou
différemment) CHANGEMENT force, etc.) tion d’une pratique ou d’une procédure, chiffres clés, données
quantitatives recueillies via les enquêtes par questionnaire,
etc.).
La collecte de ces témoignages et analyses peut se faire via :
Organisation, Connaissances,
règles savoir-faire x des observations de terrain et entretiens avec les parties
prenantes du projet,
x des enquêtes par questionnaires,
x des focus groupes et/ou ateliers d’échange avec les parties
Source : Schéma adapté du guide du F3E sur le S&E des approches orientées prenantes.
changement
CHAPITRE
GUIDE MÉTHODOLOGIQUE 1 21
REX sur la conduite d’enquêtes de satisfaction (PIC III Mali-Luxembourg) 6
Dans le cadre du programme « formation et insertion pro-

fessionnelle » du PIC III Mali, dont l’objectif global est de
« soutenir la création d’emploi en priorité pour les femmes
et les jeunes et les activités génératrices de revenus »,
des enquêtes de satisfaction sont réalisées par l’ONEF-
(Observatoire national de l’emploi et de la formation)
auprès des employeurs.
Réalisées de façon périodique, ces enquêtes ont pour

but non seulement de connaître l’évaluation que font les
employeurs des programmes de formation au regard de
leurs attentes mais aussi d’anticiper leurs besoins futurs.
Pour ce faire, les questionnaires d’enquête comprennent
une grille d’évaluation permettant de croiser les attentes
de l’employeur avec son appréciation des compétences
maîtrisées par le diplômé recruté. Une deuxième grille
d’évaluation permet de comparer le niveau général d’un
diplômé sortant (en termes de connaissances, de capa-
cités ou savoir-faire et d’attitude à l’égard du travail ou
savoir-être) avec celui d’un diplômé sortant d’une autre
formation. C’est l’ensemble de ces éléments qui permet
de mesurer la satisfaction des employeurs.
Attentes de l’employeur
L’employeur identifie ses attentes vis-à-vis des connaissances,
capacités et attitudes de l’employé à l’égard du travail
Expérience professionnelle avec l’employé

Au cours de l’exercice de sa fonction, l’employé est observé
par son employeur suivant ses attentes
Perception d’un écart entre expérience et attentes

L’employeur fait une évaluation des caractéristiques de l’employé
et peut dire s’il est satisfait ou pas
Satisfaction Insatisfaction
6. Troisième Programme indicatif de coopération (PIC III) passé entre la République du Mali et le Grand-Duché de Luxembourg sur la période 2015-2019, avec pour objectif d’appuyer le
gouvernement malien dans ses efforts visant à réduire la pauvreté, à travers un appui à la croissance inclusive et durable et à la réduction de l’insécurité alimentaire.
CHAPITRE
REX
Cette mini-enquête a permis :

x de mieux apprécier l’utilisation des outils et informa-
tions agro-météorologiques sur le terrain, c’est-à-dire
de comprendre comment et à quelle fréquence les
données pluviométriques sont récoltées et de cerner
l’usage de ces données dans la planification des activi-
tés agricoles,
x de mieux comprendre le comportement des bénéfi-
ciaires face aux changements proposés et leurs éven-
tuels points de blocage : certains par exemple n’étaient
pas équipés en chaussures de sécurité pour la collecte
de données,
x d’expliquer les écarts d’impact entre les régions : l’utili-
sation des outils et informations agro-météorologiques
a été plus forte dans les régions où les paysans observa-
Dans le cadre du programme Développement rural et Sécu- teurs ont réalisé un travail de sensibilisation sur l’intérêt
rité alimentaire, visant à diversifier et renforcer durable- de la technologie dans leur entourage proche.
ment les sources de revenus et la sécurité alimentaire des Le bilan de l’enquête a été globalement positif. Cet exer-
ménages ruraux de la zone de concentration Sud du pays cice a, en fin de compte, permis d’identifier des points
par le développement et l’intensification de la productivité, d’amélioration. Les appuis au RC ont ainsi été réajustés,
de la durabilité et de la profitabilité de trois filières agri- notamment pour accroître l’effort de formation.
coles (riz, sésame et fonio), des mini-enquêtes ciblées ont
été menées pour approfondir l’analyse de certains change- Facteurs clés de succès pour la réplication de ce type
ments provoqués par le projet et non reflétés par les indi- d’enquête :
cateurs retenus par le cadre logique. x confier la collecte des données à des enquêteurs exté-
A titre d’exemple, une de ces mini-enquêtes visait à évaluer rieurs au projet afin de réduire les biais relationnels et
les effets de la mise à disposition de pluviomètres dans ainsi recueillir des témoignages fidèles à la réalité,
certains villages, de même que ceux de la formation dis- x éviter les questions trop complexes,
pensée par Mali Météo sur la capacité des paysans à plani- x digitaliser les enquêtes pour améliorer la fiabilité des
fier leurs activités agricoles en fonction des informations données et faciliter leur traitement,
agro-météorologiques. x réaliser les enquêtes après un temps de recul suffisant
sur le projet.
1.2. Faire de la place à l’inattendu constatés, même si non prévus dans le cadre logique et/ou
dans la théorie du changement de l’intervention, pour s’inter-
roger sur les causes de ces changements et ajuster le mode
Le suivi qualitatif des changements peut porter sur des chan- opératoire en conséquence. Ces méthodes permettent égale-
gements attendus et inattendus. Les processus de RC n’étant ment de faire évoluer des interventions qui n’auraient pas fait
pas linéaires, et les liens de cause à effet parfois difficiles à l’objet d’une logique d’intervention clairement définie, en préci-
anticiper, il peut être intéressant de partir des changements sant les chemins de changement au fil de l’eau
CHAPITRE
FICHES MÉTHODES
Le recueil de ces changements inattendus peut se faire La méthode de la « récolte des incidences »
par les entretiens (individuels et/ou collectifs) et les (appelée « outcome harvesting » en anglais) consiste à
enquêtes précédemment évoquées. Il existe également recueillir des preuves de changement chez les parties pre-
des méthodes plus complètes permettant de recueillir nantes/bénéficiaires d’une intervention, puis à évaluer
mais aussi de synthétiser et de hiérarchiser les change- la contribution de celle-ci à ces changements. A la diffé-
ments observés. rence du « Changement le plus significatif », les change-
ments sont repérés à travers une analyse documentaire
La méthode du « Changement le plus signi-
en chambre (en s’appuyant notamment sur les rapports
ficatif » est une technique de suivi & évaluation qui de projet), et confrontés ensuite aux points de vue des
consiste à recueillir des récits de bénéficiaires ou de por- parties prenantes dans des focus groupes, avant d’être
teurs d’un projet sur les changements ayant eu lieu au hiérarchisés.
cours de l’intervention. Ces multiples « récits de change-
ment » permettent de rendre compte de la complexité du Cette méthode est particulièrement utile lorsque les
terrain et offrent ainsi une image plus fine des évolutions objectifs et les activités ne sont pas suffisamment précis
MAP OF OUTCOMES
à l’œuvre. Le nombre de récits visé dépend du budget et ou mesurables au moment de la planification d’une inter-
du temps que l’on peut consacrer à la démarche. Un plus
(1) ATI oversight (2) Chile ATI agency
vention. La méthode est donc adaptée à l’évaluation de
grand nombre de récits permet d’avoir une image plus fine
agencies in Mexico
and Chile conducted
peer exchanges to
proposed online
mechanism to
share knowledge
(11) Colombia’s
ATI agency formally
(17) Network agreed
(18)* ATI agencies
in Brazil, Chile,
Mexico, Peru and
situations dynamiques et incertaines.
to conduct first mystery
de la situation, mais implique de disposer de ressources

strengthen their among other Latin expressed interest Uruguay used
capacities for ATI American agencies shopper exercise
in joining network exercise to identify
implementation to assess ATI law
reform needs in key
compliance in countries
plus importantes pour l’analyse.

sectors
(3) Chile ATI agency conducted and
published an assessment that identified
needs among the oversight bodies
(10)* Peru’s ATI
agency requested (22) Open
Government
Importance
(16) Network decided
(du changement)
support from
La méthode consiste plus précisément à (i) identi-

network for on four priority areas Partnership invited
(4)* Bolivia, Chile, network to lead
Mexico, Peru and knowledge for action learning of
exchange visit its working groups to panel to explore role
Uruguay ATI agencies
fier les acteurs dont le point de vue est le plus révéla-

with Chilean advance ATI of oversight bodies
formally established advancing ATI
Latin America network member
of ATI oversight bodies
(19) Chile ATI agency, as
teur des changements, (ii) récolter les récits auprès de (15) Network members group coordinator, published Chgt 1
(5)* Network reached (8) Brazilian agency
embed working groups first report on records
Forte Chgt 3
ces acteurs par le biais d’entretiens, de focus groupes ou Chgt 4 Chgt 5
larger audience in ATI agency structure management practices
responsible for coordinating for regional work to
by publishing first implementation and
newsletter to share inform country reforms
oversight of ATI law joined (20) Chile ATI agency
de fiches à renseigner, (iii) définir des critères de sélec-

information on ATI network organized seminar to
across region (77 issues
inform the debate on
to date) (14) Network records management Moyenne
tion de ces récits pour ne retenir que les plus significa-
(6) Network
(7) Network
launched
(9) Network
members
(12) Network (13)
incorporated
Network
members
members
approved
2013–2015
reforms
tifs, (iv) soumettre ces récits à un jury constitué de per-

established revamped approved feedback
gave input strategic plan, (21) Chile National
strategic website to its bylaws from ensuring long- Audit Agency using
to commonly
guidelines, communicate practitioners term sustainability this information to
Faible
owned
sonnes situées aux différents niveaux de responsabilité Chgt 2

mission and ATI issues among and CSOs for and commitment develop guide that
2013–2015
vision members and 2013–2015 from national to updates archives
strategic
larger audience strategic plan regional levels regulations
plan process
de l’intervention,
2011
qui procède à l’identification
2012
des chan-
2013
Faible Moyenne Forte
gements les plus significatifs sur la base des critères de
Institutional changes
Outcomes related to societal, policy and organizational changes
Learning/capacity changes
Other outcomes related to awareness, knowledge or
Contribution
sélection prédéfinis.
Commitment, participatory priority setting, transparency skills, collaborative action, or the use of knowledge or (du projet au
innovative solutions.
Guidance to implement ATI policy
Effectiveness of ATI network and agencies * Outcomes selected for substantiation; see sidebar.
changement)
Priorisation des changements via la méthode

de récolte des incidences
Source : Schéma adapté du guide de la F3E sur le S&E des AOC
Ces méthodes sont décrites de façon plus détaillée dans les fiches méthode figurant au chapitre 2.
CHAPITRE
1.3. Déployer ces méthodes dans Les changements intermédiaires ou petits pas peuvent être
identifiés et analysés à un rythme semestriel ou annuel. La col-
le temps : le parcours du DSE-M lecte et l’analyse des grands changements (ou changements
finaux) nécessite en revanche plus de recul et se fait de façon
Le S&E des changements s’effectue en continu selon l’enchaî- plus espacée (tous les 2-3 ans en fonction des interventions). Il
nement collecte – analyse – remontée – ajustement, illustré par peut être intéressant de faire correspondre cette analyse avec
le schéma ci-dessous. la conduite des évaluations intermédiaires et ex-post, pour que
ces dernières s’en nourrissent.
Pour l’analyse des changements intermédiaires ou petits
Ajustement pas, il est recommandé d’utiliser des méthodes peu coûteuses
du projet Collecte des
changements et faciles à déployer, comme des entretiens individuels ou col-
lectifs avec les principaux acteurs du projet.
Pour l’analyse des grands changements ou changements
finaux, il est possible de déployer des méthodes plus élabo-
Remontée rées, comme la conduite d’enquêtes par questionnaire et/ou
de l’information l’organisation d’ateliers réunissant l’ensemble des parties pre-
aux instances Analyse &
décisionnaires priorisation des nantes de l’intervention, en particulier les usagers/bénéfi-
changements ciaires finaux.
Le cycle du suivi & évaluation
Atelier du Atelier « de la mi-temps » : Atelier « de la ligne d’arrivée » :

« top départ » analyse des grands analyse des grands changements
changements à mi-parcours en fin de projet
Pause des Pause des

« petits pas » Prise de recul « petits pas » Prise de recul
(N+1, N+2) sur les grands (N+4) sur les grands
changements visés changements visés
Collecte & analyse – Atelier collectif Collecte & analyse – Atelier collectif
Formalisation du
des changements avec les parties des changements avec les parties
DSE-M dans une
intermédiaires prenantes intermédiaires prenantes
démarche de
co-construction ou « petits pas » ou « petits pas »
- (le résultat de cet - (le résultat de cet
Célébration atelier pourra Célébration atelier pourra
- nourrir l’éval à - nourrir l’éval
Ajustement du DSEM mi-parcours) Ajustement du DSEM ex-post)
Le parcours du DSE-M : suivre les petits et les grands pas
Dans le chapitre 3, vous trouverez :

x une proposition de déroulé type pour l’organisation d’un atelier de collecte et d’analyse des
changements,
x une grille de questions pouvant guider l’analyse qualitative des petits et grands changements, et de
leurs ressorts opérationnels (moyens, activités mises en œuvre, etc.).
CHAPITRE
1.4. Des méthodes spécifiques

aux différents types d’appui
Les démarches de S&E sont à adapter selon les niveaux de RC tème de suivi du niveau de la satisfaction des bénéficiaires
sur lesquels portent les appuis, et selon le type d’intervention. et de l’évolution de leurs compétences. Ensuite, on cherchera
Les paragraphes ci-dessous présentent quelques exemples à mesurer le degré d’application des compétences acquises
de méthodes plus spécifiquement adaptées à chaque niveau en situation de travail et si possible, de les relier aux perfor-
d’appui. mances des organisations soutenues. Les appuis au niveau
individuel sont en effet généralement reliés à des enjeux plus
macro.
Pour faciliter la mise en place de ce type de dispositif de suivi,
Lorsque les appuis portent sur le niveau individuel, qu’il il est possible de se référer au modèle de Kirk Patrick, qui dis-
s’agisse de programmes de formation ou de coaching/mento- tingue quatre niveaux dans la montée en compétence et pro-
rat, il est fortement recommandé de mettre en place un sys- pose des outils adaptés au suivi de chacun des niveaux.
NIVEAU 4 : RÉSULTATS
Si les trois premiers niveaux sont directement liés
NIVEAU 2 : APPRENTISSAGES à l'impact sur l'apprenant lui-même, le quatrième
Ce second niveau est celui de l'évalua- niveau s'intéresse aux bénéfices factuels de la
tion pédagogique : ce qu'il a appris. Pour formation pour l'organisation et fait le lien avec le
ce faire, il est recommandé de conduire niveau supérieur. Il peut être apprécié via des
un test d’entrée et un test de sortie. Cela observations de terrain et/ou des entretiens
4 individuels et collectifs avec les représentants de
a l’avantage de faire ressortir l’évolution
des compétences directement liée à la RÉSULTATS l’organisation.
formation réalisée.
3
COMPORTEMENTS
2
APPRENTISSAGES
NIVEAU 3 : COMPORTEMENTS
1 Le troisième niveau s'attache à
RÉACTIONS estimer les conséquences opéra-
NIVEAU 1 : RÉACTIONS tionnelles pour l’apprenant : ce qui a
Ce premier niveau permet de évolué dans sa manière de travailler. Il
mesurer le degré de satisfaction peut être évalué via la conduite
de l'apprenant, ce qu'il a apprécié. d’enquêtes de suivi post-formation sur
Il peut être évalué par des le terrain, auprès des apprenants
questionnaires de satisfaction à directement ou de leurs supérieurs
la sortie de la formation. hiérarchiques.
Modèle de Kirk Patrick
Une fiche méthode plus détaillée est fournie au Chapitre 2, de même que des exemples d’outils pour le moni-
toring individuel au Chapitre 3 (questionnaire de satisfaction et questionnaire de suivi post-formation, extraits
du guide RC de LuxDev).
CHAPITRE
Lorsque les appuis visent à accompagner la transforma- Lorsqu’il s’agit d’appuis plus systémiques, comme l’appui à la
tion d’une organisation, il est possible et indiqué de suivre et conduite d’une réforme sectorielle, il est recommandé de s’ap-
d’évaluer la progression des structures appuyées en termes puyer sur le diagnostic institutionnel initial pour définir les prin-
de maturité organisationnelle et de performance. Cela peut se cipaux axes de renforcement des capacités, et de s’appuyer sur
réaliser à travers un suivi des feuilles de route élaborées suite cette feuille de route pour identifier les éléments devant faire
aux diagnostics réalisés en début de processus, avec une fré- l’objet d’un suivi régulier. La Commission européenne a notam-
quence annuelle par exemple. ment développé un cadre d’analyse des programmes secto-
riels nationaux qu’elle appuie et de leur système de gouvernance.
Pour ce type d’appui, des outils d’évaluation de la capacité orga-
Celui-ci repose sur 5 piliers : stratégie et politique sectorielles,
nisationnelle peuvent être inclus dans le dispositif de S&E, per-
budget sectoriel, cadre de coordination sectorielle, cadre insti-
mettant de suivre l’évolution des capacités de la structure selon
tutionnel et capacités, système de suivi de la performance. Sur
une grille de critères pondérés, régulièrement soumise à l’éva-
cette base, un outil d’analyse a été développé par LuxDev et est
luation croisée des différentes parties prenantes. De tels outils
présenté au Chapitre 2. L’outil d’analyse de la Commission Euro-
permettent d’instaurer une dynamique continue de renforce-
péenne est également présenté au Chapitre 3.
ment des capacités de l’organisation. L’outil de mesure de l’au-
tonomisation des organisations développé au Mali avec l’appui Comme développé au Chapitre 1.2.4, lorsque l’intervention
de LuxDev et décrit au Chapitre 3 est un bon exemple. impacte plusieurs structures parties prenantes d’un système, il
est recommandé de réaliser ce travail de diagnostic au niveau de
Le Cadre d’Auto-évaluation de la fonction publique (CAF) est un
chacune des structures, et de décliner la stratégie/le plan de
exemple plus complexe mais aussi plus complet d’outil de ce type. Il
RC global en mini-plans de RC adaptés à chacune d’entre elles.
repose sur un principe d’auto-évaluation participative de l’organisa-
tion7 à intervalles réguliers sur la base de 9 critères, et vise à favo- L’analyse des effets des appuis au RC à moyen/long terme peut
riser l’intégration du principe d’amélioration continue au sein des également se faire en mesurant la qualité du service public
organisations publiques. Conçu comme un outil de gestion totale rendu, avec des méthodes comme celle du patient/client caché
de la qualité, il a été développé par le secteur public pour le sec- ou par l’intermédiaires de boîtiers proposant 3 ou 4 smileys
teur public et inspiré du modèle d’excellence de la Fondation euro- pour mesurer la satisfaction des usagers à chaud.
péenne pour la gestion de la qualité (EFQM).
Il repose sur l’idée que les résultats en matière de perfor-
mances clés, s’ils font l’objet d’une bonne adhésion de la part du 1.5. Ce qu’il faut retenir
personnel de la structure et sont remontés à intervalles régu-
liers aux décideurs, peuvent créer une dynamique d’améliora-
pour réussir son analyse
tion continue et conduire à l’excellence. qualitative
S’étalant sur le temps long, cette méthode est adaptée aux
structures disposant de la maturité organisationnelle suffi- x Donner la parole, de manière organisée, aux acteurs
sante pour mobiliser un ou plusieurs groupes d’auto-évalua- clés de l’intervention et de son environnement.
tion, et mettre en place les différentes instances de concerta- x Trouver un équilibre entre les témoignages individuels
tion/décision. Elle nécessite également une forte implication et collectifs.
des décideurs, et un accompagnement des personnes enga- x Associer les acteurs à la formulation mais aussi à la
gées dans les groupes d’auto-évaluation. priorisation des changements observés.
x Faire de la place à l’inattendu.
x Objectiver autant que possible les témoignages par
L’outil de mesure de l’autonomisation des des illustrations tangibles (ex : exemple de mise
organisations de même que le CAF sont pré- en application d’une pratique ou d’une procédure,
sentés de façon plus détaillée dans les fiches chiffres clés, données quantitatives recueillies via les
méthode du Chapitre 2. enquêtes par questionnaire).
x Questionner aussi bien les changements que les che-
mins de changement (comment en est-on arrivé là ?).
x Alterner pauses des petits pas et des grands pas,
pour prêter attention aux petits et grands change-
ments, avec mobilisation d’outils/méthodes adaptés à
chaque niveau d’analyse.
x Choisir des outils/méthodes adaptés au niveau de
7. L’auto-évaluation est réalisée par un ou plusieurs groupes de 12 personnes maximum, aussi
représentatifs que possible de l’organisation (voir Annexe 1.5 pour plus d’information). l’appui et à la nature des activités.
CHAPITRE
2. Quels indicateurs retenir ? Pour quels changements

attendus ?
2.1. Quatre types d’indicateurs gement organisationnel). Ils peuvent prendre la forme d’indi-
cateurs de processus ou de progrès pour refléter la progres-
pour quatre niveaux de suivi sivité des changements (voir chapitre 1.2.3).
x Les indicateurs de réalisations (ou d’activités) sont basés
Le suivi des changements ne se limite pas au suivi d’indica- sur les actions concrètes mises en œuvre dans le cadre
teurs. Toutefois, ce dernier permet d’objectiver certains élé- d’une intervention. Ils ne permettent pas à eux seuls de
ments du S&E, en complément de l’analyse qualitative. suivre l’impact de ces actions sur les systèmes et les bénéfi-
ciaires finaux, mais permettent de rendre compte des acti-
Dans ce guide, nous vous proposons de distinguer 4 types d’in- vités effectivement mises en œuvre, et peuvent être utili-
dicateurs, correspondant à différents niveaux de suivi des sés pour expliquer l’atteinte de tel ou tel changement. Ex :
interventions et situés au croisement des indicateurs de la ToC nombre et nature des formations dispensées, nombre et
et du cadre logique. nature des processus impulsés au sein d’une organisation,
x Les indicateurs de changements finaux (ou d’effets) : ils etc. Ils peuvent correspondre aux indicateurs d’extrants du
correspondent aux changements finaux attendus. Ils vont cadre logique.
donc au-delà des capacités. Ils reflètent les effets du RC sur x Les indicateurs de moyens (ou d’intrants) concernent les
l’environnement et les conditions de vie des bénéficiaires moyens et/ou conditions à réunir en début d’intervention
finaux (amélioration de la performance individuelle et col- pour permettre la mise en œuvre des actions. Appelés indi-
lective, du fonctionnement et de la gouvernance d’un sec- cateurs d’intrants dans le cadre logique, ils constituent une
teur, de la qualité d’un service rendu, etc.). Également appe- check-list de préalables essentiels à la réussite de l’inter-
lés indicateurs d’effet dans la ToC, ils peuvent correspondre vention. Ex : part du budget disponible, moyens RH, pré-
aux indicateurs des objectifs spécifiques dans le cadre sence de préalable type fiche de poste, organigramme ou
logique. autre.
x Les indicateurs de changements intermédiaires (ou de Ces indicateurs peuvent être définis à partir de la ToC et/ou
résultats) : ils reflétent les acquis essentiels pour atteindre du cadre logique. En effet, comme expliqué au chapitre Avant
les effets escomptés, autrement dit les capacités acquises de démarrer 2.1, la ToC permet, à partir d’une vision positive et
aux niveaux individuel (ex : amélioration des savoir-être, partagée du futur souhaité, de définir les changements macro
savoir-faire et savoir-agir du personnel), organisationnel escomptés (les effets) et d’identifier les étapes pour y parve-
(ex : amélioration des pratiques managériales d’une struc- nir : résultats ou changements intermédiaires, produits, acti-
ture) ou systémique (ex : clarification des rôles et responsa- vités à mettre en œuvre. S’ils ne sont pas souvent formulés en
bilités des acteurs intervenant dans un même secteur, éla- termes de changements escomptés, les objectifs spécifiques
boration d’une feuille de route sectorielle). du cadre logique peuvent être assimilés aux effets ou chan-
Ils doivent être plus précis que les indicateurs de change- gements macro, et les résultats visés aux changements inter-
ments finaux, et plus facilement objectivables (Ex : % de médiaires. La ToC peut d’ailleurs être utilisée pour reformuler
personnes formées ayant mis en application une des com- les objectifs et résultats d’un projet en termes de changements
pétences visées, part des nouveaux processus appliqués macro et intermédiaires.
dans une organisation, % du personnel adhérant à un chan-
CHAPITRE
Changements dans la vie OBJECTIFS GLOBAUX

RESULTATS
EFFETS des bénéficiaires finaux
Indicateurs de
OBJECTIF SPECIFIQUE changements finaux
Pour lesquels un nb
Indicateurs de
RESULTATS
RESULTATS de changements RESULTAT 1 RESULTAT 2 RESULTAT 3 changements
intermédiaires
sont nécessaires intermédiaires
SOUS-RESULTAT SOUS-RESULTAT SOUS-RESULTAT
Pour lesquels un nb
PRODUITS de produits et services Indicateurs de
ACTIVITES réalisation
sont nécessaires
Ressources Ressources Ressources

Pour lesquels un nb humaines financières matérielles
ACTIVITES d’activités sont à mettre Indicateurs de
en oeuvre INTRANTS moyens
Niveaux d’indicateurs dans une ToC Niveaux d’indicateurs dans un cadre logique Indicateurs de RC
Schéma illustrant la correspondance entre indicateurs ToC et cadre logique

Source : LuxDev et AFD
Les 4 types d’indicateurs proposés ici se situent à la croi- • Quelles sont les capacités que je cherche à développer
sée des indicateurs ToC et cadre logique. Pour les identifier, chez les individus, aussi bien en termes de savoir-être que
il est conseillé de partir des changements finaux ou macro de savoir-faire ou de savoir-agir ?
escomptés pour remonter vers les moyens (ou intrants), • Comment le projet doit-il contribuer à faire évoluer mon
comme illustré ci-dessous. organisation, aussi bien en termes de fonctionnement
La formulation des indicateurs peut ainsi se faire en réponse interne/stratégie que vis-à-vis de ses interactions avec
aux questions suivantes. son environnement ?
• Quels sont les changements structurels que le pro-
x Quels sont les changements macro que je cherche à pro-
jet cherche à provoquer dans le fonctionnement de mon
voquer via mon intervention ? Autrement dit, quels sont les
secteur/environnement ?
effets de moyen/long terme recherchés sur les conditions
de vie des bénéficiaires finaux et sur leur environnement ? x Quelles activités faut-il que je mette en œuvre pour atteindre
ces résultats ?
x Quels sont plus concrètement les changements intermé-
diaires ou les résultats que je dois obtenir pour réaliser ces x Quels moyens faut-il que je mobilise pour réaliser ces
changements ? Autrement dit : activités ?
Résultats obtenus CHANGEMENTS

RÉALISATIONS ou « petits pas » FINAUX
Moyens et conditions nécessaires à l’atteinte
à réunir en début de Activités mises en œuvre des grands changements Effets de l’intervention
projet (aussi appelés et/ou investissements sur l’environnement et les
intrants) réalisés CHANGEMENTS bénéficiaires finaux
(objectifs spécifiques du CL)
MOYENS INTERMÉDIAIRES
La matrice d’indicateurs fournie au Chapitre 3 propose une liste d’indicateurs utilisables à tous les
niveaux de suivi et pour chaque niveau d’appui au RC (individuel, organisationnel, systémique). Les indi-
cateurs peuvent être utilisés en tout ou partie en fonction de la complexité du suivi, et adaptés au cas par
cas selon les projets.
CHAPITRE
2.2. Le suivi des indicateurs x Les indicateurs de changements intermédiaires ou de

résultats, reflets des « petits pas », peuvent être suivis sur
dans le parcours du DSE-M une base semestrielle ou annuelle.
x Les indicateurs d’effet ou de changements macro, reflets
L’analyse des différents types d’indicateurs ne se fait pas selon des « grands pas », doivent faire l’objet d’un suivi plus
la même temporalité. espacé (tous les 2-3 ans). Ce suivi peut être corrélé aux éva-
luations intermédiaire et finale, pour nourrir l’évaluation
x Les indicateurs de suivi opérationnels (moyens et activi-
externe des interventions.
tés) permettent de suivre la mise en œuvre du projet au quo-
tidien et peuvent être suivis sur une base trimestrielle ou
semestrielle.
> Diagnostic des besoins
> Définition des objectifs du projet et des
changements macro attendus
> Choix des indicateurs de changements macro
> Valorisation des
résultats/prise de décision IDENTIFICATION
PROGRAMMATION
> Définition de la stratégie d’intervention et du
plan d’appui au RC
> Définition des indicateurs de résultats et des
indicateurs opérationnels (activités & moyens)
> Établissement de la baseline (état « 0 »)
Analyse des changements
macro CYCLE FORMULATION
EVALUATION FINALE DE PROJET
Monitoring des indicateurs opérationnels (base trimestrielle ou

MISE EN ŒUVRE semestrielle) et des changements intermédiaires (base annuelle):
Suivi des « petits pas » ET ÉVALUATION
À MI-PARCOURS Monitoring des indicateurs de changements macro
(à mi-parcours) : conduite d’enquêtes, organisation d’ateliers
Suivi des « grands pas » réunissant l’ensemble des parties prenantes du projet
Le suivi des différents types d’indicateursdans le cycle de projet
2.3. Intégrer les spécificités afin de refléter au mieux les capacités à mesurer. Ils doivent
des indicateurs de RC également s’accompagner d’une analyse qualitative pour
évaluer la contribution de l’intervention aux changements
observés (voir Chapitre 1.1).
x Formuler les indicateurs de résultats.
Les changements liés au RC étant souvent diffus et complexes,
• indicateurs de progrès ou de processus : les change-
les indicateurs sont parfois difficiles à définir. Les conseils et
ments se faisant sur la durée, les indicateurs de résultats
astuces suivants seront utiles pour pallier certaines difficultés.
peuvent permettre d’établir des valeurs cibles progres-
x Choisir des indicateurs indirects (« proxy »). sives à atteindre ou de refléter des résultats attendus à
différents moments de la mise en œuvre d’une interven-
Là où des mesures usuelles directes ne peuvent être réalisées,
tion, et au-delà (ex-post). Ils constituent ainsi autant de
sont trop complexes et/ou coûteuses, il peut être utile de choi-
balises dans le pilotage de l’intervention.
sir des indicateurs associés à des effets indirects des projets en
guise d’indicateurs d’effets ou de résultats (ex : suivi de l’évolu- Par exemple, il pourrait être attendu du RC opéré auprès
tion de la performance d’une organisation pour évaluer l’acqui- d’une organisation paysanne qu’elle soit capable, à l’issue
sition de compétences individuelles). Par nature, ces indica- de la première année, d’organiser seule une assemblée
teurs sont particulièrement soumis à l’influence de facteurs générale, de tenir ses comptes au bout de la 3e année, et
externes et doivent donc être très soigneusement choisis que son bilan financier soit équilibré à partir de la 5e année.
CHAPITRE
REX Quelques exemples d’indicateurs de progrès utilisés dans le secteur

de la santé (Sénégal, PIC IV) 8
Dans le cadre de l’appui au secteur de la santé du PIC IV

Sénégal-Luxembourg, des indicateurs de progrès ont été
définis pour chaque palier à atteindre en termes de fonc-
tionnalité et de capacité renforcée, aussi bien au niveau
systémique qu’organisationnel
Niveau de fonctionnalité du dispositif de suivi évaluation

des urgences au niveau national.
Niveau 1 : Production du document de programmation plu-
riannuelle des dépenses (DPPD) et du rapport annuel de
performance (RAP)
Niveau 2 : Disponibilité de l’annuaire statistique
Niveau 3 : Amélioration de l’architecture du dispositif de
suivi des urgences
Niveau 4 : Fonctionnalité du dispositif de suivi & évalua-
tion des urgences
Niveau de renforcement des capacités de pilotage

Niveau de fonctionnalité du centre de formation aux et de gestion de l’Agence de Couverture Maladie
métiers des urgences (par simulation) à Dakar. Universelle.
Niveau 1 : identification et expression des besoins en Niveau 1 : identification et expression des besoins en
équipements équipements
Niveau 2 : dotation en équipements Niveau 1: renforcement des capacités sur la théorie du
Niveau 3 : formation du personnel sur l’utilisation du changement
matériel Niveau 2 : élaboration PTA (Plan de Travail Annuel)
Niveau 4 : démarrage/effectivité de la formation selon théorie du changement
Niveau 3: acquisition du logiciel de suivi & évaluation
8. 4ème Programme indicatif de Coopération entre la République du Sénégal et le au niveau ANACMU
Grand-Duché de Luxembourg, couvrant la période 2018-2022. Niveau 4 : activités de supervision mises en œuvre.
• Indicateurs composites : les indicateurs composites x Enfin, outre la mesure des activités et de l’évolution concrète
aident à mesurer les effets complexes difficilement reflé- des capacités des bénéficiaires, il est intéressant de prévoir
tés par une seule variable. Ils se composent de sous-in- un certain nombre d’indicateurs destinés à mesurer l’ef-
dicateurs mesurant les différentes dimensions du chan- ficacité et l’efficience du mode opératoire des appuis au
gement, et permettent d’avoir une vision plus fine du RC, comme :
changement obtenu (ex : % de bénéficiaires d’une forma- • la qualité et l’adéquation de l’assistance technique mise en
tion ayant mis en application au moins 1 des méthodes place en appui aux porteurs de projets,
transmises en formation).
• la qualité du travail de S&E réalisé (régularité du suivi, suivi
x Que ce soit au niveau des effets ou des résultats, il est d’indicateurs de changements, utilisation de méthodes
recommandé de formuler des indicateurs sexo-spéci- d’analyse qualitative…),
fiques pour suivre de manière ciblée les changements obte- • l’engagement des parties prenantes dans le S&E.
nus au niveau des hommes et des femmes, et analyser les
dynamiques de changement en termes d’égalité et d’équité Ces indicateurs peuvent se retrouver aussi bien au niveau des
de genre. moyens qu’à celui des réalisations. De tels indicateurs n’ont pas
vocation à apparaître dans les rapports de S&E de l’interven-
tion, mais peuvent servir à améliorer le pilotage de l’interven-
tion par le porteur de projet.
CHAPITRE
2.4. Bonnes pratiques et retours x Qu’est-ce qui peut/doit être suivi via des indicateurs, et
qu’est-ce qui doit faire l’objet d’un suivi qualitatif plus ouvert
d’expérience via les méthodes décrites au Chapitre 2 ?
x Quels moyens et capacités aurons-nous pour collecter, ana-
PRIORISER LES CHANGEMENTS lyser et utiliser les informations recueillies ? 9
ET LES INDICATEURS
S’APPUYER EN PRIORITÉ
Pour éviter la création d’usines à gaz, il est recommandé de
limiter le nombre d’indicateurs. D’une façon générale, il s’agit
SUR LES INDICATEURS NATIONAUX
d’éviter de collecter des données inutilement. Pour une inter- Il est recommandé, autant que possible, de s’appuyer sur les indi-
vention brève et à petite échelle, 4 ou 5 indicateurs suffiront. cateurs nationaux pour construire la matrice d’indicateurs d’une
Pour une intervention d’envergure, 3-4 indicateurs par niveau intervention. Lorsque les indicateurs nationaux ne permettent
de suivi devraient suffire. Les questions suivantes vous aide- pas de suivre intégralement les changements auxquels l’inter-
ront à prioriser les changements et les indicateurs à suivre. vention souhaite contribuer, il est recommandé d’intégrer les
indicateurs existants au dispositif, et de compléter par des indi-
x À qui est destiné le suivi des changements ?
cateurs dits «résiduels», adaptés aux particularités de l’inter-
x Quels sont les éléments les plus à même d’objectiver l’at- vention, qui feront l’objet de méthodes spécifiques de suivi et de
teinte des résultats et la réalisation des effets visés ? collecte.
REX L’adossement du DSE programme au DSE national : l’exemple du PIC IV

Sénégal et du PIC III Niger 10
Dans le cadre du PIC IV Sénégal-Luxembourg, le disposi-

tif de S&E repose sur les dispositifs de S&E nationaux en
place au sein des deux ministères partenaires (Santé et
Formation professionnelle & technique) :
x les indicateurs quantitatifs sont donc liés aux objec-
tifs de développement suivis au niveau sectoriel. Seuls
quelques indicateurs qualitatifs comme les indicateurs
de satisfaction (non suivis au niveau national) ont été
ajoutés et des outils spécifiques ont été mis en place
pour les suivre,
x les ministères partenaires participent directement au
dispositif de S&E du PIC IV. La supervision du proces-
sus est assurée par les institutions et services natio- partenaires sectoriels, lorsque ces indicateurs existent.
naux compétents. Il est important de noter que les ministères ne sont géné-
ralement pas au même niveau de maturité quand il s’agit
Le fait de s’appuyer sur les référentiels nationaux vise à de définir des indicateurs et d’adopter des outils de suivi
faciliter l’appropriation et à réduire les coûts de collecte. adéquats. A titre d’exemple, le ministère de l’hydraulique
Le PIC IV fournit par ailleurs un appui matériel et humain avait bien défini son projet de RC mais un appui s’est avéré
aux ministères pour améliorer le S&E des indicateurs nécessaire pour l’accompagner dans l’appropriation du
nationaux (outils et logiciels informatiques, appui ponc- plan de RC et dans le développement d’outils de S&E. Cette
tuel d’experts). appropriation peut s’avérer difficile car la démarche de
De même, dans le cadre du PIC III Niger-Luxembourg (pro- S&E est encore trop souvent perçue comme un outil de
jet d’appui à des politiques sectorielles nationales dans contrôle du travail des agents.
les domaines suivants : eau et assainissement, dévelop- L’ancrage des programmes dans les dispositifs de S&E
pement rural, éducation et formation professionnelle), nationaux permet également d’accompagner les chargés
les dispositifs de S&E sont alignés sur les indicateurs des de S&E pour les outiller et les autonomiser.
10. 3ème Programme indicatif de Coopération entre la République du Niger et le Grand-Duché de 9. Guide du F3E sur le S&E des approches orientées changement
Luxembourg, couvrant la période 2016-2020.
CHAPITRE
DÉFINIR L’ÉTAT « 0 » DES INDICATEURS DÉCLINER LE RÉFÉRENTIEL D’INDICATEURS

Une fois les indicateurs définis, il est indispensable d’établir POUR CHAQUE ACTEUR
la valeur de base de ces indicateurs avant d’engager les acti- Dans le cas de programmes de RC dits « systémiques » (ex :
vités, afin de disposer de valeurs de référence permettant de programmes de réforme sectorielle), il est important de défi-
suivre et évaluer les résultats atteints dans la suite de l’inter- nir une vision du changement, une logique d’intervention et des
vention. Pour ce faire, il convient, après le diagnostic et la défi- indicateurs de suivi pour chacun des acteurs, et ce pour per-
nition des indicateurs, de réaliser une étude de situation de mettre un suivi plus fin des changements au plus proche des
référence, visant à établir la valeur de départ des indicateurs, réalités de terrain. C’est tout l’enjeu des mini-plans de RC éla-
qu’ils soient quantitatifs ou qualitatifs. Une telle étude consti- borés dans le cadre du PIC IV Sénégal-Luxembourg.
tue un élément fondamental pour la suite : elle conditionne la
pertinence, et parfois même la réalisation, de tout futur exer-
cice d’évaluation.
REX L’intérêt des mini-plans de RC (Sénégal, PIC IV)
Dans le cadre du PIC IV Sénégal-Luxembourg, une straté- Pour chacun de ces acteurs, un diagnostic rapide a été
gie et un plan d’appui au RC ont été élaborés pour chaque réalisé pour préciser leurs besoins. Puis, des ateliers de
secteur d’intervention (Santé et Formation professionnelle priorisation ont été organisés : sur la base des activités
et technique). Pour la Santé par exemple, le plan global a définies dans les plans de RC généraux, les participants
pour objectif général de « contribuer de manière durable ont identifié des actions concrètes permettant d’atteindre
au renforcement du système et des capacités des acteurs les changements visés.
de la santé et de la protection sociale dans la zone de
Pour le suivi, un tableau de bord opérationnel a été élaboré
concentration opérationnelle ». Ces plans d’appui au RC
(revue trimestrielle). La plupart des indicateurs figurant
généraux ont été déclinés en mini-plans de RC opération-
dans ces mini-plans sont des indicateurs des plans de RC
nels par acteur clé (acteurs clés porteurs de changements
nationaux, à l’exception de quelques indicateurs d’activité.
identifiés pendant l’élaboration de la ToC).
CHAPITRE
REX Suivre les indicateurs d’un programme par niveau de RC et par acteur
(Niger, PIC III)
Dans le cadre du PIC III Niger-Luxembourg, une matrice de de ce livrable, pérennisation du changement) et sont
plan intégré de RC ainsi qu’une matrice de suivi de ce plan classifiés selon :
ont été développés pour suivre les effets des appuis au RC
sur l’ensemble du secteur d’intervention, de façon simul- • Les différents domaines d’intervention en RC,
tanée. Ces matrices ont été conçues sur la base d’un dia- • Les activités du RC,
gnostic organisationnel détaillé, réalisé au préalable.
x la matrice intègre aussi des colonnes de notation des
La matrice de plan intégré de RC reprend les principales valeurs cibles et des valeurs atteintes annuelles, ainsi
tâches de l’AT en les classifiant selon i) le niveau de RC qu’une partie commentaire pour préciser le contexte.
concerné, ii) les objectifs visés. L’entrée se fait par inter-
vention et concentre l’ensemble des activités de RC de l’AT Ces matrices sont mises à jour une fois par an. L’objectif
à destination des divers partenaires du projet. est de pouvoir réaliser une évaluation à 360 degrés. Ainsi,
pour chaque période de collecte déterminée, la matrice
La matrice de suivi de ce plan répond aux principes suivants :
est remplie par l’AT et le partenaire concerné, puis ces der-
x l’entrée se fait par partenaire (1 partenaire = une matrice niers comparent leur notation et discutent des éventuels
de suivi), points de divergence. Enfin, ils élaborent une synthèse
x les indicateurs de suivi du RC sont exprimés aux avec une seule matrice qui sert de référence pour planifier
3 niveaux (production d’un livrable, assurance de l’usage la suite des activités.
2.5. Les ingrédients clés pour bien choisir ses indicateurs
x Choisir des indicateurs à la fois opérationnels et de x Adapter la temporalité du suivi à chaque type d’indica-
changements (intermédiaires et finaux) pour pouvoir teur (petits pas vs grands pas).
objectiver les chemins de changements. x Prioriser les indicateurs (se limiter à 4-5 d’indicateurs
x Partir des indicateurs de changements macro ou d’effet pour les interventions brèves et à petite échelle, pas
plus d’une quinzaine d’indicateurs pour les interventions
pour définir les indicateurs de résultats, de réalisations
d’envergure).
et de moyens.
x Fusionner les indicateurs redondants lorsque le projet
x Choisir des indicateurs indirects pour mesurer les intervient à plusieurs niveaux de RC.
effets lorsque ces derniers ne sont pas directement
x Décliner le référentiel d’indicateurs pour chaque acteur
mesurables.
du projet dans le cadre des appuis systémiques.
x Penser les indicateurs de résultats comme des indica- x Définir la valeur de référence (« baseline ») pour chaque
teurs de progrès. indicateur retenu, dès le démarrage.
CHAPITRE
3. Organisation & moyens : quels prérequis ?
3.1. S’appuyer sur les dispositifs lité des partenaires nationaux (maîtrise d’ouvrage et acteurs
sectoriels). Le S&E de l’intervention est alors réalisé par les
de suivi nationaux personnes en charge du S&E au niveau national, à partir des
indicateurs nationaux.
Pour faciliter la collecte de données, mais aussi et surtout pour x Dans le cadre d’un appui à un programme national secto-
garantir la bonne appropriation de la logique de S&E et de ses riel avec un focus territorial ou thématique (configuration
résultats par les acteurs nationaux, il est essentiel d’adosser 2), le DSE peut être mixte avec des indicateurs nationaux,
autant que faire se peut le DSE de l’intervention aux dispositifs dont le suivi repose sur le DSE national, et des indicateurs
de suivi nationaux. spécifiques au projet, suivis directement par le porteur de
Dans le cadre d’interventions financées par des partenaires tech- projet, car les besoins en S&E ne sont pas complètement
niques et financiers extérieurs, trois situations sont possibles. couverts par les DSE nationaux.
x Dans le cadre d’une approche sectorielle intégrale ou d’un x Dans le cadre d’un appui ne s’inscrivant pas dans un cadre
appui budgétaire (configuration 1), il y a un seul DSE qui est de politique publique bien défini (configuration 3), le DSE
celui du secteur appuyé et qui est sous la seule responsabi- peut être ad hoc et reposer entièrement sur le porteur de
projet.
CONFIGURATION 1 CONFIGURATION 2 CONFIGURATION 3
DSE national DSE de l’intervention
Schéma illustrant les différentes configurations possibles
Dans tous les cas, le DSE de l’intervention doit permettre de renforcer les capacités de S&E locales, en confortant le
DSE national (configuration 1), en transférant les innovations développées dans le cadre de l’intervention vers les parte-
naires nationaux (configuration 2), ou en aidant les partenaires appuyés à développer la fonction S&E (configuration 3).
CHAPITRE
3.2. Conforter ou mettre en place

les moyens humains et matériels x Un(e) pilote du DSE-M : cadre technique, il/elle est en charge
nécessaires au pilotage du DSE-M d’orchestrer l’ensemble du dispositif, éventuellement avec
l’aide d’une assistance technique. A ce titre, c’est lui/elle qui
définit le calendrier du S&E, organise la collecte et le trai-
Un DSE-M, pour être efficace, nécessite une organisation et tement de l’information (suivi des indicateurs, organisation
des moyens humains spécifiques. d’ateliers des petits et grands pas, pilotage des enquêtes…),
se charge de mobiliser les parties prenantes concernées
x Un comité de pilotage réunissant l’ensemble des personnes
aux différentes étapes de l’intervention et fait le lien avec
décisionnaires dans la bonne marche de l’intervention (déci-
les instances décisionnaires (voir § suivant).
deurs de la structure porteuse de projets, PTF, éventuelles
autres instances nationales impliquées dans le pilotage de x Des personnes référentes au sein des services (dans le
l’intervention…). Il se réunit notamment en fin d’année pour cadre d’une intervention centrée sur une organisation) ou
assister à la présentation des résultats du S&E et procé- des autres organisations concernées par l’intervention
der aux éventuels ajustements nécessaires au niveau de la (dans le cadre d’un appui systémique), que le/la pilote peut
logique d’intervention (réunion d’arbitrage). éventuellement réunir au sein d’un comité technique.
COPIL
PILOTE DU DSE-M ASSISTANCE

TECHNIQUE
(optionnel)
RÉFÉRENTS
Schéma illustrant l’organisation à mettre en place pour assurer le S&E
Une fiche de poste type pour le recrutement d’un(e) pilote de S&E est proposée au Chapitre 3. Elle insiste
principalement sur les compétences suivantes :
x capacité à proposer des méthodes d’analyse qualitatives innovantes, en phase avec les objectifs du S&E,
x capacité à impulser des processus transversaux et parfois nouveaux au sein d’une organisation,
x maîtrise des méthodes d’intelligence collective (animation d’ateliers collectifs notamment) et capacité
à mobiliser différentes parties prenantes autour d’un objectif et d’un processus commun,
x capacité de communication aussi bien interne qu’externe.
11. Largement inspirée de la fiche de poste développée par l’AFD dans sa boîte à outils sur le suivi & évaluation
CHAPITRE
Pour remplir leurs objectifs, il est important que les personnes Les parties prenantes d’une intervention peuvent être :
impliquées dans le DSE-M disposent de temps dédié et des
moyens matériels nécessaires.
Il est donc important de s’appuyer sur le diagnostic initial pour
x au niveau individuel et/ou organisationnel : les bénéficiaires
identifier :
finaux (publics ciblés par les appuis individuels, personnel
x les outils/process de S&E déjà existants (s’inscrire dans d’une organisation), les différents services d’une organisa-
l’existant, ne pas démultiplier les outils), tion ou encore les partenaires de l’organisation,
x les moyens à disposition des personnes concernées pour
réaliser le S&E (moyens humains et matériels), de même que
leurs capacités. x au niveau systémique : les bénéficiaires finaux (ex : usa-
gers d’un service), les organisations nationales et/ou locales
Si les moyens ne sont pas suffisants (absence de personnel
impliquées dans le secteur visé (ministères, organisations
dédié, personnel peu ou pas formé, etc.), il faut prévoir un ren-
parapubliques, collectivités), de même que les éventuelles
forcement de ces moyens dans le plan de renforcement des
organisations de la société civile ou autres acteurs privés
capacités lui-même.
impactés par l’intervention.
Enfin, il est important, afin de procéder aux ajustements poin-
Le diagnostic initial doit permettre d’identifier :
tés comme nécessaires dans le cadre du S&E, de réserver une
enveloppe dans le budget de l’intervention pour le finance- x les parties prenantes,
ment des actions d’amélioration identifiées via le S&E.
x la façon dont chaque partie prenante contribue à l’atteinte
des changements visés,
Un outil de diagnostic rapide des capaci- x l’intérêt de chaque partie prenante pour le S&E et les moyens
tés des porteurs de projets en matière de dont elle dispose pour y participer.
S&E, développé par l’AFD dans le cadre de
sa boîte à outils sur le S&E, est proposé au Pour que le dispositif soit efficace, il convient de définir claire-
Chapitre 3. Il est conseillé de l’utiliser avant ment les rôles et responsabilités de chaque partie prenante,
le démarrage de l’intervention, dans le cadre et de préciser leur niveau d’implication :
du diagnostic plus général de la situation de x participation à la collecte d’informations (remontées d’infor-
départ réalisé en phase d’identification. mations quantitatives ou qualitatives, suivi d’indicateurs),
x participation à l’analyse et à la hiérarchisation des change-
ments (ateliers des petits et grands pas),
x participation aux temps d’arbitrage et de décision (réunion
d’arbitrage de fin d’année notamment).
3.3. Définir clairement

les rôles et les responsabilités
des parties prenantes Ce travail de cartographie des parties prenantes peut
être réalisé à travers une matrice RASCI , qui permet, pour
chaque activité, d’identifier les parties prenantes res-
L’analyse qualitative des changements étant de nature sub- ponsables de l’activité (R - Responsable), les personnes à
jective, il est important, pour l’objectiver autant que possible, impliquer dans le suivi & évaluation (A-Accountable), les
d’encourager les regards croisés sur les changements, en personnes qui aident le responsable à réaliser une tâche
impliquant toutes les parties prenantes d’une intervention. (S - Support), les personnes à consulter (C-Consulted), et
Cela permet également de mettre l’ensemble des parties pre- celles qui sont simplement à informer (I-Informed), à tra-
nantes dans une dynamique d’apprentissage et d’amélioration vers le tableau (page suivante).
continue.
CHAPITRE
La définition des rôles et des responsabilités peut être réalisée PARTIE PARTIE PARTIE ...
à travers un document de référence du type manuel de S&E. PRENANTE PRENANTE 2 PRENANTE
Il est recommandé de le partager avec toutes les parties pre- 1 3
nantes, pour les mettre toutes au même niveau d’information. Activité 1 C A A
Pour que ces parties prenantes restent impliquées dans la Activité 2 A R C C
démarche sur la durée, il est important de veiller à ce que les
Activité 3
enseignements tirés du S&E leur soient utiles aussi directe-
ment, et donc de les impliquer dans le choix des indicateurs et ...
la construction du DSE dès la formulation du projet.
Exemple de matrice RASCI
Atelier du Atelier « de la mi temps » : Atelier « de la ligne d’arrivée » :

« top départ » analyse des grands analyse des grands changements
changements à mi-parcours en fin de projet
Pause des Pause des

« petits pas » « petits pas »
(N+1, N+2) (N+4)
RÉUNIONS D’ARBITRAGE
Les grandes étapes d’analyse et de décision dans le parcours du DSE-M
1.3.4. La check-list de départ
Avant de démarrer votre projet, renseignez le quizz ci-dessous pour garantir un S&E efficace. OUI NON EN COURS
Avez-vous désigné une personne pilote pour le S&E de votre intervention?
Cette personne dispose-t-elle des compétences et des outils nécessaires à l’exercice de ses fonctions ?
Si ce n’est pas le cas, avez-vous mis en place des mesures d’accompagnement spécifiques à son égard ?
Avez-vous une idée claire des parties prenantes de votre intervention et de leurs rôles respectifs dans le
S&E de l’intervention ?
Avez-vous arrêté la composition des différentes instances de votre DSE-M (ateliers des petits et grands pas,
réunion d’arbitrage…) et défini un calendrier de réunions ?
Existe-t-il un référentiel partagé et validé par les parties prenantes (du type manuel de S&E) ?
Avez-vous sanctuarisé une enveloppe dans votre budget pour financer les éventuelles évolutions à apporter
au plan de RC en cours de mise en œuvre ?
Vous avez répondu « non » à toutes les questions ?

Ne paniquez pas ! Faites le nécessaire pour remplir au moins les trois premières conditions et attaquez le reste avec le pilote
de votre DSE-M.
CHAPITRE
4. Défis environnementaux et climatiques :

quels besoins en matière de RC ? Quel impact sur le S&E ?
Les objectifs du développement durable sont aujourd’hui au Par exemple, pour développer les connaissances d’une collecti-
cœur des projets de développement. Parmi ces objectifs, la vité locale sur le changement climatique, on pourra encourager
prise en compte des enjeux climatiques et environnementaux le dialogue entre cette collectivité et les communautés locales,
dans les projets implique de renforcer spécifiquement cer- qui disposent en général d’une expérience empirique des phé-
taines capacités individuelles et collectives, pour permettre nomènes, de même que des solutions à mettre en place. Il sera
aux porteurs de projets de disposer: également pertinent de mettre en place un système de monito-
ring des impacts du changement climatique sur le territoire, de
1/ d’une meilleure connaissance des enjeux et des phéno-
façon à disposer d’une vision plus précise et actualisée de ces
mènes associés (impact du réchauffement climatique et de la
derniers, et de prendre les mesures les plus efficaces.
pression anthropique sur les milieux, la biodiversité, le climat,
le territoire…), Le tableau ci-dessous fournit une première liste de change-
ments macro attendus à chaque niveau de RC en lien avec ces
et 2/ d’une plus grande capacité à intégrer ces enjeux et à
objectifs, et d’indicateurs de résultats associés.
proposer des mesures d’atténuation et/ou de compensation.
CHANGEMENTS MACRO SOUHAITÉS INDICATEURS DE RÉSULTATS

• % des bénéficiaires conscients des causes et conséquences de la
NIVEAU INDIVIDUEL
crise écologique
x Individus disposant d’une meilleure connais-
sance des causes et conséquences de la crise
• % des bénéficiaires capables d’identifier ces causes et consé-
quences sur leur territoire
écologique, et capables d’imaginer des projets
• % des bénéficiaires capables de formuler des propositions d’actions
résilients et durables
pour améliorer la préservation environnementale, atténuer les émis-
sions de GES ou favoriser l’adaptation au changement climatique
• Présence d’une feuille de route claire et partagée en matière de
NIVEAU ORGANISATIONNEL
développement durable
• Présence d’un management et de méthodes de travail en phase avec
les objectifs environnementaux et sociaux (E&S)
x Organisations ayant un impact environnemental
• Présence de ressources pour documenter l’impact et les réponses
négatif limité
apportées à la crise écologique
• Prise en compte des informations relatives à la crise écologique
dans les décisions
• Démarche RSE/RSO effectivement mise en oeuvre
x Politiques publiques cohérentes avec les objec- • Compatibilité des documents de politiques publiques avec les objec-
tifs du développement durable et le futur sou- tifs du développement durable du pays
NIVEAU SYSTÉMIQUE
haité, et partagé avec les parties prenantes • Nb d’acteurs/organisations ayant connaissance de cette ambition
x Cadres réglementaires & juridiques permettant • Nb d’acteurs/organisations adhérant à cette ambition
de limiter l’impact négatif des activités humaines • Nb d’acteurs/organisations ayant les moyens de mettre en œuvre
cette ambition
sur l’environnement
• Nb d’acteurs/organisations appliquant le cadre réglementaire
CHAPITRE
D’un point de vue méthodologique, la prise en compte de ces x d’aligner les indicateurs de suivi des projets et/ou des poli-
défis implique : tiques publiques avec des indicateurs d’atteinte des ODD
adaptés aux spécificités des territoires (ou « territorialisés ») ,
x de fédérer les acteurs (d’une organisation ou d’un secteur)
autour d’une vision commune des objectifs poursuivis, por- x de disposer, encore plus que sur des programmes de RC
tée par les décideurs de l’organisation ou du secteur (voir classiques, d’outils de suivi qualitatifs et participatifs per-
focus sur le FSSD ci-dessous), mettant de faire évoluer les chemins de changement au
regard de l’évolution rapide de la situation environnemen-
tale, et donc des mesures à adopter.
FICHES MÉTHODES
Le Cadre pour un développement durable stratégique, un exemple de méthode utilisable

pour fédérer les acteurs autour d’une vision commune du futur souhaité
Le Cadre pour un développement durable stratégique est souhaité) et de mettre en place des actions et initiatives
une démarche systémique, stratégique est une démarche pour y parvenir.
systémique, stratégique et participative pour intégrer la
Elle se déroule selon un processus itératif en 4 étapes :
perspective développement durable au cœur du métier
des organisations. Développée dès 1989 en Suède, elle est x décliner la notion de développement durable de façon
notamment promue par la platforme My Sensei Lab. Elle opérationnelle, en définissant les conditions de la dura-
s’adresse aux organisations publiques et privées qui sou- bilité (le futur souhaité),
haitent passer de la vision à l’action. Elle offre un cadre x analyser la situation actuelle au regard du futur sou-
structurant et un langage commun sur le développement haité (points forts, points faibles, opportunités…),
durable afin de mieux préparer les changements futurs.
x imaginer des idées de solutions et actions,
Dans l’esprit de la Théorie du Changement, elle permet de
formuler une vision commune pour l’organisation (le futur x sélectionner et définir les priorités en évaluant notam-
ment leur retour sur investissement.
La méthode est décrite plus précisément au chapitre 2.7
Le Cadre d’auto-évaluation de la responsabi- x la définition d’un plan d’actions pour de meilleures pra-
lité sociétale (CARS) est un outil permettant de faci- tiques en matière de responsabilité sociétale,
liter l’adoption et le suivi de stratégies de responsabilité x la mise en place d’un suivi des actions,
sociétale (notamment environnementale) par les organisa- x la mise en place d’un système de communication et de
tions. Développé par l’administration belge en 2016, il per- dialogue avec l’ensemble des parties prenantes pour
met d’accompagner les organisations dans : identifier leurs attentes et rendre compte de leurs
x l’identification de leur impact sur la société et actions.
l’environnement,
La méthode est décrite plus précisément au Chapitre 2.8

CHAPITRE
REX Retour sur le dispositif de S&E mis en place dans le cadre du projet
de Décentralisation des Fonds Climat (DFC)
Le projet « Décentralisation des Fonds Climat » est un pro- S’agissant d’un projet de recherche-action, le suivi & évalua-
jet de recherche-action financé par le DFID (Department tion a fait l’objet d’une attention particulière et de moyens
for International Development, UK) et mis en œuvre par conséquents. Un diagnostic initial a été réalisé pour évaluer
la Nearest Foundation au Sénégal et au Mali. Son objectif la capacité des acteurs à formuler et mettre en œuvre des
est de renforcer la capacité des collectivités territoriales projets résilients et durables. La Théorie du changement a
à gérer des fonds climat en partenariat avec tous les ensuite été utilisée pour définir les changements souhaités
acteurs locaux (ONGs, organisations communautaires, et les indicateurs associés (ex : nombre d’agriculteurs ayant
organisations paysannes, associations de femmes, ser-
utilisé telle pratique/technologie, nombre de projets climato
vices déconcentrés de l’Etat…), dans le but de renforcer
-sensibles rédigés par les populations).
la résilience des populations locales face au changement
climatique. En plus des indicateurs quantitatifs, un certain nombre
Il part du constat que les fonds climat sont souvent mis d’indicateurs qualitatifs ont été retenus (niveau de bien-
en œuvre par les Etats, alors que les acteurs locaux sont être des populations, niveau de résilience). Ces indicateurs,
souvent mieux placés pour identifier les actions appro- de même que les facteurs de changement non reflétés par
priées et mettre en œuvre les projets. les indicateurs, ont fait l’objet d’une analyse qualitative via
plusieurs méthodes :
Le projet, aujourd’hui terminé, incluait :
x la conduite d’enquêtes de perception visant à com-
x la réalisation d’investissements visant à améliorer les
facteurs de production agricole à Mopti (centre du Mali) prendre les éventuels points de blocage rencontrés dans
et Kaffrine (centre du Sénégal), la diffusion des informations climatiques au niveau local,
x des actions de renforcement des capacités en direc- x la conduite d’études de résilience incluant des
tion des collectivités territoriales de Mopti et Kaffrine, enquêtes-ménages et des immersions de 4-5 jours
visant à : auprès d’un échantillon de familles (outil « portrait de
• améliorer leurs connaissances en matière de chan- famille »),
gement climatique, x un suivi de l’adaptation des communautés en termes de
• renforcer leur capacité à prendre en compte les don- gouvernance,
nées climatiques dans leur système de planification
x la conduite d’enquêtes spécifiques sur des sujets pré-
(technique et budgétaire),
cis (participation des femmes à la prise de décision par
• renforcer leur capacité à aller chercher des finance-
exemple).
ments, et à rédiger des documents de projet,
• renforcer leur capacité à dialoguer avec les diffé- Ce dispositif de S&E a été orchestré département par
rents acteurs locaux, en particulier les communautés département par des comités départementaux d’adapta-
paysannes, et à nouer des partenariats avec ces der- tion composés des collectivités locales, des services tech-
niers pour l’observation des changements et la mise niques de l’Etat, de l’agence régionale de développement et
en œuvre des projets. de la société civile.
INTRO DE LA BOITE A OUTILS 41
PRÉSENTATION DE LA BOITE À OUTILS DU RÉFÉRENTIEL

(CHAPITRES 2, 3 ET 4)
CHAPITRE 2
FICHES MÉTHODES 42-43

1. Méthode du « changement le plus significatif » 44
2. Méthode de la récolte des incidences 46
3. Méthode de Kirkpatrick 48
4. Méthode d’évaluation de la capacité organisationnelle 50
5. Cadre d’auto-évaluation de la fonction publique (CAF) 53
6. Cadre d’analyse de la gouvernance sectorielle 56
7. Cadre pour un développement durable stratégique 58
8. Cadre d’auto-évaluation de la responsabilité sociétale 60
CHAPITRE 3
OUTILS 62-63
1. Grille de questions pour guider l’analyse quantitative 64
2. Déroulé type d’un atelier de collecte et d’analyse de données qualitatives
(atelier des petits ou des grands pas) 66
3. Outils pour le monitoring au niveau individuel 68
4. Matrice d’indicateurs 74
5. Guide pour un mini-diagnostic rapide des capacités de S&E des porteurs de projets 77
6. Fiche de poste générique pour un(e) responsable de S&E des appuis au RC 78
CHAPITRE 4
CAS PRATIQUES 80-81

Cas pratique n°1 : Déploiement d’un programme de formation individuelle 82
Cas pratique n°2 : Accompagnement à la transformation d’une organisation 84
Cas pratique n°3 : Appui à un projet de réforme sectorielle 86
42 INTRO DE LA BOITE A OUTILS
Les Chapitres 2, 3 et 4 constituent la boîte à outils du référentiel.

Ils visent à faciliter la mise en application des principes énoncés
dans le guide méthodologique (chapitre 1), via la mise
à disposition des éléments suivants.
CHAPITRE 2
Des fiches méthodes (chapitre 2) décrivant de façon plus détaillée les principales méthodes
d’analyse qualitative évoquées dans le chapitre 1, accompagnées de recommandations concer-
nant leur mise en œuvre (contexte, bonnes pratiques, écueils à éviter).
CES FICHES PORTENT À LA FOIS SUR : x des méthodes permettant la prise en compte des
enjeux environnementaux et climatiques dans
x des méthodes utilisables à tous les niveaux de RC : les interventions, aussi bien au niveau systémique
c’est le cas de la méthode du changement le plus signifi- qu’organisationnel :
catif et de la récolte des incidences (ou « outcome har-
• le Cadre pour un développement durable stratégique,
vesting » en anglais),
qui permet d’intégrer ces enjeux dans les stratégies
x des méthodes spécifiques à certains niveaux de RC : sectorielles et/ou organisationnelles,
• la méthode de Kirckpatrick pour les interventions • le Cadre d’auto-évaluation de la responsabilité socié-
visant le niveau individuel, tale, permettant la prise en compte de ces enjeux au
• la méthode d’évaluation de la capacité organisa- niveau des organisations.
tionnelle et le Cadre d’auto-évaluation de la fonction
publique (CAF) pour les interventions portant sur le
niveau organisationnel,
• le cadre d’analyse sectoriel, pour les interventions por-
tant sur le niveau systémique ;
PROJET À FORT ENJEU
INDIVIDUEL ORGANISATIONNEL SYSTÉMIQUE ENVIRONNEMENTAL
Méthode du changement le plus significatif
Méthode du « outcome harvesting »

FICHES MÉTHODES
Outil de mesure de CDDS

l’autonomie des
Kirck Patrick organisations Cadre d’analyse
de la gouvernance
sectorielle
Méthode CARS
Méthode CAF
Schéma illustrant le contenu du chapitre 2

INTRO DE LA BOITE A OUTILS 43
CHAPITRE 3
Des outils (chapitre 3) visant à faciliter la mise en application de certaines recommandations

émises dans le guide méthodologique.
CE CHAPITRE CONTIENT PLUS PRÉCISÉMENT :

x des outils pour réaliser l’analyse qualitative des chan- x une matrice d’indicateurs avec des propositions d’in-
gements à tous les niveaux : dicateurs types pour les 3 niveaux de RC, produite
dans le cadre du chantier ;
• une grille de questions pour guider l’analyse qualitative
des changements, inspirée d’une grille de questions x des outils visant à accompagner le dimensionnement
développée par le réseau INTRAC, et l’organisation des dispositifs de S&E ;
• le déroulé type d’un atelier de collecte et d’analyse de • un outil de diagnostic rapide des capacités de S&E des
données qualitatives (atelier des petits ou des grands porteurs de projets, tiré de la boîte à outils de l’AFD sur
pas), inspiré de la boîte à outils de l’AFD sur le S&E ; le S&E,
x des outils pour le S&E des appuis au niveau individuel • une fiche de poste générique pour le recrutement
(utilisables notamment dans le cadre de la méthode d’un(e) responsable de S&E des appuis au RC, tiré de la
Kirck Patrick), tirés du guide de LuxDev sur le RC des même boîte à outils.
appuis au RC ;
CHAPITRE 4
Des cas pratiques (chapitre 4) illustrant la mise en application des précédents chapitres sur des
interventions types à chacun des 3 niveaux de RC.
CHAPITRE
44 2 FICHES MÉTHODES
CHAPITRE 2
Quelles méthodes utiliser pour réaliser l’analyse qualitative

des changements aux différents niveaux de RC ?
Retrouvez les étiquettes de niveaux
INDIVIDUEL ORGANISATIONNEL SYSTÉMIQUE

CHAPITRE
FICHES MÉTHODES 2 45
FICHES MÉTHODES
CHAPITRE
1 Méthode du « changement
le plus significatif »
À QUOI ÇA SERT ?
La méthode du « changement le plus significatif » est une technique de S&E qui consiste à recueillir des récits
de bénéficiaires ou de porteurs d’un projet sur les changements ayant eu lieu au cours de ce projet. Ces multiples
« récits de changement » permettent de rendre compte de la complexité du terrain et offrent ainsi une image plus
fine des évolutions à l’œuvre. Le nombre de récits visé dépend du budget et du temps que l’on peut consacrer à la
démarche. Un plus grand nombre de récits permet d’avoir une image plus fine de la situation mais les ressources
nécessaires pour l’analyse sont alors plus importantes.
Illustration de la méthode du « changement le plus significatif »

Source : Guide d’utilisation par Rick Davies et Jess Dart
QUAND L’UTILISER ?
On peut l’utiliser lorsque les projets sont complexes (activités qui sont amenées à
évoluer, activités aux résultats non prédéterminés), ou lorsque l’on cherche à mettre en
évidence des points de vue contradictoires. Cette technique est à utiliser en complément
d’indicateurs quantitatifs.
CHAPITRE
1
COMMENT L’UTILISER ?
Les domaines de changements ainsi que la fréquence des collectes sont déterminés en amont (se limiter à 3 ou 5
domaines de changement permet de ne pas alourdir le travail de collecte et d’analyse des récits).
Exemple de domaines de changement16
f Changements dans la qualité de vie des personnes.
f Changements dans la nature de la participation des personnes aux activités de développement.
f Changements dans la durabilité des organisations et activités des personnes.
f Tout autre changement (permet de laisser une porte ouverte pour l’expression d’un changement inattendu).
La méthode consiste ensuite (i) à identifier les acteurs dont on veut mesurer les changements, (ii) à récolter les récits
auprès de ces acteurs par le biais d’entretiens, de focus groupes ou de fiches à renseigner, (iii) à définir des critères
de sélection de ces récits pour ne retenir que les plus significatifs. Un panel de jury procède alors à l’identification des
changements les plus significatifs (ce jury est constitué de personnes à différents niveaux de la hiérarchie du projet).
Exemples de questions permettant d’obtenir des « histoires de changement »17
f Comment avez-vous été impliqués dans le projet ?
f Quels sont, pour vous, les changements importants qui ont résulté de ce projet ?
f Quels sont les changements importants qui se sont produits dans la communauté comme résultat de ce projet ?
f Quels sont les problèmes ?
QUELS EN SONT LES FACTEURS DE SUCCÈS ? QUELLES SONT LES PRÉCAUTIONS

À PRENDRE ?
f La méthode du « Changement le plus significatif » est une méthode participative qui encourage un apprentissage
collectif (on définit collectivement les critères de sélection des récits par exemple). Le chargé de S&E doit donc être
à l’aise dans l’animation de réflexion collective. Un premier atelier peut aider les parties prenantes à se familiariser
avec l’approche.
f Il convient d’assurer la représentativité des récits de changement en faisant appel à des groupes de personnes à dif-
férents niveaux de la hiérarchie du projet.
f La sélection des récits demande de la rigueur / une prise de recul pour ne pas collecter trop de changements : il faut
donc prioriser selon l’importance des changements exprimés et regrouper les changements en grandes catégories.
Un facilitateur externe peut aider à structurer la méthode et à encadrer les interactions entre les parties prenantes
(lecture à haute voix et vote pour sélectionner les histoires les plus significatives).
f Il convient également de doter le jury d’une grille de critères pour garantir son objectivité.
f Cette technique est simple d’utilisation mais sa mise en œuvre nécessite un certain temps, en particulier lorsque les
récits à collecter sont nombreux. Par ailleurs, il y a un risque de biais (subjectivité dans le choix de récits : on peut
avoir tendance à se concentrer sur les témoignages positifs à l’exclusion des autres). Il est donc important de contrô-
ler les témoignages par le biais d’enquêtes de terrain.
POUR ALLER PLUS LOIN

x The « Most Significant Change » (MSC) Technique. A guide to its use, Davies R., Dart J., April 2005.
x https://www.mande.co.uk/wp-content/uploads/2005/MSC%20Guide/Franch%20translation%20of%20
MSC%20Guide.pdf
16. Source : The « Most Significant Change » (MSC) Technique. A guide to its use, Davies R., Dart J., April 2005.
17. Source : Fiche 9 - Technique du changement le plus significatif. Wilbeaux N., Juillet 2007
CHAPITRE
2 Méthode de la récolte des incidences
À QUOI ÇA SERT ?
La méthode du « outcome harvesting » ou « récolte des incidences » consiste à recueillir des preuves de change-
ment (négatifs comme positifs) chez les parties prenantes/bénéficiaires d’un projet puis à évaluer la contribution
du projet à ces changements. A la différence du « changement le plus significatif », les changements sont repé-
rés via une analyse documentaire en chambre (en s’appuyant notamment sur les rapports de projets) qu’on croise
ensuite avec des focus groupes.
La méthode de la récolte des incidences est particulièrement utile lorsque les

objectifs et les activités ne sont pas suffisamment précis ou mesurables au moment
de la planification d’une intervention. La méthode est donc adaptée à l’évaluation de
situations dynamiques et incertaines.
La fréquence de collecte et d’analyse des données est déterminée en amont.

Les étapes clés de la méthode sont les suivantes.
f Conception de la méthodologie d’enquête : à qui est destinée l’enquête ? Quel en est l’objectif ? Que cherche-t-on à
savoir ? (Formuler des questions clés et une stratégie pour y répondre)
f Analyse documentaire pour décrire les changements qui ont eu lieu et les comprendre : que s’est-il passé ? Qui a
contribué à cela ? Quelles preuves avons-nous ? En quoi ceci est important ? Que faisons-nous de cette information ?
f Collecte d’informations auprès des porteurs de projet.
f Croisement des informations et vérification de leur fiabilité.
f Analyse et interprétation des preuves de changements valides.
f Utilisation des résultats.
CHAPITRE
Concevoir la méthodologie
d’enquête
Analyser la documentation
disponible
Collecter des informations

auprès des porteurs de projets
Croiser les informations

et vérifier leur fiabilité
Analyser et interpréter les

preuves de changement valides
Concevoir la méthodologie
d’enquête
Prendre en compte les résultats
Les différentes étapes de la méthode de la récolte des incidences

À PRENDRE ?
La méthode du « outcome harvesting » peut sembler limitative car elle part uniquement de ce qui a déjà été identi-
fié dans des rapports (rapports externes, ou rapports projet) : les changements subtiles peuvent donc être difficiles à
appréhender. Il est donc important d’enrichir l’analyse grâce à une phase d’entretiens/focus groupes.
Le responsable (interne ou externe) du processus de « outcome harvesting » doit veiller à la rigueur des méthodes de
collecte et d’analyse des données.
Comme pour la « méthode du changement le plus significatif », la mise en œuvre du outcome harvesting nécessite un
certain temps, il est donc important de choisir une fréquence de collecte et d’analyse des données qui soit compatible
avec la charge de travail des participants.
Par ailleurs, il faut noter que cette technique est centrée sur le résultat final (quels changements ont eu lieu ? quelle
contribution du programme à ce changement ?) mais pas sur la performance des activités dans l’atteinte de ces
résultats.

x Outcome Harvesting by Wilson-Grau R and Britt H (2013)
outcomeharvesting.net/applications/
civicus.org/monitoring-toolkits/fr/toolkit/outcome-harvesting/
CHAPITRE
3 Méthode de Kirkpatrick
À QUOI ÇA SERT ?
Le modèle de Kirkpatrick permet d’évaluer l’impact d’une formation à travers 4 niveaux d’évaluation :
f réactions : le degré de satisfaction de l’apprenant,
f apprentissages : ce qu’il a appris,
f comportements : ce qui a évolué dans sa manière de travailler, le degré de transfert des acquis vers ses collègues,
f résultats : l’impact sur la performance de l’organisation et/ou sur le service rendu.
4
RÉSULTATS Cette méthode permet donc d’aller au-delà des indica-
teurs quantitatifs (de type «nombre de formations sui-
3 vies») pour apprécier l’impact réel de ces formations. Il
COMPORTEMENTS faut cependant noter que le modèle de Kirkpatrick pro-
pose uniquement une méthode d’évaluation de l’impact
2 d’une formation à chaud puis à froid. Le modèle des 8
APPRENTISSAGES champs est plus riche car il inclut un travail en amont
de conception des dispositifs de formation basé sur une
1 évaluation ex-ante des besoins.
RÉACTIONS
Illustration de la méthode de Kirkpatrick
LE MODÈLE DES 8 CHAMPS

Le modèle des 8 champs donne un cadre méthodologique pour entamer une démarche d’apprentissage au sein
d’une organisation et pour évaluer l’impact de ce processus d’apprentissage.
Plus concrètement, ce modèle propose un processus en 8 étapes pour formuler et mettre en œuvre un plan de
formation efficace. Celui-ci débute par l’analyse de la situation actuelle et la définition de la situation souhaitée
(on cherche à répondre à une problématique précise). On définit ensuite les objectifs et changements attendus
dans l’environnement de travail de l’employé, les compétences qui doivent être développées pour atteindre ces
objectifs, et enfin les méthodes utilisées pour développer ces compétences. L’analyse de l’impact se fait à plu-
sieurs niveaux comme dans le modèle de Kirkpatrick (maitrise des compétences, transfert ou non de ces com-
pétences sur le lieu de travail, et impact de la formation sur l’organisation - «les changements entrepris dans
l’organisation ont-ils résolus le problème ?»).
CHAPITRE
3 QUAND L’UTILISER ?
Le modèle de Kirckpatrick est à utiliser pour évaluer l’impact de programmes de for-

mation ou de coaching. Il est particulièrement utile pour assurer le S&E d’un plan de
formation au niveau organisationnel.
Les étapes clés du modèle sont les suivantes :

f étape 1 correspondant au niveau 1 « Réactions » : formulaires d’enquête de satisfaction remplis par les bénéfi-
ciaires des formations pour répondre aux questions suivantes : « les participants ont-ils apprécié la formation ?
répond-elle aux besoins identifiés en amont ? »,
f étape 2 correspondant au niveau 2 « Apprentissages » : fiches pré-test/post-test, souvent sous la forme de QCM
pour répondre à la question suivante « qu’ont appris les participants ? ». Il faut pour cela un indicateur d’entrée et de
sortie (exemple « au moins 80% des participants maitrisent les compétences de base »),
f étape 3 correspondant aux niveaux 3 « Comportements » et 4 « Résultats » : suivi post-formation sur le terrain
(dans le milieu professionnel des apprenants) pour répondre à la question suivante « les participants appliquent-ils
ce qu’ils ont appris ? ». Cela passe par une observation directe et par des entretiens avec les collègues et supérieurs
hiérarchiques. À cette occasion, et si le budget le permet, le formateur peut proposer une session de coaching pour
solidifier les acquis.
x Des exemples de questionnaire de satisfaction et de questionnaire de suivi post-formation sont fournis au
chapitre 3.

À PRENDRE ?
f S’assurer de l’engagement des différentes parties prenantes (employé formé, supérieur hiérarchique, etc) dès la
phase de conception du dispositif de formation. La réalisation d’un diagnostic préalable est essentielle pour recueil-
lir les besoins.
f Développer les outils et déployer la méthode en collaboration étroite avec la DRH de l’organisation concernée.
f Bien intégrer les coûts de réalisation des enquêtes et du suivi post-formation lors de la phase de conception du dis-
positif de S&E. L’évaluation à froid nécessite en effet des déplacements terrain qui peuvent générer des coûts sou-
vent limités mais à planifier.
f Proposer des formulaires d’enquêtes de satisfaction en version numérique pour faciliter la collecte et l’analyse des
données.
f Prêter attention aux facteurs qui facilitent ou freinent l’application des compétences acquises (soutien des supé-
rieurs hiérarchiques et des collègues, temps/ressources à disposition, conditions de travail, acquisitions d’applica-
tion adéquate, etc.).
x www.kirkpatrickpartners.com
x Kessels, J. W. M., Smit, C. A., & Keursten, P. (1996). The eight fields instrument: analysis framework for training effects
CHAPITRE
4 Méthode d’évaluation de la capacité

organisationnelle
À QUOI ÇA SERT ?
Les outils d’évaluation de la capacité organisationnelle (définie comme l’aptitude d’une organisation à réaliser effica-
cement ce qu’elle entreprend18) sont souvent inclus dans les dispositifs de S&E. Ces outils permettent de développer
un plan d’action basé sur l’évaluation des capacités. On suit alors les changements dans le temps en renouvelant la
démarche à intervalle régulier. Ces changements sont analysés pour comprendre comment et pourquoi ils ont eu lieu.
Il y a différents outils d’évaluation de la capacité organisationnelle. Tous suivent le même schéma, décrit ci-dessous19.
f Étape 1 : Identification des grands domaines à analyser pour évaluer la capacité organisationnelle.
f Étape 2 : Développement d’un système d’évaluation : système de notation (sur une échelle de 1 à 10 ou à l’aide des
lettres A, B, C par exemple) ou bien évaluation à l’aide d’affirmations prédéfinies, en choisissant l’affirmation qui
reflète au mieux la capacité dans chaque domaine.
f Étape 3 : Définition d’un processus d’évaluation des grands domaines de capacité : la question est alors de savoir qui
participe (membres de l’organisation seulement ou élargissement à leurs parties prenantes) à l’évaluation et com-
ment (vote à la majorité, consensus…).
f Étape 4 : Développement de méthodes de synthèse et d’analyse des résultats. Un plan d’action peut alors être établi
pour renforcer les capacités de l’organisation.
Niveau à XX Autonomie
mois (date)
Niveau à XX
mois (date)
Niveau initial
(date)
Niveau de progression vers l’autonomie
Niveau 1 Niveau 2 Niveau 3 Niveau 4 Niveau 5
Suivi du niveau d’autonomie d’une organisation
18. Fowler, A; Goold, L and James, R (1995). Participatory Self Assessment of NGO Capacity. INTRAC Occasional Paper Series no.10, INTRAC, UK
19. Organisational-assessment-tools.pdf (intrac.org)
CHAPITRE
4 Nous nous concentrerons ici sur « l’outil de mesure de l’autonomisation des organisations », mis en œuvre par les
équipes de LuxDev au Mali, dans le cadre des appuis au RC des organisations paysannes. L’outil de mesure de l’auto-
nomisation des organisations permet de créer une dynamique continue de renforcement des capacités de l’organisa-
tion, dans la perspective d’existence durable des structures aptes à assumer les responsabilités qui leur incombent. La
première étape consiste à réaliser un diagnostic détaillé des capacités de l’organisation et à identifier les facteurs de
vulnérabilité.
Le suivi régulier du diagnostic (avec une fréquence annuelle par exemple) permet de suivre et d’évaluer la progression
des structures appuyées en termes de maturité organisationnelle et de performance. Puis vient une étape de concer-
tation des acteurs sur les mesures correctives individuelles ou collectives à introduire pour améliorer leur autonomie.
Les résultats de ce suivi dans le temps servent à adapter les appuis au RC.
Outil à utiliser lorsque l’on souhaite créer une dynamique d’amélioration continue de
la performance d’une organisation. Il est basé sur l’observation d’éléments simples
à mesurer ou observer.
Les étapes du S&E sont les suivantes.

f 1. Identification des aspects essentiels (critères) constitutifs d’autonomie, tels l’institutionalisation, la gouvernance,
l’insertion maîtrisée dans l’environnement socio-économique, la maîtrise technique, les services apportés.
f 2. Définition d’indicateurs objectivement évaluables permettant de quantifier les critères définis. Ces indicateurs
doivent être évaluables par la simple observation sans nécessiter une expertise démesurée par rapport aux enjeux.
f 3. Pondération des indicateurs et critères en fonction de la typologie des organisations et de l’importance relative
qu’on leur accorde dans nos échelles de valeurs.
f 4. Évaluation, synthèse, présentation et partage des observations faites dans un souci de meilleure appropriation
multi-niveau (populations, organisations, structures déconcentrées et collectivités décentralisées, faîtières profes-
sionnelles, etc.).
f 5. Conception du plan d’action pour le renforcement des capacités (identification de mesures correctives collectives
et individuelles, gestion des questions organisationnelles et opérationnelles des actions correctives, définition d’un
catalogue d’actions par variables ainsi que les moyens à mobiliser).
f 6. Mise en œuvre du plan d’action.
f 7. Suivi-Evaluation.
f 8. Communication.
f 9. Adaptation du plan de RC.
CHAPITRE
évalué AN-1 évalué AN-2 évalué AN-3
Formalisme des OP
100%
Capacité d'autocontrôle 90% organigramme de l'OP
80%
70%
intégration des femmes 60% liens contractuels
50%
40%
30%
20%
fonctions assumées 10% liens avec l'environnement
0%
gestion des ressources fonctionnement des organes
gestion de l'eau répartition des responsabilités
gestion financière gestion administrative
Exemple d’évolution de l’autonomie d’une organisation soutenue par LuxDev

À PRENDRE ?
f S’entendre collectivement sur l’objectif de l’évaluation de la capacité organisationnelle avant de démarrer le processus.
f S’entourer d’un facilitateur pour accompagner la démarche.
f Impliquer les membres de l’organisation partenaire tout au long du processus : lors de l’élaboration des grilles d’ana-
lyse et lors de la phase d’identification des mesures correctives individuelles ou collectives à introduire pour amé-
liorer leur autonomie. Cela permet d’être au plus près de la réalité du terrain et de faire émerger des discussions
constructives pour l’organisation.
f Concevoir des plans d’action ciblés, dynamiques, quantifiés et budgétés. Les actions doivent être pragmatiques et
proportionnées aux enjeux.
x Organisational-assessment-tools.pdf (intrac.org)
CHAPITRE
5 Cadre d’auto-évaluation de la fonction

publique (CAF)
À QUOI ÇA SERT ?
Le Cadre d’auto-évaluation de la fonction publique (CAF) est un outil de gestion totale de la qualité développé par le
secteur public pour le secteur public et inspiré du modèle d’excellence de la Fondation européenne pour la gestion de
la qualité (EFQM). Le CAF repose sur un principe d’auto-évaluation participative de l’organisation par un ou plusieurs
groupes d’une douzaine de personnes se voulant représentatifs de la diversité des salariés. L’évaluation de l’organi-
sation se fait sous différents angles à travers 9 critères, permettant ainsi d’analyser la performance de l’organisation
de façon holistique.
Le CAF s’appuie sur l’idée que les résultats en matière de performances clés, que ce soit auprès des citoyens/ clients, du
personnel ou de la société, peuvent amener une structure à l’excellence à condition d’être bien appropriés par les salariés,
et portés par les décideurs de l’organisation.
On peut utiliser le CAF lorsque l’on souhaite créer une dynamique d’amélioration continue
de la performance grâce à une démarche d’auto-évaluation et de mise en œuvre d’un
plan d’amélioration.
S’étalant sur un temps long et des cycles répétés d’évaluation-action de 2 ans, elle est
adaptée aux structures disposant de la maturité organisationnelle suffisante pour
mobiliser un ou plusieurs groupes d’auto-évaluation, et mettre en place les différentes
instances de concertation/décision. Elle implique également une forte implication des
décideurs de l’organisation, et un accompagnement des personnes engagées dans les
groupes d’auto-évaluation.
Le schéma en page suivante présente les différentes étapes du CAF.

CHAPITRE
5
PHASE 1 : LE DÉBUT DU VOYAGE AVEC LE CAF
Étape 1 : Étape 2 :
Décider comment Communiquer
organiser et planifier le projet
l’auto-évaluation d’auto-évaluation
PHASE 2 : AUTO-ÉVALUATION AVEC LE CAF
Étape 3 : Étape 4 : Étape 5 : Étape 6 :

Composer un ou Organiser Entreprendre Dresser un rapport
plusieurs groupes la formation l’auto-évaluation décrivant les résultats
d’auto-évaluation de l’auto-évaluation
PHASE 2 : POINTS D’AMÉLIORATION AVEC LE CAF
Étape 7 : Étape 8 : Étape 9 :

Étape 10 :
Dresser un projet de Communiquer Mettre en oeuvre
Planifier la prochaine
plan d’amélioration le plan le plan
auto-évaluation
basé sur le rapport d’amélioration d’amélioration
Les grandes étapes du CAF

Source : CAF 2020, cinquième version du modèle
Le déroulé de la mise en œuvre du CAF est le suivant :

f après une première phase essentielle de planification et d’adhésion du personnel à la démarche, la phase d’auto
-évaluation permet d’aboutir à un diagnostic illustrant les points forts et les axes d’amélioration de l’organisation.
L’auto-évaluation est réalisée par un ou plusieurs groupes d’auto-évaluation de 12 personnes maximum, aussi repré-
sentatifs que possible de l’organisation. Elle s’appuie sur 9 critères et 28 sous-critères, classés en « facteurs » et
« résultats » :
• pour la partie « facteurs « (les moyens mis en œuvre dans l’organisation pour atteindre les objectifs), il s’agit du lea-
dership (critère 1), de la stratégie et de la planification (critère 2), du personnel (critère 3), des partenariats et res-
sources (critère 4), des processus (critère 5),
• pour la partie « résultats «, il s’agit des résultats auprès les citoyens/clients (critère 6), des résultats auprès du per-
sonnel (critère 7), des résultats auprès de la société (critère 8) et des résultats des performances-clés (critère 9),
• le groupe d’auto-évaluation attribue un score à chacun des 28 sous-critères puis identifie les points forts et dresse
un catalogue d’idées d’amélioration pour le développement de l’organisation ;
f lors de la troisième phase du plan d’amélioration, les idées issues du rapport d’auto-évaluation sont analysées et
classées par ordre de priorité. Les actions retenues sont alors planifiées (responsable pour chaque action, délais et
résultats attendus, etc.) et mises en œuvre. L’avancement des actions est régulièrement contrôlé et celles-ci sont
adaptées si besoin.
CHAPITRE
5
Le CAF permet d’initier un cycle d’amélioration continue et d’apporter de nombreux bénéfices :
f forte implication du personnel qui crée la motivation,
f introduction de la culture d’excellence et mise en œuvre progressive de la logique PDCA (PLAN, DO, CHECK, ACT),
f amélioration de la communication verticale et horizontale (décloisonnement).
La mise en œuvre des trois phases dure en moyenne 3 mois, de la préparation de l’auto-évaluation à la formulation d’un
plan d’amélioration. Les actions doivent ensuite être mises en œuvre dans un délai de 2 ans, avant le démarrage d’un
nouveau cycle d’auto-évaluation. L’exercice d’auto-évaluation est renouvelé tous les deux ans et permet d’apprécier la
progression de l’organisation par critère et sous-critère.
Exemple de mise en application

Retenu par le Bureau Organisation et Méthodes comme modèle pour moderniser l’administration publique, le modèle
CAF est appliqué au Sénégal depuis 2017.
Grâce à un véritable transfert de compétences réalisé avec l’expertise de l’Institut européen d’Administration publique,
les conseillers en organisation du BOM sont devenus des « coachs CAF », capables d’accompagner les organisations
publiques dans le processus d’auto-évaluation que nécessite le CAF. Après deux années de pratique, le CAF a fait ses
preuves dans plusieurs organisations et constitue selon M. Ibrahima Ndiaye, Directeur général du BOM, un « puissant
levier dans les démarches de modernisation de l’administration et des organisations publiques ».
A travers la définition et la mise en œuvre de plans d’actions bien ciblés, le CAF a permis aux différentes organisa-
tions concernées de renforcer leur structuration et de mieux définir le rôle de chaque agent en leur sein. La dynamique
interne née du processus CAF est porteuse d’une communication interne et externe renforcée et d’un management plus
participatif. Les organisations publiques sont également plus soucieuses de la qualité des services qu’elles rendent, la
satisfaction des citoyens/clients étant un des critères essentiels du CAF.

À PRENDRE ?
Les facteurs clés de succès sont les suivants :

f s’assurer d’un haut niveau d’engagement et d’appropriation de la démarche chez tous les membres de l’organisation :
consultation, formation, implication de la hiérarchie,
f avoir un budget dédié à la mise en œuvre des actions d’amélioration,
f dégager du temps pour les membres du groupe d’auto-évaluation (l’exercice CAF ne doit pas apparaitre comme une
surcharge de travail), et mettre en place un système de coaching,
f assurer un suivi rigoureux de la mise en œuvre du plan d’actions : un pilote pour chaque action et un suivi régulier.
Cette démarche permet d’éviter les risques de rejet inhérents à des démarches conduites par des cabinets externes.
Elle nécessite cependant une forte volonté et mobilisation des agents. Par ailleurs, la mise en œuvre du plan d’actions
dépend beaucoup des moyens mis à disposition et de la longévité des agents dans l’organisation.
x caf-network.eu/img_auth.php/4/40/20_06_24_CAF2020FINALFR.pdf
x caf.eipa.eu/3/99/
x bom.gouv.sn

CHAPITRE
6 Cadre d’analyse de la gouvernance

sectorielle
À QUOI ÇA SERT ?
Pour les appuis systémiques, comme l’appui à la conduite d’une réforme sectorielle, il est recommandé de réaliser
le S&E à partir des axes de renforcement des capacités définis à l’issue du diagnostic initial.
Pour ce faire, un outil de diagnostic et de suivi de la gouvernance sectorielle a été élaboré par LuxDev à partir des
critères retenus pour les appuis aux programmes sectoriels par la Commission européenne.
L’outil permet de suivre l’avancement des programmes de réforme sectorielle à travers les 5 axes suivant :
f les documents de politique sectorielle,
f le budget sectoriel et la gestion des dépenses,
f la coordination des parties prenantes du secteur,
f le cadre institutionnel et réglementaire,
f le système de suivi de la performance.
L’outil est présenté sous un format Excel. Chacun des axes de l’analyse sectorielle est décliné en plusieurs critères d’éva-
luation. Par exemple, pour l’axe « politique sectorielle » (axe A), les critères d’évaluation sont :
f A1 - Existence et accessibilité de la politique sectorielle,
f A2 - Qualité du document de politique publique,
f A3 - Processus d’élaboration de la politique sectorielle,
f A4 - Qualité et cohérence avec les objectifs de développement,
f A5 - Rôle du gouvernement dans le secteur.
Chaque critère est ensuite analysé à travers plusieurs questions. Par exemple, pour le critère A1, les questions sont les
suivantes :
Pour la quasi-totalité des questions, il est proposé un sys-
Existe-il une politique publique claire pour
A.1.1 tème de notation de 0 à 5. La note «0» représente l’évalua-
le secteur ?
tion la plus basse et signifie qu’il n’existe aucun élément cor-
Cette politique publique est-elle ancienne respondant à la question. La note «5» est la note la plus haute
A.1.2
(+30 ans, 5) ou récente (-d’un an 1) ? et signifie que le secteur dispose dans le domaine concerné
La politique publique est-elle régulièrement de dispositifs optimisés. Les réponses se situent générale-
A.1.3
évaluée (tous les 5 ans - note 5, jamais 0) ? ment entre la valeur «1» (développement informel) et «4»
La politique publique est-elle régulièrement (systématique) Lorsque la question est sans objet, aucune
A.1.4
actualisée (tous les 5 ans - note 5, jamais 0) ? valeur n’est inscrite. Lorsque la question traite d’un facteur
La politique publique est-elle facilement externe (partie «contexte»), l’interprétation de la valeur est
A.1.5 à adapté : 0 = influence très négative - 5 = influence très
accessible ?
positive. La notation de chaque question permet de calculer
La politique publique est-elle connue des parties
A.1.6 une note moyenne pour chaque critère, et à partir de cette
prenantes ?
note, de définir des pistes d’amélioration.
CHAPITRE
6 L’application de l’outil demande une forte implication des parties prenantes (si possible avec un temps d’auto-évalua-
tion) et la mobilisation d’un facilitateur. Il est conseillé, après une présentation générale par le facilitateur de l’outil,
d’organiser des focus group. La désignation d’une personne interne au Ministère en charge du secteur pour faciliter le
travail de mobilisation des membres et des informations est également conseillé. Si les partenaires ne sont pas prêts à
répondre à certains critères jugés sensibles, il est recommandé de les laisser libre de ses choix. Il faut prévoir au moins
3 mois d’échanges et de recherches pour appliquer l’outil de manière optimale.
Il est conseillé de faire remplir l’outil par des groupes réunissant des représentants du ministère concerné par l’interven-
tion et des autres parties prenantes du secteur, après présentation générale de l’outil par un facilitateur qui peut être
le(la) pilote du S&E au niveau du ministère. La désignation d’une personne interne au ministère en charge du secteur (le/
la pilote ou le/la décideur/euse en charge de superviser le processus de S&E) pour faciliter le travail de mobilisation des
membres et des informations est également conseillé.
Pour avoir une idée de la progression du secteur, il est conseillé d’appliquer ce cadre
d’évaluation tous les 24 mois. L’outil permet dans la partie «synthèse» de générer
directement des représentations graphiques qui pourront faciliter l’analyse de la
progression.
PRÉSENTATION DE L’OUTIL
Justification (illustrations,
Code Notation de départ Points d'amélioration Commentaires
exemples)
A.1 Existence et accessibilité de la politique sectorielle 2,50
A.1.1 Existe-il une politique publique publique claire pour le secteur ? 1
Cette politique publique est-elle ancienne (+30 ans, 5) ou récente (-
A.1.2 2
d'un an 1) ?
La politique publique est-elle régulièrement évaluée (tous les 5 ans -
A.1.3 3
note 5, jamais 0) ?
La politique publique est-elle régulièrement actualisée (tous les 5
A.1.4 4
ans - note 5, jamais 0) ?
A.1.5 La politique publique est-elle facilement accessible ? 3
A.1.6 La politique publique est-elle connue des parties prenantes ? 2
A.2 Qualité du document de politique publique 2,85

La politique publique a-t-elle été conçue et écrite par le
A.2.1 1
gouvernement ?
La politique publique a-t-elle été conçue selon système de

A.2.2 2
planification et d'élaboration de politiques du gouvernement ?
La politique publique a-t-elle été avalisée par les plus hautes

A.2.3 4
autorités politiques ?
La politique publique définit-elle clairement le rôle du gouvernement

A.2.4 2
et des autres parties prenantes ?
La politique publique définit-elle clairement les responsabilités entre
A.2.5 le Ministère sectoriel et les autres ministères (dont évconomie et 4
finances) ?
Extrait de l’onglet « politique sectorielle »
x Document de référence de la Commission européenne :

https://europa.eu/capacity4dev/file/10205/download?token=6_GyFB93
CHAPITRE
7 Cadre pour un développement durable

stratégique
À QUOI ÇA SERT ?
Le Cadre pour un développement durable stratégique est une démarche systémique et participative pour intégrer
la perspective développement durable au cœur du métier des organisations. Développée dès 1989 en Suède, elle est
notamment promue par la platforme My Sensei Lab 20. Elle s’adresse aux organisations publiques comme privées qui
souhaitent passer de la vision à l’action. Elle offre un cadre structurant et un langage commun sur le développement
durable afin de mieux préparer les changements futurs.
Cette démarche est à utiliser lors de la phase de conception de projets orientés vers la
responsabilité sociétale des organisations. Dans l’esprit de la Théorie du Changement,
elle permet de formuler une vision commune pour l’organisation (le futur souhaité) et de
mettre en place des actions et initiatives pour y parvenir.
La démarche CDDS comprend un processus itératif en 4 étapes « A-B-C-D » :

f étape A : partager le même schéma mental : la démarche FSSD propose une définition opérationnelle du développe-
Une définition
ment durable, à travers concrète
8 conditions & opérationnelle du développement durable
de durabilité,

La démarche FSSD a permis, par
processus de recherche de consens
au sein d’une communauté large
scientifiques, d’identifier que
activités humaines endommagent
systèmes socio-écologiques en
respectant pas 8 mécanismes sour
générant ainsi les multiples impacts q
nous connaissons et ceux qui ne so
pas encore identifiés.
En opposition, ce sont donc, telles q

listées ci-contre, les 8 conditio
nécessaires à des sociétés durabl
Elles constituent une définit
Les 8 conditionsconcrète et opérationnelle du développement durable.
de durabilité selon le CDDS
Source : My Sensei Lab Formulés de manière « négative », elles visent à donner les limites dans lesquelles nous pouvons a
Véritable langage commun, permettant de se concentrer sur la source des impacts et non les impacts, el
20. https://mysenseilab.com/
stimulent ainsi une créativité proactive et stratégique pour repenser nos modes de satisfaction des beso
humains.
omplexe, ceci étant validé par maintenant 30 ans de retours d’expérience :
CHAPITRE
ntes pour atteindre la durabilité FICHES MÉTHODES 2 61
pplicables à toutes activités
er l’action et donner une direction
7 f étape B : analyser la situation actuelle de l’organisation à partir du futur souhaité : la démarche propose d’exami-
ent exclusives) pour permettre une analyse structurée.
ner les pratiques de l’entreprise pour identifier les points forts et les axes d’améliorations pour aller dans le sens des
8 conditions de durabilité,
gner les réponses à nos besoins « en sécurité » (i.e. l’incertitude est aussi faible
f étape C : imaginer librement les solutions et actions possibles pour tendre vers le futur souhaité,
ssi élevée que possible).
f étape D : identifier les priorités et agir : il s’agit ici de se concentrer sur les solutions les plus pertinentes (degré de
cohérence avec les 8 conditions de durabilité, complexité de mise en œuvre, rapport coût/bénéfice)
s
on ?
n
« A-B-C-
ns
puis des
ociétés
r, à leur stratégie de développement.
Illustration de la démarche FSSD et de son processus itératif en 4 étapes
Source : My Sensei Lab

À PRENDRE ?
f Une forte adhésion des membres de l’organisation à ce projet de transformation.

f Un accompagnement par un facilitateur externe.
f Une implication active de chaque acteur lors des ateliers pour capter au mieux l’intelligence collective du groupe.
x mysenseilab.com
CHAPITRE
8 Cadre d’auto-évaluation de la responsabilité

sociétale
À QUOI ÇA SERT ?
Le Cadre d’auto-évaluation de la responsabilité sociétale (CARS) est un outil d’évaluation de l’engagement des orga-
nisations publiques dans ce domaine. Il sert avant tout à faciliter la définition d’un plan d’action pour de meilleures
pratiques en matière de responsabilité sociétale. Sept domaines d’action ou « questions centrales » (en vert sur le
schéma ci-dessous) incluant les questions environnementales permettent d’identifier et d’évaluer l’impact sociétal
de l’organisation.
Société
Sphère d’influence
Droits de l’Homme Parties prenantes

Loyauté des pratiques
directes
Relations et conditions de travail GOUVERNANCE Relations avec les citoyens
Environnement Missions
Communauté et développement local
Prestations
Processus
Parties prenantes
indirectes
Illustration de l’outil CARS

Source : schéma adapté de CARS Guide du participant 2018
CHAPITRE
8
Lorsqu’une organisation souhaite intégrer davantage de responsabilité sociétale

(intégrant l’environnement mais aussi la question des droits de l’homme, de la loyauté
des pratiques, des relations avec les citoyens) dans sa stratégie et ses pratiques.
Le Cadre d’auto-évaluation de la responsabilité sociétale propose une démarche en 5 phases, comprenant au total 22
étapes. La démarche dure en moyenne deux mois (de la phase 1 à 4) :
f phase 1 : Préparation de la démarche de responsabilité sociétale : constitution d’un groupe d’auto-évaluation, plani-
fication de la démarche (périmètre, facteurs clés de succès, risques),
f phase 2 : Etat des lieux des actions réalisées en matière de RS (en lien avec les 7 questions centrales), identification
des parties prenantes et de leurs attentes, évaluation de l’impact de l’organisation sur les parties prenantes et l’im-
pact des parties prenantes sur l’organisation,
f phase 3 : Identification des domaines d’action de responsabilité sociétale prioritaires,
f phase 4 : Elaboration du plan d’action sociétal à intégrer dans le plan stratégique de l’organisation : il s’agit ici de for-
muler des actions concrètes, de valider le plan d’action auprès des parties prenantes (et du personnel de l’organisa-
tion si possible) puis de le mettre en œuvre,
f phase 5 : Evaluation de la mise en œuvre du plan d’action et de la gouvernance de l’organisation par rapport aux
enjeux sociétaux : cette évaluation a lieu un an après le lancement du plan d’action sociétal de l’organisation.

À PRENDRE ?
f S’assurer d’un haut niveau d’engagement et d’appropriation de la démarche chez tous les membres de l’organisation.
f Avoir un budget dédié à la mise en œuvre de la démarche.
f Avoir en parallèle mis en place une démarche qualité via le Cadre d’auto-évaluation de la fonction publique.
x Guide détaillé sur le CARS :

fedweb.belgium.be/sites/default/files/CARS_guide_FR.pdf
64
CHAPITRE 3
Quels outils pour faciliter la mise en œuvre

des recommandations formulées dans le guide
méthodologique (chapitre 1) ?
Retrouvez les étiquettes de niveaux
INDIVIDUEL ORGANISATIONNEL SYSTÉMIQUE

65
OUTILS
CHAPITRE
66 3 OUTILS
1 Grille de questions pour guider l’analyse

qualitative
L’analyse qualitative des changements induits par les appuis au RC peut être guidée par les questions
suivantes, largement inspirées de la grille de questions développée par le réseau INTRAC.
DIMENSION DE L’APPUI AU RC QUESTIONS À SE POSER
f Le plan et le processus reflètent-ils les besoins identifiés dans le diagnostic initial ?

f Les objectifs et les priorités sont-ils clairs et cohérents avec les activités proposées ?
f Sont-ils suffisamment réalistes et adaptés au niveau de «maturité» et au contexte du
CONCEPTION partenaire ?
DU PLAN ET
f Sont-ils appropriés et compris de manière adéquate dans l’organisation partenaire ?
DU PROCESSUS
DE RC f Que se passe-t-il d’autre dans l’organisation et dans le contexte externe qui pourrait avoir un
impact sur le plan et le processus initiaux ?
f Comment pourrait-on adapter le plan et le processus pour intégrer ces paramètres ?
f Au-delà de ces paramètres, comment le plan et le processus pourraient-ils être améliorés ?
f Les ressources allouées au projet sont-elles utilisées de la manière prévue ? Si non,

pourquoi ?
MOYENS ET f Le budget s’avère-t-il suffisant pour les activités prévues ?

RESSOURCES f Le personnel affecté au travail s’avère-t-il suffisant et approprié ?
f L’assistance technique mise en place s’avère-t-elle adaptée aux besoins de la maîtrise d’ou-
vrage ? Est-elle encore nécessaire ou faut-il la faire évoluer ?
f Quelles activités ont été réalisées au cours de la période écoulée, et avec qui ?
f Toutes les activités prévues ont-elles été réalisées ? Si non, pourquoi ?
f Toutes les activités prévues sont-elles encore pertinentes/nécessaires ? Si non, pourquoi ?
f Dans quelle mesure les activités ont-elles été bien organisées et bien mises en œuvre ?
ACTIVITÉS MISES
Comment pourraient-elles être améliorées ?
EN ŒUVRE
f Quels ont été les défis de la mise en œuvre et comment ont-ils été surmontés ?
f Les personnes impliquées dans le processus sont-elles celles qui doivent l’être ? Sont-elles
en capacité de jouer leur rôle ?
f De nouveaux besoins de soutien ont-ils été identifiés au cours de cette période ?
21. https://www.intrac.org/wpcms/wp-content/uploads/2021/01/ME-systems-for-capacity-strengthening.pdf
CHAPITRE
OUTILS 3 67
1
DIMENSION DE L’APPUI AU RC QUESTION À SE POSER
NIVEAU INDIVIDUEL
f Les personnes ayant bénéficié des formations ont-elles mis en pratique certaines des
compétences et/ou outils acquis dans le cadre des formations ? Dans quelles proportions ?
f Quels changements ces formations ont-elles provoqué dans les pratiques des bénéfi-
ciaires ? Ces changements se maintiennent-ils dans la durée ? Si non, pourquoi ?
f Ces pratiques ont-elles diffusé auprès d’autres agents n’ayant pas participé à la forma-
tion ? Si oui, comment ? Si non, pourquoi ?
RÉSULTATS OU f La structure dispose-t-elle d’une vision, d’une stratégie, d’une organisation et de procé-
CHANGEMENTS dures claires et partagées ? Si non, quelles sont les principales difficultés rencontrées ?
INTERMÉDIAIRES Comment le projet peut-il contribuer à les surmonter ?
f Comment a évolué le fonctionnement et l’organisation de la structure depuis le démarrage
de l’appui ? Quels changements peuvent être attribués au projet ?
NIVEAU SYSTÉMIQUE
f Le système/secteur dispose-t-il d’une vision assortie de plans de développement/docu-

ments de politique publique clairs et partagés ?
f Le système/secteur dispose-t-il d’une gouvernance claire et partagée ? Les rôles et res-
ponsabilités des acteurs du système sont-ils clairs ?
f Comment a évolué le fonctionnement et l’organisation du système/secteur depuis le
démarrage de l’appui ? Quels changements peuvent être attribués au projet ?
NIVEAU INDIVIDUEL
f Comment ont-évolué les capacités individuelles et collectives des agents depuis le démar-
rage du programme (connaissances techniques, soft skills, aptitude au travail collectif…) ?
f Ces changements ont-ils un impact sur la trajectoire des agents (changement de poste,
employabilité…) ?
f Ces changements ont-ils un impact sur la performance de l’organisation ?
CHANGEMENTS FINAUX f Comment ont évolué les performances de l’organisation depuis le démarrage de l’appui ?
En particulier, comment a évolué la qualité des services rendus ?
f Quels sont les autres changements organisationnels observés (implication des parties
prenantes dans la gouvernance, amélioration des pratiques managériales, niveau d’adhé-
sion du personnel à la vision et aux valeurs de l’organisation, etc.) ?
NIVEAU SYSTÉMIQUE
f Comment a évolué la performance du système/secteur depuis le démarrage de l’appui,

notamment la qualité du service rendu ?
f Quels sont les autres changements observés au niveau systémique (évolution des rôles
et responsabilités, implication des habitants, clarification des objectifs politiques, etc.) ?
CHAPITRE
68 3 OUTILS
2 Déroulé type d’un atelier de collecte

et d’analyse de données qualitatives
(atelier des petits ou des grands pas)
Le déroulé d’atelier proposé ci-dessous peut être utilisé pour analyser les changements intermédiaires (petits
pas) ou finaux (grands pas) d’une intervention de façon participative. Il est inspiré du déroulé d’atelier proposé
dans la boîte à outils du S&E de l’AFD.
Sa durée approximative est de 3h. La méthode et la durée peuvent être adaptées aux besoins et aux réalités
de chaque intervention.
OBJECTIFS DE L’ATELIER
L’objectif de l’atelier est de pouvoir répondre aux questions suivantes.
f Quels changements observons-nous chez les acteurs concernés par l’intervention ?
f Dans quelle mesure l’intervention a-t-elle contribué à ces changements ?
f Quelles leçons peut-on en tirer pour la suite du projet ? Quels réajustements sont nécessaires ?
PARTICIPANTS
En fonction des changements que l’on cherche à mesurer (petits/grands changements), et des moyens disponibles,
l’atelier peut inclure tout ou partie des participants suivants :
f cibles/bénéficiaires du RC,
f chargés de S&E,
f représentants de la structure porteuse du projet,
f représentants d’organisations impactées par l’intervention.
Il est recommandé de faire appel à un animateur externe au projet pour faciliter l’atelier et cadrer les discussions, par-
ticulièrement pour l’analyse des grands changements qui peut impliquer plus de parties prenantes.
DÉROULÉ GÉNÉRAL
L’atelier se déroule en 3 temps :
f analyse des changements significatifs (attendus et inattendus),
f priorisation des changements et échange sur le pourquoi (contribution de l’intervention au changement notamment),
f proposition d’actions correctives et hiérarchisation des actions.
CHAPITRE
OUTILS 3 69
2 TEMPS 1 : TEMPS D’ANALYSE DES CHANGEMENTS SIGNIFICATIFS (1H)

f 0) En amont, l’animateur peut éventuellement rappeler les domaines de changement à analyser, par exemple :
• situation sécuritaire,
• situation économique,
• conditions de vie des jeunes,
• accès à des services publics.
f 1) Les participants sont ensuite invités à qualifier les changements qu’ils ont pu observer, et à les déposer sur
le tableau sous forme de post-it. L’animateur regroupe les idées par catégorie pour faire ressortir les points de
convergence.
f 2) Si une enquête a été réalisée dans le cadre du S&E, les résultats peuvent être partagés avec les participants, et
ces derniers invités à venir enrichir la cartographie des changements sur la base des résultats de l’enquête.
f 3) Une fois les post-its regroupés par l’animateur, et pour chaque changement ou domaine de changement identi-
fié, les participants sont invités à qualifier la situation (dégradation, stagnation ou amélioration) et à l’illustrer avec
un fait précis ou un vécu. Ils écrivent cela sur des post-it mis à leur disposition et viennent le coller sur un «tableau
support :
• Stylo ROUGE => DÉGRADATION
• Stylo NOIR => STAGNATION
• Stylo VERT => AMÉLIORATION
f 4) L’animateur fait la synthèse et ouvre la discussion : la situation s’améliore-t-elle ou pas ? Avec quelle ampleur et
dans quel domaine ?
TEMPS 2 : PRIORISATION DES CHANGEMENTS ET ÉCHANGE SUR LE POURQUOI (1H)

f 1) En petits groupes, les participants sélectionnent les 3 changements qui leur semblent les plus significatifs, et
remplissent le tableau suivant :
CHANGEMENT OBSERVÉ EVOLUTION (+/-) EXPLICATION CONTRIBUTION DU PROJET ENSEIGNEMENTS TIRÉS
f 2) Chaque sous-groupe restitue ensuite le fruit de sa réflexion au reste du groupe.
TEMPS 3 : PROPOSITION D’ACTIONS CORRECTIVES ET HIÉRARCHISATION DES ACTIONS (1H)

f 1) Les participants sont invités à formuler 3 propositions d’actions correctives chacun sous forme de post-it.
f 2) L’animateur regroupe les propositions par catégorie ou grandes idées sur le tableau.
f 3) A l’aide de gommettes, les participants sont ensuite invités à venir sélectionner les 3 propositions d’actions qui leur
semblent les plus pertinentes à court terme.
f 4) L’animateur fait la synthèse de l’exercice et indique les actions correctives qui ont été le plus plébiscitées par les
participants.
CHAPITRE
70 3 OUTILS
3 Outils pour le monitoring au niveau individuel
Les outils ci-dessous sont tirés du guide LuxDev sur le renforcement des capacités.
À QUOI SERVENT-ILS ?
Ces outils ont pour objectif de faciliter le suivi des actions de RC au niveau individuel (actions de formation ou de
coaching).
Les outils proposés sont (i) un questionnaire d’évaluation de la satisfaction à chaud, (ii) un outil de suivi post-formation.
Ces outils permettent de suivre le niveau de satisfaction des bénéficiaires (questionnaire de satisfaction), l’évolution
des compétences acquises mais aussi (et surtout) le niveau d’application des compétences acquises et les éventuels
effets sur la performance de l’organisation (outil de suivi post-formation).
Pour l’évaluation des compétences, le plus indiqué est de réaliser un test de connaissance avant et après la formation.
Les contenus de chaque formation étant différents, il n’est pas possible de standardiser ce type d’outil.
QUAND LES UTILISER ?
L’utilisation de ces outils se fait à des moments différents : (1) le questionnaire de

satisfaction est à appliquer à la fin de l’activité conduite, (2) le questionnaire de suivi
post-formation est appliqué après la formation, a minima un mois après.
COMMENT LES UTILISER ?
Ces différents outils sont utilisés par l’entité en charge d’organiser et de suivre les appuis au RC au niveau individuel,
idéalement les services en charge de la GRH. Il est important, pour disposer de données exploitables, que ces outils
soient utilisés de manière systématique à l’issue de chaque activité de formation et que les résultats soient exploités
pour améliorer les appuis au RC au niveau individuel.
Pour faciliter l’utilisation de ces outils, la production et l’analyse de données, il est possible de les digitaliser et d’utiliser
des outils en ligne du type Google Form, Survey Monkey ou Forms (suite Office).
CHAPITRE
OUTILS 3 71
3
OUTILS
EXEMPLE DE QUESTIONNAIRE DE SATISFACTION
QUESTIONNAIRE D’ÉVALUATION DE LA SATISFACTION À CHAUD
Vous venez de participer à un atelier de formation (préciser l’intitulé) et nous aimerions connaître votre opinion.
Afin de mieux prendre en compte votre point de vue, nous vous remercions de prendre quelques minutes pour
répondre à ce questionnaire en choisissant la réponse ou le score traduisant le mieux votre ressenti.
Merci à l’avance pour votre participation !
f 1. Quelle est votre fonction ?

Veuillez indiquer votre fonction et /ou titre, lieu de travail
(Nota bene : il est possible également que le questionnaire reste anonyme, cela a l’avantage de limiter le risque d’au-
to-censure et donc de biais)
f 2. Quelle est votre appréciation concernant l’organisation pratique de la formation

(accès, confort, restauration, régime horaire) ? (1 Etoile, très négative - 5 Etoiles, très positive)
f 3. Commentaire(s) sur l’organisation ?

Vous avez d’autres idées et suggestions pour l’amélioration de l’organisation ? Veuillez les saisir ci-dessous
f 4. Quelle est votre appréciation concernant les contenus techniques de la formation ?

(1 Etoile, très négative - 5 Etoiles, très positive)
f 5. Quelle est votre appréciation des différents éléments de contenus proposés ?

TRÈS NÉGATIVE NÉGATIVE MOYENNE POSITIVE TRÈS POSITIVE

Module 1
Module 2

6. Commentaire(s) sur les contenus

On n’a pas tout couvert ? Vous avez d’autres idées et suggestions pour l’amélioration du contenu de l’atelier ? Veuil-
lez les saisir ci-dessous.
f 7. Quel contenu avez-vous le plus apprécié ?
f 8. Quel contenu est à améliorer ?

CHAPITRE
72 3 OUTILS
3
f 9. Quelle est votre appréciation générale concernant l’approche pédagogique utilisés au cours de l’ate-
lier ? (1 Etoile, très négative - 5 Etoiles, très positive)
f 10. Quelle est votre appréciation concernant la méthodologie et les outils utilisés ?
TRÈS NÉGATIVE NÉGATIVE MOYENNE POSITIVE TRÈS POSITIVE

Durée allouée
aux groupes de
travail
Sentiment d'avoir
été écouté
Présentations :
choix des outils/
méthodes
L'animation :
choix des outils/
méthodes
Nouveaux
éléments appris
Renforcement de
l’esprit d’équipe
Possibilités
d’application
dans le cadre de
mon travail
Opportunités
d'échanges
informels (p.ex.
pauses)

f 11. Commentaire(s) sur l’approche pédagogique et les aspects méthodologiques
Vous avez d’autres idées et suggestions pour améliorer le déroulement méthodologique des sessions ?
Veuillez les saisir ci-dessous.
f 12. Selon vous, quelles suites pourraient être données à cette activité ?
f 13. Quels contenus de la formation souhaitez-vous appliquer ? avec quel objectif ? dans quels délais ?
f 14. Avez-vous besoin d’un appui supplémentaire pour ce faire ? Si oui lequel ?
CHAPITRE
OUTILS 3 73
3
EXEMPLE DE QUESTIONNAIRE POST-FORMATION
QUESTIONNAIRE DE SUIVI POST-FORMATION
1. Évaluation a posteriori de la pertinence de la formation

f A l’issue de la formation, sa pertinence est-elle bien confirmée ?
Pertinence par rapport au poste occupé :
Très forte Bonne Moyenne Faible
Pertinence par rapport à la performance de l’organisation :
Très forte Bonne Moyenne Faible
Evaluation de la pertinence sur 100 : XXX/100
2. Évaluation de l’acquisition des compétences

f Quelles sont les compétences qui ont été acquises grâce à la formation ? 0 = pas du tout capable /
10 = tout à fait capable
AVANT LA FORMATION AU TERME DE LA FORMATION

Compétence 1 0 1 2 3 4 5 6 7 8 9 10 0 1 2 3 4 5 6 7 8 9 10
Compétence 2 0 1 2 3 4 5 6 7 8 9 10 0 1 2 3 4 5 6 7 8 9 10
Compétence 3 0 1 2 3 4 5 6 7 8 9 10 0 1 2 3 4 5 6 7 8 9 10
Compétence N 0 1 2 3 4 5 6 7 8 9 10 0 1 2 3 4 5 6 7 8 9 10
f Quelle a été la méthodologie d’évaluation des compétences lors de la formation ? Y a-t-il une attestation de
ces compétences ?
f Quel est le niveau de satisfaction générale du bénéficiaire par rapport à la formation reçue ?
Non satisfait Moyennement satisfait Satisfait Très satisfait
Commentaires :
f Quel est le niveau de satisfaction général du bénéficiaire par rapport aux conditions de formation ?
MOYENNEMENT
NON SATISFAIT SATISFAIT TRÈS SATISFAIT COMMENTAIRES
SATISFAIT
Qualité du ou des
formateurs
Méthodologie
utilisée
Supports de
formation
Conditions
pratiques
CHAPITRE
74 3 OUTILS
3
3. Évaluation de l’application des compétences et du transfert
Les compétences acquises sont-elles utilisées de manière régulière ? Donner des exemples concrets
d’application
DE MANIÈRE
DE MANIÈRE INTENSE
FRÉQUENTE (AU EXEMPLES /
(COMPÉTENCES CLÉS, RAREMENT PAS DU TOUT
- UNE FOIS PAR INDICATEURS
TOUS LES JOURS)
SEMAINE)
Compétence 1
Compétence 2
Compétence 3
Compétence N
f Avez-vous partagé les acquis de la formation avec vos collègues ? Si oui de quelle manière ?
f Quelles sont les difficultés rencontrées dans l’application des compétences ?
f Comment améliorer l’application et le transfert des compétences acquises ?
f Évaluation de l’application des compétences sur 100 : XXX/100
4. Évaluation des effets de la formation sur le fonctionnement et la qualité du service (avec le responsable
du service ou de l’organisation)
f La formation a-t-elle des effets positifs sur le fonctionnement et la qualité du service :
Non pas du tout Moyennement positifs Très positifs
f Comment cela se traduit-il concrètement ?
f La formation a-t-elle éventuellement des effets négatifs sur le fonctionnement et la qualité du service :
Non Oui
f Comment cela se traduit-il concrètement ?
f Comment améliorer les effets positifs sur le fonctionnement et la qualité du service ?
f Quels CHANGEMENTS SIGNIFICATIFS a permis cette activité de renforcement des capacités ?

Dans votre vie professionnelle : ________
Dans votre organisation : ________
f Commentaires sur l’impact de l’activité de développement des capacités : _____

CHAPITRE
OUTILS 3 75
3
5. Évaluation du potentiel d’effets
CONTENU DE LA ADÉQUATION AU VALIDATION DES POTENTIEL

MISE EN ŒUVRE
FORMATION POSTE DU FORMÉ ACQUIS D’EFFET
90 80 68 50
Adaptée 100 Adéquat 100 Acquis 100 Mis en œuvre 100
Partiellement 10 à 90 Partiellement 10 à 90 Partiellement 10 à 90 Partiellement 10 à
adaptée adéquat acquis mis en œuvre 90
Pas adaptée 0 Inadéquat 0 Non acquis 0 Pas mis en 0
œuvre
Commentaires Commentaires Commentaires Commentaires
CHAPITRE
76 3 OUTILS
4 Matrice d’indicateurs
La matrice ci-dessous fournit des exemples d’indicateurs de suivi pour chaque niveau de RC. Elle vise à
accompagner les porteurs de projets dans le choix de leurs indicateurs de suivi des changements visés.
Ces exemples sont bien sûr indicatifs et sont à appliquer et adapter en fonction du contexte. Il est également
essentiel de se référer autant que possible aux indicateurs utilisés au niveau national, en lien avec les dispositifs
de suivi-évaluation existants.
À noter que les indicateurs doivent, après leur définition, être formulés sous forme de cible.
NIVEAU INDIVIDUEL
• Part du financement du RC destiné à la formation au niveau individuel (part du budget, taux

d’exécution)
• Part du financement de formation individuelle disponible (OU le plan de formation bénéficie d’un
financement à hauteur de 80%)
MOYENS • Part des agents ayant participé à la définition de leurs besoins de formation
• Existence / disponibilité d’un plan de développement des compétences par catégorie de salariés,
basé sur l’analyse des écarts de compétences, la vision de l’organisation et les attentes des individus
• Diversité des actions prévues par le plan de développement des compétences (formation, coaching,
peer to peer, mentorat, etc…)
• Taux de réalisation du plan de développement des compétences

• Taux de consommation du budget
• Nombre de personnes formées (par fonction, homme/femme) OU nombre d’agents ayant bénéficié
d’au moins X jours de formation
• Nombre de jour / homme / formation réalisés (par fonction, homme/femme)
• Nombre de séances de coaching dont ont bénéficié les agents (OU nb d’agents ayant bénéficié d’au
RÉALISATIONS
moins X séances de coaching)
• Nombre de fiches de postes élaborées (avant/après) ou mises à jour
• Nombre de parcours d’évolution professionnelle identifiés ou mis à jour
• Qualité des supports pédagogiques élaborés
• Niveau de conception et de fonctionnalité d’un dispositif et d’outils d’évaluation annuelle
• Présence d’un service RH opérationnel
• Part des bénéficiaires se disant satisfaits de la formation (ex : fixer un objectif à 80%)
• Part des personnes formées / coachées ayant acquis les compétences visées (valorisé pendant l’en-
tretien d’évaluation annuelle)
CHANGEMENTS
• Part des personnes formées / coachées appliquant les compétences en situation professionnelle
INTERMÉDIAIRES
(OU % des personnes formées ayant mis en application au moins X outils/principes/approches
(OU RÉSULTATS)
acquis pendant la formation dans leur pratique)
• Part du personnel disposant des compétences en adéquation avec sa fiche de poste
• Part du personnel ayant des objectifs annuels SMART définis au cours d’un entretien annuel
• Augmentation de la performance individuelle (dans son organisation) en lien avec les appuis (à défi-
nir au cas par cas), notamment :
> Amélioration des connaissances techniques des individus
CHANGEMENTS > Amélioration des savoir-être (savoir-gérer, savoir-agir…) et savoir-faire
FINAUX • Augmentation de la polyvalence des individus
• Amélioration de la gestion de carrière (diminution du turn-over, mobilité interne, épanouissement, etc.)
• Contribution aux changements organisationnels et systémiques (à définir au cas par cas)
CHAPITRE
OUTILS 3 77
4
• Existence / disponibilité d’un diagnostic organisationnel

• Existence / disponibilité d’une stratégie de développement organisationnel/feuille de route
• Part du financement du RC destiné à la formation au niveau organisationnel (part du budget, taux
d’exécution)
MOYENS • Présence de RH dédiés à la transformation organisationnel
• Nombre de jour/homme prestés en appui au niveau organisationnel
• Nombre d’activités de RC portant sur le niveau organisationnel
• Disponibilité d’un budget pour la mise en œuvre de la stratégie de développement
• Part du financement destiné à la mise en œuvre de la stratégie de développement disponible
• Taux de consommation du budget

• Nombre de référentiels stratégiques organisationnels (re)définis en lien avec le diagnostic organisa-
tionnel et le plan d’actions lié (notamment RSE)
• Nombre de processus (procédures, flux…) améliorés et mis en œuvre
RÉALISATIONS • Nombre de nouveaux processus conçus et mis en œuvre
• Nombre de dispositifs et d’outils de management et de gestion mis en place et utilisés
• Nombre de pilotes de processus (notamment managers) formés/porteurs/soutenus par la direction
• Part des salariés concernés directement par les mesures prises au sein du plan de RC
• Nombre et nature des instances multi-partites auxquelles l’organisation participe
• Niveau de conception et de fonctionnalité des organes de gouvernance

• Niveau d’implication des parties prenantes et de partage dans la définition de la vision, des missions,
des valeurs et du plan de développement stratégique
• Amélioration de la performance interne (par fonction), notamment :
CHANGEMENTS > Fonctionnalité, efficacité et qualité de la gestion administrative et financière de l’organisation
INTERMÉDIAIRES > Fonctionnalité, efficacité et qualité de la gestion RH (y compris bien-être au travail et gestion
(OU RÉSULTATS) de carrière)
> Fonctionnalité, efficacité et qualité des dispositifs de contrôle, de suivi & évaluation et de rapportage
• Évolution du niveau d’adaptation de l’organisation et du management aux enjeux
• Évolution de la capacité de l’organisation à dialoguer/influencer son environnement
• Amélioration des performances externes de l’organisation (vis-à-vis du service rendu, des ODD…)
f EFFETS INTERNES :
• Amélioration de l’implication des parties prenantes dans la gouvernance et la gestion de l’organisa-
tion (composition des organes de gouvernance et participation)
• Évolution de la capacité de l’organisation à accepter et impulser le changement, résilience face aux crises
• Évolution du niveau d’intégration des enjeux liés à l’environnement et au genre dans la stratégie et le
fonctionnement de l’organisation
• Évolution des capacités managériales de l’organisation
CHANGEMENTS • Évolution des capacités managériales en lien avec les objectifs de l’organisation (à définir au cas par
FINAUX cas en fonction des objectifs recherchés)
• Évolution du lien entre l’organisation et son contexte d’intervention (capacité à l’appréhender, le com-
prendre, proposer des services en phase avec les besoins, etc.)
f EFFETS EXTERNES :
• Qualité de dialogue et degré d’influence de l’organisation vis-à-vis de son environnement
• Amélioration de l’accès aux services proposés par l’organisation (évolution des taux de fréquentation)
• Amélioration de la qualité des services proposés par l’organisation (évolution du taux de satisfaction)
CHAPITRE
78 3 OUTILS
NIVEAU SYSTÉMIQUE
• Niveau de financement du RC au niveau sectoriel (part du budget, taux d’exécution)

• Nombre de jour/homme prestés en appui au niveau sectoriel
• Nombre d’activités de RC portant sur le niveau institutionnel
MOYENS
• Présence d’actions visant l’inclusion des parties prenantes et le renforcement de l’institution pilote dans
le secteur
• Pareil qu’au-dessus mais au niveau du secteur
• Existence d’un service dédié à l’accessibilité du service
• Production régulière d’un annuaire/tableau de bord statistique du secteur
RÉALISATIONS • Existence de référentiels politiques / stratégiques (re)définis au niveau sectoriel (+ plan d’action)
• Existence d’espaces et de cadres de concertation et co-gestion pluri-acteurs
• Existence d’un cadre juridique et réglementaire (re)définies
• Amélioration des performances du système (délais, exécution opérationnelle et financière)

• Qualité de la gestion administrative et financière au niveau systémique
• Fonctionnalité, efficacité et qualité des dispositifs de contrôle, de suivi & évaluation et de rapportage
au niveau systémique / sectoriel
CHANGEMENTS • Niveau de définition et d’appropriation / application de la vision, des missions, des valeurs et du plan de
INTERMÉDIAIRES développement systémiques
(OU RÉSULTATS) • Niveau de définition, de fonctionnalité et d’inclusivité des organes de gouvernance et de coordination
systémiques, notamment :
> Qualité et effectivité du dialogue politique et stratégique
> Coordination / complémentarité des parties prenantes et des interventions
• Niveau de territorialisation du service public
• Amélioration de l’accès aux services publics concernés (évolution des taux de fréquentation)
• Amélioration de la qualité des services proposés (évolution du taux de satisfaction)
• Evolution de la qualité de la gouvernance (à préciser selon les cas) horizontale et verticale, notamment :
> Légitimité/performance de l’institution pilote
CHANGEMENTS
> Amélioration de l’implication des parties prenantes dans la gouvernance et la gestion du système
FINAUX
(composition des organes de gouvernance et participation)
> Diminution des tensions / conflits entre parties prenantes (partage des rôles entre acteurs connus
et respectés)
• Niveau d’adhésion des citoyens-clients à la vision et aux valeurs systémiques
CHAPITRE
OUTILS 3 79
5 Guide pour un mini-diagnostic rapide des

capacités de S&E des porteurs de projets
Les questions ci-dessous, tirées de la boîte à outils du S&E de l’AFD, permettent d’identifier les informations
intéressant les porteurs de projets et susceptibles d’être collectées, de même que les ressources & moyens
disponibles, pour cadrer et dimensionner le dispositif de S&E.
Elles sont à poser au stade du diagnostic initial, en amont de la mise en œuvre du projet.
CONCERNANT LES MOTIVATIONS ET LES INTÉRÊTS DU PORTEUR DE PROJET :

f Quelles sont les priorités du porteur de projet ?
f Quelles sont les informations qu’il juge utile de connaître pour prendre des décisions sur son activité ?
f Quels sont ses facteurs de motivation : répondre à des exigences légales ? aux exigences des partenaires techniques
et financiers ? à une envie de mieux suivre ses stratégies pour les réorienter ?
f Qui s’appropriera le système de S&E ? A qui va-t-il bénéficier ?
f Quelle quantité d’informations veut-on obtenir ?
CONCERNANT LES INFORMATIONS DISPONIBLES/À EXPLOITER :

f Quelles sont les sources d’informations préexistantes disponibles :
• Au sein de la structure porteuse du projet
> Le porteur de projet publie-t-il actuellement un rapport annuel sur ses activités ?
> Ce rapport contient-il des éléments factuels/chiffrés qui reflètent bien l’ensemble des activités (complétude) ?
Les données semble-t-elles fiables (exactitude) ?
> Ce rapport contient-il une analyse qualitative de ces faits/données (analyse) ?
> Ces éléments sont-ils utilisés pour la prise de décision stratégique et le pilotage opérationnel (utilité) ?
• En provenance d’autres structures ? (Office national des Statistiques, Universités, Ministères de tu-telles,.. ?)
NB : Sauf pour les petits projets, il est toujours préférable de s’appuyer sur les systèmes existants et de voir dans quelle
mesure le S &E du projet peut s’y intégrer pour les renforcer, plutôt que de créer des dispositifs ad hoc.
CONCERNANT LES RESSOURCES & MOYENS À DISPOSITION :

f Qui, au sein de la structure porteuse du projet, peut faire la promotion d’un système de S&E ? Parmi les dirigeants,
peut-on identifier un leader qui se préocupe du S&E ?
NB : cette personne doit être proche des centres de décision et capable d’influencer les décisions clés, tout en s’impliquant
dans le système de S&E pour vérifier que les informations sont pertinentes, fiables, utilisables et disponibles.
f Quelles sont les capacités techniques disponibles pour collecter des données sur le terrain (moyens RH, outils,
méthodes…)?
• Au sein de la structure ?
• En provenance de structures partenaires (services déconcentrés des ministères, autres structures présentes au
niveau local…) ?
f Quelles seraient les capacités à renforcer en priorité en matière de S&E ?
f La MOA bénéficie-t-elle ou a-t-elle bénéficié d’une assistance technique, d’un renforcement des capacités ou d’une
formation en S&E au cours des deux dernières années ? Si oui, qui a fourni cette aide, et avec quel succès ?
f Existe-t-il, au niveau du pays, des instituts, centres de recherche, organisations privées ou universités capables de
fournir une assistance technique et/ou une formation en S&E axé sur la performance aux personnes concernées?
f Quelles structures vont être impliquées dans l’obtention et/ou l’analyse des données ? Comment vont être réparties
les responsabilités entre ces parties prenantes ? Quel est leur intérêt pour le S&E du projet, et de quels moyens dis-
posent-elles pour s’impliquer dans la démarche ?
CHAPITRE
80 3 OUTILS
6 Fiche de poste générique pour un(e)

responsable de S&E des appuis au RC
La fiche de poste ci-dessous est tirée de la boîte à outils du S&E de l’AFD.
CONTEXTE
Les projets d’appui au renforcement des capacités et d’accompagnement du changement visent une montée en puis-
sance, une autonomisation et un changement durable des systèmes sectoriels et des partenaires soutenus dans le
cadre des programmes financés et appuyés par les agences de développement. Les changements induits par les
appuis au renforcement des capacités (montée en compétence, changement de pratique, transformation organisa-
tionnelle, évolution du schéma de gouvernance d’un secteur, etc.) sont souvent diffus, lents, complexes et difficile-
ment tangibles.
Mesurer ces changements implique donc non seulement de choisir des indicateurs adaptés, mais aussi et surtout de
mobiliser des méthodes d’appréciation qualitatives, permettant d’aller au-delà du suivi par les indicateurs pour saisir
toute la complexité des changements à l’œuvre et s’interroger sur les étapes ayant amenées à ces changements. L’ob-
jectif est de mieux valoriser les résultats et pratiques de RC.
Le/la Chargé(e) de S&E des appuis au renforcement des capacités doit donc à la fois maitriser les compétences clas-
siques du S&E et disposer de compétences lui permettant d’aller au-delà de ce suivi classique (méthodes d’enquête et
analyses qualitatives, animations de groupe, etc). Il/elle devra être force de proposition pour concevoir des dispositifs
de S&E comprenant des outils et méthodes en développement et/ou encore peu expérimentés et être capable de fédé-
rer les parties prenantes autour de l’utilisation de ces méthodes innovantes. Le S&E des appuis au RC se voulant très
participatif, il aura également pour rôle d’orchestrer la participation et l’implication des différents acteurs dans le par-
cours du DSE-M.
Il/elle doit par ailleurs disposer d’une capacité à impulser des processus transversaux et parfois nouveaux. En effet,
les chargés de S&E doivent trouver leur place dans une organisation ou un projet sans être directement opérationnel.
Certaines de leurs activités peuvent être parfois perçues comme non essentielles. Il faut donc avoir des personnalités
capables d’entrainer un collectif sans être manager tout en étant capable de s’adapter aux priorités externes.
Enfin, il/elle doit disposer d’une capacité à communiquer et partager les résultats du S&E.
MISSIONS ET RESPONSABILITÉS
Développement et planification (40%) :
f concevoir de manière participative la construction du dispositif de S&E du projet, en utilisant si possible les
« approches orientées changement »,
f définir les indicateurs de suivi du RC ainsi que les méthodes qualitatives d’analyse des changements (observations
de terrain, enquêtes, focus groupes, méthodes spécifiques comme celle du « changement le plus significatif »),
f produire un plan de S&E des changements,
f produire l’ensemble des guides et outils nécessaires à la mise en œuvre du DSE,
f définir les instances de mise en débat des résultats du suivi des changements,
f opérationnaliser la mise en œuvre du dispositif (la collecte de données, l’analyse et la rédaction des rapports) et
l’ajuster au besoin,
f concevoir et conduire des formations sur le S&E au staff en charge du suivi,
CHAPITRE
OUTILS 3 81
6
f diffuser aux équipes projet la culture du S&E des changements et de l’ajustement régulier des activités dans une
démarche d’amélioration continue des projets. Inscrire le S&E dans une logique de progression, d’encouragement
et de valorisation des équipes projets,
f réaliser une veille sur les outils et méthodes adaptés aux différents types de RC, qu’il soit individuel, organisation-
nel ou systémique.
Accompagnement et support aux équipes (40%) :

f assister les équipes dans la prise en main des outils et leur utilisation,
f analyser les données collectées, rédiger les rapports et œuvrer à l’amélioration continue au sein du projet,
f animer les échanges autour de l’analyse et de l’utilisation des résultats.
Management (10%) :
f coordonner les équipes en charge des différents aspects du dispositif de suivi (collecte, sToCkage, analyse des
données),
f faire monter en capacité les agents de l’unité de S&E,
f gérer le budget lié au S&E
f participer à la mise en place de la stratégie de gestion des connaissances et d’apprentissage.
Communication et management de l’information (10%) :

f maintenir une bonne communication avec les chefs de projet, les coordinateurs et les experts techniques en orga-
nisant des échanges d’expérience et d’information,
f s’assurer de la mise à jour des indicateurs de suivi des changements (et des bilans des méthodes d’appréciation qua-
litative) et du respect des canevas de rapport.
PROFIL RECHERCHE ET COMPÉTENCES CLÉS

Profil :
f X années d’expérience professionnelle dans la gestion et la mise en place de projets de renforcement des capacités,
dont au moins X travaillées dans le domaine du S&E,
f expérience en gestion de projets et/ou processus multi-partites,
f expérience de terrain en matière de conception de questionnaires, de collecte de données, de management et de
traitement de données primaires,
f expérience en matière de facilitation et d’animation d’ateliers et de focus groups,
f capacité à partager son savoir et à faire monter en compétence les membres de son équipe et les autres collabora-
teurs à travers des séances de mentoring, des formations, ou par d’autres moyens,
f connaissance informatique en particulier dans le domaine de l’analyse statistique (SPSS, STATA), des bases de don-
nées (Access) et des solutions de questionnaires numériques serait un plus,
f Master ou Doctorat en économie, sociologie, système d’information, science politique ou tout autres formations
développant fortement la méthodologie de recherche, l’analyse quantitative et qualitative, les systèmes d’informa-
tion et la rédaction.
Compétences clés :
f capacité à créer une dynamique et à impulser des changements,
f qualités comportementales et relationnelles (écoute, empathie, esprit de synthèse),
f capacité de planification et d’organisation.
82
CHAPITRE 4
Comment mettre en application les

recommandations, méthodes et outils
présentés dans les chapitres précédents
sur des exemples types d’interventions ?
83
CAS PRATIQUES
CHAPITRE
84 4 CAS PRATIQUES
1 Cas pratique n°1 : Déploiement

d’un programme de formation individuelle
Exemple de projet retenu pour l’analyse :

Plan de formation des agents d’un ministère, incluant une formation à la fois technique
et managériale des agents.
À QUELS CHANGEMENTS LE PROJET PEUT-IL CONTRIBUER ?
f Changements d’aptitudes et de comportements des agents (hard et soft skills).

f Amélioration de la performance individuelle et collective.
f Amélioration de la gestion de carrières.
QUELS INDICATEURS DE CHANGEMENT RETENIR POUR LE S&E DU PROJET ?
CHANGEMENTS INTERMÉDIAIRES CHANGEMENTS FINAUX
f Augmentation de la performance et de la polyvalence

des agents
f Taux d’agents satisfaits des formations
f Diminution du turn-over et amélioration de la gestion
f Part des personnes formées ayant acquis les
de carrière en interne (évolutions internes, durée
compétences visées (à évaluer à l’issue de la formation
moyenne d’exercice, etc.)
et pendant les entretiens d’évaluation annuelle)
f Amélioration de la qualité du service rendu – Ex :
f Part des personnes formées appliquant les compétences
• Taux de recouvrement des recettes
en situation professionnelle
• Délais de traitement des dossiers
• Diminution du nombre de plaintes
QUELLES SONT LES ÉTAPES DE CONCEPTION/MISE EN ŒUVRE DU PROJET À RESPECTER ?
f Étape 1 : développer / actualiser les référentiels de poste et de compétences.

f Étape 2 : évaluer les compétences existantes (avant démarrage du programme).
f Étape 3 : élaborer le plan de renforcement des compétences (en mettant le focus sur la dimension S&E > indica-
teurs, méthodes, etc.).
f Étape 4 : mettre en œuvre le plan de renforcement des compétences (en mettant le focus sur le monitoring des
actions d’appui au niveau individuel).
f Étape 5 : évaluer la mise en œuvre du plan de renforcement des compétences.
CHAPITRE
CAS PRATIQUES 4 85
QUELLES SONT LES MÉTHODES ET OUTILS À MOBILISER DANS LE CADRE DU S&E ?
Utilisation du modèle de KirckPatrick permettant de suivre et évaluer :

f la réaction des participants, via un questionnaire de satisfaction,
f les apprentissages, via des pré-test/post-test, et une enquête post-formation auprès de l’employeur et/ou des
bénéficiaires,
f les comportements : évaluation des comportements en situation de travail via :
• Des entretiens individuels et collectifs auprès des principaux responsables du ministère (possibilité d’utiliser la
méthode du changement le plus significatif au cours des entretiens collectifs – voir chapitre 2.1),
• Des observations directes sur le terrain (pour certains postes de travail),
f résultats : suivi des principaux indicateurs de qualité du service rendu pour évaluer l’impact du projet sur la perfor-
mance de l’organisation.
QUELLES SONT LES PRINCIPALES PARTIES PRENANTES À IMPLIQUER ?

LES RESPONSABILITÉS ASSOCIÉES ?
Le S&E peut être confié à la DRH du ministère.

Les autres acteurs à associer au S&E sont :
f le / les formateurs et les participants (questionnaires de satisfaction, pré-test/post-test),
f les collègues de travail et les supérieurs hiérarchiques des participants (évaluation des apprentissages et de l’évolu-
tion des comportements via l’enquête et les entretiens),
f les usagers du service des participants (évaluation de la qualité du service rendu via des focus groupes et/ou
enquêtes).
QUELS SONT LES FACTEURS CLÉS DE SUCCÈS (OU CONDITIONS DE SUCCÈS À RÉUNIR) ?
f Existence d’une culture du S&E en interne.

f Stabiliser les agents en charge du S&E et éviter le turn-over.
f Intégrer l’évaluation des compétences et de leur application, ainsi que de la satisfaction dans le cahier des charges
du formateur.
f Evaluer en temps réel au début et à la fin de la formation les compétences et la satisfaction.
f Impliquer les services hiérarchiques.
CHAPITRE
86 4 CAS PRATIQUES
2 Accompagnement à la transformation
d’une organisation

Accompagnement d’une banque régionale dans le développement et la mise en
application d’une stratégie finance-climat (le domaine de la finance climat est utilisé ici
à titre d’exemple, mais la méthodologie est applicable dans tous les domaines).
f Développement d’une nouvelle gamme de services.

f Affirmation de la structure comme un acteur de référence dans le domaine de la finance climat.
f Intégration des enjeux liés à la nouvelle stratégie par les managers (évolution de leurs feuilles de route,) et les
employés de la structure (évolution des pratiques…).

f Fidélisation des salariés (diminution du turn-over) via l’ou-
f Existence d’une vision et d’une feuille de route relative à la verture de nouvelles perspectives d’évolution et l’adhésion
stratégie finance-climat de l’organisation, partagée avec
des salariés à la nouvelle stratégie
les salariés
f Amélioration des performances externes et de la compé-
f Organisation & management adaptés à la prise en compte titivité de l’organisation
de ces nouveau enjeux (évolution de l’organigramme, de
l’état d’esprit des managers, du profil des personnes
f Impulsion de changements similaires auprès d’autres
banques régionales, du fait de la capacité de l’organisa-
recrutées..)
tion à influencer son environnement
f Acquisition de nouvelles compétences en lien avec ces
enjeux par les salariés
f Augmentation du nombre de clients
f Développement d’actions concrètes favorables à l’adapta-
tion climatique
f Étape 1 : réaliser un diagnostic participatif de l’état des pratiques/compétences et des besoins de la structure inté-
grant la finance climat.
f Étape 2 : formuler la vision de l’organisation à moyen/long terme de façon participative et élaborer sa feuille de
route (en s’appuyant par exemple sur la ToC).
f Étape 3 : élaborer et mettre en œuvre la stratégie et le plan de renforcement des capacités (en mettant le focus sur
la dimension S&E, indicateurs, méthodes, etc.).
f Étape 5 : réaliser le S&E de façon participative et régulière (c.f. méthode CAF ci-après).
CHAPITRE
CAS PRATIQUES 4 87

À QUELLE FRÉQUENCE ?
f 1. Utilisation du Cadre d’auto-évaluation de la fonction publique (CAF).

f 2. Utilisation du CARS si intégration de la responsabilité sociétale à la structure et que celle-ci souhaite pouvoir
suivre ces indicateurs.

f Mobilisation d’un faciltateur pour accompagner la transformation de l’organisation.

f Mise en place d’une équipe « accompagnement au changement » au sein de la structure, en charge de piloter le projet.
f Désignation d’un(e) pilote au sein de l’équipe pour superviser le S&E.
f Réunion du facilitateur et de l’équipe « accompagnement au changement » au sein d’un comité de suivi à réunir tous
les 3 mois.
f Mise en place d’un COPIL auprès duquel le comité de suivi rend compte une fois par an.
f Réalisation du S&E (analyse, traitement…) par des groupes de salariés selon la méthode CAF, sous la supervision du
comité de suivi.
f Implication des décideurs dans le S&E, et en particulier dans le portage du CAF.

f Formation des personnes parties prenantes des groupes d’auto-évaluation mis en œuvre dans le cadre du CAF.
CHAPITRE
88 4 CAS PRATIQUES
3 Appui à un projet de réforme sectorielle

Programme d’appui à la réforme du secteur de la santé et de la formation professionnelle
d’un État
f Amélioration de l’accès des populations à des services de soins de qualité, efficients et durables.
f Amélioration de l’employabilité et de l’insertion socio-professionnelle des jeunes.
f Amélioration de la satisfaction des usagers vis-à-vis des services rendus.
f Amélioration de la gouvernance des secteurs.

f Amélioration de l’accès aux services publics concer-
nés (évolution des taux de fréquentation des services de
f Existence d’une vision et d’une stratégie pour chacun des santé et des taux de jeunes formés/insérés sur le marché
secteurs incluant un plan d’actions et clairement parta- du travail -> indicateurs nationaux)
gée avec tous les acteurs concernés f Amélioration de la qualité des services proposés et de la
f Existence d’organes de gouvernance et de coordination perception de ces derniers par les usagers (évolution du
systémiques fonctionnels, permettant notamment : taux de satisfaction et des indicateurs de performance
• Qualité et effectivité du dialogue politique et stratégique nationaux)
• Coordination / complémentarité des parties prenantes et f Evolution de la qualité de la gouvernance (à préciser selon
des interventions les cas) horizontale et verticale, notamment :
f Evolution des compétences et des comportements des • Légitimité/performance de l’institution pilote
agents • Amélioration de l’implication des parties prenantes dans
f Pour la santé publique, évolution de la qualité des soins et la gouvernance et la gestion du système (composition des
de la prise en charge organes de gouvernance et participation)
• Diminution des tensions / conflits entre parties prenantes
f Pour la formation professionnelle et l’insertion : évolution
(partage des rôles entre acteurs connus et respectés)
de la qualité des enseignements dispensés et de leur adé-
quation avec le monde du travail, évolution de la qualité f Effets macro sur la santé publique (mortalité / morbidité)
des services d’orientation professionnelle et le marché du travail (chômage, performance écono-
mique, …)
CHAPITRE
CAS PRATIQUES 4 89
f Étape 1 : réaliser un diagnostic participatif de chacun des secteurs (possibilité d’utiliser le le cadre d’analyse de la
gouvernance sectorielle présenté au chapitre 2.6).
f Étape 2 : formuler la vision de chacun des secteurs à moyen/long terme et élaborer les feuilles de route sectorielles,
en s’appuyant notamment sur la théorie du changement.
f Étape 3 : élaborer et mettre en œuvre les plans de renforcement des capacités, en intégrant bien la question du S&E
dans toutes ses dimensions.
f Étape 5 : mettre en place l’organisation nécessaire à la réalisation du S&E et réaliser le S&E.
f Suivi des indicateurs nationaux pour tout ce qui a trait à l’accès et à la qualité des services (indicateurs de perfor-
mance externe).
f Utilisation du cadre d’analyse de la gouvernance sectorielle pour le suivi des indicateurs de performance interne
(gouvernance, gestion budgétaire, performance du S&E…).
f Organisation d’enquêtes périodiques pour analyser la satisfaction des apprenants et des employeurs du côté de la
FPT, et celle des patients du côté de la santé -> permet de compléter le suivi des indicateurs nationaux par des élé-
ments plus qualitatifs.

f Réalisation du S&E par les directions et services compétents du ou des ministères partenaires.
f Désignation, si besoin, de référents dans les services déconcentrés, pour faciliter la collecte et le traitement de
l’information.
f Appui des personnes en charge du S&E via la mise à disposition d’outils et de méthodologies (via un accompagne-
ment technique, ou directement via les équipes du PTF), en particulier pour l’organisation des enquêtes.
f Organisation de comités de suivi trimestriel (entre les directions en charge de mettre en œuvre le programme au
sein des ministères, les équipes en charge du S&E et l’équipe du PTF), et d’un comité de pilotage annuel avec les per-
sonnes décisionnaires (hauts cadres des ministères).
f Utiliser la ToC pour formuler les changements/identifier les indicateurs.

f Elaborer des mini-plans de RC par acteur.
f Disposer d’un tableau de bord consolidé à l’échelle de l’ensemble des acteurs.
f Réaliser un diagnostic sectoriel + une étude « baseline » (état 0) avant le démarrage des activités.
COMMENT MIEUX SUIVRE LES APPUIS AU RENFORCEMENT DES CAPACITÉS ?
COMMENT S’ASSURER QUE CEUX-CI CONTRIBUENT AUX CHANGEMENTS
ESPÉRÉS EN TERMES DE PLUS GRANDE PERFORMANCE DES ORGANISA-
TIONS MAIS AUSSI DES SYSTÈMES AUXQUELS ILS PARTICIPENT ? COMMENT
AINSI ÊTRE EN MESURE DE MIEUX PILOTER L’ÉVOLUTION DE NOS MÉTIERS,
NOS ORGANISATIONS, NOS POLITIQUES PUBLIQUES ?
Telles sont les questions auxquelles ce référentiel

méthodologique tente de répondre.
Co-construit dans le cadre d’un chantier piloté
conjointement par l’Agence française de dévelop-
pement (AFD), le Bureau organisation et méthodes
du Sénégal (BOM) et l’Agence luxembougeoise
pour la Coopération au développement (LuxDev),
en partenariat avec plusieurs maîtrises d’ouvrage
ouest-africaines, il propose des méthodes et outils
adaptés au suivi des changements induits par les
appuis au renforcement des capacités, caractéri-
sés par leur nature diffuse, longue et complexe. Il
fournit également des recommandations et bonnes
pratiques pour la mise en œuvre du suivi & éva-
luation au niveau des institutions et organisations
partenaires, inspirées de retours d’expérience
concrets.
Résolument tourné vers l’action, il est destiné aux
praticiens (maîtrises d’ouvrage, accompagnants
techniques, spécialistes du suivi & évaluation…)
impliqués dans des processus de renforcement
des capacités, aussi bien au niveau individuel qu’au
niveau organisationnel ou systémique.

VF Referentiel RC Simple-1

Transféré par

Droits d'auteur :

Formats disponibles

VF Referentiel RC Simple-1

Transféré par

Informations du document

Titre original

Copyright

Formats disponibles

Partager ce document

Partager ou intégrer le document

Options de partage

Avez-vous trouvé ce document utile ?

Ce contenu est-il inapproprié ?

Droits d'auteur :

Formats disponibles

VF Referentiel RC Simple-1

Transféré par

Droits d'auteur :

Formats disponibles

PILOTER LE CHANGEMENT

Comment suivre et évaluer les appuis

Pour l’AFD, Marie BJORNSON-LANGEN, Pour le BOM, Pour LuxDev,

À L’ORIGINE DU RÉFÉRENTIEL : UNE ENVIE x accroître la redevabilité des interventions, notamment

AFD Agence française de développement

AOC Approche Orientée Changement

BOM Bureau organisation et méthodes

CAD Comité d’Aide au Développement de l’OCDE

CAF Cadre d’Auto-évaluation de la Fonction publique

CARS Cadre d’Auto-évaluation de la Responsabilité Sociétale

DSE Dispositif de Suivi & Evaluation

GES Gaz à Effet de Serre

PIC Programme Indicatif de Coopération

PTF Partenaire Technique et Financier

RC Renforcement des capacités

REX Retour d’Expérience

S&E Suivi & Evaluation

GUIDE MÉTHODOLOGIQUE 18-19

2. Quels indicateurs retenir ? Pour quels changements attendus ? 27

3. Organisation & moyens : quels prérequis ? 34

PRÉSENTATION DE LA BOÎTE À OUTILS DU RÉFÉRENTIEL (CHAPITRES 2, 3 ET 4) 41

FICHES MÉTHODES 44-45

CAS PRATIQUES 82-83

Appuis à la conduite de politiques

NIVEAU Appui au développement

Exemples d’activités de renforcement des capacités rencontrées aux différents niveaux

1. Définition donnée par le CAD de l’OCDE. 2. Idem

Ces approches « invitent les acteurs impliqués à s’interroger

IDENTIFICATION FORMULATION LANCEMENT MISE EN ŒUVRE CLÔTURE

Définition de la logique d’intervention Révision de la logique d’intervention

Évaluation ex-ante Évaluation Évaluation

Suivi, veille et pilotage

Processus & étapes du S&E

4. Le F3E est un réseau apprenant d’acteurs et d’actrices de la solidarité et de la coopération

Le référentiel vise à favoriser la mise en place d’un proces-

2.1. Suivre et évaluer les changements : un besoin d’outillage

THÉORIE DU CHANGEMENT ET CHEMINS DE CHANGEMENT :

1. Quoi ? 2. Qui ? 3. Comment ? 4. Quelle

Les différentes étapes de mise en œuvre de la Théorie du Changement

Elle repose plus précisément sur :

CADRE LOGIQUE VS ToC,

CADRE LOGIQUE ToC

FORCE DE CETTE APPROCHE FORCE DE CETTE APPROCHE

PROPOSITION DE COMBINER LES DEUX APPROCHES

Analyse comparative des approches ToC et cadre logique

Déﬁ 4 Déﬁ 1 Objectif global

Vision Objectif spéciﬁque

Résultat Résultat Résultat

Exemple de correspondance possible entre ToC et cadre logique

2.2. Pour des DSE-Motivants !

2.3. Ce référentiel est fait pour vous si…

3. Que vais-je y trouver ? Comment m’en servir ?

3.1. Ce que ce référentiel est, ce que ce référentiel n’est pas

CE QUE CE RÉFÉRENTIEL EST CE QU’IL N’EST PAS

x Une bibliothèque d’outils et de méthodes adaptés x Un guide sur la conduite ou l’accompagnement

3.2. Comment il s’organise ?

1. UN RÉFÉRENTIEL EN PLUSIEURS PARTIES 2. TROIS NIVEAUX D’APPUI, DE MULTIPLES

recommandations et bonnes pratiques concernant les

plus détaillée Les méthodes évoquées dans le cha- suivantes.