Rapport technique et d’évaluation du fife · le CESAG. es atelies ont été ... de...

22
Réseau Francophone de l’Evaluation 08/12/2014 RAPPORT TECHNIQUE ET DEVALUATION DU FIFE

Transcript of Rapport technique et d’évaluation du fife · le CESAG. es atelies ont été ... de...

Réseau Francophone de l’Evaluation

08/12/2014

RAPPORT TECHNIQUE ET

D’EVALUATION DU FIFE

1

RAPPORT TECHNIQUE

1 LE LANCEMENT DU FIFE .............................................................................................................................. 2

2 LES PARTENAIRES DU FIFE ........................................................................................................................... 2

3 LES INSCRIPTIONS ....................................................................................................................................... 2

3.1 Provenance géographique ............................................................................................................ 2

3.2 Types d’inscription ........................................................................................................................ 3

4 LE PUBLIC ................................................................................................................................................. 4

5 LES ATELIERS DE PERFECTIONNEMENT ............................................................................................................ 5

6 LES FORUMS ............................................................................................................................................. 6

7 PRISES EN CHARGE ..................................................................................................................................... 7

EVALUATION DU FIFE

1 FINALITE DU FIFE : RAPPEL DES OBJECTIFS STRATEGIQUES ET PRINCIPAUX RESULTATS VISES DANS LA CONVENTION

RFE/OIF ......................................................................................................................................................... 8

2 BILAN DE REALISATION : .............................................................................................................................. 8

3 EVALUATION DES RESULTATS A COURT-MOYEN TERME ................................................................................... 12

3.1 Concernant les Ateliers de perfectionnement pré-FIFE (27 octobre)......................................... 12

3.2 Concernant les 2 FORUMs institutionnels (28 oct. a-midi): ....................................................... 12

3.3 Concernant les 4 FORUMs thématiques (29 octobre matin ou a-midi) : ................................... 14

3.4 Concernant le séminaire de recherche interdisciplinaire francophone (29 octobre matin) : .... 15

3.5 Concernant la mutualisation et la capitalisation ........................................................................ 16

3.5.1 Satisfaction des participants aux ateliers............................................................................ 16

3.5.2 Satisfaction des participants au FIFE ................................................................................... 17

3.6 Concernant le GAIN EN VISIBILITE de l’evaluation francophone ................................................ 18

4 PREMIERE EVALUATION D’IMPACT ............................................................................................................ 20

5 CONCLUSIONS ET PERSPECTIVES ......................................................................................................... 21

2

Rapport technique

1 LE LANCEMENT DU FIFE

Si l’organisation du FIFE a démarré dans le courant de l’année 2013, le lancement officiel de celui-ci a

été effectif dès le 01 août 2014.

Ce lancement public a été effectué de deux manières :

la diffusion du programme auprès des sociétés membres du RFE et des partenaires de

l’évènement ;

la mise en place du portail francophone de l’évaluation en grande partie dédié au FIFE

(www.portail-rfe.org).

2 LES PARTENAIRES DU FIFE

Pour assurer la bonne tenue de cet évènement, le RFE a pu compter en premier lieu sur l’implication

étroite de l’ensemble des sociétés nationales membres de l’association. Ces dernières ont relayé

l’information relative au FIFE à l’ensemble de leurs partenaires nationaux et ont exercé un fort travail de

lobbying auprès des institutions nationales et internationales pour faciliter la présence du plus grand

nombre de leur ressortissants impliqués dans l’évaluation des politiques publiques : qu’ils soient

ministres, député(e)s, élu(e)s locaux, consultant(e)s, hauts responsables d’administration,

chercheurs/universitaires, responsables d’ONG ou de programmes, étudiant(e)s, représentant(e)s

d’organismes internationaux…

Autres soutiens décisifs, les organismes internationaux : l’Organisation Internationale de la

Francophonie (OIF), la Banque Africaine de Développement (BAD), le Programme des Nations Unies

pour le Développement (PNUD), le Fond des Nations Unies pour l’Enfance (UNICEF), l’Ambassade de

France à Dakar en lien avec le Pôle stratégique financier du PNUD, ONU Femmes, Wallonie Bruxelles

International… Ceux-ci ont, via leurs soutiens financiers, techniques et humains, permis la tenue de cet

évènement.

Et enfin, les Autorités sénégalaises avec le soutien de la Présidence de la République et de la Primature

et la contribution décisive du Ministère de l’Economie, des Finances et du Plan.

3 LES INSCRIPTIONS

3.1 PROVENANCE GEOGRAPHIQUE Sur les 260 participants, 146 inscriptions payantes ont été enregistrées pour l’évènement. Sur ces 146

personnes inscrites, 134 y ont effectivement participé.

3

A ces 134 participants payants, il convient d’ajouter les 57 personnes invitées par la Société Sénégalaise

d’Evaluation (SenEval) et les 69 intervenants du programme. Ce sont donc 260 personnes qui ont

participé d’une manière ou d’une autre au FIFE.

Concernant les 134 inscriptions payantes, elles représentaient 21 pays de l’espace francophones :

3.2 TYPES D’INSCRIPTION 3 modalités d’inscriptions permettaient de participer au FIFE :

Inscription pour les ateliers (27 oct.) ;

Inscription pour les forums (28 au 30 oct.) ;

Inscription aux ateliers et aux forums (27 au 30 oct.).

Comme l’indique le graphique ci-dessous (basé sur les inscriptions payantes), 68% des inscrits ont

participé à l’intégralité des travaux du FIFE quand 20% sont venus assister aux forums et 12% aux

ateliers uniquement.

4

4 LE PUBLIC

Le public du FIFE était masculin dans une large majorité (78% des inscriptions payantes) :

Concernant les organismes de rattachement des personnes inscrites (inscriptions payantes), les

informations à notre disposition nous permettent d’établir la répartition suivante :

Il ressort de ce graphique que les principaux organismes représentés dans le cadre du FIFE était : les

administrations d’Etat (26%), les organisations internationales (16%), les VOPEs (Sociétés nationales

d’évaluation ; 15%), les cabinets de conseil (9%) et les Cours des comptes (8%).

Si l’on se base sur le fichier des personnes inscrites (inscription payantes) et sur le fichier des

intervenants nous obtenons la représentation institutionnelle suivante :

5

5 LES ATELIERS DE PERFECTIONNEMENT

Sur les 12 ateliers prévus initialement dans le programme, 10 ont pu se dérouler effectivement, animés

par des experts internationaux originaires de 13 pays. Deux sites ont accueillis ces temps de travail :

l’hôtel Novotel ;

le CESAG.

Ces ateliers ont été construits de manière à s’adapter aux besoins des participants et de leur niveau de

connaissance/pratique en matière d’évaluation de politique publique :

Niveau débutant ;

Niveau intermédiaire ;

Niveau avancé.

Les ateliers proposés étaient les suivants :

Atelier 1 Utilité sociale

Atelier 2 Théories du changement

Atelier 3 Sondage

Atelier 4 Evaluation des politiques publiques

Atelier 5 Capitalisation et systémisation d'expérience

Atelier 6 Collecte et analyse de données qualitatives

Atelier 8 Equité sociale et égalité des sexes

Atelier 9 Mettre en œuvre et gérer un suivi évaluation

Atelier 10 Les méthodes mixtes

Atelier 12 L'évaluation de l'Impact

146 personnes ont participé à ces ateliers de perfectionnement (N.B. : dans certains cas, il était possible

de participer à 2 ateliers dans la journée => ateliers ½ journées) :

6

On notera la forte représentation des sénégalais (50 pers.) à ces ateliers de perfectionnement ainsi que

la présence non moins importante des délégations gabonaises (18 pers.) et mauritanienne (17 pers.) :

6 LES FORUMS

7 forums et 1 séminaire de recherches ont été proposés les 28 et 29 octobre 2014 :

Séminaire de recherche sur les spécificités francophones

Forum 1 : L'institutionnalisation de l'évaluation au niveau des Etats francophones ;

Forum 2 : Evaluation et démocratie de proximité : le rôle des collectivités locales ;

7

Forum 3 : Evaluation en contexte de développement ou de fragilité

Forum 4 :L'évaluation des politiques d'éducation : où sont les jeunes et les enfants ?

Forum 5 : La place des femmes dans l’évaluation et le développement ;

Forum 6 : La professionnalisation de l'évaluation

Forum 7 : Pratique et usage de l'évaluation par les parlements francophones

Le graphique ci-dessous donne une idée de la répartition des participants au FIFE entre ces différents

Forums :

7 PRISES EN CHARGE

Les bailleurs, partenaires du FIFE, ont fortement contribué à assurer une présence variée

(géographiquement, qualité des personnes prises en charge…) de participants et d’intervenants. Ces

prises en charge concernent aussi bien les réservations de billets d’avion, des chambres d’hôtel, que les

frais d’inscriptions ou les per diem.

Au total, 79 personnes ont eu l’occasion de participer au FIFE grâce au soutien de ces diverses

organisations :

Ambassade de France Dakar 4 personnes

BAD 5 pers.

OIF 21 pers.

PNUD 23 pers.

UNICEF 24 pers.

WBI (Wallonie) 2 pers.

8

Evaluation du FIFE

1 FINALITE DU FIFE : RAPPEL DES OBJECTIFS STRATEGIQUES ET PRINCIPAUX

RESULTATS VISES DANS LA CONVENTION RFE/OIF

FINALITE du FIFE : le FIFE, un événement francophone de portée internationale, a été organisé en

amont du XV° sommet de la francophonie de Dakar. Il visait à mobiliser autour de l’évaluation à la fois

les acteurs institutionnels et les acteurs professionnels soucieux d’une meilleure gouvernance de

l’action publique.

OBJECTIFS STRATEGIQUES et IMPACTS ATTENDUS :

A. Renforcer les processus d’institutionnalisation de l’évaluation dans les pays francophones, en

organisant la mutualisation des bonnes pratiques institutionnelles, ceci au niveau des

administrations centrales ou locales, des parlements, des institutions supérieures de contrôle et

des collectivités locales.

B. Renforcer les capacités évaluatives et la qualité des évaluations francophones concernant le

domaine des politiques de développement et concernant la formation des évaluateurs.

C. Mieux identifier les spécificités culturelles et institutionnelles qui caractérisent la place et la

conduite de l’évaluation dans l’espace francophone.

2 BILAN DE REALISATION :

Les Activités du FIFE ont toutes été réalisées, à savoir :

10 formations et ateliers méthodologiques ont eu lieu le 27 Octobre, en amont du FIFE

Ces 10 ateliers de perfectionnement étaient donnés par des experts internationaux originaires de 13

pays différents. Ils ont connu un grand succès (146 participant dont 50 sénégalais) et ont donné lieu à

des évaluations très positives de la part des participants (cf. fiches d’évaluation recueillies en fin

d’atelier)

Une séance officielle d’ouverture le 28 Octobre au matin

Qui a été présidée par Madame Viviane Laure Elisabeth BAMPASSY, Ministre de la Fonction Publique et

du Renouveau du Service Public et Monsieur Birima MANGARA, Ministre en charge du Budget sénégalais

qui représentaient le Premier Ministre du Sénégal

Cette séance d’ouverture a permis en outre de lancer l’Année Internationale 2015 de l’évaluation pour

la Francophonie par la Vice-Présidente de l’OICE et le Ministre béninois de l’Evaluation.

9

2 panels internationaux en séance plénière ont été réalisés le 28 Oct. Matin et 30 Oct. A-midi

Le premier panel (séance d’ouverture du 28 Octobre), animé par Mr. Guy Cauquil, portait sur les

rapports entre l’évaluation et la bonne gouvernance (thème central du FIFE). Il s’est tenu en présence de

250 participants venus de 21 pays différents et a réuni :

Les Directeurs de cabinets du Ministre en charge de la Bonne Gouvernance du Sénégal (Mr.

Khadim Diop) et du Ministre de la Prospective et de l’Evaluation du Togo (Mr. Kako Nubukpo)

Le Directeur de la Planification et de l’Evaluation de l’OIF, Nicolas Simard

Un Sénateur Camerounais, Roger Mbassa Ndine, Président du Réseau APNODE

Une Professeure de Sciences Politique de l’Université de Lausanne (IDHEAP), Katia Horber

Papazian

Ce premier panel a permis de poser les principaux enjeux du FIFE et a mis en scène les divers types de

responsables institutionnels concernés par la promotion institutionnelle de l’évaluation.

Le dernier panel (séance de clôture du 30 Octobre a-midi), animé par Mr. Moctar Sow, portait sur

« l’évaluation de la gouvernance économique et financière du développement ». Il s’est tenu en séance

plénière et a réuni 4 experts spécialistes de ces questions:

Une Professeur d’Economie, administratrice de l’IDEP-ONU

Le représentant du Pôle Stratégie Economique de Dakar pour le PNUD

Le représentant de la Direction de l’Evaluation de l’Agence Française de Développement

Le représentant de la Banque Africaine de Développement

Ce dernier panel a permis de mieux situer les enjeux politiques et méthodologiques liées à l’évaluation

des politiques de développement.

Les 2 FORUMs institutionnels du 28 octobre a-midi portaient d’une part sur l’institutionnalisation de

l’évaluation au niveau des Etats et d’autre part sur « l’évaluation et la démocratie de proximité »

Le premier FORUM sur l’institutionnalisation de l’évaluation au niveau des Etats , animé par

Mme Katia Horber-Papazian, a eu un grand succès réunissant plus de 108 responsables

politiques et institutionnels qui ont pu débattre longuement suite aux propos introductifs de :

o Mr Antonin Dossou, Ministre de l’Evaluation des politiques publiques du Bénin

o Mr Gilbert Ngoulakia, Premier Président de la Cour des comptes du Gabon

o Mr Babacar Diame, Président de la commission des finances de l’Assemblée Nationale

du Sénégal

o Mr Emmanuel Kesler, Conseiller Maître à la Cour des Comptes, France, représentant du

1er Président

o Mr. Laurent Crémieux, Contrôle des Finances du Parlement, Confédération Helvétique.

Plusieurs propositions opérationnelles sont ressorties de ce Forum qui ont été présentées le Jeudi matin

30 octobre en séance plénière.

Le second FORUM sur « l’évaluation et la démocratie de proximité » , animé par Mme Colette

Lanson, a répondu à une forte demande si l’on en croit les inscriptions avant FIFE (44 pers.)

auxquelles se sont agrégés de nombreux élus locaux sénégalais.

10

Il a traité à la fois du rôle des collectivités locales dans l’évaluation et de la place des citoyens et des

ONG dans la démocratie de proximité à travers l’évaluation.

Concernant les collectivités locales ont été présenté les expériences de Grenoble-Métropole (France), de

Porto-Novo (Bénin) et de Cergy Pontoise (France)

Concernant la place des citoyens et des ONG, de nombreuses ONG étaient représentées et la

présentation d’OXFAM Afrique de l’Ouest a été très bien accueillie comme introduction au débat

Les 4 FORUMs thématiques du 29 octobre (matin et a-midi) ont permis d’aborder des questions plus

méthodologiques et institutionnelles, dont plusieurs (concernant les femmes et les jeunes) directement

liées au thème central du Sommet des Chef d’Etat de la Francophonie. Ils ont porté respectivement sur :

FORUM 3 – L’évaluation en contexte de développement et de fragilité, animé par Mme Oumou

Kayri Ba Tall et Mr François-Corneille Kedowidé.

FORUM 4 – L’évaluation des politiques d’éducation : où sont les jeunes et les enfants ? animé par

Mr Inoussa Kaboré et Mr Ian Hopwood.

FORUM 5 – La place des femmes dans l’évaluation et le développement, animé par Mme Anne-

Nathalie Manga-Badji

FORUM 6 – la Professionnalisation de l’Evaluation, animé par Mme Marie Gervais

Le Séminaire de recherche sur les spécificités francophones de l’évaluation a lancé le 29 octobre au

matin une démarche de recherche appliquée que le RFE souhaite conduire sur 2 années, avec un point

fort en 2015, Année internationale de l’Evaluation. Il a réuni 25 personnes venues de 14 pays du Nord et

du Sud. Quatre premières hypothèses de recherche ont été présentées, ainsi que les travaux ayant

conduit à l’édition du premier dictionnaire terminologique de l’évaluation en langue française. Un bon

nombre de ces participants se sont dits intéressés à être associés dans la durée à cette démarche de

recherche appliquée. La relance du séminaire est attendue pour début janvier après avoir recueilli des

propositions complémentaires des participants de Dakar et de quelques autres chercheurs empêchés à

cette date.

Le forum parlementaire du 29 octobre au matin a été monté à l’initiative du RFE et de l’Assemblée

Nationale du Sénégal. Il a été ouvert par le Président de la Commission des Finances et a réuni une

quinzaine de parlementaires complétés par quinze autres experts, venus d’une dizaine de pays. Il a

essentiellement porté sur la place que les Parlements occupent ou pourraient occuper demain dans

l’institutionnalisation de l’évaluation. Les débats ont été introduits par la présentation d’expériences par

les Parlements Sénégalais, Suisse, Camerounais et Malgache.

La séance officielle de clôture du 30 Octobre a-midi

A été présidée par Monsieur Birima MANGARA, Ministre du Budget sénégalais qui représentait le

Ministre de l’Economie, des Finances et du Plan, Monsieur Amadou BA, empêché.

11

Elle a donné lieu à la lecture officielle de l’APPEL de DAKAR adressé aux Chefs d’Etats Francophones, qui

a été proclamé par :

Mr Gilbert NGOULAKIA, Premier Président de la Cour des Comptes du Gabon

Mme Marie GERVAIS, Professeure d’Université au Québec, Vice-Présidente de l’OICE

(Organisation Internationale de Coopération en Evaluation)

Mr Alexandre SANKARA, Député à l’Assemblée Nationale du Burkina-Faso

Mr Thiery TSOU FEMATOO, Secrétaire Général du RFE

12

3 EVALUATION DES RESULTATS A COURT-MOYEN TERME

3.1 CONCERNANT LES ATELIERS DE PERFECTIONNEMENT PRE-FIFE (27 OCTOBRE) 10 ateliers ont pu être tenus animés par des formateurs venants de 14 pays différents. Ces ateliers ont

bénéficié à 146 participants, dont 50 sénégalais.

3.2 CONCERNANT LES 2 FORUMS INSTITUTIONNELS (28 OCT. A-MIDI):

Ce qui était visé (convention RFE/OIF)

Cf. Objectif Stratégique 1 : Renforcer les processus

d’institutionnalisation de l’évaluation

Ce qui a été atteint

Résultat intermédiaire 1 : les représentants des

différentes institutions publiques concernées par la

gouvernance (Exécutif, Parlement, Cours des comptes ou

organes de contrôles, élus nationaux et/ou locaux,

organismes internationaux) sont approchées par les

sociétés et réseaux membres du RFE (qui leur présentent

Le nombre, la diversité et la qualité des

participants inscrits (cf. tableau ci-dessous)

met en évidence l’impact des démarches

des VOPEs qui avaient été invitées par le RFE

à mobiliser les principaux décideurs

institutionnels de leur pays dans le cadre de

Formateurs Titre de l'atelier Nbre

particip.

Guy CAUQUIL (France) Pourquoi et comment prendre en compte le critère d'utilité sociale dans l'évaluation des politiques publiques

25

Carel DESALOS (Pays-bas) Issaka Herman TRAORE (Burkina)

L'approche des théories du changement : une approche aussi utile à l'évaluation des interventions

14

Benoît GAUTHIER (Canada) Ce sondage est-il de qualité? Appréciation de la qualité des sondages : référentiel et discussion

10

Katia HORBER-PAPAZIAN (Suisse) Abdou Karim LO (Sénégal)

L'évaluation des politiques publiques 30

Monica LOMENA-GELIS (Espagne) Oumoul Ba TALL (Mauritanie)

Capitalisation et systématisation d'expériences : pertinence et utilisation des approches d'évaluation orientées vers l'apprentissage en contexte de développement

9

Pernelle SMITS (Québec) Collecte et analyse de données qualitatives : Rendre les évaluations sur la base de données qualitatives moins complexes

10

Bali ANDRIANTSEHENO (Madagascar)

Comment déceler les hypothèses logiques d'intervention et les tester? …Un atout pour l’évaluateur

ANNULE

Cyuma MBAYIHA (ONU femmes) Inoussa KABORE (UNICEF WCARO) Nathalie MANGA-BADJI (Sénégal)

Comment concevoir et réaliser des évaluations sensibles à l'équité sociale et à l'égalité des sexes

16

Jean-Louis DETHIER (Wallonie) Comment mettre en place et gérer un système de suivi-évaluation

35

Michele TARSILLA (Italie/USA) Les méthodes mixtes (quali et quanti) en évaluation: Mieux les comprendre pour bien les utiliser!

17

Serge Eric YAKEU DJIAM Conduire une évaluation indépendante des politiques de développement : Etapes et approches issues des exemples pratiques

ANNULE

CLEAR (intervenants internes) Evaluation d'impact 23

13

les objectifs et contenus du FIFE), ceci au cours des six

prochains mois, pour s’assurer de leur contribution aux

travaux du FIFE.

la constitution de délégations nationales.

Cette mobilisation nationale ouvre de

nouvelles perspectives de reconnaissance.

Résultat intermédiaire 2 : un guide francophone de

l’évaluation à destination des décideurs publics est préparé

en amont du FIFE qui sera distribué lors du Forum.

Le FIFE a distribué dans la mallette du

participant un « Guide à l’intention des

responsables politiques et des décideurs ».

Ce guide de 15 pages présente à la fois les

finalités, les usages et principaux éléments

constitutifs d’une évaluation.

Résultat intermédiaire 3 : les représentants des

différentes institutions publiques cités ci-dessus, venus

d’au moins dix pays francophones différents, participent

activement aux travaux des FORUMS qui leurs sont dédiés.

dont 20 à 30 représentants de diverses

administrations centrales de plusieurs pays

dont 20 à 30 parlementaires venus d’au moins 10

pays francophones

dont les représentants d’au moins 10 Institutions

Supérieures de Contrôle

dont 20 à 30 collectivités territoriales et ONG

venues d’au moins 10 pays différents

21 pays représentés

34 Ministres (4) et Hauts

Fonctionnaires d’Etat

16 Parlementaires

13 Cour des Comptes et ISC

44 VOPEs (Présidents et membres)

29 Organismes internationaux

17 Université Enseignement

Recherche

72 Divers (dont ONG et élus locaux)

225 Inscrits aux activités (Source :

fichier des inscrits)

Commentaires :

Le nombre de pays représentés (21), souvent au plus haut niveau, est deux fois supérieur au nombre

minima de pays espérés dans la convention (10). Il faut y voir le double effet des missions préparatoires

du bureau du RFE dans plusieurs pays et l’impact des démarches des VOPEs qui avaient été invitées à

mobiliser les principaux décideurs institutionnels dans le cadre de la constitution de délégations

nationales.

La présence de 4 Ministres (+2 représentés par leur Directeur de Cabinet), de deux Présidents des Cours

des Comptes (+ 2 représentés personnellement), le nombre important de parlementaires (16) (ceci

malgré le défaut de prise en charge du réseau APNODE par la BAD – reporté à 2015), dont plusieurs

Présidents des Commissions des finances, et une nombre conséquent de membres d’Institutions

Supérieures de Contrôle dénote un impact institutionnel très important du FIFE, au-delà même de ce qui

était espéré.

Par contre, le nombre d’élus locaux inscrits reste décevant, bien que plusieurs autres élus sénégalais les

aient rejoints sur leur forum dédié du 28 oct. a-midi. Ce petit nombre est significatif du faible

développement de l’évaluation des politiques publiques au niveau local, tant au Nord comme au Sud.

14

3.3 CONCERNANT LES 4 FORUMS THEMATIQUES (29 OCTOBRE MATIN OU A-MIDI) :

Ce qui était visé (convention RFE/OIF)

Cf. Objectif Stratégique 2 : Professionnaliser les processus évaluatifs dans l’espace francophone et améliorer leur qualité

Ce qui a été atteint

Résultat intermédiaire 1 : les chargés

d’évaluation publics ou privés intervenant

dans l’espace francophone proposent des

contributions écrites et orales de qualité

puis participent activement au

renforcement de leurs capacités

professionnelles réciproques dans le cadre

des 3 forums thématiques

Indicateurs :

La participation active de professionnels

venus de 15 pays francophones ou

organismes internationaux différents,…..

dont 15 à 20 d’entre eux auront proposé

des communications de qualité :

Au total 225 participants inscrits, venus de 21 pays

francophones

40 intervenants venus de 18 pays différents

Forum 3 : Evaluation/Développement/Situations de crise 2 Animateurs et 11 intervenants venus de 8 pays différents (72 participants)

Forum 4 : Evaluation des politiques Education et Jeunesse 2 Animateurs et 10 intervenants venus de 4 pays différents (45 participants)

Forum 5 : Femmes dans Evaluation et Développement 2 Animatrices et 9 intervenants venus de 6 pays différents (50 participants et participantes (24/26)

Forum 6 : Professionnalisation de l’Evaluation 2 Animateurs et 11 intervenants venus de 8 pays différents (76 participants) (sources – Programme détaillé du FIFE et feuilles émargement))

Commentaires :

Au final, quatre Forums thématiques (au lieu de 2 initialement prévus dans la convention) ont été

organisés à la demande des autres partenaires institutionnels du FIFE, notamment pour tenir compte des

préoccupations du XVème Sommet (place des jeunes et des femmes)

Les quatre Forums thématiques ont donné lieu à des présentations et des débats de grande qualité qui

seront repris dans les Actes du FIFE

On peut légitimement penser que le résultat final visé par ce second axe du FIFE, à savoir ; que les

praticiens francophones de l’évaluation, tant de statut public que privé, aient renforcé leurs capacités

méthodologiques et leur réflexion stratégique en matière d’évaluation des politiques publiques, a été

atteint vu la qualité des interventions et des débats. Ce que confirment les premiers retours sur la grille

d’évaluation en ligne sur le portail du RFE (www.portail-rfe.org)

Résultat intermédiaire 2 : les pratiques

d’évaluation les plus remarquables et les

procédures garantissant leur qualité sont

mises en forme au terme de chacun des

Forums thématiques et font l’objet d’une

publication sous forme d’Actes et/ou

d’articles publiées dans les diverses revues

francophones.

Une synthèse de ces 4 forums a été présentée en séance

plénière le 30 octobre au matin seront formalisés dans les

Actes du FIFE au cours du 1er semestre 2015.

A cette fin, le recueil des contributions, de la synthèse des

débats et des propositions opérationnelles est en cours.

15

3.4 CONCERNANT LE SEMINAIRE DE RECHERCHE INTERDISCIPLINAIRE FRANCOPHONE (29 OCTOBRE

MATIN) :

Ce qui était visé (convention RFE/OIF)

Cf. Objectif stratégique n° 3 - Caractériser

les spécificités de l’évaluation dans

l’espace francophone :

Ce qui a été atteint

Résultat intermédiaire 1 : une première

note de problématique générale est

produite d’ici fin novembre 2013 par les

responsables du séminaire, puis un comité

scientifique constitué d’une dizaine de

chercheurs du Nord et du Sud,

universitaires représentant diverses

disciplines est constitué d’ici fin décembre.

Résultat intermédiaire 2 : une première

réunion du séminaire de recherche

francophone se tient d’ici fin avril 2014 (en

visio-conférence ou en présentiel selon les

possibilités budgétaires) et débouche sur

un appel à contribution largement diffusé

Résultat intermédiaire 3 : un comité

scientifique sélectionne fin juin 2014 une

dizaine de contributions qui seront

présentées et débattues lors du FIFE à

Dakar (jour 2- 29 octobre)

Une note de problématique générale a été coproduite fin

janvier 2014 par les deux responsables scientifiques du

Nord (Pr. Guy Cauquil et Pr. Katia Horber-Papazian) et le

responsable du Sud (Pr. El Hadj Guey, CLEAR francophone).

Malheureusement, le remplacement de ce dernier au

cours du premier semestre et la défection subséquente du

CLEAR sur ce projet de recherche ont fortement perturbé

la préparation et la prise en charge financière de ce

séminaire.

Ce retrait du CLEAR a démobilisé d’autres partenaires

institutionnels, si bien que faute de budget et de soutien,

la séance préalable initialement prévue en avril puis en

juin 2014 n’a pu avoir lieu à l’IEP de Bordeaux

Une solution de repli n’a été trouvée qu’en août 2013,

avec l’entrée du Pr. Richard Marceau (ENAP-Québec) dans

le comité scientifique restreint (en remplacement du

CLEAR), avec un recentrage sur les travaux du CREXE

concernant le Dictionnaire terminologique de l’évaluation

(source – Programme détaillé du FIFE)

Résultat intermédiaire 4 : La tenue d’une

journée du séminaire de recherche à

l’occasion du FIFE, ouvert à un groupe plus

large<. Soit entre 15 et 30 chercheurs ou

professionnels confirmés réunis à Dakar

Les 25 participants viennent de plusieurs disciplines :

administration publique, linguistique, anthropologie,

sciences politiques, psycho-sociologie, … et de 13 pays

différents.

(source : feuille d’émargement séminaire recherche)

Résultat final (fin 2016): avoir identifié les

divers facteurs (culturels, institutionnels,

linguistiques, politiques, etc..) susceptibles

de rendre compte de la spécificité de

l’évaluation dans le monde francophone,

ceci au terme d’un séminaire de recherche

programmé sur 2 ans

Seules 5 propositions étaient parvenues au comité

scientifique pour le 15 octobre 2014 ; quatre de ces

hypothèses de recherche ont été présentées lors de la

séance inaugurale du séminaire de recherche le 29

Octobre au matin

1. Les travaux sur le Dictionnaire terminologique en

16

Commentaire : cette séance inaugurale

doit être suivie par une production

d’hypothèses complémentaires attendues

pour fin décembre 2015 et la formalisation

des deux ou trois axes de recherche en

janvier 2015 qui donneront alors lieu à un

appel plus formel à contribution ; avec une

seconde séance du séminaire envisagée fin

mai 2015 au Québec.

Français (Pr R. Marceau et Pr. F. Sylvain, CREXE-ENAP)

2. Les hypothèses linguistiques du Pr. M. Tarsilla (Italie)

3. Une note conceptuelle sur la place des valeurs et de la

culture francophone dans l’évaluation (Pr. Guy Cauquil,

IEP, Université de Bordeaux)

4. Une note conceptuelle du Pr. Katia Horber-Papazian

sur l’impact des modèles juridiques sur les clauses

d’évaluation. (IDHEAP-Université de Lausanne)

3.5 CONCERNANT LA MUTUALISATION ET LA CAPITALISATION

3.5.1 Satisfaction des participants aux ateliers

Afin d’analyser le degré de satisfaction des participants à ces 10 ateliers, nous avions élaboré un

questionnaire de satisfaction distribué. Nous avons réceptionné 142 questionnaires (sur 146 possibles).

Les informations obtenues à l’issu du traitement de ces questionnaires soulignent, comme le montre le

graphique ci-dessous, le fort intérêt des participants pour les apports des différents intervenants et leur

degré de satisfaction :

Si l’on se réfère aux données ci-dessus, nous constatons que les présentations d’expériences, la mise en

avant et en partage des contenus et supports ainsi que l’identification de piste de travail pour l’avenir

ont été salués par les participants. Ainsi, les participants ont déclaré (dans leur grande majorité) leur

souhait de s’approprier et d’exploiter, dans leur contexte professionnel, les connaissances, les

17

compétences et les documents de travails diffusés. Ce qui correspond à notre objectif de mutualisation

et de capitalisation.

Concernant le taux de satisfaction il est de 97% pour ce qui des réponses des ateliers aux attentes des

participants) et de 91% pour ce qui est de la réponse aux besoins d’apprentissage. Pour rappel, nous

nous étions fixé un taux de satisfaction de 75% .

3.5.2 Satisfaction des participants au FIFE

Un questionnaire a également été mis en ligne sur le portail du RFE pour permettre aux participants de

donner leurs avis sur le FIFE. 85 questionnaires ont été réceptionnés à ce jour et traités.

A la question « Quelle est votre appréciation générale de l’évènement ? », 97,64% des répondants ont

fait part de leur satisfaction à l’égard de celui-ci.

A la question « Jusqu’où avez-vous atteint vos objectifs ? », les participants étaient invité à donner une

note entre 1 et 5 (1 étant la note la plus faible et 5 la meilleure note possible) sur les objectifs suivants :

Occasion de réseautage ;

Amélioration des connaissances ;

Contribution du développement de l’évaluation.

Les notes moyennes sont les suivantes :

Occasion de réseautage 3,6/5

Amélioration des connaissances 3,5/5

Contribution du développement de l’évaluation 3,7/5

Les participants ont également été invités à se prononcer sur l’organisation du FIFE sur les aspects

suivants :

Hébergement ;

Transport ;

Accueil et gestion des participants ;

Logistique pendant les différentes activités (Forum, panels) ;

choix des repas pour les déjeunés ;

Cocktail auprès de la piscine.

Les notes moyennes sont les suivantes :

Hébergement 3,7/5

Transport 3,3/5

Accueil et gestion des participants 3,5/5

Logistique pendant les différentes activités (Forum, panels 3,6/5

Choix des repas pour les déjeuners 4,0/5

Cocktail auprès de la piscine 3,2/5

18

3.6 CONCERNANT LE GAIN EN VISIBILITE DE L’EVALUATION FRANCOPHONE Le RFE s’est doté d’un portail internet (www.portil-rfe.org) qui est opérationnel depuis le 01 août 2014.

Cet outil de communication a joué une part importante dans la diffusion de l’information relative au

FIFE :

En amont de l’évènement : mise en ligne du programme, des modalités d’inscription, du bulletin

d’inscription (inscriptions en ligne), des informations pratiques relatives à l’évènement (hôtels,

sites, …) ;

Pendant l’évènement : mise en ligne de « billets » d’information au fil des sessions de travail afin

de permettre aux personnes ne pouvant être présentes de suivre le déroulé du FIFE et ainsi être

informé de l’avancée des travaux.

La carte ci-dessous permet de visualiser la provenance géographique des personnes qui ont visité notre

portail :

Des ressortissants de 52 pays (francophone ou non) ont visité au moins une fois le portail du RFE et plus

particulièrement les pages relatives au FIFE de Dakar).

Le tableau suivant permet de se rendre compte de la répartition de ces connexions :

Nombre de sessions ;

Pourcentage de nouvelles sessions ;

Nouveaux visiteurs.

Pays/Territoires Sessions % nouvelles

sessions Nouveaux utilisateurs

Sénégal 223 47% 105

Cameroun 123 22% 27

France 68 72% 49

Canada 58 62% 36

Côte d'Ivoire 31 61% 19

Maroc 29 86% 25

Mauritanie 21 57% 12

Etats-Unis 18 67% 12

Belgique 16 86% 12

Brazil 16 100% 14

Congo (RDC) 12 67% 16

Togo 12 92% 8

19

Burkina Faso 10 80% 11

Italie 9 100% 8

Mali 9 78% 9

Congo (République) 7 57% 7

Gabon 7 57% 4

Niger 6 67% 4

Argentine 4 100% 4

Suisse 4 75% 4

Algérie 4 100% 3

Royaume-Uni 4 100% 4

Comores 4 75% 4

Madagascar 4 100% 3

Pays-Bas 4 75% 4

Tchad 4 50% 3

Allemagne 3 100% 2

Roumanie 3 100% 3

Tunisie 3 100% 3

Albanie 3 67% 3

Burundi 2 100% 2

Bénin 2 100% 2

Guinée 2 100% 2

Guinée-Bissau 2 100% 2

Mexique 2 100% 2

Vietnam 2 100% 2

Arménie 2 100% 2

Djibouti 1 100% 2

Equateur 1 100% 1

Espagne 1 100% 1

Finlande 1 100% 1

Grèce 1 100% 1

Indonésie 1 100% 1

Kenya 1 100% 1

Liban 1 100% 1

Monaco 1 100% 1

Maurice 1 100% 1

Nigeria 1 0% 0

Portugal 1 100% 1

Turquie 1 100% 1

Vénézuela 1 100% 1

TOTAUX/MOYENNE 747 58% 446

Eu égard à la jeunesse du RFE et à la création récente de son portail, les résultats ci-dessus témoignent

de la capacité du RFE à diffuser largement l’information sur les questions d’évaluation. Cela s’explique

également par le gros travail de lobbying réalisé par les membres du RFE au sein de leur pays respectifs

et par leur participation aux différents évènements organisés en Afrique notamment au cours de l’année

2014 (congrès de l’AfrEA, journées béninoises de l’évaluation).

Il convient de noter également que l’information relative au FIFE a été relayée par plusieurs sites

internet de partenaires de l’évènement et de sociétés nationales membres du RFE. Pour ces dernières, il

convient de rappeler que peu d’entre elles ont un site internet opérationnel/alimenté régulièrement).

Par conséquent, les résultats ci-dessous doivent être mesurés à l’aune du nombre de sites des sociétés

nationales réellement opérationnels (10 sites internet déclarés/identifiés, 7 effectifs/opérationnels):

Société Française de l’Evaluation (SFE) ;

Société Canadienne d’Evaluation (SCE) ;

Société Sénégalaise d’Evaluation (SenEval) ;

Association Camerounaise d’Evaluation du Développement (CaDEA) ;

Association Marocaine d’Evaluation (AME) ;

Société Suisse d’Evaluation (SEVAL) ;

Société Wallonne d’Evaluation de Programme (SWEP) ;

20

Organisation Internationale de la Francophonie (OIF) ;

Organisation Internationale pour la Coopération en Evaluation (OICE) ;

Association Africaine d’Evaluation (AfrEA).

Les informations mises en ligne sur leur site allaient de la mise à l’agenda (avec lien vers le portail du

RFE) à la création de pages dédiées au FIFE.

4 PREMIERE EVALUATION D’IMPACT

Ce qui était visé (convention RFE/OIF) Ce qui a été atteint

IMPACT n°1

Le premier impact immédiat escompté du

FIFE est l’affirmation publique d’un

courant de pensée francophone structuré,

permettant de rééquilibrer l’emprise

actuelle des modes de pensée et de faire

anglophones en matière d’évaluation. Le

FIFE renforcera la visibilité et du poids des

réseaux d’évaluateurs d’origine

francophone dans la communauté

internationale de l’évaluation et garantira

une meilleure prise en compte de leurs

spécificités au niveau international,

notamment à l’occasion de l’Année

internationale de l’Evaluation.

Le FIFE est la première manifestation internationale ayant

inauguré l’Année Internationale de l’évaluation 2015 qui a

été officiellement lancée à Dakar par le Ministre béninois

de l’Evaluation, Mr Antonin Dossou et la Vice-Présidente

de l’OICE, Marie Gervais, lors de la séance d’ouverture du

FIFE.

L’impact général du FIFE sur les 21 pays francophones

participants est confirmé par le haut niveau des

délégations nationales présentes.

L’Appel de Dakar officiellement proclamé lors de la séance

de Clôture, vient acter cette volonté d’influer sur les

systèmes de gouvernance francophone

Cet impact va se confirmer en 2015 avec quelques missions

de valorisation de l’Appel de Dakar, avec la poursuite de

certains travaux du FIFE (publication des actes et poursuite

du séminaire de recherche) et l’élan donné aux grands

projets du RFE (création d’un Observatoire Francophone

de l’Evaluation, Initiatives de rapprochements entre

Parlements et Cours des Comptes du Nord et du Sud)

IMPACT n°2

Un renforcement de la culture évaluative

et des pratiques institutionnelles

d’évaluation dans les pays francophones

ayant activement contribué aux travaux du

FIFE, notamment via la présence de

nombreux institutionnels

Les travaux des forums institutionnels du 29 octobre ont

débouché sur des préconisations concrètes et ont impliqué

des responsables politiques et institutionnels de haut

niveau (cf. supra ainsi que liste des participants).

(Source : fichier des inscrits)

IMPACT n°3

Une mobilisation accrue des réseaux et

sociétés nationales francophones

d’évaluation

Les modalités participatives de préparation du FIFE :

mobilisation des associations nationales pour constituer

des délégations institutionnelles pluralistes de chaque

pays ; mobilisation de ces mêmes associations pour

solliciter des propositions d’atelier (34 propositions reçues)

et d’interventions (62 intervenants de 18 pays différents),

21

recherche locales de financements pour soutenir la

participation des délégations,….ont produit tous leurs

effets en matière de mobilisation des sociétés nationales e

d’évaluation.

Trois nouvelles sociétés nationales (Burundi, Togo, Tunisie)

ont adhéré au RFE au terme du FIFE, ce qui porte à 20 Pays

le nombre de sociétés membres.

5 CONCLUSIONS ET PERSPECTIVES

Au final, le FIFE s’avère être un important succès pour le développement et la reconnaissance de

l’évaluation des politiques publiques dans le monde francophone. Le niveau des responsabilités

institutionnelles des participants et le degré de satisfaction de la grande majorité d’entre eux demande

à ce que cet essai soit transformé.

Dans cette perspective, l’Assemblée Générale du RFE qui s’est tenue à Dakar le lendemain du FIFE a

décidé de :

lancer une campagne d’adhésion institutionnelle auprès des grandes institutions nationales et

internationales représentées à Dakar afin de pérenniser le fonctionnement du Réseau.

Elle a précisé le plan d’action du RFE pour 2015-2016, à savoir :

s’engager dans la création d’un observatoire francophone de l’évaluation qui publierait tous les

deux ans un baromètre francophone de l’évaluation

s’engager, en partenariat avec le Réseau Parlementaire APNODE et l’APF, dans un projet d’appui

aux Parlements francophones qui se traduirait par une facilitation des rapprochements, une

mutualisation des pratiques et une offre de formations de sensibilisation à l’évaluation à

destination des parlementaires.

Poser les bases d’un projet du même ordre adapté aux Cour des Comptes et Organes Supérieurs

de contrôle

Préparer une action continue de sensibilisation des médias dans les pays membres

Il reste à modéliser ces grands projets et à trouver des appuis pour les concrétiser.

Enfin, le Conseil d’Administration du RFE réuni à Dakar le 31 Octobre après-midi a décidé de

programmer le prochain FIFE au cours du premier semestre 2017, c’est à dire lors d’une année impaire,

ceci pour se donner le temps de mener à bien les projets ci-dessus et pour se démarquer de la période

des congrès AFREA qui ont lieu le premier semestre de chaque année paire.

Paris le 19 Décembre 2014

Guy CAUQUIL

Président du RFE