Séries évènementielles d’apprentissage d’OPEV...Atelier de lancement du Partenariat sur le...

14
Séries évènementielles d’apprentissage d’OPEV Partenariat BAD/ONP pour le Renforcement des Capacités en en évaluation de l’ONEP Atelier de lancement (en collaboration avec ORQR, OSUS, FAE, OWAS et MAFO) Rapport sommaire ONEP Rabat, 19-21 mai 2010

Transcript of Séries évènementielles d’apprentissage d’OPEV...Atelier de lancement du Partenariat sur le...

Page 1: Séries évènementielles d’apprentissage d’OPEV...Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010 OPEV en collaboration

Séries évènementielles d’apprentissage d’OPEV

Partenariat BAD/ONP pour le Renforcement des Capacités en

en évaluation de l’ONEP

Atelier de lancement (en collaboration avec ORQR, OSUS, FAE, OWAS et MAFO)

Rapport sommaire

ONEP

Rabat, 19-21 mai 2010

Page 2: Séries évènementielles d’apprentissage d’OPEV...Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010 OPEV en collaboration

Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010

OPEV en collaboration avec MAFO, OWAS, ORQR, FAE et OSUS Mai 2010 Page 2 of 14

Sommaire

Page

1. Introduction 3

2. Résumé sur le déroulement de l’atelier 3

3. Recommandations et Actions Futures 6

Annexes

Annexe 1: Programme de l’atelier

Annexe 2 : Résultats de l’évaluation du séminaire

Annexe 3: Liste des Participants

Page 3: Séries évènementielles d’apprentissage d’OPEV...Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010 OPEV en collaboration

Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010

OPEV en collaboration avec MAFO, OWAS, ORQR, FAE et OSUS Mai 2010 Page 3 of 14

1. Introduction

1.1 Suite à la demande de la Direction de l’Audit et Organisation de l’Office National

de l’Eau Potable (ONEP), une mission du département de l’évaluation des opérations

s’était rendue à Rabat du 18 au 22 décembre 2009 dans le cadre d’un futur partenariat

entre la BAD et l’ONEP pour le renforcement des capacités en évaluation de ladite

Direction. La mission avait pour objectifs d’identifier les potentialités actuelles et les

besoins en matière de renforcement des capacités et d’amélioration des compétences en

évaluation des personnels actuels et futurs.

1.2 L’un des principaux résultats de la mission est la définition des actions proposées

dans le cadre de ce partenariat. Ces actions visent à consolider les acquis de l’ONEP sur

les plans institutionnel et opérationnel des systèmes d’évaluation et de suivi, par

l’assistance à la mise en place de politique d’évaluation, de système d’organisation

interne et de gestion des missions d’évaluation et à développer les capacités de suivi-

évaluation et d’évaluation rétrospective des cadres de l’ONEP.

1.3 C’est dans ce contexte qu’un atelier de lancement du partenariat a été organisé au

sein de l’ONEP à Rabat, du 19 au 21 mai 2010. L’atelier a vu la participation des agents

de l’ONEP, des partenaires au développement (Délégation de l’Union Européenne et

Banque Islamique de développement) et des représentants du Groupe de la Banque

africaine de développement, issus : (i) du département de l’évaluation des opérations

(OPEV), (ii) du département des résultats et de l’assurance qualité (ORQR), (iii) du

département de l’eau et de l’assainissement (OWAS), (iv) de la Facilité africaine de l’eau

et (v) de l’unité Genre et Environnement (OSUS). L’atelier avait pour objectif de

consolider les acquis de l’ONEP en matière de suivi-évaluation et d’évaluation ex-post

dans le cadre d’un système de gestion axée sur les résultats.

1.4 Les résultats attendus sont : (i) la connaissance des responsables et cadres de

l’ONEP sur le rôle et la finalité de l’évaluation dans le cadre d’un système de gestion

axée sur les résultats ainsi que sur le système de suivi-évaluation en cours de mise en

ouvre au sein de l’ONEP est renforcée et ; (ii) les modalités de réalisation des différentes

actions de partenariat BAD/ONEP étendu à l’échelle régional sont affinées.

1.5 Le présent rapport sommaire donne un résumé du déroulement de l’atelier, les

recommandations et les actions futures.

2. Résumé sur le déroulement de l’atelier

2.1. L’atelier qui a durée une journée et demie a été l’occasion de partager des points

de vue et expérience sur les deux thèmes principaux suivants : le suivi-évaluation et la

fonction d’évaluation. Chacun de ces thèmes abordait les fondements, principes et enjeux.

a.) Jour 1

2.2. La première journée a démarré par une séance d’ouverture présidée conjointement

par Madame Amani ABOU-ZEID, Représentante Résidente au Maroc, et Monsieur

BEGGA Mostafa, Directeur de l’Audit et Organisation de l’Office National de l’Eau

Potable (ONEP).

Page 4: Séries évènementielles d’apprentissage d’OPEV...Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010 OPEV en collaboration

Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010

OPEV en collaboration avec MAFO, OWAS, ORQR, FAE et OSUS Mai 2010 Page 4 of 14

2.3. Présentation FAE sur le Plan d’action panafricain pour le suivi et l’évaluation du

secteur de l’eau. Au cours de cette présentation, les participants ont été informés sur le

mécanisme de suivi-évaluation du secteur de l’eau à l’échelle régionale et des nouvelles

obligations en matière de rapport annuel sur la mise en œuvre des actions pour l’atteinte

des objectifs de sécurité de l’eau en Afrique.

2.4. C’est dans ce contexte, que le projet de Suivi-Evaluation des Objectifs du

Millénaire pour le Développement (OMD) pour l’eau en Afrique du Nord (MEWINA). A

été présenté. Ce projet qui a été approuvé le 27 avril 2010, est une proposition de la

Facilité africaine de l’eau (FAE) d’accorder une subvention de 1 920 000 Euros au Centre

pour l’environnement et le développement de la région arabe et Europe (CEDARE) pour

financer le projet de suivi-évaluation des OMD pour l’eau en Afrique du Nord.

2.5. Il vise à accroitre les capacités en suivi-évaluations dans le secteur de l’eau des

pays de l’AMCOW sous-région nord, à travers la mise en place d’un Mécanisme de suivi-

évaluation dudit secteur qui permet à N-AMCOM de produire annuellement un rapport

sur l’Afrique du Nord à l’aide d’outils harmonisés et comparables. Il consistera

essentiellement à faire un état des lieux sur le S&E dans le secteur de l’eau dont l’AEP

est un sous-secteur et de définir des besoins en S&E.

2.6. Présentation ONEP-SCET SCOM sur le système de suivi-évaluation au sein de

l’ONEP. Avec le concours du Cabinet d’études SCET-SCOM, la Direction de l’Audit et

Organisation (DAO) de l’ONEP a développé un système de S&E qui a été expérimenté

sous forme pilote à travers le projet « ONEP6 » financé par la Banque mondiale. Ce

système a été présenté aux participants ainsi que les enseignements tirées de cette

première expérience qui a fait ressortir plusieurs contraintes et engendrés des

disfonctionnements. Sur la base de l’évaluation de cette phase pilote, les conditions de

réussite et de généralisation de l’expérience ont été examinées.

2.7. Présentation OWAS sur les Directives de la Banque africaine de développement

pour l’utilisation des indicateurs de performance dans le secteur de l’AEPA. Cette

présentation rendre dans le cadre d’une initiative de la Banque visant à amélioré son

aptitude à mesurer et à rendre compte des résultats de ses opérations. La Direction de la

BAD a approuvé les « Directives pour l’utilisation des Indicateurs Sectoriels Clefs

(ISC) » le 06 mai 2010, qui sont immédiatement et effectivement applicables à toutes les

opérations approuvées par le Conseil d’administration depuis Janvier 2008. L’initiative

vise à favoriser l’inclusion de systèmes de suivi-évaluation performants dans ses

opérations. La Banque souhaiterait se hisser au niveau des meilleures pratiques

internationales requérant l’affectation d’au moins deux pour cent (2%) des coûts de

chaque projet pour mettre en place des modalités adéquates de suivi-évaluation. Assister

les PMR à établir des cadres de suivi-évaluation performants est une priorité pour la

Banque qui concerne tous les complexes.

2.8. La présentation s’est focalisée sur la structure des Directives, les principaux

indicateurs clés pour l’eau et l’assainissement liés aux extrants et aux résultats de

développement.

2.9. Présentation ONEP-DAO sur le Management des services de l’eau potable et de

l’assainissement et indicateurs de performance (TC 224). Le Comité technique 224 qui a

été mise en place par l’ISO en 2001 est constitué d’un ensemble de groupes de travail qui

s’intéressent aux services relatives aux systèmes d’alimentation en eau potable et aux

Page 5: Séries évènementielles d’apprentissage d’OPEV...Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010 OPEV en collaboration

Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010

OPEV en collaboration avec MAFO, OWAS, ORQR, FAE et OSUS Mai 2010 Page 5 of 14

systèmes d’assainissement. Il a pour mandat la normalisation d’un cadre pour la

définition et la mesure des activités de services relatives aux systèmes d’alimentation en

eau potable et aux systèmes d’assainissement. Dans ce cadre, des lignes directives ont été

élaborées pour : (i) l’évaluation et l’amélioration des services au x usagers ; (ii) le

management des services publics et d’assainissement et pour l’évaluation des services

fournis ; et (iii) le management des services publics de l’eau potable et pour l’évaluation

des services fournis. L’ensemble de ses éléments ont été partagés avec les participants qui

ont en outre été sensibilisés sur les perspectives, notamment sur la nécessité d’organiser

un test d’application interne au sein de l’ONEP. Les débats ont révélé la nécessité

d’explorer l’intégration de certains indicateurs issus du TC 224 dans le nouveau système

de S&E de l’ONEP qui pourrait être pris en compte dans le cadre du projet MEWINA ou

sous une autre forme d’assistance.

2.10. Présentation OSUS sur l’intégration des aspects genres dans les projets. La

présentation et les discussions qui s’en sont suivi ont montré que les aspects genre sont

plus ou moins pris en compte au niveau de l’ONEP. Cependant ceci ne se fait pas de

façon systématique. D’où la nécessité d’accompagner l’ONEP pour l’institutionnalisation

des questions genres.

b.) Jour 2

2.11. La seconde journée consacrée à la fonction d’évaluation a toutefois débuté par une

présentation sur l’intégration des aspects environnementaux dans le projet, qui n’avait pas

pu se faire comme prévu le jour précédent. A l’instar des aspects sur le genre,

l’environnement est apparu comme une préoccupation déjà intégrée au sein de l’ONEP

puisqu’elle dispose d’un département en charge des questions environnementales qui

réalisent des études d’impacts environnementaux et sociaux (EIES) et des Plans de

gestion environnementaux (PGE). Des échanges, il est apparu la nécessité de lier l’auto-

évaluation et l’évaluation indépendantes, de consolider les résulter de l’ONEP en matière

de prise en compte des questions environnementaux auxquels il convient d’associer les

aspects sur le changement climatique, de tirer meilleur profit des différentes études

d’impact environnementaux et sociaux existants en capitalisant la mémoire de l’ONEP.

2.12. Il y a cependant un aspect qui mérite une attention particulière. Il s’agit de

l’évaluation de la mise en œuvre des programmes de gestion environnementale qui ne

sont généralement pas suivi d’actions concrètes sur le terrain.

2.13. Présentation d’OPEV sur le système d’évaluation au sein de la BAD. Ouvrant la

série des présentations sur la fonction d’évaluation, L’évaluation au sein de la BAD a fait

ressortir le rôle et les enjeux de l’évaluation dont la nécessité : (i) de montrer les effets et

impacts des interventions de la Banque ; (ii) de s’assurer de la qualité des systèmes de

suivi-évaluation des projets ; (iii) de développer la culture d’évaluation axée sur les

résultats au sein de la Banque et des Pays Membres Régionaux (PMRs) et (v) de se poser

la question sur l’attribution et la contribution. Elle a aussi mentionné les principes de base

régissant l’évaluation de l’efficacité de développement que sont : l’indépendance, l’utilité,

la crédibilité et la transparente. Un point de mire a été faite sur le fait que l’autoévaluation

constitue le socle de l’évaluation indépendante. De ce fait, un faible système

d’autoévaluation constitue une contrainte aux activités de l’évaluation indépendante.

L’occasion fut belle pour présenter les principaux outils d’évaluation comme le modèle

logique, la matrice rétrospective du cadre logique axé sur les résultats et la matrice

Page 6: Séries évènementielles d’apprentissage d’OPEV...Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010 OPEV en collaboration

Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010

OPEV en collaboration avec MAFO, OWAS, ORQR, FAE et OSUS Mai 2010 Page 6 of 14

d’évaluation utilisée comme cadre de référence pour planifier et conduire une évaluation.

Après un examen des méthodes de collecte des données, la présentation a abordé la

nécessaire communication des résultats en concluant par les caractéristiques d’un système

d’évaluation efficace devant répondre aux besoins des utilisateurs en leur proposant des

indicateurs pertinentes et utiles à la prise de décision.

2.14. Les discussions se sont focalisées essentiellement sur la légitimité des évaluations

d’ONEP, l’utilisation de l’approche participative dans la mise en œuvre des évaluations

notamment du fait de leur caractère indépendant, incluant la validation des constats et le

partage des rapports, les évaluations d’impact et les associations auxquelles appartient le

département OPEV.

2.15. Présentation TEAM/ONEP sur l’expérience d’évaluation d’impacts de projets et

de programmes. Cette expérience qui a été réalisée en collaboration avec l’Agence

Française de Développement (AFD) visait à évaluer les impacts socio-économiques de

deux projets financés par l’AFD. La présentation a abordé l’approche méthodologique

utilisée, les résultats obtenus et les recommandations. Les discussions se sont focalisées

sur la situation de référence qui a été constitué pendant l’évaluation, la possibilité

d’utiliser les résultats d’impacts environnementaux et sociaux pour obtenir des données

de référence et le coût de telles évaluations.

2.16. Présentation ONEP sur une étude d’envergure en matière d’évaluation de l’AEP

rurale. Elle a essentiellement abordé les aspects méthodologique, notamment le contexte

de l’étude, la genèse de l’approche et contraintes dans le choix méthodologique et la

méthodologie adoptée après avoir présenté les objectifs de l’étude.

2.17. Présentations sur l’instauration d’un système d’évaluation sommaire des projets à

l’ONEP et de l’expérience de la Banque en matière de préparation des RAPs.

L’évaluation sommaire de l’ONEP et le pendant du Rapport d’achèvement de projet pour

la BAD. Les deux présentations et les discussions qui s’en sont suivis ont marqué le

besoin d’une collaboration entre le département ORQR/BAD et la DAO/ONEP sur le

sujet. Les bonnes pratiques de la Banque ont été partagées avec les agents de l’ONEP,

notamment sur l’élément déclencheur, le format du rapport, l’atelier participatif et la

nécessité de bien formuler les leçons et recommandations.

3. Recommandations 1. Contraintes et risques de la fonction évaluation à l’ONEP

L’ONEP doit faire face à ses propres risques et contraintes dans la généralisation de son

système de suivi-évaluation au niveau de l’ensemble de ses opérations et activités qui

couve tout le territoire marocain et partant, doit bâtir son expérience sur des cas pilotes de

suivi-évaluation ou d’évaluation ex post voire d’évaluation d’ impact de projets afin

d’être n mesure de mener des évaluations thématiques et sectorielles qui vont au-delà des

évaluations de projet. A cet effet, la Direction de l’organisation et de l’audit (DAO) doit

accompagner les départements techniques de l’ONEP (DTI) à asseoir leur système de

suivi-évaluation des projets dès le début du cycle de projet par l’identification des

indicateurs de performance-clé, examiner les rapports de suivi des projets ainsi que des

évaluations sommaires (rapport d’achèvement de projet) et assister dans la dissémination

et la communication des leçons et bonnes pratiques. L’ONEP devra institutionnaliser le

Page 7: Séries évènementielles d’apprentissage d’OPEV...Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010 OPEV en collaboration

Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010

OPEV en collaboration avec MAFO, OWAS, ORQR, FAE et OSUS Mai 2010 Page 7 of 14

système de suivi-évaluation qui devra être localisé au sein du pôle technique de l’ONEP.

La Banque continuera à apporter son assistance à l’ONEP à travers des interventions

ponctuelles spécifiques auprès des coordonnateurs de projets et ce, dans le cadre des

appuis techniques prévus par les projets BAD.

2. Mécanisme de suivi-évaluation du secteur de l’eau à l’échelle régionale et mise en place de

système de suivi-évaluation au sein de l’ONEP

La FAE, dans le cadre de sa mission d’appui à la mise en place d’un système de suivi-

évaluation du secteur de l’eau en Afrique du Nord, se propose de lancer une action pilote

d’appui à l’ONEP en vue de l’assister à la mise en place d’un système de suivi-évaluation

performant. Cette assistance couvrira d’abord une étude diagnostique du suivi-évaluation

à l’échelle sectorielle, l’identification des gaps par application du cadre-diagnostic adopté

par la FAE et préparation d’un plan d’actions visant à renforcer le S/E actuellement en

place au sein de l’ONEP et à l’échelle sectorielle. Cette action pourrait s’étaler sur une

période de 4 à 6 mois à compter de l’approbation du don FAE à l’ONEP qui sera le point

focal .

3. Intégration des aspects transversaux dans le S/E (genre, environnement, changement

climatique et relations avec la société civile telle que l’association des usagers, etc…) et appui de la Banque

La Banque accorde une importance particulière aux aspects transversaux qui intègrent,

outre les aspects du genre et de l’environnement, la nouvelle problématique de

l’adaptation et la prise en compte du changement climatique, ainsi que les relations avec

la société civile en particulier avec l’association des usagers qui entrent dans le cadre du

rôle et de la responsabilité environnementale et sociale de l’ONEP en tant qu’opérateur

important dans le secteur de l’eau. La Banque se propose d’assister l’ONEP dans le

développement des outils de participation et du traitement de la problématique du genre,

de l’intégration des aspects environnementaux et du changement climatique (utilisation et

adaptation de check-list « Screening Tools »).

4. Intégration des indicateurs de mesure des indicateurs de performance sectoriels et appui

de la Banque

La Banque, par ses activités d’appui technique fournies dans le cadre des projets financés

au sein de l’ONEP, a pu assister l’ONEP à la mise en place d’une unité chargée des

aspects environnementaux et encadrer les cadres de l’ONEP dans la confection et le suivi

des indicateurs de performance liés aux projets. La Banque continuera d’apporter son

appui à l’intégration et le suivi des indicateurs de performance sectoriels particulièrement

les indicateurs sectoriels de base tels qu’identifiés par la Banque.

Page 8: Séries évènementielles d’apprentissage d’OPEV...Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010 OPEV en collaboration

Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010

OPEV en collaboration avec MAFO, OWAS, ORQR, FAE et OSUS Mai 2010 Page 8 of 14

Annexe 1

Atelier de Lancement du Partenariat sur le Suivi-Evaluation

et l’évaluation axée sur les résultats- Institut de l’Eau et de l’Assainissement – Salle2

Rabat, 20-21 Mai 2010

Objectifs de l’Atelier : Consolider les acquis de l’ONEP en matière de suivi-évaluation et d’évaluation ex post dans le cadre d’un

système de gestion axée sur les résultats.

Résultats Attendus :

Les responsables et cadres de l’ONEP sont sensibilisés sur le rôle et finalité de

l’évaluation dans le cadre d’un système de gestion axée sur les résultats ainsi que sur le

système de suivi-évaluation en cours de mise en œuvre au sein de l’ONEP. Cet atelier

permettra également d’affiner les modalités de réalisation des différentes actions de

partenariat BAD/ONEP étendu à une échelle régionale.

Programme de l’atelier

Première Journée : Jeudi 20 mai 2010

8.30 – 9.00 Inscription à l’atelier et remise des badges & dossier de l’atelier aux

participants

Ouverture de l’Atelier

9.00– 9.15 Allocution d’ouverture de l’atelier et bienvenue aux participants et

Expérience de l’ONEP en matière d’évaluation et perspectives (DAO)

9.15 – 9.30 Importance de la fonction évaluation au sein de l’ONEP (Pôle

Financier/Pôle Développement)

9.30 – 9.45 Partenariat et perspectives BAD-ONEP (MAFO)

9.45 – 10.00 Objectifs de l’atelier, résultats attendus et déroulement de l’atelier BAD

(OPEV)

10.00 – 10.15 Pause-café

Thème 1 : Le système de suivi-évaluation : fondement, principes et enjeux

Résultats attendus : Les participants seront familiarisés aux systèmes de suivi-évaluation

de l’ONEP ainsi que ceux de dimension régionale/internationale et seront invités à

proposer des actions d’amélioration et définir les conditions /modalités de déploiement au

sein de l’ONEP tout en intégrant les aspects transversaux des projets AEP et

assainissement.

10.15 – 11.15 Le mécanisme de suivi-évaluation du secteur de l’eau à l’échelle régionale

: Approche régionale pour le suivi et l’évaluation du secteur de l’eau en

Afrique et nouvelles obligations en matière de rapport annuel sur la mise

en œuvre des actions pour l’atteinte des objectifs de sécurité de l’eau en

Afrique (FAE)

Appui à la mise en place d’un mécanisme Nord africain de suivi et

d’évaluation du secteur de l’eau : évaluation préliminaire ; développement

des systèmes nationaux de suivi-évaluation ; valorisation du système de

suivi-évaluation et rapport annuel sur l’eau; préparation des programmes

d’investissements (FAE)

Page 9: Séries évènementielles d’apprentissage d’OPEV...Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010 OPEV en collaboration

Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010

OPEV en collaboration avec MAFO, OWAS, ORQR, FAE et OSUS Mai 2010 Page 9 of 14

11.15 – 12.30 Le système de suivi-évaluation au sein de l’ONEP (SCET SCOM)

Architecture et fonctionnalités du système de Suivi-évaluation

Expérience pilote de Suivi-évaluation (cas du projet ONEP-6)

Généralisation et utilisation future du système de suivi-évaluation et conditions

de déploiement au sein de l’ONEP

12.30 – 14.00 Pause Déjeuner

14.00 – 14.30 Directives pour l’utilisation des indicateurs de performance dans le secteur

de l’AEPA (OWAS)

14.30 – 15.00 Les indicateurs de performance et normes internationales (Exemple ISO

TC-224) (DAO)

15.00 – 16.15 Intégration des questions transversales : Genre ; Environnement et Changements Climatiques dans les opérations de la BAD - La question du Genre en Afrique - La question de l’environnement et des Changements Climatiques en Afrique

- Liens entre le Genre et les Changements Climatiques - Intégration du Genre et Changements Climatiques dans le cycle de

projet de la Banque Etude de cas - Exercice pratique sur le secteur de l’eau

16.15 – 16.30 Synthèse des recommandations, actions d’amélioration et déploiement du

système de suivi-évaluation (DAO-OPEV)

Deuxième Journée : Vendredi 21 mai 2010

8.30 – 9.00 Rappel des travaux de la journée précédente

Thème 2 : La fonction Evaluation : fondements, principes, outils et produits

Résultats attendus : Les participants seront familiarisés aux fondements, principes, rôle,

outils et produits de l’évaluation appuyés par des exemples pratiques et d’expérience

ONEP en matière d’évaluation d’impact et d’étude d’envergure AEP rurale.

9.00– 9.45 La fonction Evaluation dans le cadre de système de gestion axé sur les

résultats : fondements, principes et architecture globale ; et outils &

produits de l’évaluation et utilisation des résultats par les gestionnaires

(OPEV)

9.45 – 10.30 Expérience d’évaluation d’impact de projet : Etude de cas Nord1 et Nord2

10.30 – 10.45 Pause-café

10.45 – 11.15 Expérience de l’ONEP sur une étude d’envergure en matière d’évaluation de l’AEP rurale (approche et méthodologie).

11.15 – 11.30 Le système d’auto-évaluation : Canevas et procédure de mise en place du

rapport d’évaluation sommaire (achèvement de projet) (DAO)

11.45 – 12.15 Discussion par les participants des actions d’amélioration et modalités de

déploiement du système d’auto-évaluation, recommandations et actions

d’amélioration (DAO-OPEV)

12.15 – 12.30 Clôture et évaluation de l’atelier (DAO)

Page 10: Séries évènementielles d’apprentissage d’OPEV...Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010 OPEV en collaboration

Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010

OPEV en collaboration avec MAFO, OWAS, ORQR, FAE et OSUS Mai 2010 Page 10 of 14

Annexe 3

Résultats de l’évaluation de l’Atelier Question 1 : Comment évaluez-vous l’atelier que vous venez de suivre ?

Critères d’évaluation Très

Satisfaisant Satisfaisant

Peu

Satisfaisant Total N

Atteinte des objectifs de l’atelier sur le rôle

de l’évaluation, le système de suivi-

évaluation et les modalités de réalisation à

l’ONEP et à l’échelle régionale

47.1% 52.9%

100% 17

Choix des thèmes abordés :

- Présentations 57.9% 42.1% 100% 19

Qualité globale de l’animation :

- Qualité technique des interventions 70.6% 23.5% 5.9% 100% 17

- Place accordée aux débats 64.7% 35.3% 100% 17

- Qualité des échanges 52.9% 47.1% 100% 17

Outils et instruments de Suivi-Evaluation

et de l'évaluation rétrospective y compris

les indicateurs de performance 27.8% 72.2%

100% 18

Traitement des Questions transversales

(genre, environnement) 26.3% 63.2% 10.5% 100% 19

Environnement (locaux, accueil,...) 36.8% 63.2% 100% 19

Appréciation générale 36.8% 63.2% 100% 19

Question 2 : La durée de l’atelier, compte tenu du programme semble-t-elle ?

Adaptée (50 %)

Trop courte (44,4 %)

Trop longue (5,6 %

Question 3 : Quels thèmes vous ont le plus intéressé ?

Thèmes Nombre de

fois

Fonction d’évaluation dans le cadre de la GAR 10

Système de Suivi-Evaluation 7

Rapport d’achèvement/Evaluation sommaire 4

Intégration de questions transversales 4

Evaluation d’impact 2

Tous les thèmes 2

Expérience ONEP sur une étude d’envergure en matière d’AEP rurale 1

Page 11: Séries évènementielles d’apprentissage d’OPEV...Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010 OPEV en collaboration

Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010

OPEV en collaboration avec MAFO, OWAS, ORQR, FAE et OSUS Mai 2010 Page 11 of 14

Question 4 : Quelles améliorations envisageriez-vous apporter dans le cadre de votre

travail à la suite de cet atelier ?

Traiter des exemples pour fixer les idées

Mise en place des canevas suivi-évaluation des projets

Rechercher des tableaux de bord adaptés en suivi-évaluation du projet

Instaurer les fiches d’achèvement des projets mais également de prise en charge de l’exploitation

des installations

Améliorer les méthodes d’évaluation de l’impact pour toucher les volets macro-économiques

Développer le système d’évaluation existant à l’ONEP

Prise en comptes des indicateurs de performance en amont

Eléments déclencheurs

Evaluation des résultats à partir du cadre logique

Comment évaluer un programme ou un projet

Comment suivre l’application des recommandations des évaluations

Meilleure coordination avec le post-évaluation

Evaluation des projets à mi-parcours

Echanges et Benchmarking avec ce que fait la Banque

Intégrer le volet évaluation dans la réalisation des études de faisabilité (critères de base)

Tenir compte des exigences de la BAD au niveau des documents à préparer pour le suivi par la

BAD (RAP)

Etudes de cas avec une vision plus rétrospective

Donner plus d’importance à l’évaluation dès la phase initiale : d’engineering

Développer des indicateurs simples, réalistes et aboutissant à des résultats concrets

Continuer à appliquer le S&E des projets d’AEP rural

Capitaliser l’information

Adopter les outils et instruments appris

Appliquer l’évaluation dans les projets

Question 5 : A la suite de l’atelier, quelles formations complémentaires pourriez-vous

suggérer ?

Outils et technique d’évaluation des programmes et politiques (6)

Suivi-Evaluation (2)

Management des projets (2)

Etude environnementale (1)

Analyse des risques (1)

Maîtrise, gestion et capitalisation des données (1)

Question 6 : Remarques et suggestions

Nécessiter de s’approcher des équipes du suivi-évaluation de la BAD (visites techniques)

Application locale à d’autres programmes d’investissements de l’ONEP

Reconsidérer votre réponse par rapport à l’utilité des normes ISO 2451X. En prendre connaissance

pour constater qu’elles se prêtent bien aux aspects d’évaluation et pas uniquement gestion de la

qualité.

Apport d’expertise systématique BAD-ONEP au niveau de l’évaluation des projets dans le cadre

d’une approche participative

Page 12: Séries évènementielles d’apprentissage d’OPEV...Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010 OPEV en collaboration

Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010

OPEV en collaboration avec MAFO, OWAS, ORQR, FAE et OSUS Mai 2010 Page 12 of 14

Annex 4

Liste des Participants

Nom Titre Organisation Email

1 El Ouahabi Mohamed Spécialiste Eau et

Assainissement BAD/MAFO

2 Dehaoui Fouad Chef de Division ONEP [email protected]

3 El Mounzila Noc-

Eddine

Chef de Division Post-

évaluation ONEP [email protected]

4 Belguenani hassane Chargé de programmes Eau et

Assainissement

Délegation de

l’UE

[email protected]

opa.eu

5 Aït Errouhi

Abderrahman Ingénieur ONEP [email protected]

6 Cherif Moulay Chrif Directeur Général Délégué NOVEC [email protected]

7 Bensaid Rhiter Chef de département eau et

potable et d’assainissement NOVEC [email protected]

8 Bourziza Mahjouba Chef de Division ONEP [email protected]

9 El Hannani Mohamed Chef de Division ONEP [email protected]

10 Gharbaoui Ahmed Chef de Service

Aménagement Centre ONEP [email protected]

11 Ammor Zineb Ingénieur à la DAO ONEP [email protected]

12 Lahlou Mohamed Chef de Division

Développement (DR FES) ONEP [email protected]

13 Naji Laila Chef de Service Besoins en

formation et évaluation ONEP [email protected]

14 Hafsi Mahmoud Chef de Division ONEP [email protected]

15 Mazih Brahim Chef de Division ONEP [email protected]

16 Assaga Fatima Chef de Division Qualité

Totale ONEP [email protected]

17 Chabadi El Habib Chef de Division

Communication & NTIC ONEP [email protected]

18 Afailal Charafat

Chef de Service Post

Evaluation projets et

programmes

ONEP [email protected]

19 El Ghelbazouri Abdel

Eleh

Chef de Division

Développement Côte

Atlantique

ONEP [email protected]

a

20 Hildi Jawad Chef de Service Coopération

Internationale ONEP [email protected]

Page 13: Séries évènementielles d’apprentissage d’OPEV...Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010 OPEV en collaboration

Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010

OPEV en collaboration avec MAFO, OWAS, ORQR, FAE et OSUS Mai 2010 Page 13 of 14

Nom Titre Organisation Email

21 Lamchichi El Hassane Directeur Département

Economique ONEP

Elhassane.lamchichi@onep.

org.ma

22 Badri Samira Responsable Division

Financement ONEP [email protected]

23 Hakimi Saïd Chef de Service Rendements

Hydrauliques et énergie ONEP [email protected]

24 Ait Lahyane Rachid Chef de Division Etudes

Economiques et Finances ONEP [email protected]

25 Benazzouz Mourad Chef de Service ONEP [email protected]

26 El Hilali El Korchi Chef de Division ONEP [email protected]

27 Azzam Rachida Chargé de Projets ONEP [email protected]

28 Zidouri El Houssin Chef de Division Ingénierie ONEP [email protected]

29 Jahid Abdellah Direction Généralisation de

l’accès à l’eau potable ONEP [email protected]

30 Serraj Mohamed Directeur de la Planification ONEP [email protected]

31 Benosmene Fadila

Directeur de

l’Assainissement et

Environnement

ONEP [email protected]

32 Bega Mostafa Directeur Audit et

Organisation ONEP

33 Hasnaoui Adil Directeur Finance ONEP

Page 14: Séries évènementielles d’apprentissage d’OPEV...Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010 OPEV en collaboration

Atelier de lancement du Partenariat sur le Suivi-Evaluation et l’évaluation axée sur les résultats, Mai 2010

OPEV en collaboration avec MAFO, OWAS, ORQR, FAE et OSUS Mai 2010 Page 14 of 14

Délégation BAD/TUNIS

Nom Titre Organisation Email

1 Manaï Hédi Mohmed Chef de Division BAD/OPEV [email protected]

2 Mouanda Joseph Chargé d’évaluation BAD/OPEV [email protected]

3 Diomandé Manarakissa Assistante de Recherche

Supérieure BAD/OPEV

4 Gohou Gaston Economiste Principal BAD/ORQR

5 Mbonampaka Alain

Pierre Chargé des résultats BAD/ORQR

6 Touré Zeneb Expert Genre BAD/OSUS

7 Dorsouma Al Hamndou Expert Changements

Climatiques BAD/OSUS

8 Bougaire Francis Daniel Ingénieur Principal Eau et

Assainissement BAD/FAE

9 Ben Sassi Belgacem Ingénieur Principal Eau et

Assainissement BAD/OWAS