Audit à visée participative
Formateurs académiques associés
AVP - Démarche
Les 7 étapes d’un « AVP » RestitutionRestitution sous forme orale et écrite
RecommandationsRecommandations en termes d ’actions à mettre en œuvre à courte et moyenne échéance
DiagnosticDiagnostic : détermination des origines et causes des dysfonctionnements ; mise en évidence des
points forts et des risques
AnalyseAnalyse : mise en relation des données recueillies avec le référentiel, description de « l’état du système »
selon la focale choisie
Recueil d’informationsRecueil d’informations : observations, entretiens, questionnaires, études de documents
RéférentielRéférentiel: identification des objectifs visés, des exigences à respecter et des indicateurs concrets orientant le recueil de données
DemandeDemande, négociation et commande formalisées dans une lettre de mission
INTUITIF
FORMEL
Rencontre avec le CE
"pré-diagnostic"hypothèses de travail
pistes de recommandations
Négociation et choix de
l'objetRéf
Recueil de
données
Analyseet
Diagnostic
Recomman-dations
Restitution orale
Rapport écrit
Méthodologie structure la réalisation et présentation
Expertise nourrit la démarche
Angeline Aubert-Lotarski
Référentialisation multi-critères
ANALYSE et DIAGNOSTIC
+ Explication, interprétation du fonctionnement
Recommandations : aide à la décision et à
l'action EVALUATION
Référent externe mono-critère
ANALYSE
+ Repérage de conformité ou non-
conformité
Injonction d'action : (re)mise en conformité
CONTROLE
ANALYSE
Description de faits, d'un fonctionnement,
par des indicateurs
Connaissance, Information
ETAT DES LIEUX
Type de commande
Utilisation du référentiel
Opérations intellectuelles
Consiste à… Débouche sur…
Données Ecarts
Données Faits
Données Signes Sens
Angeline Aubert-Lotarski
La finalité de l’AVP :
n’est pas la description d’une situation ou la mesure de résultats
n’est pas le contrôle de conformité d’un EPLE ou de ses acteurs
est la compréhension des résultats/de la situation
pour identifier les actions à mettre en œuvre pour leur amélioration.
La dimension participative de l’audit Le chef d’établissement est le commanditaire effectif de
l’audit.• Négociation de la commande• Recommandations soumises au libre-arbitre des acteurs • Clause de confidentialité
• Pour renforcer la participation des acteurs concernés par l’audit… et donc l’efficacité de la démarche, il est souhaitable :• de créer un ‘comité de pilotage’ de l’audit • de convier tous les acteurs à la restitution orale.• d’utiliser le rapport d’audit comme un outil de communication
et de travail au sein de l’établissement et avec ses partenaires.
AVP – Commande
Le travail de la commande
Repérer les enjeux, attentes et besoins du commanditaire
Définir l'objet de la commande : explorer et délimiter
Situer la commande en termes de pertinence et faisabilité
Faire un pré-diagnosticpré-diagnostic Rédiger la lettre de mission
Pré-diagnostic ou « hypothèses de travail »
De quoi s’agit-il ?= réponse(s) a priori au problème posé, anticipation
du résultat de l’étude= orientation que l’on va donner à l’audit= pistes à privilégier et à explorer
Il ne s’agit pas de décider à l’avance mais de vérifier ses a priori de bénéficier des expériences/expertises
présentes pour aller à l’essentiel
Exemples de critères
Conformité Efficacité Pertinence Opportunité
Cohérence Réalisation Efficience Faisabilité
Comment … ? A quelles conditions … ?Pourquoi … ? Bilan et perspectives…
THEME +
Cibler l’approche
Conformité‘prescrit’ réalisé
Efficacitérésultats obtenus résultats attendus
Efficiencerésultats obtenus résultats attendus
moyens et ressources
utilisés Pertinence
besoins identifiés actions réalisées
BesoinsSituations intermédiaires(temps 2 ... 3 ... 4 ... n)
©
Droits réservés Plante et Bouchard, 2002
Figure 1Modèle d’évaluation de la qualité
EffetsMoyen et
long termeCourt terme
Résultats
Effets(Prévus)
(Non-prévus)
IMPACT
Environnement
FLEXIBILITÉ Ajustements
PERTINENCE
BesoinsSituation initiale
(temps 1)
À-PROPOSContraintes
DURABILITÉ
SYNERGIECOHÉRENCE
Objectifs
Organisme-Service-Programme
Moyens Intervenants
EFFICIENCE
EFFICACITÉ
Lettre de mission : les sept informations nécessaires
1. La commande négociée : objet et objectifs
2. Le site audité
3. Les opérateurs
4. Les modalités du recueil de données
5. La règle de confidentialité / transparence
6. Les modalités des restitutions
7. Le descriptif prévisionnel des opérations
Négociation – Co-contractualisation
AVP - Référentiel
Les 7 étapes d’un « AVP » RestitutionRestitution sous forme orale et écrite
RecommandationsRecommandations en termes d ’actions à mettre en œuvre à courte et moyenne échéance
DiagnosticDiagnostic : détermination des origines et causes des dysfonctionnements ; mise en évidence des
points forts et des risques
AnalyseAnalyse : mise en relation des données recueillies avec le référentiel, description de « l’état du système »
selon la focale choisie
Recueil d’informationsRecueil d’informations : observations, entretiens, questionnaires, études de documents
RéférentielRéférentiel: identification des objectifs visés, des exigences à respecter et des indicateurs concrets orientant le recueil de données
DemandeDemande, négociation et commande formalisées dans une lettre de mission
Référentiel
REFERENT
Ce que l’EPLE doit/devrait faire
Ce que l’EPLE dit/prétend faire
Source externe : les exigences
BO, circulaires, etc.
Source interne : les objectifs
projets, culture, etc.
Source experte : les principes
bonnes pratiques, etc.
IND
ICA
TE
UR
S REFERE
données : ce qui est fait par l’EPLE
comparaison
INTERPRETATIO
N
DIAGNOSTIC
CR
ITE
RE
S
L’évaluation : les indicateurs
ACTION(S)
CONTEXTE
DESTINATAIRES
indicateurs
indicateurs
indicateurs
indicateurs
indicateurs
indicateurs
RESULTATS
DISPOSITIF
Modélisation de l’objet à évaluer
Déterminants Éléments du contexte (social, géographique, historique ...)
Induit
Modèle ICP
de Figari
Les résultats, les images, les effets, les documents produits… (donnés à voir ou à utiliser)
Produit
Processus d’élaboration, de réalisation, stratégies de mise en œuvre…
Construit
L’évaluation est une activité de comparaison entre un objet observé et un système de référence utilisé ou construit par celui qui évalue
L’évaluation d’un dispositif de formation consiste à étudier les relations entre les différents éléments qui le déterminent :
Son contexte
Ses stratégies
Ses productions
L’évaluation comme relation-comparaison
REFERENTIEL RECUEIL DE DONNEES
AN
AL
YS
E OBJET
&
FOCALE(S)
EXIGENCES & OBJECTIFS
EPLE
doit/devrait
dit/prétend
FAIRE
INDICATEURS & INDICES
Liste :
Ce qui permet de constater (faits, chiffres)
OUTILS de RECUEIL
Quoi ?
Auprès de qui ?
Comment ?
DONNEESD
IAG
NO
ST
IC HYPOTHESES DE PRE-
DIAGNOSTIC
Ajout ou sélection
d’indicateurs
Comment ça fonctionne ?
Pourquoi ça fonctionne comme ça ?
Objet : Efficacité des dispositifs d’accueil des élèves en 6ème
Préparation des élèves de CM2 aux conditions d’enseignement au collège (circulaire 16-3-77) Une visite au collège est organisée en fin d’année scolaire Une journée portes ouvertes (famille) est organisée : existence + augmentation
du taux de participation sur 2 ans Des rencontres entre équipe Primaires/collège sont organisées sur des
thématiques pédagogiques et éducatives (vie scolaire…). Mise en œuvre des décisions.
Courrier d’information aux parents (émanant du collège et remis par l’école) Questionnaire aux élèves en juin et en septembre : baisse des « peurs
exprimées » Etc.
L’accueil engage l’ensemble de la communauté éducative (8-6-2001 repris par le projet d’établissement) Visite au collège organisée implique différents membres de la communauté
éducative. Participation des CPE, COP, documentaliste, équipe administrative… aux
réunions de préparation Procédures de repérage des élèves en grande difficulté en relation avec les
écoles primaires Etc.