Evaluation des performances des établissements scolaires et amélioration de la gestion des systèmes éducatifs africains

1. Evaluation des performances des établissements scolaires et amélioration de la gestion des systèmes éducatifs africains Projet d’appui aux Etats pour la création de système nationaux d’évaluation et de pilotage de la qualité 4ème atelier régional AGEPA – Niamey du 16 au 20 février 2009 J-Mathieu Laroche - Contact: jm.laroche@poledakar.org

2. Le projet d’appui • Dans la lignée d’AGEPA • Promouvoir des systèmes nationaux d’évaluation capables d’assurer une gestion locale quotidienne de la qualité

3. Pourquoi la qualité ? Les scores de mathématiques et de français aux tests PASEC de 5ème année (score sur 100) Source : PASEC et Pôle de Dakar pour la RCA , enquêtes réalisées en 1996 et 2006

4. Relation entre progrès quantitatif et qualitatif sur la période 1970-1990 Sources : données EDS, MICS et QUIBB, années 2000 ou proches et calculs Pôle de Dakar

5. % d’élèves de 5ème année ne disposant pas de certaines commodités ou ne possédant pas certains biens à la maison (PASEC)

6. Le poids des différents facteurs dans le processus d’acquisition des écoles africaines Source : PASEC, 10 pays enquêtés

7. Conclusions • Insuffisance de données disponibles/ exploitables par établissements • Problème de qualité des apprentissages • Grande diversité au sein des pays avec de fortes inégalités • Evolution de la composition du public d’élèves • Importance des effets classe – maître – école → Entrée projet d’appui : les systèmes nationaux d’évaluation

8. Les systèmes nationaux d’évaluation • Exhaustivité des informations par établissement • Enracinement dans le fonctionnement courant des systèmes éducatifs • Diffusion d’une culture et de techniques d’évaluation • Renforcement des capacités des acteurs du système éducatif à juger de son fonctionnement • Analyse de la valeur ajoutée des établissements

9. Le projet d’appui : Objectifs • Faciliter la production régulière d’indicateurs légitimes et simples de performances des établissements (données élèves) • Analyser, par les acteurs eux-mêmes, de la variété des résultats obtenus. Analyse des effets environnementaux à partir des données par établissement • Développer, à partir des analyses (des différences de résultats entre établissements), les activités évaluatives et pédagogiques structurantes au bénéfice de la qualité des apprentissages

10. Méthodologie • Diagnostic « qualité » • Estimation des indicateurs de performance des établissements • Analyse des indicateurs de performance des établissements

11. Diagnostic qualité • Phase d’expertise de la faisabilité du projet dans un pays, qui implique l’examen: • Du système d’examen et de la pertinence de chacun d’eux • De la chaîne actuelle de collecte, saisie, diffusion des résultats aux examens • De propositions de réaménagement des examens et de la chaine informatique de gestion des résultats aux examens

12. Estimation des indicateurs de performance des établissements • Formation d’ensemble à l’évaluation/analyse des données • Présentation des modalités d’action des phases suivantes (activités de questionnement/ remédiation à mettre en œuvre) • Disponibilité des indicateurs dans quelques régions → support de sensibilisation aux autres équipes qui seront concernées par la généralisation

13. Analyse des indicateurs de performance des établissements • processus d’analyses des écarts de performance • Ciblage des sites • mobilisation et organisation des équipes d’encadrement, enseignantes, actions collectives à entreprendre (projets mobilisateurs, d’experimentation) • Suivi des actions

14. La valeur ajoutée • L’analyse est constituée de trois étapes : • estimation de la relation moyenne entre les résultats à l’examen et les caractéristiques des élèves prédictives de la réussite (Cel) R = f (Cel) • estimation du résultat attendu pour chaque établissement i (Ri) en fonction des caractéristiques moyenne des élèves accueillis (Celi) Ri = f (Celi ) • calcul de la valeur ajoutée par l’établissement par différence entre le taux de réussite observé (Roi ) et le taux attendu (Ri) VAi = Roi - Ri

15. L’exemple de la valeur ajoutée calculée par la DEP en France