Structure de la présentation

1. Mise en place des systèmes nationaux de suivi et d’évaluation (S&E) : enseignements tirés de l’expérience africaine et d’autres régions Présentation sur la mise en œuvre de la SRP — Formation Banque mondiale Washington, 12 mars 2008 Keith Mackay Groupe d’évaluation indépendante Banque mondiale (kmckay@worldbank.org)

2. Structure de la présentation • Cinq principales utilisations du S&E • Qu’est-ce que le « S&E » ? • Étude de cas : la Colombie • Enseignements tirés de l’expérience internationale • Quelques points forts des pays africains • Quelques difficultés en Afrique • La voie à suivre • Ressources documentaires utiles

3. Cinq principales utilisations du S&E • Soutenir la prise de décisions budgétaires — c.-à-d., la budgétisation fondée sur la performance • 3 grandes approches : liens directs (direct PBB), liens indirects (indirect PBB) ou présentation des données (presentational PBB) • Appuyer la planification aux niveaux national, sectoriel et infranational • Élaborer de nouvelles stratégies et de nouveaux programmes • Aider les ministères, les entités et les gouvernements infranationaux dans leurs activités de gestion • Renforcer les rapports de responsabilité

4. Qu’est-ce que le S&E ? • Indicateurs de performance — intrants, processus, extrants, réalisations, impacts • Préciser les objectifs du programme, la logique du programme / les chaînes de résultats • Enquêtes sur la prestation des services • Pratiques participatives de S&E • Évaluations rapides • Évaluations d’impact rigoureuses • Analyse coûts-avantages • Etc. — plusieurs outils, méthodes, approches • Chaque outil de S&E a des points forts, des coûts, des limites

5. Étude de cas :La Colombie • Système de S&E géré par le département de la Planification nationale (DPN), fortement appuyé par la présidence • Sous-système de suivi en ligne aux fins de suivi et d’information sur l’état d’avancement de la mise en œuvre des objectifs présidentiels par le gouvernement • Programme ambitieux d’évaluations d’impact et autres évaluations (∑15 en cours) • Le DPN fournit une assistance technique à quelques ministères / organismes pour la mise en place de systèmes de S&E et aux municipalités pour mettre à l’essai des sous-systèmes de suivi et une budgétisation fondée sur la performance.

6. Système de S&E en Colombie -Forces • Utilisation très intensive du sous-système de suivi par le président pour superviser les ministres et les ministères — au moyen des cibles de performance — et pour la responsabilité, c.-à-d., « le contrôle social » • Études d’impact rigoureuses qui sont effectuées par des entités extérieures et ont un niveau élevé de crédibilité • Approche de collaboration entre le DPN et les ministères / organismes sectoriels et avec les municipalités

7. Système de S&E en Colombie -Faiblesses • Recours insuffisant aux informations de S&E pour appuyer la planification et la prise de décisions budgétaires au plan national — cela pourrait changer prochainement • Rôles / fonctions en matière de S&E mal définis au sein du DPN et avec l’administration centrale et les ministères sectoriels • Qualité des données du sous-système de suivi perçue comme étant de qualité médiocre • Recours excessif au financement des bailleurs de fonds pour le système de S&E - faible niveau d’appui des financements publics

8. Colombie — Prochaines mesures • Renforcement du cadre institutionnel par le gouvernement • Un comité planifiera, supervisera les évaluations et veillera à l’application des recommandations • Efforts pour établir un lien entre les informations relatives au S&E et les activités budgétaires et de planification de base • Réaliser une gamme plus variée d’évaluations • Avoir moins recours aux bailleurs de fonds pour financer les évaluations • Appui aux régions, municipalités pilotes pour renforcer les systèmes de S&E existants • Réglementation plus stricte en matière de qualité des données ; de l’harmonisation des données ; des audits externes des données • Projet de la Banque mondiale (10M de dollars sur 5 ans)

9. Enseignements tirés de l’expérience internationale i) • À la fois l’offre et la demande nécessitent une attention minutieuse — erreur de considérer le S&E et les systèmes de S&E comme des questions essentiellement techniques • En ce qui concerne l’offre, i) attention aux systèmes multiples, concurrentiels, non coordonnés ; ii) s’assurer de la fiabilité, de la crédibilité des données ; iii) rationaliser les collectes de données, harmoniser • Éviter l’erreur habituelle qui consiste à concevoir un système de S&E trop complexe.

10. Enseignements tirés de l’expérience internationale ii) • Les informations relatives au suivi — indicateurs de performance — sont utiles, mais il est également utile de procéder à des évaluations pour comprendre les raisons qui expliquent une bonne ou mauvaise performance. • Importance de la formation — pour être en mesure d’effectuer des S&E et utiliser les informations relatives au S&E

11. Enseignements tirés de l’expérience internationale iii) • En ce qui concerne la demande, un champion puissant de la cause du S&E joue un rôle clé — de préférence, pilotage à partir de l’administration centrale par un ministère (ou des ministères) compétent(s). • C’est lorsqu’elle émane du pays lui-même que la demande a le plus de chance d’être viable (Tanzanie, Ouganda, Afrique du Sud). • Incitations nécessaires pour s’assurer que le S&E soit pris au sérieux — à la fois en ce qui concerne l’offre et la demande • Limitation du recours aux textes législatifs et réglementaires et aux décrets gouvernementaux

12. Enseignements tirés de l’expérience internationale iv) • Le diagnostic du S&E existant — aspects relatifs à l’offre et à la demande — est une première mesure importante. • Nécessité d’un examen continu et d’une modification périodique du système gouvernemental de S&E • au moyen du S&E du système de S&E • les pays qui ont développé des systèmes de S&E efficaces l’ont fait de manière opportuniste • se doter d’un système public de S&E représente un effort de longue haleine qui exige de la patience • Maintenir l’équilibre entre l’offre et la demande — le degré d’utilisation du S&E est la mesure du succès

13. Quelques points forts des pays africains • Associations d’évaluation nationales et régionales actives — p. ex., RenSE, SAMEA, AfrEA • L’accent mis sur les Stratégies pour la réduction de la pauvreté accroit l’attention portée au S&E. • Le fait de passer aux prêts-programmes accroît le recours aux données de suivi et d’évaluation émanant des États. • Un certain nombre d’ONG sont actives en matière de S&E. • Plusieurs gouvernements ont des membres clés de leurs personnels qui comprennent le S&E et y sont favorables. • Degré élevé d’enthousiasme et de soutien de la part des bailleurs de fonds

14. Quelques difficultés en Afrique • Décalage entre planification et budgétisation • Systèmes de données multiples, non coordonnés • Données sous-utilisées (même lorsqu’elles sont de bonne qualité) • Accent mis par les bailleurs de fonds sur les bureaux nationaux de statistiques • La plupart des pays ont des systèmes déficients de suivi des dépenses publiques. • Problème du « maillon manquant » • Le système de S&E est souvent tiré par l’offre — faible demande de S&E par les pays. • Danger si les efforts de S&E sont principalement déployés par les bailleurs de fonds

15. La voie à suivre i) • Commencer par un diagnostic des activités actuelles de S&E — forces, faiblesses, futures options. • S’efforcer de forger des alliances au sein du gouvernement pour appuyer le S&E et avec les bailleurs de fonds — expliquer aux fonctionnaires ce que le S&E représente : « Qu’est-ce que le S&E ? » et ses avantages : « Quels avantages en retireraient-ils ? ». Faire ainsi mieux connaître le S&E et encourager sa demande. • Travailler avec un ministère ou un organisme sectoriel pou mettre au point une étude pilote aux fins de démonstration.

16. La voie à suivre ii) • Pousser les bailleurs de fonds à appuyer le programme de S&E du gouvernement et à financer les évaluations. • Considérer les éléments suivants - certains ou tous — comme d’éventuelles composantes clés d’un système de S&E : • Collectes de données statistiques nationales ou sectorielles - en particulier sur les priorités nationales telles que les ODM • Données administratives des ministères sectoriels • Systèmes de gestion de l’information financière — pour un meilleur suivi des dépenses publiques • Enquêtes de suivi des dépenses publiques en vue d’identifier les « déperditions » de fonds et une éventuelle corruption

17. La voie à suivre iii) • Éventuelles composantes clés d’un système de S&E (suite) : • Enquêtes sur la satisfaction du client à l’égard des prestations de services et les perceptions de la qualité des services publics • Évaluations rapides -p. ex., des projets ou programmes « à problème » • Mais attention : parfois « le mieux est l’ennemi du bien », il importe donc de suivre la mesure dans laquelle on utilise chaque type d’informations de S&E • et, en cas de faible utilisation, identifier les raisons et essayer de s’y attaquer

18. Ressources documentaires utiles • Keith Mackay, Comment mettre en place des systèmes de S&E pour améliorer les performances du secteur public, Banque mondiale, 2007En anglais: http://www.worldbank.org/ieg/ecd/better_government.htmlÀ paraître ; maintenant disponible en version Word • Arild Hauge, Développement des capacités de suivi et d’évaluation au service d’un renforcement de l’action gouvernementale en Ouganda, Documents de travail DCE No 10, Octobre 2003http://lnweb18.worldbank.org/oed/oeddoclib.nsf/24cc3bb1f94ae11c85256808006a0046/2217928e3494955885256f320067fe87/$FILE/ecd_uganda_10_french.pdf • Banque mondiale, A Diagnosis of Colombia’s National M&E System, SINERGIA, Banque mondiale, 2007http://www.worldbank.org/ieg/ecd/sinergia.html

19. Ressources documentaires utiles • Keith Mackay, Guide analytique et cadre d’action, Documents de travail DCE No 6, Janvier 1999http://lnweb18.worldbank.org/oed/oeddoclib.nsf/a4dd58e444f7c61185256808006a0008/19c25e9a28f3871f852567fc00558815/$FILE/ECD_WP6_Fr.pdf • Groupe indépendant d’évaluation, Suivi & Évaluation : Quelques outils, méthodes et approches, Banque mondiale, 2004http://lnweb18.worldbank.org/oed/oeddoclib.nsf/24cc3bb1f94ae11c85256808006a0046/662670dfe668188485256b9600500cc3/$FILE/french_me.pdf • Groupe indépendant d’évaluation, Évaluations marquantes : des évaluations qui ont contribué à améliorer les résultats et l’impact des programmes de développement, Banque mondiale, 2004.http://lnweb18.worldbank.org/oed/oeddoclib.nsf/24cc3bb1f94ae11c85256808006a0046/a5c2b725b9a7727c85256f320067befa/$FILE/influential_evaluations_ecd_french.pdf • Site Web de la Banque mondiale sur la Mise en place des systèmes nationaux de S&E : En anglais : www.worldbank.org/ieg/ecd/