Modules de formation MEF

1. Modules de formation MEF / GTZ Dakar, octobre 2009 Formateur: Jim Bennett

2. MEF / GTZ 2009 Formation en suivi-�valuation 2 Les objectifs de la formation Les personnes form�es connaissent bien les notions de base, les concepts, les m�thodes, les outils et des syst�mes de suivi-�valuation (S&E) Les participants proposent des pratiques S&E bien adapt�es � leurs besoins

3. MEF / GTZ 2009 Formation en suivi-�valuation 3 Les 7 modules de formation Contexte et approche g�n�rale, Indicateurs et sources de v�rification, Le r�le des cibles, L�analyse des risques, Le cadre institutionnel, L�utilisation des donn�es, Les th�mes transversaux. => Avec des modules ��bis�� selon les besoins.

4. MEF / GTZ 2009 Formation en suivi-�valuation 4 Approche m�thodologique Nombre de participants: 24 environ, 50% en s�ances pl�ni�res, 50% en groupes de travail (GT) d�environ huit personnes chacun, Mod�rateurs et rapporteurs �lus (en rotation) dans chaque GT, 50% informations g�n�rales, 50% informations adapt�es aux besoins sp�cifiques des participants.

5. MEF / GTZ 2009 Formation en suivi-�valuation 5 Visualisation: Cartes m�taplan Principes de base: Respectez les couleurs des cartes (afin de faciliter le triage ult�rieur) Entrez une seule unit� d�information sur une carte donn�e �crivez lisiblement Entrez au maximum 4 lignes de texte

6. MEF / GTZ 2009 Formation en suivi-�valuation 6 Quatre valeurs � partager Confidentialit�: Ce qui va se passer et se dire ici restera entre nous Ouverture: Chacun peut exprimer ses opinions sans contrainte, avec un esprit critique, mais tol�rant Participation active: Chacun sera � la fois acteur et b�n�ficiaire de nos jours de travail communs R�alisme: Gardons les pieds sur terre!

7. MEF / GTZ 2009 Formation en suivi-�valuation 7 Module 1 Contexte et approches g�n�rales

8. MEF / GTZ 2009 Formation en suivi-�valuation 8 Contexte Historique: 2000: Strat�gie provisoire (I-DSRP) pr�sent�e au FMI et � l�IDA (BM) en juin, 2002: Elaboration du DSRP1 (2003-2005) , 2005: Elaboration du DSRP2 (2006-2010) = Strat�gie pour la Croissance et la R�duction de la Pauvret� (SCRP), adopt�e en juillet 2006, 2007: Groupe consultatif � Paris (octobre), Actuellement: Projet de feuille de route pour l�adoption du DSRP3 (2011-2015) fin 2010.

9. MEF / GTZ 2009 Formation en suivi-�valuation 9 Contexte (2) La Cellule de Suivi du Programme de Lutte contre la Pauvret� (CSPLP) au MEF: Mission: la mise en �uvre, l'accompagnement, la r�alisation et le suivi de la SRP au S�n�gal. Un coordinateur et six groupes de travail: Suivi quantitatif, Suivi qualitatif, Articulation des politiques sectorielles, Suivi de la mobilisation et l'absorption des ressources, Information et communication, Gestion administrative et financi�re.

10. MEF / GTZ 2009 Formation en suivi-�valuation 10 Contexte (3) Agence Nationale de la Statistique et de la D�mographie (ANSD): Sch�ma Directeur de la Statistique (SDS) 2008-2013 (juin 2007) �tablissant� Le Conseil National de la Statistique (CNS), Le Comit� Technique des Programmes Statistiques (CTPS) compos� de 6 sous-comit�s sectoriels et th�matiques, Arr�t� MEF/ANSD du 28/07/2009 �tablissant: 26 sous-comit�s sectoriels et 6 groupes th�matiques. => Voir copie Source: www.finances.gouv.snSource: www.finances.gouv.sn

11. MEF / GTZ 2009 Formation en suivi-�valuation 11 Contexte (4) D�autres acteurs concern�s par le syst�me S&E: Les autres structures du MEF (DGs, IGF), Les autres minist�res et agences, Les collectivit�s locales et les services publics d�concentr�s, Les ONG et le secteur priv�, Les partenaires techniques et financiers, Les m�dias, => Sont ils suffisamment impliqu�s? Source: www.finances.gouv.snSource: www.finances.gouv.sn

12. MEF / GTZ 2009 Formation en suivi-�valuation 12 Contexte (5) Perspectives (voir projet de Feuille de route): Revue annuelle conjointe 2010, Un bilan du DSRP2: Synth�se des revues annuelles, Etudes et enqu�tes (diagnostic, acc�s aux services sociaux, impacts, perceptions �), L��laboration du DSRP3: Orientations strat�giques, Matrice des mesures, Plan d�Actions Prioritaires.

13. MEF / GTZ 2009 Formation en suivi-�valuation 13 Approches g�n�rales DSRP dans d�autres pays: 1�re g�n�ration: Accent sur les secteurs sociaux, mais faible p�rennisation. 2�me g�n�ration: Souvent avec priorit� pour la croissance �conomique, mais faible r�duction de la pauvret�. 3�me g�n�ration: Tendance en faveur de la bonne gouvernance. => Globalement presque 70 SRP au total dont 25 de la deuxi�me g�n�ration http://www.prsp-watch.de/http://www.prsp-watch.de/

14. MEF / GTZ 2009 Formation en suivi-�valuation 14 Approches g�n�rales (2) Les principales forces des SRP: Participation renforc�e des acteurs non �tatiques, Souvent: les premi�res exp�riences de dialogue Etat � ONG. Souvent: la mise en r�seau des acteurs non �tatiques. http://www.prsp-watch.de/http://www.prsp-watch.de/

15. MEF / GTZ 2009 Formation en suivi-�valuation 15 Approches g�n�rales (3) Les principales faiblesses des SRP: Faible acc�s des acteurs non �tatiques aux informations requises, Faible participation des populations rurales et des groupes marginalis�s. Faible institutionnalisation de la participation, Faible participation au suivi-�valuation, Faible implication des Parlements. http://www.prsp-watch.de/http://www.prsp-watch.de/

16. MEF / GTZ 2009 Formation en suivi-�valuation 16 Exercice 1 Nommer le mod�rateur et le rapporteur de la s�ance En utilisant les cartes m�taplan, identifier � Les facteurs internes qui favorisent � Les facteurs internes qui emp�chent � Les facteurs externes qui favorisent � Les facteurs externes qui emp�chent � � une bonne gestion du processus de suivi-�valuation du DSRP2 dans votre domaine de sp�cialisation, � compte tenu des exp�riences du S�n�gal. => Voir mod�le (page suivante)

17. MEF / GTZ 2009 Formation en suivi-�valuation 17 Exercice 1 (mod�le)

18. MEF / GTZ 2009 Formation en suivi-�valuation 18 Le diagnostic institutionnel (1) Quatre dimensions: Le contexte (r�glementaire, juridique etc.), Les r�seaux et secteurs, Les organisations et Les individus. Source: D�cret pr�sidentiel no 2008-642 portant organisation du Minist�re de l�Economie et des Finances, sign� le 16 juin 2008 / section 6, art. 113 Source: D�cret pr�sidentiel no 2008-642 portant organisation du Minist�re de l�Economie et des Finances, sign� le 16 juin 2008 / section 6, art. 113

19. MEF / GTZ 2009 Formation en suivi-�valuation 19 Le diagnostic institutionnel (2) Source: D�cret pr�sidentiel no 2008-642 portant organisation du Minist�re de l�Economie et des Finances, sign� le 16 juin 2008 / section 6, art. 113 Source: D�cret pr�sidentiel no 2008-642 portant organisation du Minist�re de l�Economie et des Finances, sign� le 16 juin 2008 / section 6, art. 113

20. MEF / GTZ 2009 Formation en suivi-�valuation 20 D�finitions Suivi: Processus continu de collecte syst�matique d�informations, selon des indicateurs choisis, � � pour fournir aux gestionnaires et aux parties prenantes d�une action de d�veloppement (intervention) en cours � � des �l�ments sur les progr�s r�alis�s, les objectifs (r�sultats) atteints et l�utilisation des fonds allou�s. Source: OECD 2002Source: OECD 2002

21. MEF / GTZ 2009 Formation en suivi-�valuation 21 D�finitions (2) Evaluation: Appr�ciation syst�matique et objective d�une intervention, en cours ou termin�, de sa conception, de sa mise en �uvre et de ses r�sultats. Le but est de d�terminer la pertinence et l�atteinte des objectifs, l�efficience, l�efficacit�, l�impact et la durabilit� (viabilit�). Une �valuation devrait fournir des informations cr�dibles et utiles permettant d�int�grer les le�ons de l�exp�rience dans les processus de d�cision. Source: OECD 2002Source: OECD 2002

22. MEF / GTZ 2009 Formation en suivi-�valuation 22 Suivi vs. �valuation

23. MEF / GTZ 2009 Formation en suivi-�valuation 23 Exemple: Le syst�me ROM (UE) Un syst�me de suivi-�valuation externe: ��Monitoring��: Phase pilote 2000-2001, Tous les projets UE/CE peuvent �tre monitor�s, D�marche (voir manuel) et outils standardis�s, Une semaine sur place par projet / programme, Deux projets / programmes par moniteur, Rapports finaux deux semaines apr�s la fin de la mission sur place, Fiches de r�ponses pour si�ge et D�l�gations.

24. MEF / GTZ 2009 Formation en suivi-�valuation 24 D�finitions (4) Indicateur: Facteur ou variable, de nature quantitative ou qualitative, qui constitue un moyen simple et fiable de mesurer les progr�s, d�exprimer les changements li�s � une intervention ou d�aider � appr�cier la performance d�un acteur du d�veloppement. Source: Ketelaar et al 2007Source: Ketelaar et al 2007

25. MEF / GTZ 2009 Formation en suivi-�valuation 25 D�finitions (5) Cha�ne des r�sultats (cha�ne de causalit�, des effets etc.): Suite de relations de cause � effet qui m�nent d�une action de d�veloppe-ment (intervention) � l�atteinte des objectifs. La cha�ne des r�sultats commence par la mise � disposition des ressources (intrants), se poursuit par les activit�s et leurs extrants (produits, outputs). Elle conduit aux effets (r�alisations) et aux impacts, et aboutit � une r�troaction. Source: Banque mondiale 2008.Source: Banque mondiale 2008.

26. La cha�ne des r�sultats

27. La cha�ne des r�sultats (exemple)

28. MEF / GTZ 2009 Formation en suivi-�valuation 28 La cha�ne des r�sultats (2) La dimension politique: A travers les minist�res, les agences �tatiques etc., le Gouvernement d�finit les effets (r�alisations) qu�il cherche � assurer dans un domaine sp�cifique, Sur la base de ces effets (r�alisations), le Gouvernement cherche � assurer des impacts directs et indirects sur un certain aspect de la soci�t�, Le Parlement met � la disposition du Gouvernement le financement requis pour assurer les r�alisations propos�es, Les minist�res et agences proposent les extrants (biens et services) et les inputs (personnel, mat�riel etc.) requis, Les indicateurs servent au suivi et � l��valuation de l�efficacit�, de l�efficience et d�autres aspects aff�rents.

29. MEF / GTZ 2009 Formation en suivi-�valuation 29 La cha�ne des r�sultats (3) Les liens de cause � effet: G�n�ralement, les liens de cause � effet entre deux niveaux de la cha�ne des r�sultats sont nombreux, Aux niveaux sup�rieurs de la cha�ne des r�sultats et dans le plus long terme, les liens de cause � effet sont de plus en plus difficiles � v�rifier, Il faut parfois aussi tenir compte des effets indirects et/ou n�gatifs inattendus, Les liens de cause � effet ne sont pas pleinement sous le contr�le de l�entit� concern�e, surtout si ces liens sont tr�s vari�s et complexes.

30. MEF / GTZ 2009 Formation en suivi-�valuation 30 R�sultats non attribuables Le suivi doit se r�f�rer � des indicateurs � tous les niveaux de la cha�ne des r�sultats. Les inputs et extrants peuvent �tre facilement observ�s et suivis, mais ce n�est pas toujours de m�me pour les effets et les impacts. Les variations des r�sultats obtenus peuvent �tre attribu�es � des diff�rents facteurs internes et externes parfois interd�pendants.

31. MEF / GTZ 2009 Formation en suivi-�valuation 31 R�sultats non attribuables (2) Un mod�le des r�sultats (source: GTZ 2004) Remarque: les fl�ches en pointill�s symbolisent le nombre croissant de facteurs externes.

32. MEF / GTZ 2009 Formation en suivi-�valuation 32 Exercice 2 Nommer le mod�rateur et le rapporteur dans chaque groupe de travail, Elaborer des cha�nes des r�sultats dans les domaines suivants: GT1: Renforcement des ressources humaines, GT2: Contr�le de qualit� (rapports, dossiers), GT3: Communication et relations publiques, Distinguer bien entre intrants, extrants (outputs), effets (utilisation) et impacts directs et indirects!

33. MEF / GTZ 2009 Formation en suivi-�valuation 33 Module 2 Indicateurs etsources de v�rification

34. MEF / GTZ 2009 Formation en suivi-�valuation 34 Un indicateur, c�est quoi? Il y a des d�finitions diverses: Une variable employ�e afin de mesurer le progr�s vers un objectif sp�cifique, Un signe qui montre le degr� de changement issu d�une intervention, Des variables ou des facteurs quantitatifs ou qualitatifs qui fournissent un moyen simple et cr�dible pour mesurer une r�alisation ou repr�senter les changements issus d�une intervention.

35. MEF / GTZ 2009 Formation en suivi-�valuation 35 Les types d�indicateurs Intrant, activit�, extrant, effet, impact, Quantitatifs et qualitatifs, Contexte (risque), Cl�s et/ou prioritaires, Substitutif (proxy), Pond�r�s ou non pond�r�s (voir indices), Agr�g�s et d�sagr�g�s.

36. MEF / GTZ 2009 Formation en suivi-�valuation 36 Indicateurs cl�s de performance ICPs mesurent la performance d�un processus et v�rifient l�efficacit� des contr�les, L�approche ICP est souvent appliqu�e pour le suivi-�valuation des CDMT, Une performance est d�ficitaire si l�ICP n�atteigne pas la cible vis�e.

37. MEF / GTZ 2009 Formation en suivi-�valuation 37 Un bon indicateur � Donne une mesure directe et claire, Est pertinent et directement li� au r�sultat, Varie en fonction de l�espace et du temps, N�est pas facile � manipuler, Est facilement disponible, Est cens� �tre cr�dible, et N�est pas cher � actualiser.

38. MEF / GTZ 2009 Formation en suivi-�valuation 38 Un bon indicateur (2) � �est un indicateur SMART c.-�-d. il est: Sp�cifique � il est sensible par rapport au changement induit par l�intervention en question, Mesurable - le progr�s atteint est v�rifiable et il n�est pas facile � fausser, Atteignable � il est applicable � l�intervention en question, R�aliste et pris en charge par un responsable, Temporellement d�fini � il assure le tra�abilit� du changement.

39. MEF / GTZ 2009 Formation en suivi-�valuation 39 Un bon indicateur (3) � R�pond aux six dimensions / questions: L�objet (quoi?) La quantit� (combien?) La qualit� (comment?) Le groupe cible (qui?) La p�riode (quand?) La localisation (o�?)

40. MEF / GTZ 2009 Formation en suivi-�valuation 40 Exemple No. 1 A partir de 2015, le pourcentage de la population vivant en dessous du seuil de pauvret� est inf�rieur � 30%.

41. MEF / GTZ 2009 Formation en suivi-�valuation 41 Exemple No. 2 A partir du 1/1/2010 tous les fonctionnairesde la DGID participent effectivement au syst�me d��valuation des performances des ressources humaines.

42. MEF / GTZ 2009 Formation en suivi-�valuation 42 Exemple No. 3 A partir du 1/1/2010 les march�s publics BCIpass�s par entente directe au S�n�galne d�passent pas 20% de l�ensemble en terme de nombre et de volume financier.

43. MEF / GTZ 2009 Formation en suivi-�valuation 43 Sources de v�rification Les sources de v�rification sont des moyens d�information compl�mentaires permettant de d�terminer et de juger le progr�s r�alis� vers les r�sultats et les objectifs planifi�s, rendus op�rationnels sous la forme d�indicateur. Source: OECD 2002Source: OECD 2002

44. MEF / GTZ 2009 Formation en suivi-�valuation 44 Exemples Rapports annuels de la CSPLP, Rapports d�enqu�tes ANSD (p.ex. ESAM, ESPS), Enqu�tes de satisfaction aupr�s les usagers des services publics, Entretiens avec un �chantillon d�enqu�teurs et de personnes enqu�t�es, Comptes-rendus des r�unions.

45. MEF / GTZ 2009 Formation en suivi-�valuation 45 Exercice 3 Nommer les mod�rateurs et les rapporteurs (en rotation), Sur la base de vos cha�nes de r�sultats, formuler: Un bon indicateur au niveau des extrants et Un bon indicateur au niveau des effets, �. Ceci en respectant les 6 questions / dimensions, Pr�senter les r�sultats en pl�ni�re. => Voir mod�le (page suivante)

46. MEF / GTZ 2009 Formation en suivi-�valuation 46 Exercice 3: Mod�le Indicateur d�effet : ����.�� Indicateur d�extrant : ����..�� Analyse des indicateurs :

47. MEF / GTZ 2009 Formation en suivi-�valuation 47 Les m�ta-donn�es Le pr�fixe grec ��m�ta�� indiquant l�auto-r�f�rence, Le mot signifie donc proprement ��donn�e de/� propos de donn�e��) Elle est une donn�e servant � d�finir ou d�crire une autre donn�e quel que soit son support (papier ou �lectronique). Voir Wikip�diaVoir Wikip�dia

48. MEF / GTZ 2009 Formation en suivi-�valuation 48 Les m�ta-donn�es (2) P.ex. Camara 2008 (Guin�e): R�f�rence (DSRP, OMD etc.), Objectif (� mesurer), Typologie (effet, impact etc.), P�riodicit�, D�sagr�gation (nationale, r�gionale�), Domaine (TIC, gouvernance etc.), Service producteur, Contexte (justification), Sources,

49. MEF / GTZ 2009 Formation en suivi-�valuation 49 Les m�ta-donn�es (3) Camara 2008 (suite): Donn�es de base (primaires), M�thodologie de calcul, Mode de diffusion, Difficult�s rencontr�es, Mesures apport�es depuis 2002, Perspectives d�am�liorations, Opportunit�s, Commentaires, Contact (responsable), date du dernier contact.

50. MEF / GTZ 2009 Formation en suivi-�valuation 50 Les m�ta-donn�es (4) Archivage National des Donn�es du S�n�gal (ANADS): http://ns.ansd.sn/nada/ Pour chaque enqu�te ou recensement: Une pr�sentation, Des rapports et documents techniques, Les conditions et proc�dures d�acc�s aux micros donn�es, Le formulaire de demande de donn�es.

51. MEF / GTZ 2009 Formation en suivi-�valuation 51 Les m�ta-donn�es (5) ANADS: 5 ouvrages sont disponibles, Enqu�te agricole annuelle 2006-2007, Enqu�te de Suivi de la Pauvret� 2005, Inventaire des services sociaux de base au niveau des villages - Mai 2000, Enqu�te sur les Priorit�s 1991, Recensement g�n�ral de la population 1976.

52. MEF / GTZ 2009 Formation en suivi-�valuation 52 Les m�ta-donn�es (6) Le site web:

53. MEF / GTZ 2009 Formation en suivi-�valuation 53 Module 3 Le r�le des cibles

54. MEF / GTZ 2009 Formation en suivi-�valuation 54 D�finition des cibles Les indicateurs op�rationnels et objectivement v�rifiables d�crivent des cibles pr�cises. La d�finition de cibles pr�cises facilite: Une bonne planification strat�gique, Une bonne budg�tisation des programmes et des activit�s aff�rentes, Un bon suivi-�valuation ax� sur les r�sultats, Une bonne budg�tisation des activit�s de suivi-�valuation.

55. MEF / GTZ 2009 Formation en suivi-�valuation 55 D�finition des cibles (2) Les points de rep�re: Intrant, extrant, effet ou impact attendu, L�indicateur (la variable concern�e), La situation de r�f�rence (baseline), La pr�vision (situation ou comportement souhaitable cibl� pour l�avenir) et La r�alisation effective (issue du suivi)

56. MEF / GTZ 2009 Formation en suivi-�valuation 56 D�finition des cibles (3) Les situations de r�f�rence (baseline), p.ex. dans la note technique de ANSD / CPCCI (juin 2009): Taux de croissance r�el en 2004 (5,9%), Production c�r�ali�re en 2004 (1.084.530 t), Pourcentage de femmes dans les instances de d�cision au niveau politique en 2008 (18%), Ratio de reboisement et r�g�n�ration sur le d�boisement en 2004 (0,6%), Nombre de personnes sorties des habitats spontan�s et relog�s en 2005 (180.000 personnes).

57. MEF / GTZ 2009 Formation en suivi-�valuation 57 D�finition des cibles (4) Techniques utiles: Mod�ration et animation (pour ateliers de travails etc.) et approches participatives avec comme objectif le renforcement de l�appropriation locale (ownership), Distinction entre cibles fixes (p.ex. 50%) et cibles variables mais limit�es (p.ex. entre 40% et 60%), Distinction entre donn�es agr�g�es (p.ex. nationales) et d�sagr�g�es (p.ex. pour 14 r�gions, 45 d�parte-ments, 92 arrondissements), Distinction entre les horizons temporaux (court, moyen et long terme), Benchmarking (�talonnage), simulations macro/micro.

58. MEF / GTZ 2009 Formation en suivi-�valuation 58 D�finition des cibles (5) Benchmarking (�talonnage): une illustration�

59. MEF / GTZ 2009 Formation en suivi-�valuation 59 D�finition des cibles (6) Budg�tisation et le lien budg�taire: Se mettre d�accord sur une cible, c�est plus facile que l�estimation des co�ts de sa r�alisation. Les co�ts d�pendent des facteurs requis (inputs), des prix et de divers facteurs inconnus (risques). Le choix d�une cible devrait �tre bien refl�t� dans le budget indicatif, tout en tenant compte des risques. Le choix d�une cible aura des impacts sur les besoins en S&E, qui ont de leur part des implications budg�taires!

60. MEF / GTZ 2009 Formation en suivi-�valuation 60 D�finition des cibles (7) R�flexion en pl�ni�re: Comment d�crire les situations de r�f�rence (baseline) dans les domaines � Renforcement des ressources humaines, Contr�le de qualit� (rapports, dossiers), Communication et relations publiques, � � tout en distinguant entre aspects quantitatifs et aspects qualitatifs?

61. MEF / GTZ 2009 Formation en suivi-�valuation 61 Module 4 L�analyse des risques �Analyse des donn�es� supprim�e vu que la plupart des participants sont des statisticiens�Analyse des donn�es� supprim�e vu que la plupart des participants sont des statisticiens

62. MEF / GTZ 2009 Formation en suivi-�valuation 62 L�approche ��cadre logique�� La structure g�n�rale en 4 colonnes: Logique d�intervention (cha�ne des r�sultats, ou les facteurs internes de l�intervention), Les indicateurs objectivement v�rifiables, Les sources de v�rification, Les hypoth�ses (�volution positive attendue des facteurs externes). + ressources requises + calendrier indicatif

63. MEF / GTZ 2009 Formation en suivi-�valuation 63 L�approche ��cadre logique�� (2) Colonne 1: La logique d�intervention

64. MEF / GTZ 2009 Formation en suivi-�valuation 64 L�approche ��cadre logique�� (3) Le CL complet (classique):

65. MEF / GTZ 2009 Formation en suivi-�valuation 65 L�approche ��cadre logique�� (4) Le CL complet (type GAR):

66. MEF / GTZ 2009 Formation en suivi-�valuation 66 L�approche ��cadre logique�� (5) La coh�rence horizontale du CL:

67. MEF / GTZ 2009 Formation en suivi-�valuation 67 L�approche ��cadre logique�� (6) La coh�rence verticale du CL:

68. MEF / GTZ 2009 Formation en suivi-�valuation 68 L�analyse des risques Appr�ciation des facteurs (appel�s hypoth�ses dans le cadre logique) qui contribuent ou pourraient contribuer � l�atteinte des objectifs (r�sultats) d�une intervention donn�e. Examen d�taill� des cons�quences non voulues et n�gatives qu�une intervention pourrait avoir sur les groupes cibles et/ou leur environnement. L�analyse permet �galement de quantifier la probabilit� de l�apparition des risques d�finis et leur impact pr�visible. Banque mondiale 2008 Sourcebook GARBanque mondiale 2008 Sourcebook GAR

69. MEF / GTZ 2009 Formation en suivi-�valuation 69 L�analyse des risques (2) Risques internes: par exemple� Beaucoup d�intervenants, Niveau d�engagement requis des intervenants, Techniques complexes, Techniques innovatrices, �ch�ancier trop court, Fluctuations personnelles. Source: ACDI, Guide d'�tablissement du rapport de projet sur le rendement � l'intention des partenaires et des agents d'ex�cution canadiens Source: ACDI, Guide d'�tablissement du rapport de projet sur le rendement � l'intention des partenaires et des agents d'ex�cution canadiens

70. MEF / GTZ 2009 Formation en suivi-�valuation 70 L�analyse des risques (3) Risques externes: par exemple� Instabilit� politique, Pesanteurs culturelles, Conflits sociaux, Effets environnementaux, Crises �conomiques. Source: ACDI, Guide d'�tablissement du rapport de projet sur le rendement � l'intention des partenaires et des agents d'ex�cution canadiens Source: ACDI, Guide d'�tablissement du rapport de projet sur le rendement � l'intention des partenaires et des agents d'ex�cution canadiens

71. Analyse des risques (4)

72. MEF / GTZ 2009 Formation en suivi-�valuation 72 L�analyse des risques (5) Le suivi des hypoth�ses (ou risques): Source: ACDI, Guide d'�tablissement du rapport de projet sur le rendement � l'intention des partenaires et des agents d'ex�cution canadiens Source: ACDI, Guide d'�tablissement du rapport de projet sur le rendement � l'intention des partenaires et des agents d'ex�cution canadiens

73. MEF / GTZ 2009 Formation en suivi-�valuation 73 D�autres consid�rations Triangulation: Le principe d�utiliser au moins trois sources de v�rification!

74. MEF / GTZ 2009 Formation en suivi-�valuation 74 Exercice 4 Nommer les mod�rateurs et les rapporteurs (en rotation), Se basant sur vos cha�nes de r�sultats, identifier 1-3 risques qui peuvent emp�cher la transformation des extrants en effets, Formuler une hypoth�se (voire �volution positive) relative � chaque risque (influence n�gative), Analyser l�hypoth�se selon la d�marche d�crite, Pour chaque hypoth�se retenue, formuler un indicateur et une source de v�rification, Proposer des mesures de r�duction du risque. => Voir mod�le, page suivante Source: EC, PCM Handbook, March 2001 Source: EC, PCM Handbook, March 2001

75. MEF / GTZ 2009 Formation en suivi-�valuation 75 Exercice 4 (mod�le)

76. MEF / GTZ 2009 Formation en suivi-�valuation 76 Module 4 bis Autres outils �Analyse des donn�es� supprim�e vu que la plupart des participants sont des statisticiens�Analyse des donn�es� supprim�e vu que la plupart des participants sont des statisticiens

77. MEF / GTZ 2009 Formation en suivi-�valuation 77 Arbre � probl�mes

78. Exemple

79. GTZ / Guin�e Evaluation: Module 2 79 Arbre � objectifs

80. Exemple

81. MEF / GTZ 2009 Formation en suivi-�valuation 81 Module 5 Le cadre institutionnel

82. MEF / GTZ 2009 Formation en suivi-�valuation 82 Le cadre institutionnel Chaque syst�me de S&E a besoin d�un cadre institutionnel ad�quat pour �tre efficient et efficace. Il faut de la clart� � tous les niveaux par rapport aux r�les et aux attentes des uns et des autres. Les principaux acteurs concern�s et leur principales caract�ristiques sont pris en compte dans l�analyse des parties prenantes.

83. MEF / GTZ 2009 Formation en suivi-�valuation 83 Le cadre institutionnel (2) Les principaux outils analytiques: Analyse type SWOT / FFOM, Matrice des parties prenantes, Diagramme Venn (ou cartographie des relations, des acteurs), Enqu�te qualitative.

84. MEF / GTZ 2009 Formation en suivi-�valuation 84 Le cadre institutionnel (3) Matrice des parties prenantes � El�ments (options): Parties prenantes, Mission(s) et capacit�s, Int�r�ts par rapport � l�intervention, Contributions potentielles � l�intervention, Facteurs qui emp�chent les contributions, Eventuelles mesures d�att�nuation et/ou de renforcement, Autres informations pertinentes.

85. MEF / GTZ 2009 Formation en suivi-�valuation 85 Exemple Matrice des parties prenantes

86. MEF / GTZ 2009 Formation en suivi-�valuation 86 Le cadre institutionnel (4) Diagramme Venn: Une repr�sentation d'un ou plusieurs ensembles par des symboles et des lignes simples, Application exemplaire: l�analyse des acteurs: Les symboles repr�sentent les parties prenantes, Les lignes d�crivent la nature de leurs relations (transfert d�informations, contr�le, suivi etc.), D�autres �l�ments sont � ajouter selon les besoins, L�approche peut �tre appliqu�e de mani�re participative.

87. MEF / GTZ 2009 Formation en suivi-�valuation 87 Exemple Diagramme Venn

88. MEF / GTZ 2009 Formation en suivi-�valuation 88 Le cadre institutionnel (5) Enqu�te qualitative � quelques questions exemplaires: Les principales parties prenantes ont-elles �t� impliqu�es dans la conception de l�intervention? Les objectifs (r�sultats attendus) sont-ils clairement compris par les parties prenantes? Le calendrier et/ou l�ensemble des activit�s sont-ils r�alisables compte tenu des capacit�s des parties prenantes? Si applicable, dans quelle mesure la conception du projet a-t-elle �t� adapt�e afin de la rendre plus pertinent? Dans quelle mesure le projet est-il int�gr� dans des structures institutionnelles susceptibles de lui survivre? Source: Commission europ�enne, Results oriented monitoring � fiche BCS_fr_2009_v1Source: Commission europ�enne, Results oriented monitoring � fiche BCS_fr_2009_v1

89. MEF / GTZ 2009 Formation en suivi-�valuation 89 Module 6 L�utilisationdes donn�es(rapports)

90. MEF / GTZ 2009 Formation en suivi-�valuation 90 L�utilisation des donn�es Le suivi ne se limite pas � la collecte et l�analyse de donn�es. Le suivi doit �tre bien int�gr� dans les processus d�cisionnels. Si les r�sultats du suivi (donn�es, analyses etc.) ne sont pas utilis�s pour la prise de d�cision, le suivi n�est qu�un gaspillage de ressources. Les r�sultats du suivi (et de l��valuation) sont � pr�senter aux d�cideurs et aux autres int�ress�s sous une forme qui facilite la communication y compris la r�troaction (feedback).

91. MEF / GTZ 2009 Formation en suivi-�valuation 91 L�utilisation des donn�es (3) Les types de rapports S&E: Rapport interne de suivi (avec un accent sur les inputs et les activit�s), Rapport interne ou externe de suivi du progr�s (avec un accent sur les extrants et les effets), Rapport d��valuation interne (revue d�une strat�gie, du statut des cibles, des impacts probables etc.), Rapport d��valuation externe (avec un accent sur la pertinence, les impacts atteints et la viabilit�), Rapports d��valuation ex ante, � mi-parcours et ex post, Rapport synth�tique (pour les m�dias etc.), Rapports techniques (souvent m�thodologiques).

92. MEF / GTZ 2009 Formation en suivi-�valuation 92 L�utilisation des donn�es (4) Comment mesurer la performance du syst�me S&E? No. de rapports imprim�s et diffus�s dans les d�lais, No. de bulletins mensuels diffus�s, No. de visiteurs au site web par mois, No. de fiches de r�troaction (feedback) soumises, No. de participants aux ateliers de sensibilisation, % des participants aux ateliers satisfaisants, % des personnes interrog�es qui peuvent citer correctement les �l�ments cl�s d�un rapport.

93. MEF / GTZ 2009 Formation en suivi-�valuation 93 L�utilisation des donn�es (5) El�ments d�une fiche de r�ponse (feedback): Identifiant du document de r�f�rence, Appr�ciation qualitative et/ou chiffr�e selon des crit�res: Clart�, Pertinence, Pr�cision, Ad�quation des recommandations, D�autres � Appr�ciation globale, Commentaires et suggestions.

94. MEF / GTZ 2009 Formation en suivi-�valuation 94 L�utilisation des donn�es (6) El�ments d�une fiche contradictoire: Identifiant du document de r�f�rence, Tableau de trois colonnes: Recommandations, R�ponses (imm�diates), Suite (12 mois plus tard), Objectif: Faciliter la validation et le suivi des recommandations issues d�une revue (rapport de suivi, �valuation, audit, autre)

95. MEF / GTZ 2009 Formation en suivi-�valuation 95 L�utilisation des donn�es (7) Exemple d�une fiche contradictoire Voir copie

96. MEF / GTZ 2009 Formation en suivi-�valuation 96 Module 7 Les th�mestransversaux

97. MEF / GTZ 2009 Formation en suivi-�valuation 97 Les th�mes transversaux L�aspect genre dans le syst�me S&E: Distinguer entre les hommes et les femmes � tous les niveaux de la cha�ne des r�sultats, p.ex. % hommes / femmes (personnel des bureaux r�gionaux) ayant particip� au programme de formation interne, % hommes / femmes (personnel �) ayant particip� aux voyages d��tude � l��tranger, % hommes / femmes (personnel �) ayant constat� une am�lioration de leurs conditions de travail, % hommes / femmes (usagers) satisfaits par rapport � la qualit� des services d�concentr�s fournis, Pour pr�sentation et conclusions dans les rapports de suivi et d��valuation.

98. MEF / GTZ 2009 Formation en suivi-�valuation 98 Les th�mes transversaux (2) D�autres th�mes transversaux pertinents: Les r�formes budg�taires et financi�res y compris la modernisation g�n�rale de l�administration publique, La coordination du d�veloppement des capacit�s S&E dans la fonction publique, La promotion du secteur priv� et de la soci�t� civile, La lutte contre le VIH/SIDA, La s�curit� et la paix (approche ��Do no harm��), Le respect des droits de l�homme, La mise en �uvre de la D�claration de Paris (2005).

99. MEF / GTZ 2009 Formation en suivi-�valuation 99 Module 7 bis L��valuation deseffets et des impactsde la formation

100. MEF / GTZ 2009 Formation en suivi-�valuation 100 La notion de l�impact Source: EC, PCM Handbook, March 2001 Source: EC, PCM Handbook, March 2001

101. MEF / GTZ 2009 Formation en suivi-�valuation 101 La notion de l�impact (2) Les approches possibles: Comparaisons avant / apr�s intervention, Comparaisons avec / sans intervention, Sc�nario en absence d�intervention (situation ou analyse contrefactuelle), Opinion raisonnable (panel d�experts). => Quelles approches possibles pour l��valuation des effets et/ou impacts des formations fournies par la GTZ?

102. MEF / GTZ 2009 Formation en suivi-�valuation 102 Les effets / impacts de la formation Voir l��bauche du questionnaire mod�le: Type de personne form�e (acteur), Positionnement institutionnel, S�minaires de formation suivis, Appr�ciation de la qualit� de chaque s�minaire suivi, Perception de l�incidence sur la propre situation, Comment le changement s�est r�alis�, Effets / impacts sur les activit�s professionnelles, Effets / impacts sur l�environnement (contexte), Conclusions et recommandations.

103. MEF / GTZ 2009 Formation en suivi-�valuation 103 Evaluation finale de cette formation Aspects pour revue: Les connaissances acquises, La qualit� de la formation fournie, Les besoins en formation qui restent. => Veuillez remplir les questionnaires s.v.p. (15 minutes)

104. MEF / GTZ 2009 Formation en suivi-�valuation 104 Un dernier mot Merci et au revoir!