Méthodologie pour l’évaluation des programmes pays

1. Méthodologie pour l’évaluation des programmes pays DOS - Branche Evaluation Alexandra Chambel et Hicham Daoudi Conseillers en Evaluation 18 novembre 2011

2. Le rôle de la Branche Evaluation de DOS Rendre des comptes au Conseil d’Administration de UNFPA et au grand public Appuyer les bureaux de pays dans la reddition de comptes à leurs partenaires nationaux Fournir une assurance-qualité pour les interventions de UNFPA au niveau des pays Promouvoir une culture de l’apprentissage au niveau du siège, aux niveau régional et national

3. Objectifs du travail méthodologique

4. Guide méthodologique pour les évaluations de programmes pays

5. Le contenu du guide

6. Phases du processusd’évaluation

7. Constats basés sur les faits Méthodologied’évaluation des programmes pays

8. Méthodologied’évaluation des programmes paysTechniques destinées à assurer la crédibilité des constats TRIANGULATION Comparaisoncroisée de différentesméthodes de collecte de données Comparaisoncroisée de résultatsobtenus de différentes sources de données (ex : partenaires de mise en oeuvre, bénéficiaires etc.) VALIDATION Processus de révision interne à l’équiped’évaluation Présentation des conclusions préliminaires au bureau de pays

9. EVALUATION DE PROGRAMME PAYS Les critères et dimensions de l’évaluation Composant 2 Analyse du positionnementstratégique Composant 1 Analyse des composantes du programme 1 Pertinence Alignementstratégique Efficience Capacité de réponse Critèresd,évaluation Dimensions d’évaluation Efficacité Valeurajoutée Durabilité

10. Des critères/dimensions d’évaluation aux besoins d’information Système de suivi et d’évaluation Critères de sélection Programme pays Analyse des Composantes du programme Matrice d’évaluation Besoinsd’information Questions d’évaluation Listeinitiale Questions d’évaluation prioritaires Critères et dimensions d’évaluation  Sources de données Cadre / contexte du pays, de UNFPA et du système des NU Analyse du positionnementstratégique Méthodes de collecte de données

11. Questions d’évaluation pour les composantes du programme Question les plus utiles Matrice d’evaluation Questions Prioritaires Liste Initiale     Utilité Faisabilité

12. Critères et dimensions d’évaluationrelatives au positionnementstratégique Alignement avec le plan stratégiquede UNFPA Dimension corporative Interne Alignementstratégique Positionnementstratégique (critères et dimensions d’évaluation) Dimension systémique Alignement avec le cadre de coopérationdu système des NU(UNDAF) Capacité de réponse Au regards des modificationsdes besoins et priorités du pays Externe Valeurajoutée Vis-à-vis des autrespartenaires de développement

13. The components of the results chain / intervention logic

14. Test de la méthodologie CAMEROUN RégionAfrique Pays à faiblerevenu BOLIVIE RégionAmériquelatine et Caraïbes Pays à revenuintermédiaire de la tranche inférieure

15. Périodecouverte: 2008-2011 L’évaluation de programme pays : objectifs Fourniruneappréciationindépendante de la performance du programme pays Analyser le positionnement de UNFPA en vued’apporterunevaleurajoutée aux politiques de développementnationales Formuler des constats et leçons clés et proposer un ensemble de recommandations utiles en vue du prochain cycle de programmation.

16. Reconstruction de la logiqued’intervention et Identification des questions d’évaluation

17. Réponseprogrammatique de UNFPA et des NU aux défis de développement du Cameroun Cycle de programmation

18. Diagrama de Efectos– BOLIVIA UNDAF Outcomes SP Outcomes CPAP Outputs y resultados Area Programática (CPAP) Datos sobre PD, género, SR y VIH/SIDA como base para desarrollar/formular políticas (1.3) Fortalecimiento capacidad nacional/local de elaborar datos demográficos, y uso en planificación/monitoreo de desarrollo. (1.3) Gobernabilidad democrática profundizada con incorporación de nuevas formas de participación social y ejercicio de los derechos humanos, con equidad de género y generacional.(1). Derechos y necesidades multisectoriales de adolescentes y jóvenes incorporados en las políticas/presupuestos públicos. (1.2) Dinámica de población y sus vínculos con género, SR y VIH/SIDA incorporados en políticas públicas (1.1) Temas de empleo juvenil, población, MA, embarazo adolescente, y migración se incorporan en políticas nacionales. (1.4) Derechos y necesidades multisectoriales de jóvenes incorporados en políticas públicas (1.2) Sistema Nacional de Planificación y marco normativo postconstituyente fortalecidos, en las áreas de PD, SR, géneros, VIH/SIDA, adolescentes y jóvenes, e interculturalidad. (1.1) Cuestiones demográficas (migración, urbanización, estructuras de edad, población y medio ambiente) incorporadas en programas de desarrollo (1.4) PD: Estrategias, políticas y presupuestos públicos para el desarrollo y eliminación de la pobreza, incluyen dinámica de población, SR, géneros. Aumento acceso servicios planificación familia (2.3) Incremento de acceso a programas de prevención del embarazo no planificado, cáncer cérvico uterino e ITS/ VIH. (2.2) Aumento demanda/acceso servicios prevención VIH/ITS(2.4) ODM 1 Acceso universal a servicios SR, especialmente para mujeres, adolescentes y jóvenes, dentro del marco SAFCI y SUSALUD. (2.1) Mejora del acceso de jóvenes a servicios SR, VIH y prevención violencia género (2.5) Mujeres, adolescentes, jóvenes ejercen sus DSR.(2.3) ODM 3 Aumento del acceso y uso de servicios de salud materna (2.2) La educación para la sexualidad incluida en educación formal, educación alternativa y formación de maestros.(2.4) SR en políticas públicas de desarrollo con una capacidad de monitoreo fortalecida (2.1) ODM 5 ODM 6 SR: Incremento de la capacidad para ejercer derechos SR, y del uso de servicios de alta calidad Integración de igualdad de géneros y derechos mujeres/adolescentes en políticas nacionales (3.1) Inclusión social de la población excluida y marginada, con ejercicio pleno de sus derechos y el mejoramiento de su calidad de vida.(3) Instituciones nacionales y locales responden sobre los derechos de mujeres, adolescentes y jóvenes, principalmente sus DSR, y les facilitan su ejercicio.(3.1) Fortalecimiento sistemas de protección de derechos humanos y mecanismos protección derechos reproductivos, especialmente ser libre de violencia (3.3) Prevención, atención y manejo de la violencia de género, priorizada en la agenda del Pacto Nacional y de las redes locales contra la violencia.(3.2) Promoción de igualdad de géneros, derechos reproductivos y empoderamiento de las mujeres/adolescentes (3.2) Género: Derechos humanos de adolescentes, mujeres y niñas, incluidos DSR, promovidos en estructuras nacionales y planes de desarrollo, eliminando la violencia de género en todas sus manifestaciones Ampliación de respuestas a la violencia de género, mediante mejora de las políticas y los sistemas de protección (3.4)

19. Effects diagram – CAMEROON SP Outcomes UNDAF Outcomes CPAP Outputs and results Programme Area (CPAP) Population dynamics and interlinkages with gender, RH and HIV/AIDS incorporated in policies (1.1) National counterparts capacities strengthened to integrate population, RH, gender and rights in political strategies, plans and development programs at all levels (2.1) Young people’s rights and multisectoral needs incorporated in policies (1.2) National counterpart capacities in charge of integrated information systems reinforced (2.2) Population issues (migration, urbanization, age structures, population and environment) incorporated in development agendas (1.4) PD: Population issues are taken into account in poverty reduction strategies and in sectoral policies, plans and programmes at all levels Data on PD, gender, RH and HIV/AIDS as basis to develop/monitor policies (1.3) RH integrated in public policies of development with monitoring (2.1) National capacities strengthened for the reduction of maternal mortality and morbidity (1.1) The implementation, M&E of macroeco. policies and prog. promoting dev. and poverty red. (equitable distribution of wealth) is improved at all levels (1). Access and use of maternal health services increased (2.2) Capacities of health services and institutions strengthened for solving RH problems and resources mobilization (1.3) MDG 1 Access and use of voluntary family planning services increased (2.3) Capacities of national health service providers strengthened to promote social mobilization and adoption of conducive behaviour to RH, including prevention of STD-HIV/AIDS (1.2) Demand, access and use of quality HIV/STI prevention services, especially for women, young people and vulnerable groups increased (2.4) MDG 6 MDG 5 ? MDG 3 Access of young people to SRH, HIV and gender violence prevention services (2.5) RH:Increased utilization of high-quality reproductive health services Human rights protection systems and participatory mechanisms strengthened to protect reproductive rights and to be free from violence (3.3) National staff capacity strengthened to mainstream gender in social policy and program formulation, implementation, monitoring and evaluation (3.1) Policies and social prog., including HR and gender equality to promote social well-being, are elaborated, strengthened, implemented, M&E to achieve the MDGs (2) Gender equality, reproductive rights and empowerment of women/young girls promoted (3.2) Social sector Ministries and civil society capacities strengthened to prevent gender-based violence (3.2) Gender equality and women/young girls rights integrated in national policies (3.1) Gender: Social and legal environment to promote gender equality and equity and to reduce sexual and gender-based violence Responses to gender-based violence, expanded through improved policies, protection, legal and prevention systems (3.4)

20. Questions d’évaluation (1/2)

21. Questions d’évaluation (2/2)

22. Analyse du système de suivi et évaluation de UNFPA

23. UNFPA Portfolio in Cameroon

26. Merci!