Evaluación de Programas y Proyectos

1. Evaluación de Programas y Proyectos Eduardo Aldunate Experto APPGP ILPES, CEPAL Eduardo Aldunate APPGP - ILPES/CEPAL

2. Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL

3. Los “Dedos Presupuestales” Eduardo Aldunate APPGP - ILPES/CEPAL

4. Evaluación y Ciclo de Vida Preinversión Inversión Operación Cronograma Costos Cantidad Calidad Control de proceso Evaluación ex-ante Evaluación de resultados C4 Evaluación Ex-Post Eduardo Aldunate APPGP - ILPES/CEPAL

5. Evaluación¿De qué se trata ? Estimar y comparar los costos y los beneficios de un proyecto para decidir la conveniencia de su ejecución. Eduardo Aldunate APPGP - ILPES/CEPAL

6. ¿Costos y beneficios para quién? Persona o empresa: Evaluación Privada Evaluación financiera Todos los habitantes del país por igual: Evaluación social Evaluación económica Eduardo Aldunate APPGP - ILPES/CEPAL

7. Identificación: ¿cuáles? Determinación de Beneficios y Costos Pasos a seguir: • Cuantificación: ¿cuánto? • Valoración: ¿cuánto vale? Eduardo Aldunate APPGP - ILPES/CEPAL

8. Tipos de evaluación Evaluación Acción Costos Beneficios Ö Ö Identificar Beneficio - Ö Ö Cuantificar Costo Ö Ö Valorar Ö Ö Identificar Costo Ö Ö ? Cuantificar eficiencia Ö X Valorar Eduardo Aldunate APPGP - ILPES/CEPAL

9. Flujo de ingresos y costos • Ordena la información • Facilita detectar errores u omisiones • Simplifica los cálculos Eduardo Aldunate APPGP - ILPES/CEPAL

10. Valor del dinero en el tiempo Efecto de la inflación: Hoy En un año El costo de oportunidad: Eduardo Aldunate APPGP - ILPES/CEPAL

11. Indicadores Beneficio - Costo • VAN: Valor Actual Neto ( o VPN) • TIR: Tasa Interna de Retorno • Otros criterios • Razón Beneficio/Costo • Período de recuperación del capital • TRI Eduardo Aldunate APPGP - ILPES/CEPAL

12. Valor Actual Neto (VAN) Año Costos Neto (1+r) i V.A. Beneficios 0 2500 -2500 1 -2500 1 150 1000 850 1.1 773 2 150 1000 850 1.21 702 3 300 1000 700 1.33 526 4 150 1000 850 1.46 582 5 650 1000 350 1.61 217 Ejemplo con tasa de descuento de 10 % VAN = 300 Eduardo Aldunate APPGP - ILPES/CEPAL

13. Tasa Interna de Retorno (TIR) Eduardo Aldunate APPGP - ILPES/CEPAL

14. Indicadores Costo - Eficiencia • Valor actual de los costos VAC • Costo anual equivalente CAE • VAC / VA Beneficiarios Eduardo Aldunate APPGP - ILPES/CEPAL

15. Evaluación Social • La Evaluación social de proyectos permite determinar el impacto que generará la ejecución de un proyecto sobre la economía nacional (sociedad en su conjunto). • Difiere de la evaluación privada de proyectos ya que: • Los precios de mercadono reflejan el verdadero costo social de producción de esos bienes o servicios (existencia de distorsiones de mercado). • Los privadosno valoran adecuadamente los beneficios de los proyectos. • Los privadosno incorporan en su evaluación los efectos indirectos (positivos o negativos) generados a otros agentes. Eduardo Aldunate APPGP - ILPES/CEPAL

16. Evaluación Social 1. Precios de Mercado “mentirosos” • Los precios de mercado no reflejan los costos reales de producción debido a la existencia de: • Impuestos/Subsidios • Cuotas • Precios Mínimos/Precios Máximos • Monopolios/Monopsonios • Externalidades Eduardo Aldunate APPGP - ILPES/CEPAL

17. Evaluación Social 2. Inadecuada Valoración de Beneficios • No existe un mercado formal del bien • Para determinar su valoración podemos utilizar: • Precios Hedónicos • Valoración contingente • Si no es posible estimar beneficios, evaluamos con criterio de mínimo costo o de costo-eficiencia. • Ev. Privada no incluye excedente del consumidor. Eduardo Aldunate APPGP - ILPES/CEPAL

18. Evaluación Social 3. No incorporación de externalidades • Sobre el medio ambiente • Sobre otros usuarios • En mercados relacionados Eduardo Aldunate APPGP - ILPES/CEPAL

19. Evaluación Social Precios Sociales(P. Sombra – P. de Cuenta) Para no evaluar con “precios mentirosos” es necesario calcular Precios Sociales, es decir, precios que reflejen el verdadero costo de oportunidad de los bienes para la sociedad. • Precios Sociales de los Factores Básicos: • Mano de Obra • Costo Capital • Divisa • Valor Social del Tiempo de Viaje. • Precio Social de los Costos de Operación Vehicular (Combustible, lubricantes, neumáticos, entre otros). Eduardo Aldunate APPGP - ILPES/CEPAL

20. Tasa Social de Descuento * Esta resolución fue derogada el año 97, pero no hay información más actualizada. Eduardo Aldunate APPGP - ILPES/CEPAL

21. Valor social del trabajo Eduardo Aldunate APPGP - ILPES/CEPAL

22. Valor social de la divisa Valor social de la divisa Factor de ajuste = Valor privado de la divisa Eduardo Aldunate APPGP - ILPES/CEPAL

23. Valor social del tiempo • Corresponde al costo de oportunidad del tiempo de los involucrados. • Es particular para cada persona e instante. • Es distinto para trabajo y ocio Eduardo Aldunate APPGP - ILPES/CEPAL

24. Valor social del tiempo Chile Fuente: Precios Sociales para la evaluación de los proyectos, Mideplan, 2004 Eduardo Aldunate APPGP - ILPES/CEPAL

25. Valor social del tiempo Perú Fuente: Anexo SNIP 09: Parámetros de Evaluación, Dirección General de Programación Multianual del Sector Público, Perú. Eduardo Aldunate APPGP - ILPES/CEPAL

26. Impacto de la creación delSNIP de Colombia Eduardo Aldunate APPGP - ILPES/CEPAL

27. Referencias • Breve Glosario de Términos para el Evaluador de Proyectos, Instituto para el Mejoramiento de la Calidad de la Inversión - IMCI (México). • Metodología de evaluación socioeconómica de inversiones nacionales y extranjeras; Ferra, Coloma y Botteon, Claudia. • Errores más frecuentes en la evaluación de políticas y proyectos, Joan Pasqual Rocabert y Guadalupe Souto Nieves. • Harberger, A., "Reflections on Social Project Evaluation" • Harberger, A., "Economic Project Evaluation, Part 1: Some Lessons for the 1990s" Eduardo Aldunate APPGP - ILPES/CEPAL

28. Evaluación y Ciclo de Vida Preinversión Inversión Operación Control de proceso Evaluación ex-ante Evaluación de resultados C4 Evaluación Ex-Post Eduardo Aldunate APPGP - ILPES/CEPAL

29. Eduardo Aldunate APPGP - ILPES/CEPAL

30. ¿Qué es laMatriz de Marco Lógico? • Es un instrumento de gestión de programas y proyectos. • Permite fortalecer la preparación y la ejecución de programas y proyectos. • Resume los principales resultados de la preparación del programa o proyecto. • Sirve de base para la programación de la ejecución. • Facilita el seguimiento y la evaluación de resultados e impactos. Eduardo Aldunate APPGP - ILPES/CEPAL

31. Medios de verificación Objetivos Indicadores Supuestos La Matriz de Marco Lógico Fin Propósito Compo- nentes Activi- dades Eduardo Aldunate APPGP - ILPES/CEPAL

32. Objetivos Fin Propósito Compo- nentes Activi- dades • Esta columna se conoce también como Resumen Narrativo del Proyecto. • Responde a las interrogantes: • ¿Cuál es la finalidad del proyecto?  • ¿Para que se hace el proyecto?  • ¿Qué se va a hacer?  • ¿Cómo se hará?  Eduardo Aldunate APPGP - ILPES/CEPAL

33. ObjetivosLógica vertical del proyecto Fin Propósito Compo- nentes Activi- dades Si el proyecto está bien diseñado se pueden examinar los vínculos causales de abajo hacia arriba: • El Fin es una respuesta al problema más importante en el sector. • Si se logra el Propósito, el proyecto, contribuirá al logro del Fin. • Cada Componente es necesario para lograr el Propósito. • No falta ningún Componente. • Las Actividades son las necesarias para producir cada Componente. Eduardo Aldunate APPGP - ILPES/CEPAL

34. Indicadores Indicadores Fin Propósito Compo- nentes Activi- dades • Proporcionan la base para supervisar y evaluar el proyecto. • Definen metas que nos permiten conocer en que medida se cumplen los objetivos • Establecen una relación entre dos o más variables. • Pueden cubrir aspectos cualitativos o cuantitativos. • Entregan información cuantitativa. • Deben ser acordados con los involucrados Eduardo Aldunate APPGP - ILPES/CEPAL

35. Medios de Verificación¿Cómo obtenemos la evidencia? Medios de verificación Fin Propósito Compo- nentes Activi- dades • Son las fuentes de información que se pueden utilizar para verificar el logro de los objetivos (cálculo de los indicadores). • Pueden incluir: • Estadísticas • Material publicado • Inspección visual • Encuestas • Informes de auditoría • Registros contables Eduardo Aldunate APPGP - ILPES/CEPAL

36. Supuestos¿Cómo podemos manejar los riesgos? Supuestos Fin Propósito Compo- nentes Activi- dades • Cada supuesto corresponde a un riesgo que enfrenta el proyecto y que está más allá del control directo de la gerencia del proyecto. • El supuesto se expresa como una condición que tiene que darse para que se cumpla la relación de causalidad en la jerarquía de objetivos. • Sólo se consideran los riesgos que tengan una probabilidad razonable de ocurrencia. Eduardo Aldunate APPGP - ILPES/CEPAL

37. ¿Qué NO es laMatriz de Marco Lógico? • No es un método de evaluación ex-ante de proyectos o programas • No es un método de programación de la ejecución • No es autosuficiente para una buena gestión de proyectos • No es una panacea • No es un dogma Eduardo Aldunate APPGP - ILPES/CEPAL

38. Referencias • Banco Interamericano de Desarrollo - BID, Oficina de Supervisión y Evaluación - EVO, “Evaluación: Una herramienta de gestión para mejorar el desempeño de los proyectos, Anexo I: La Matriz de Marco Lógico”. Disponible en: http://www.iadb.org/ove/spbook/lamatriz.htm • Helming, Stefan y Göbel, Michael, GTZ, “Planificación de proyectos orientada a objetivos (ZOPP), Orientaciones para la planificación de proyectos y programas nuevos y en curso”. Disponible en español en: http://www.campo-latino.org/paginas/descargas/Documentos/GTZ_ZOPP-sp.pdf . Disponible en portugués en: http://www.zopp.com.br/zopp_p.pdf • Ministerio de Hacienda de Chile, Dirección de Presupuesto, “Metodología para la Elaboración de la Matriz de Marco Lógico”. Disponible en: http://www.dipres.cl/control_gestion/evaluacion_programas_gubernamentales/metodologia.html Eduardo Aldunate APPGP - ILPES/CEPAL

39. Referencias • Organización Panamerica de Salud – OPS, Oficina de Relaciones Externas, “Manual de Monitoreo de la Ejecución de Proyectos”, abril 1999. Disponible en: http://www.paho.org/Spanish/DEC/Manual_de_Monitoreo.pdf • AusAid (Australian Government’s Overseas Aid Programme); AusGUIDE, AusGUIDElines, The logical framework approach. Disponible en: http://www.ausaid.gov.au/ausguide/ausguidelines/ausguidelines-1.pdf • World Bank (2000).The Logical Framework Handbook, World Bank, http://www.worldbank.org/evaluation/logfram/ Nota Informativa del ILPES sobre Evaluación www.ilpes.org => “Publicaciones” Eduardo Aldunate APPGP - ILPES/CEPAL

40. Para terminar ..... FIN F F I N I N F N AL FIN! Eduardo Aldunate APPGP - ILPES/CEPAL

41. Eduardo Aldunate APPGP - ILPES/CEPAL

42. ODA AL AIRE(Pablo Neruda, fragmentos) Andando en un camino encontré al aire, lo salude y le dije con respeto: "Me alegro de que por una vez dejes tu transparencia, así hablaremos" ..… Yo le besé su capa de rey del cielo, me envolví en su bandera de seda celestial y le dije: monarca o camarada, hilo, corola o ave, no sé quién eres, pero una cosa te pido, no te vendas. El agua se vendió y de las cañerías en el desierto he visto terminarse las gotas y el mundo pobre, el pueblo caminar con su sed tambaleando en la arena. ....... No, aire, no te vendas, que no te canalicen, que no te entuben, que no te encajen ni te compriman, que no te hagan tabletas, que no te metan en una botella, cuidado! Eduardo Aldunate APPGP - ILPES/CEPAL