DISEÑO Y APLICACIÓN DE UNA METODOLOGÍA DE EVALUACIÓN EX POST DE INVERSIONES

1. DISEÑO Y APLICACIÓN DE UNA METODOLOGÍA DE EVALUACIÓN EX POST DE INVERSIONES CON RECURSOS PROPIOS E IMPLEMENTACIÓN DE UNA UNIDAD INTERNA

3. PROGRAMA DE APOYO DE LA GESTION SUBNACIONAL EN CHILE AGES Camino hacia la gestión de excelencia del Gobierno Regional Planes de Mejoras Sistema de Mejora Continua a la Gestión de los Gobiernos Regionales Líneas de Acción Lograr satisfacer crecientemente las necesidades de nuestros actores claves, ciudadanía, socios y colaboradores Sistema de Evaluación Expost

4. PLANES DE MEJORA AGES AUTOEVALUACION Planes de Mejoras OPORTUNIDADES DE MEJORA Líneas de Acción GESTION DE INVERSIONES Y DESARROLLO REGIONAL Y TERRITORIAL PLAN DE MEJORAS Sistema de Evaluación Expost

5. LINEA DE ACCION AGES ¿Cómo se efectúa la evaluación ex post de inversiones con recursos propios? NO EXISTE Planes de Mejoras • Uno de los elementos más débiles en el proceso de la inversión es la Preinversión. • Preinversión y por ende la Inversión de forma reactiva y cotidiana. • No existe proceso de retroalimentación de proyectos terminados que nos entregue información para la correcta toma de decisiones. Líneas de Acción Sistema de Evaluación Expost

6. DISEÑO Y APLICACIÓN DE UNA METODOLOGÍA DE EVALUACIÓN EX POST DE INVERSIONES CON RECURSOS PROPIOS E IMPLEMENTACIÓN DE UNA UNIDAD INTERNA AGES Objetivo General: Obtener un procedimiento válido y confiable que permita evaluar en forma ex post las inversiones financiadas por el Fondo Nacional de Desarrollo Regional en la ejecución de estudios, programas y proyectos. Planes de Mejoras Líneas de Acción • Diseñar e implementar una metodología de evaluación ex post del FNDR. • Implementar a través de la metodología desarrollada un sistema informático de evaluación ex post. Sistema de Evaluación Expost

7. DISEÑO Y APLICACIÓN DE UNA METODOLOGÍA DE EVALUACIÓN EX POST DE INVERSIONES CON RECURSOS PROPIOS E IMPLEMENTACIÓN DE UNA UNIDAD INTERNA AGES RESULTADOS ESPERADOS (OE) • Entregar una metodología de evaluación ex post válida y aplicable al GORE que permita obtener información oportuna relacionada con el desarrollo de los estudios, programas y proyectos. • 2. Dejar operativo un software de evaluación ex post, compatible con las bases de datos y la tecnología existente. • 3. Capacitar al personal del GORE en la aplicación de la metodología y el uso, operación y mantención del software. • Validar la aplicación de la metodología de evaluación ex post con los funcionarios del GORE. • 5. Proponer la instalación de la Unidad de evaluación ex post en el GORE. Planes de Mejoras Líneas de Acción Sistema de Evaluación Expost

8. GESTION ADMINISTRATIVA AGES • PRINCIPALES HITOS ADMINISTRATIVOS • -Definición Términos Técnicos de Referencia. (Conceptos, metodología y resultados) • -Búsqueda de la empresa : • Que se dedique a este tipo de desarrollo de sistema en el país. • Que cumplan con las acreditaciones que exige Chilecompra.(Contratación de Servicios Especializados) • Que cumpla con los requisitos técnicos, tecnológicos y financieros. • DIFICULTADES EN EL DESARROLLO • -Comprensión y entendimiento del lenguaje que utiliza la institución • - Vaciar la información de las carpetas de proyectos al sistema informático. • -Estandarización de variables. • -Empatía con el Trabajo y proceso de acompañamiento DACG Implementar y evaluar tecnicamente DIPLAN DAF Licitación y control financiero Planes de Mejoras Líneas de Acción Sistema de Evaluación Expost

9. Sistema de Evaluación Expost AGES • RESULTADOS • Obtención de información válida sobre la inversión ejecutada. • Manejo de Indicadores que nos permita mejorar la preinversión. • Implementación de una Unidad Ex Post en el Gobierno Regional de Los Lagos. DACG DIPLAN DAF Planes de Mejoras Líneas de Acción Sistema de Evaluación Expost

10. Etapas de ejecución

11. Evolución de los Productos y Resultados Resultados finales Mejoras en los beneficiarios manifestadas en el largo plazo y en las cuales el proyecto o programa contribuyó EVALUACIÓN EX POST Resultado intermedio Efectos en los beneficiarios derivados, de la entrega de los bienes y servicios (Objetivo Central) Satisfacción de los Usuarios Producto Bienes y servicios finales que el programa o proyecto se ha propuesto entregar Proceso EJECUCIÓN, SEGUIMIENTO Y CONTROL Actividades destinadas a transformar los insumos en realizaciones Insumos Recursos financieros, humanos y materiales

12. Necesitamos integrar diferentes fuentes de información, en un repositorio único que ofrezca capacidad de análisis y registro de información adicional asociada al proyecto Enfoque de solución Carpeta física del proyecto Analistas y coordinadores “Ficha extendida” de proyecto

13. El sistema utiliza el concepto de “Ficha extendida” que permite un registro detallado de los antecedentes del proyecto, relevantes para el proceso de evaluación expost. Enfoque de solución (2) Antecedentes generales Documentos anexos Productos comprometidos y su valor $ Magnitudes relevantes Variables de línea base Plazos y costos efectivos

14. Capacidades: • Se alimenta mediante cargas masivas • Integra información de fuentes existentes • Agrega antecedentes «importantes» del proyecto • Registra productos y magnitudes relevantes comprometidas • Registra antecedentes técnicos que permiten medir cumplimiento (corto y mediano plazo) • Vínculo de indicadores al proyecto y cálculo automatizado • Reportería flexible para análisis Ficha extendida (resumen)

15. Una vez que el proyecto termina, es posible registrar: • Resultados logrados y sus causales (tipificadas) • Indicadores de variación de costos y plazos • Indicadores de insumos y procesos • Indicadores de resultado y calidad • Variación de valores de línea base Esta información permite alimentar los módulos de reportes y análisis ¿Cómo opera la evaluación expost?

16. NOTA: los valores presentados pueden corresponder a datos de prueba para ejemplificar las facilidades del sistema y sus herramientas Ahora veamos algunas imágenes del sistema…

17. Ficha extendida: Datos generales Organización en secciones Datos generales del proyecto y su etapa Estado del proceso de digitación y evaluación Múltiples fichas para proyectos plurieanuales

18. Ficha extendida: Datos generales Información presupuestaria

19. Ficha extendida: Datos generales Otros antecedentes del proyecto Datos para evaluación de eficacia (cumplimiento de plazos y costos) Información territorial

20. Ficha extendida: Datos generales Instituciones participantes

21. Ficha extendida: Datos generales Productos relevantes comprometidos y su valorización Identificación de beneficiarios

22. ¿Cómo comparar productos y magnitudes entre proyectos diferentes? Proyecto Proyecto CONSERVACION DEL GIMNASIO ESCUELA DELICIO CARDENAS, $100.000.000 CONSTRUCCIÓN GIMNASIO ESCUELA LOS PELLINES, $250.000.000 Productos relevantes Productos relevantes Reposición total de 200 m2 de ventanas de termopanel , $50.000.000 Incluye 400 m2 de ventanales de Termopanel, valor $60.000.000.- Elemento de comparación entre proyectos diferentes Magnitud relevante Magnitud relevante m2 de ventanas de termopanel m2 de ventanas de termopanel Indicador alimenta promedios regionales y provinciales Indicador Indicador 250.000 $ / M2 de ventana de termopanel 150.000 $ / M2 de ventana de termopanel

23. Registro de antecedentes técnicos Magnitudes relevantes identificadas para los productos del proyecto Variables de línea base para análisis expost de resultados intermedios

24. Comparación entre valores comprometidos y valores logrados Énfasis y resultados del modelo propuesto

25. Cuando los indicadores del proyecto se calculan con los datos «iniciales», muestran un valor «esperado», pues aún son supuestos y valores comprometidos. • El valor efectivo del indicador se puede obtener una vez que se realiza la evaluación ex post del proyecto y se ingresan los valores logrados en costo, y cuantificación de cada magnitud. Indicadores esperados v/s efectivos

26. Agrupación de proyectos de características similares Énfasis y resultados del modelo propuesto (2)

27. Identificación y valorización de magnitudes relevantes Cálculo automático y comparación de indicadores para proyectos similares Énfasis y resultados del modelo propuesto (3)

28. Una vez definidas las magnitudes relevantes de un producto, y dado que su «costo» es conocido, es posible calcular el valor unitario de la magnitud. • El valor unitario de una magnitud es lo que permite la comparación entre proyectos similares, ya que independiza la medición de la dimensión o tamaño del proyecto. Indicadores de las magnitudes Relevantes

29. Indicadores de insumos y proceso logrados en el proyecto Énfasis y resultados del modelo propuesto (4) • Permite definición de múltiples indicadores, agrupados en categorías • Es posible elegir qué indicadores vincular al proyecto

30. Evolución de variables de línea base • Indicadores de resultado y calidad Énfasis y resultados del modelo propuesto (5)

31. Se conformó la unidad de evaluación expost dentro del GORE. • Se finalizó la carga “gruesa” de información 2007-2011 (basada en planillas excel con datos principales de proyectos: monto, título, ítem presupuestario, etc.) • Para 2011 se hizo una digitación completa de los proyectos (528 proyectos entre los subítulos 24, 29, 31, 33) • Se está comenzando a incorporar información 2012 • Conformar una biblioteca técnica de antecedentes metodológicos En qué estamos ahora

32. Utilizar exhaustivamente el sistema para todos los proyectos 2012 en adelante. • Incorporar al proceso de evaluación expost los proyectos sectoriales. • Aprovechar los indicadores y reportes del sistema para apoyar y retroalimentar área de preinversión. • Mejorar el control y seguimiento de proyectos a partir de las experiencias y resultados obtenidos (ranking de UT y Ejecutores). Los desafíos que tenemos por delante…

33. Ningún sistema, por sofisticado que sea, podrá lograr por sí solo el resultado esperado. • Este tipo de iniciativas tendrá un efecto positivo en el mediano y largo plazo, en la medida en que hoy hagamos el esfuerzo adicional que se requiere para ponerlas en operación. • Necesitamos la colaboración de los equipos de trabajo y una visión estratégica capaz de alinear los esfuerzos individuales, hacia un logro mayor. Una breve reflexión…

34. Muchas gracias por su atención