840 likes | 1.38k Views
Curso Internacional: Políticas Presupuestarias y Gestión Pública por Resultados Santiago de Chile, 24 Noviembre al 5 de Diciembre de 2008. Lineamientos metodológicos para la construcción de i ndicadores de d esempeño. Marianela Armijo Consultora
E N D
Curso Internacional: Políticas Presupuestarias y Gestión Pública por Resultados Santiago de Chile, 24 Noviembre al 5 de Diciembre de 2008 Lineamientos metodológicos para la construcción de indicadores de desempeño Marianela Armijo Consultora Área de Políticas Presupuestarias y Gestión Pública ILPES/CEPAL Marianela.armijo@cepal.org
Contenido de la presentación • Indicadores: Qué son para qué se usan? • Conceptos • 10 pasos básicos para la construcción de indicadores • Ejemplos • Requisitos para la construcción de indicadores
INDICADORES DE DESEMPEÑO “Que indica o sirve para indicar” • Del latín “Indicare”, significa: “Mostrar o significar algo, con indicios y señales” Real Academia de la Lengua
INDICADORES DE DESEMPEÑO Cuantificación de los factores críticos de desempeño Es una herramienta que entrega información cuantitativa respecto del logro o resultado en la entrega de productos (bienes o servicios) generados por la institucion, cubriendo aspectos cuantitativos o cualitativos.
El uso de los indicadores es variado… • Mejorar en Información • Fundamentar la discusión de Resultados • Posibilitar la Evaluación • Apoyar el proceso de Formulación de Políticas • Rendir cuentas • Facilitar el establecimiento de Compromisos de Resultado…. • Etc…
1. Establecer las definicionesestratégicas como referente para lamedición 2. Establecer las áreas de desempeño relevantes a medir 3. Formular el indicador para medir el producto u objetivo ydescribir la fórmula de cálculo. 4. Validar los indicadores aplicando criterios técnicos 5 Recopilar los datos 6. Establecer las metas o el valor deseadodel indicador y laperiodicidadde lamedición 7. Señalar la fuente de los datos 8. Establecer supuestos (observaciones) 9. Evaluar: establecer referentes comparativos y establecer juicios 10. Comunicar e Informar el desempeño logrado 10 pasos básicos para construir indicadores
1. Establecer las definiciones estratégicas como referente para la medición del desempeño
RAZON DE SER DE LA ENTIDAD, FIN, PROPOSITO MISION PROPOSITOS FUNDAMENTALES FUTURO, ESCENARIO DESEADO, COMO QUIERE SER LA ENTIDAD VISION OBJETIVOS ESTRATEGICOS QUE ESPERA LOGRAR LA ENTIDAD PARA CUMPLIR SU MISION ANALISIS DEL MEDIO EXTERNO E INTERNO MEDIOS PARA LOGRAR LOS OBJETIVOS ESTRATEGICOS COMO ESTRATEGIAS PLAN ESTRATEGICO METAS o LINEAS DE ACCION PROYECTOS, PROGRAMAS, ACTIVIDADES CONCRECION DE LOS OBJETIVOS ESTRATEGICOS PRESUPUESTO MEDIDAS PARA ESTABLECER EL GRADO DE CUMPLI MIENTO DE LOS OBJETIVOS INDICADORES
2. Establecer las áreas de desempeñorelevantesa medir Productos Resultados Procesoproductivo Proceso 2 Proceso 3 Productos Estratégicos (Bienes y Servicios) Proceso 1 Proceso 4 Insumos Y Recursos
Eficiencia Productos Economía Procesos $ $ Insumos Resultados 2. Establecer las áreas de desempeño relevantes a medir Eficacia Eficacia Costo Efectividad
Identificación de aspectos relevantes de medición o factores críticos:Relevancia para el cumplimiento de la misión y los objetivos estratégicos de la institución
Identificación de aspectos relevantes de medición o factores críticos:Relevancia para el cumplimiento de la misión y los objetivos estratégicos de la institución
Ámbito de los Procesos productivos(Ejemplos para Actividades Centrales) • administración financiera • Capacidad de ejecución de los recursos • recursos humanos • Funcionarios con las competencias requeridas • procesos administrativos • Registro de usuarios – calculo de beneficios
Algunos ejemplos de Indicadores en el ámbito de los Procesos: • Porcentaje de ejecución del presupuesto • Porcentaje de gasto en Recursos Humanos respecto de gasto total • Porcentaje de gasto corriente respecto de gasto total • Porcentaje de productos entregados respecto de lo programado • Porcentaje de compras de insumos efectuadas dentro del tiempo programado • Porcentaje de licitaciones adjudicadas respecto de licitaciones totales • Porcentaje de ingresos propios percibidos respecto de los programados • Porcentaje de subsidios asignados • Porcentaje de familias pobres catastradas • Porcentaje de normas de aviación actualizadas
Ámbito de los Procesos productivos(Ejemplos para Actividades Centrales) Definir aquellos procesos que son claves para la generación de los productos (bienes y/o servicios): • procedimientos de compra • Adquisición de insumos – contratación de empresas proveedoras • Licitaciones • Externalización de servicios - subcontratación de empresas que proveen los productos • procesos tecnológicos • Implementación de servicios por internet - procesos para generar productos
Algunos ejemplos de indicadores en el ámbito de los Productos: • Porcentaje de familias sin vivienda que reciben aportes del Estado • Porcentaje de familias pobres sin vivienda que reciben aporte del Estado respecto del total de familias sin vivienda que reciben aporte del Estado • Tiempo promedio de entrega de subsidios para la vivienda • Metros de cuadrados construidos promedio por vivienda entregada • Porcentaje de condominios construidos que cuentan con infraestructura social (lugares para reuniones, parques, plazas, juegos para niños) • Porcentaje de familias que manifiestan satisfacción con la vivienda entregada
Algunos ejemplos de indicadores en el ámbito de los Productos: • Porcentaje de familias sin vivienda que reciben aportes del Estado • Porcentaje de familias pobres sin vivienda que reciben aporte del Estado respecto del total de familias sin vivienda que reciben aporte del Estado • Tiempo promedio de entrega de subsidios para la vivienda • Metros de cuadrados construidos promedio por vivienda entregada • Porcentaje de condominios construidos que cuentan con infraestructura social (lugares para reuniones, parques, plazas, juegos para niños) • Porcentaje de familias que manifiestan satisfacción con la vivienda entregada
Ámbito de los Productos: Bienes y/o servicios proporcionados directamente a los usuarios: • Definir los requerimientos de los usuarios • Establecer las características de los productos - Características técnicas del producto - Tiempo de entrega a los usuarios - Cobertura (todos los niños y niñas del país) - Focalización (niños y niñas en situación riesgo social) - Grado de satisfacción de los usuarios
Ámbito de los Resultados:Resultados intermedios • Cambio en el comportamiento de los beneficiarios una vez que han recibido los bienes y/o servicios. • La entrega de los bienes y/o servicios a los usuarios supone que conduce a la • Obtención de los resultados finales. • Constituye una aproximación a los resultados finales
Algunos ejemplos de indicadores en el ámbito de Resultados Intermedios: • Porcentaje de subsidios de vivienda efectivamente pagados respecto del total de subsidios otorgados • Porcentaje de trabajadores sin calificación que egresan de un programa de capacitación técnica • Porcentaje de participantes egresados de programa antidrogas con actitud crítica hacia la droga • Porcentaje de empresas que no cumplen la normativa laboral • Porcentaje de familias pobres que inician una actividad empresarial con apoyo del Estado • Porcentaje de alumnos egresados de una carrera técnica
Resultados Finales o Impacto: Resultados a nivel de fin de los bienes y servcios entregados, significan un mejoramiento en las condiciones objetivas de la población objetivo. Complejidad de medir Impacto o Resultado Final: • un programas público contribuye a alcanzar un fin (resultado final) • se complementa con la acción de otros programas ¿Cómo identificar el Impacto de nuestro programa? • el impacto no se produce inmediatamente • es difícil medirlo con un indicador (mejoramiento de la calidad de vida) • por lo general no se dispone de información de punto de partida (línea base)
Algunos ejemplos de indicador de resultado final o impacto • Porcentaje de trabajadores sin calificación egresados de un programa de capacitación que consiguen un empleo permanente • Porcentaje de personas que no reinciden después de participar en programa antidrogas • Tasa de accidentes de aviación • Porcentaje de familias que superan la línea de pobreza • Tasa de variación de delitos • Porcentaje de empresas que cumplen la normativa laboral • Tasa de incidencia de la poliomielitis • Tasa de obesidad infantil • Porcentaje de días sin suministros eléctrico a la población • Tasa de suspensión de servicios de internet • Porcentaje de reclamos solucionados de usuarios de servicios de telefonía
EFICACIA • Indicador de eficacia: nos dice acerca del grado de cumplimiento de los objetivos de la organización, sin referirse al costo de los mismos. Por esta razón podemos obtener indicadores de eficacia, tanto de los productos (outputs), o bien de los resultados ya sea intermedios o finales (impactos-outcomes)
Eficacia • RESULTADO (% RESULTADO LOGRADO EXITOSAMENTE RESPECTO REALIZADO-SOLICITADO) • FOCALIZACION (LOGRADO RESPECTO DEL UNIVERSO) • COBERTURA ( LOGRADO RESPECTO DE LA DEMANDA POSIBLE) • IMPACTO (LOGRADO RESPECTO DEL PROBLEMA QUE SE QUIERE ATACAR)
EFICACIA (Cobertura)/Producto PORCENTAJE DE AREA DE CULTIVO INCLUIDA EN EL PROGRAMA Area Total del Programa de Cultivo Area de cultivo incluida en el Programa Dirección General de Servicios Agrícolas . Uruguay COBERTURA DE CONTROL DE EMISIONES DE LOS BUSES INTERURBANOS Controles de emisiones de Buses Interurbanos Total de Buses Inter urbanos Subsecretaria de Transportes Chile PORCENTAJE DE RECLUSOS INCLUIDOS EN PROGRAMA DE ACTIVIDAD INDUSTRIAL Reclusos con actividad industrial Total de reclusos Dirección Nacional de Cárceles Uruguay
Algunos ejemplos de indicadores de focalización: • Porcentaje de la población en situación de pobreza que recibe subsidio para agua potable • Porcentaje de niños en situación de pobreza que reciben beca estudiantil • Porcentaje de adultos mayores que reciben complemento alimenticio contra la desnutrición • Porcentaje de deportistas que acceden a programas de alto rendimiento • Porcentaje de comunas de alto riesgo cubiertas por programas especiales antidelincuencia Finalmente, también en eficacia se mide al cumplimiento de programas de trabajo: • Porcentaje de capacitaciones de funcionarios en relación a lo programado
EFICIENCIA • Describe la relación entre dos magnitudes: • La producción física de un producto (bien o servicio) y • Los insumos o recursos que se utilizaron para alcanzar ese nivel de producción • Mayor cantidad de servicios dado el mismo nivel de recursos • Alcanzar un determinado nivel de servicios utilizando la menor cantidad de recursos posible
EFICIENCIA • Indicador de eficiencia: costo por unidad de servicio o bienes provistos; o productividad de un input, • son útiles en evaluar los costos relativos y productividad que diferente métodos de servicio entregan o la producción de bienes. • Losindicadores de eficiencia pueden expresarse como “costo por producto”, o “unidades por insumo”, o “costo por resultado”.
Calidad Capacidad de la institución por responder en forma consistente, rápida y directa a las necesidades de los usuarios A) Mediciones Indirectas. Mejorar los atributos y características de los productos. B) Mediciones Directas. Grado de satisfacción de los usuarios.
Oportunidad Accesibilidad Percepción de usuarios Precisión Porcentaje de respuestas a los Parlamentarios dentro de los límites acordados. Número de localidades cubiertas por atenciones móviles Porcentaje de aprobación excelente de los talleres de trabajo, por los participantes Porcentaje de contratos terminados por errores Porcentaje de reportes económicos entregados en tiempo acordado Nº de horas que la Biblioteca está abierta fuera de las horas de trabajo Número de fallas reales/ Fallas programadas Porcentaje de Población con necesidades especiales que son miembros activos de la Biblioteca INDICADORES DE CALIDAD Porcentaje de usuarios satisfechos Nº de usuarios satisfechos/ Total usuarios encuestados Porcentaje de contratos con uno o más errores encontrados por revisiones externas Número de intervenciones con retraso/ Número de intervenciones totales Nº de usuarios Satisfechos con el trato en la atención/ Total usuarios
ECONOMIA • Indicador de economía: mide la capacidad de de la institución para movilizar adecuadamente sus recursos financieros para lograr el cumplimiento de sus objetivos • Porcentaje de recuperación de créditos decorto plazo • Gasto de actividades de apoyo/gastos totales • Aporte de beneficiarios a financiamento/Montototal de inversión del programa • Gasto de funcionamento/gastos ejecutados totales • Recuperación de cobranza/Facturación
ECONOMIA Porcentaje de recuperación de créditos de corto plazo Gasto de actividades de apoyo/gastos totales Aporte de beneficiarios a financiamento/Monto total de inversión del programa Gasto de funcionamento/gastos ejecutados totales Recuperación de cobranza/Facturación
Indicador de Producto Indicador de Resultado Intermedio Indicador de Resultado Final Nº de niños matriculados en Educación preescolar pública/Nº de niños entre 3 a 6 años del país Porcentaje de niños de 3-6 años matriculados que logran terminar la enseñanza preescolar Porcentaje de niños que terminan preescolar logran Manejo de habilidades básicas en lecto escritura Porcentaje de padres y madres satisfechos con la educación impartida EJEMPLOS
Porcentaje de desempleo de población reclusa aprobada (Produtividad de los participantes año t -Productividad participantes año t-1/Produtividad participantes año t-1)*100
UNA VEZ QUE SE TIENE CLARIDAD SOBRE: Cuáles son los aspectos relevantes que deben ser medidos Qué ámbitos se van a medir Cuáles dimensiones Corresponde construir cada uno de los indicadores
RESULTADO FINAL INSUMO PROCESO PRODUCTO RESULTADO INTERMEDIO HAY ALGUNA MEJORIA CAMBIO EN LASCONDICIONES INICIALES CUANTOS RECURSOS OCUPAMOS CUAN BIEN LO HACEMOS QUE HACEMOS COMO CAMBIAN LOS COMPORTAMIENTOS DE LA VARIABLE, USUARIOS Disminución del déficit habitacional Provincia X Porcentaje de usuarios que reciben vivienda declaran satisfacción por calidad y entorno Tasa de variación en la percepción de los ciudadanos respecto de la justicia. Porcentaje de reducción de criminalidad Costos planilla Costos unidades de productos Número de funcionarios Licitaciones realizadas Actividades Costo por vivienda Costo por kilómetro construido Tiempo de respuesta Fallo judicial Tiempo promedio atención Gasto Ejecutado/Gasto programado Número de viviendas Kilómetros construidos Resoluciones Sentencias judiciales Porcentaje de viviendas con estándares de calidad en la normal Porcentaje de viviendas con entorno urbano Mejorado Porcentaje de usuarios de tribunales que acceden a la justicia Porcentaje de tribunales de familia que resuelven casos en menos de 120 días I N D I C A D O R E S T I P O Eficacia (Cobertura, Focalización) Calidad Eficacia Eficiencia Calidad Insumos o Inputs Eficiencia Calidad Economía Eficacia Eficiencia Calidad Sistema de Información Interna Entidades Contraloría Presupuesto (ProductosFinales) Sistema de Información Interna (Productos Intermedios) Presupuesto Sistema de Información interna (Productos intermedios, Productos finales, no relacionados con O.Estratégicos) Presupuesto Sistema de Información Directivo Presupuesto Sistema de Información Directivo ORGANISMO DE PLANIFICACION, HACIENDA U S O I N F.
3. Formular el nombre del indicador, la fórmula de cálculo, unidad de medida El nombre del indicador debe ser lo más ilustrativo posible de lo que se quiere medir, y la fórmula debe permitir informar sobre los parámetros o variables que se están midiendo
Nombre del indicador • Debe ser claro, preciso y autoexplicativo • Que cualquier persona entienda qué se mide con ese indicador • Si se usan siglas o aspectos técnicos, deben definirse en una nota explicativa • “Porcentaje de aeropuertos que cuentan con sistema ILS” • Nota: ILS (Instrument Landing System) es un sistema de aterrizaje instrumental con que cuentan los aviones para aterrizar en condiciones de baja visibilidad.
Sentido de la medición • Indicador ascendente o descendente • Mientras más aeropuertos tenga ILS es mejor, por lo tanto, el indicador es ascendente • En general: • Los indicadores de cobertura, focalización, accesibilidad, cumplimiento de programas de trabajo, etc. son ascendente. • Los indicadores de tiempos promedio de respuesta a los usuarios son descendentes. • Los indicadores que miden capacidad de utilización de recursos son ascendentes • Los indicadores que miden errores son descendentes • Los indicadores que miden satisfacción de usuarios son ascendentes
3. Fórmula de cálculo • La relación matemática de las variables deben entregar como resultado lo que se definió en el nombre • (Total de aeropuertos con sistema ILS / Total de aeropuertos del país) * 100
INSTITUCIÓN:PANI PROGRAMA : Centros Asistencia Técnico Profesional OBJETIVO(S) ESTRATÉGICO(S) INSTITUCIONAL(ES): Nombre, Supuestos Metas : Fórmula Fuentes de Datos