Evaluación de impacto de los efectos de corto plazo de “Empleo en Acción” Marcos Vera-Hernández Institute for Fiscal Stu

1. Evaluación de impacto de los efectos de corto plazo de “Empleo en Acción” Marcos Vera-Hernández Institute for Fiscal Studies Presentación preparada para el “Third Meeting of the Social Policy Monitoring Network” Buenos Aires, Noviembre 2004

2. Los resultados de esta presentación se han obtenido del trabajo de evaluación llevado a cabo por la Unión Temporal: Econometria Consultores-IFS-SEI que ha sido financiado y apoyado por el Departamento Nacional de Planeación de Colombia Esta presentación refleja únicamente mi visión personal Antes de empezar:

3. La naturaleza del programa y sus objetivos Objetivos de evaluación, instrumentos, y métodos Resultados de impacto de corto plazo Focalización ¿Qué queda por hacer en la evaluación? Algunos pensamientos sobre el futuro del programa Esquema de la presentación

4. “Workfare program”. Ofrece trabajo temporal a personas pobres y no empleadas en el sector formal. Participantes trabajarán en proyectos públicos para la reparación de las canalización de agua, red de alcantarillado, carreteras, centros comunitarios y de recreo, centros de deporte, electrificación de vías... Los proyectos son pequeños y deben ser co-financiados por una tercera entidad. El Programa subsidia el costo laboral. Mecanismo de auto selección: El salario es más bajo en el salario mínino. La naturaleza del programa

5. Un importante componente del programa es el proyecto que se desarrolla y contribuirá a mejorar la infrastructura local No hay un componente específico de capacitación No hay componente de inversión condicional en capital humano. La naturaleza del programa

6. Corto plazo: Programa antipobreza que provee empleo temporal Medio plazo: Mejorar las infrastructuras en la comunidad Objectivos principales de Empleo en Acción

7. Mejorar el posicionamiento de los participantes en el mercado laboral (contactos, habilidades) Proveer financiación para pequeños activos que puedan ser útiles en negocios familiares Ofrecer seguro de desempleo auto focalizado en un mundo donde predomina el empleo en el sector informal. Esto puede mejorar la acumulación de capital humano. Otros posibles resultados y mecanismos

8. Hogares pueden verse afectados adversamente por “shocks” (pérdidas de trabajo o cosechas…) Si no hay seguro de desempleo, el RIESGO de “shock” daña la acumulación de capital humano. ¿Por qué? Daño ex-post: Si el jefe del hogar pierde su trabajo, el hogar puede verse obligado a: Reducir el consumo (con riesgo de aumentar la desnutrición), reducir el gasto educativo y aumentar el trabajo infantil Daño ex-ante (Fitzsimons 2004): El hogar puede reducir gasto educativos y en nutrición para ahorra dinero en anticipación de poder afrontar los “shocks” si ocurren ene el futuro. ¿Por qué la carencia de seguro puede dificultar la acumulación de capital humano?

9. Empleo en Acción funciona como un mecanismo de seguro de desempleo: Si alguien pierde su trabajo, entonces el individuo puede trabajar en el proyecto Empleo en Acción hasta que encuentran un trabajo normal Por lo tanto, no hay necesidad de reducir gastos educativos si son afectados por un shock Tampoco hay necesidad de reducir los gastos eductivos como precaución ante posibles shocks en el futuro. ¿Por qué Empleo en Acción puede ayudar en al acumulación de capital humano?

10. Objectivos de la evaluación de impacto • Objetivos de corto plazo: • ¿Se desarrollan los proyectos? • ¿Obtienen los hogares particiapantes más dinero que si no hubiera proyecto? O no porque hay otros miembros del hogar que trabajan menos. • ¿Se utiliza el dinero en aumentar el consumo para así compensar el efecto de los shocks? • ¿Trabajan los particip. más, que si no hubiera programa? O trabajan lo mismo pero están mejor pagados.

11. Objectivos de la evaluación de impacto: • Objetivos de corto plazo: • ¿Se benefician los grupos más vulnerables más? • ¿Está el programa bien focializado? • Es muy importante conocer la cuantificación de los efectos, no solo su dirección.

12. Objectivos de la evaluación de impacto : • Evaluación de impacto de medio plazo: • ¿Se beneficia la comunidad de los proyectos? • ¿Hay algún efecto en el empleo adulto? • ¿Hay algún efecto en la acumulación de activos? • ¿Hay algún efecto en escolarización? • Los datos acaban de llegar. Los estamos analizando.

13. Instrumentos de la Evaluación de impacto • Encuesta de hogares a los solicitantes del programa y a la comunidad

14. Metodología de Evaluación Teóricamente había un sorteo entre los solicitantes para ver quién participaría en los proyectos. Los Beneficiarios serían los que salieron favorecidos en el sorteo, y los No Beneficiarios los que no salieron favorecidos. Pero luego, hubieron Beneficiarios que no quisieron trabajar, en numerosas ocasiones porque habían encontrado un trabajo entre el sorteo y el comienzo del proyecto. Participantes: solicitantes que trabajaron en los proyectos No-Participantes: solicitantes que no trabajaron en los proyectos

15. Evaluation Methodology • Sabemos que en bastantes proyectos no se llevó a cabo el sorteo. • Las comunidades consideraron que el proceso aleatoria de sorteo es JUSTO (Ev. cualitativa)

16. Evaluation Methodology • Combina differencia en differencia con variables instrumentales • Nuestra estrategia se base en solucionar la contrapartida muestral de : Instrumentamos la participación con la resultado teórico del sorteo, y tomamos diferencias en diferencias para limpiar las posibles diferencias pre-existentes entre beneficiarios y no beneficiarios, pues sabemos que el sorteo no se llevó siempre a cabo.

17. Diferencias en línea de base entre beneficiarios y no beneficiarios

18. Variables demográficas

19. Historia Laboral 2001

20. Estado de Salud

21. EDUCACIóN

22. Diferencias entre Beneficiarios y No Beneficiarios son pequeñas en línea de base.

23. Impactos de corto plazo Individuos llevan 2 ó 3 meses en media en el programa

24. Número de horas semanales de trabajo Impactos muy considerables Los grupos más vulnerables se benefician más

25. Ingreso mensual laboral (US $) Los grupos más vulnerables se beneficián más

26. Impacto en la oferta de trabajo de otros miembros del hogar No se evidencian que otros miembros del hogar hayan disminuido su esfuerzo laboral Tampoco se evidencian impactos sobre las transferencias

27. Es Nuestra estrategia robusta? El efecto del programa en los ingresos del 2001 Resultado resulta muy alentador para nuestra estrategia de evaluación

28. Impacto sobre Consumo del hogar

29. A pesar de los problemas de implementación, los grupos de beneficiarios y no beneficiaros son muy parecidos en variables observables. El programa proporciona importantes impactos positivos en oferta laboral, ingreso y consumo del hogar. Los participantes que son mujeres o jóvenes se benefician más que la media No se evidencian desplazamientos de la oferta laboral de otros miembros del hogar, ni de las transferencias. La estrategia de evaluación resulta robusta Conclusiones de la evaluación de impacto de corto plazo

30. Focalización

31. El programa tuvo dos mecanismos de focalización: Solicitantes habían de tener SISBEN 1 ó 2 Salario estaba por debajo del salario mínimo 80% de los hogares de beneficiarios están por debajo de la línea de pobreza. 30% están por debajo de la línea de indigencia. Focalización:

32. Es más probable que un individuo solicitara trabajo si: Tenía alguna educación, pero no había llegado a secundaria Había realizado cursos de capacitación en el pasado Son hombres Son jefes de hogar Quién solicitaba trabajo en “Empleo en Acción”

33. Es más probable que un individuo solicitara trabajo si: Su casa estaba en malas condiciones materiales Habían trabajado menos horas en el 2001 Habían ganado menos dinero en el 2001 El ingreso máximo esperado del hogar es menor Quién solicitaba trabajo en “Empleo en Acción”

34. El mecanismo de auto focalización ha funcionado bien. Esto se ha de tener en cuenta para el diseño de programas pues se conoce que el SISBEN tiene fallos en este aspecto. Los individuos que solicitan trabajo son aquellos con menos oportunidades en el mercado de trabajo, pero son personas muy importantes para sus hogares (head of households) Además, cuentan con cierta educación y nivel de cualifacación Focalización:

35. ¿Hay algún efecto en la acumulación de activos? ¿Mejora el programa las oportunidades en el mercado de trabajo de los solicitantes? ¿ Se benefician las comunidades de los proyectos? Qué es lo próximos pasos en la evaluación de corto plazo.

36. El gobierno ha decidido terminar con el proyecto sin esperar a los resultados de la evaluación Posibles causas (que yo puedo pensar...) Complejidad administrativa: Habían muchos agentes involucarados (ONG, municipios, gobierno central…). Entre otras cosas, esto se manifestó en los retrasos en los pagos. Destacar que no hubo una implementación piloto (como en FA) que ayudará a detectar fallos y cuellos de botellas en los procesos de administrativos. El programa no fue popular en los grandes municipios: Quizás estos municipios requiren proyectos de infrastructura de mayor embergadura Algunas cuestiones sobre el futuro del programa

37. Estas cuestiones subrayan la importancia de probar diferentes versiones del programa antes de su implementación a nivel nacional Por ejemplo, se podría haber probado con proyectos de infrastructuras pequeños, y con otros mucho más grandes Algunas cuestiones sobre el futuro del programa

38. Si se volviera a implementar en el futuro, debería analizarse como mejorar y simplificar la administración del programa. El registro en el programa ha de ser suficientemente flexible para que las personas puedan entrar y salir fácilmente del trabajo del proyecto. El programa posiblemente necesitará diferentes condiciones para funcionar en zonas urbanas y rurales Algunas cuestiones sobre el futuro del programa

39. El programa “Empleo en Acción” tiene impactos positivos muy importantes en el corto plazo sobre la oferta laboral, ingresos y consumo. Los impactos a largo plazo están todavía por ser estudiados, así como los impactos de los proyectos en las comunidades. Su focalización funciona muy bien Las Comunidades perciben el método de sorteo como justo Es importante probar distintas versiones del programa, así como hacer pilotos que nos permitan detectar complejidades administrativas y de implementación. Lecciones aprendidas