Piloto de “Atención a Crisis” Lecciones de la evaluación de impacto

1. Piloto de “Atención a Crisis”Lecciones de la evaluación de impacto Karen Macours (Universidad de Johns Hopkins) Ximena Del Carpio and Renos Vakis (Banco Mundial) Marzo 2008

2. El programa de “Atención a Crisis”Objetivos • Red de seguridad a corto plazo: Reducción de impacto de choques agregados que perjudican la acumulación de inversiones en capital humano y físico y disminución de necesidad de utilizar mecanismos adversos ex – post mediante transferencias de dinero • A largo plazo movilidad ascendente y reducción de pobreza mediante creación de activos: Mejorar la base de activos del hogar y la capacidad de diversificación de ingresos y reducción de pobreza mediante el reforzamiento de mecanismos de manejo contra el riesgo ex-ante que tienen como objetivo mejorar la acumulación de capital humano y físico de manera sostenible.

3. El programa de “Atención a Crisis”Estructura operacional y actores • Equipo técnico de Mifamilia (diseño, implementación, monitoreo y seguimiento) • Coordinación con • Otros Ministerios (Salud, Educación) • Autoridades de Gobiernos Locales (6 Municipalidades) • Sociedad Civil y los Proveedores Locales (capacitación, asistencia técnica, bonos) • Municipio y Comunidades Beneficiarias • Equipo de evaluación (JHU, BM, CIERUNIC)

4. Contexto y antecedentes • Estrategia de política de MIFAMILIA y reto de como integrar temas de: • Protección de inversiones en capital humano y físico • Pobreza extrema y movilidad económica • Gestión de riesgo ex-ante • Descentralización y actores locales (Municipalidad, ONG) • Sostenabilidad • Secia 2004 (riesgos/choques climáticos) • Inquietudes sobre sostenibilidad de programas de transferencia monetaria condicionales en paises de bajo ingresos • Piloto y componente de evaluación • Multidimensional: Investigar varios modelos y sus impactos

5. Identificación de Hogares Selección de municipios afectados por la sequía y con altos niveles de pobreza rural. • 2. Visita al campo para: • probar el instrumento, • identificar áreas de impactos potenciales • investigar aspectos del diseño

6. Identificación de Hogares 3. Selección Aleatoria de Comunidades de Intervención y de Comunidades de Control 4. Levantamiento de Línea de Base en las comunidades seleccionadas

7. Línea de Base • Determinar la elegibilidad al programa • Chequeo del diseño de la muestra de hogares (intervención y control) para determinar si son estadísticamente similares antes de la intervención • Esto permite que la interpretación de las diferencias de indicadores observadas ex-post entre beneficiarios y no beneficiarios sean impactos causados por el programa y nada más. • Ajustes en algunos aspectos del diseño

8. Identificación de Hogares 5. Procesamiento de Datos 6. Listado de Hogares Bajo la Línea de Pobreza 7. Revisión de Listados con líderes comunitarios y Autoridades Municipales 8. Asambleas de Incorporación de Hogares

9. Identificación de Hogares 9. Selección Aleatoria del Grupo de Intervención. Grupo 1. Bono alimentario y de educación Grupo 2. Bono alimentario y de educación + Formación Ocupacional. Grupo 3. Bonos alimentarios y de educación + Habilitación Productiva

10. Beneficios Ofrecidos por el Componente de Atención a CrisisTransferencias en efectivo al Hogar Bono Alimentario Para atender necesidades Básicas del hogar U$ 145 al año Bono Educativo Complemento al ingreso familiar U$90 al año. Mochila Escolar Niños en edad entre 7-13 años U$25 por niño Bono a la Oferta Educativa Incentivo al maestro, compra de materiales didácticos. U$ 8/ alumno al año.

11. Beneficios Ofrecidos por el Componente de Atención a CrisisTransferencias en efectivo al Hogar Bono de Habilitación Para facilitar la inserción a la economía local U$ 200/ hogar Bono de Formación Ocupacional Estipendio para compensar el ingreso del hogar U$15 por mes. 6 meses

12. Beneficios Ofrecidos por el Componente de Atención a Crisis Bono a la Oferta de Salud Vigilancia y promoción del crecimiento y desarrollo U$90 al año. Bono a la Oferta de Formación Ocupacional Capacitación para su habilitación en el mercado laboral local U$140/ por curso Bono de Asistencia Técnica Para la formulación de planes de habilitación productiva y la seleccionar de los cursos de Formación U$ 40 por hogar al año

13. Corresponsabilidad de los Hogares Beneficiarios. EDUCACION 1 2 3 Certificado de matricula, del año escolar de niños entre 7 y 15 años. Asistencia de niños entre 7 y 15 años a la escuela. Garantizando que sus inasistencias son menores de 6 en un bimestre. Entrega a los maestros del bono a la oferta educativa.

14. Corresponsabilidad de los Hogares Beneficiarios. SALUD Inmunización a los grupos metas: Niños de 0-5 años; mujeres en edad fértil y adolescentes 1 2 3 4 Vigilancia y Protección del Crecimiento y Desarrollo mensual de los niños de 0 a 5 años y consejerías mensuales a las titulares en temas relacionados con las prácticas de crianza. Participación de las titulares y adolescentes en talleres de capacitación sobre temas de salud preventiva. Mujeres embarazadas asisten al menos a 4 controles prenatales y 4 consejerías y e1 control puerperal.

15. Corresponsabilidad de los Hogares Beneficiarios. Identificación del Miembro del Hogar que se inscribirá en el curso de Formación y Garantizar su Inscripción y Asistencia Formación Ocupacional Habilitación Productiva Presentación de su plan de habilitación Productiva.

16. Beneficiarios del bono nutrición, educativo y formación ocupacional

17. Beneficiarios del bono productivo en acción

18. Diseño de evaluación de impacto • Selección aleatoria en dos pasos • Comunidades de control y de intervención • En las comunidades de intervención: • Rifa para seleccionar cual de las 3 paquetes de intervenciones • Línea de base en 2005 • Evaluación cualitativa en Junio 2006 • Aspectos operativos • Percepciones sobre impactos esperados e inesperados • Encuesta de seguimiento - Julio-Agosto 2006 • 9 meses después del inicio del programa • Retrasos en la implementación de algunos componentes permitió entender otros tipos de impactos • Evaluación cualitativa en Agosto 2007 • Explorar e identificar limitantes en diseño e implementación • Encuesta final en 2008 (18 meses después del fin del programa) • Entender aspectos sobre componentes retrazados • Entender impactos a mas largo plazo

19. Impactos Positivos en Educación y Aprendizaje

20. Impacto en nutrición de niños de 0-8 años

21. Cambios en patrón de gastos ____ control; _ _ _ intervencion

22. Aumento de interacciones sociales

23. Impactos adicionales a través de mejoramiento de dinámicas comunitarias El impacto de lideres con bono productivo a otros beneficiarios del bono productivo Lideres con el bono productivo tiene impactos adicionales a través de su motivación e interacción a otros beneficiarios en la mayoría de los indicadores

24. Con las palabras de una beneficiaria “Antes del programa, mi pensamiento fue trabajar para comer al día de hoy. Ahora trabajo para salir adelante con el negocio. A través de las experiencias una va aprendiendo, abriendo los sentidos para pensar en el futuro. Platicando es como se entiende, y se aprende.” Beneficiaria del bono productivo

25. Cambios de actitudes y aspiraciones

26. Lecciones sobre Bono Productivo Evaluación cualitativa: Muchos negocios focalizados a la demanda local ~ saturación? ~ diversificación? Evaluación cuantitiva: Aumento de ingresos al corto plazo Largo plazo?

27. Lecciones sobre el efecto en la familia con respecto a sus actividades La visitas al campo mostraron que el programa es un evento familiar y todos participan La labor de niños en familias con el bono productivo incremento en actividades comerciales, pero bajo en actividades agrícolas, y no incremento en total. El programa reduce la labor infantil por lo general, de actividades comerciales y agrícolas

28. Implicaciones para diseño de programas

29. Implicaciones de implementación (evaluación cualitativa) • Capacidad de implementación insuficiente • Entrenamiento, flujos de información, monitoreo de contrapartes insuficientes redujeron la efectividad general del programa ~ se hicieron varios ajustes inmediatos (y un taller para capacitadores) en el transcurso de la implementación basado en la evaluación cualitativa • Coordinación • Los programas descentralizados requieren que las contrapartes locales reciban un alto grado de capacitación, incentivos apropiados, asistencia continua, buenos flujos de información, y monitoreo de las contrapartes locales

30. Implicaciones sobre oferta y demanda A pesar de limitantes importantes del lado de oferta: Aumentos en metas de nutrición, salud, educación, y desarrollo cognitivo de la primera infancia, pueden ser posibles mediante intervenciones enfocadas en la demanda

31. Implicaciones sobre interacción social El tener un gran numero de hogares como beneficiarios en una comunidad puede conllevar a una mejora en capital social y la creación de redes sociales principales => consecuencia para diseño de (otros) programas

32. Implicaciones sobre focalización y transparencia • Percepción de justicia en la focalización influyo la aceptación del programa y por consiguiente su efectividad • Adopción del proceso de lotería por otros programas en la región, a pedido de los mismos beneficiarios

33. Evaluación para quien? y para los beneficiarios mismos! • Para • - El equipo técnico del programa • - Los técnicos de otros programas con objetivos similares • - Los encargados de políticas publicas

34. Preguntas? kmacours@jhu.edu rvakis@worldbank.org