You are on page 1of 12

qwertyuiopasdfghjklzxcvbnmqwert

yuiopasdfghjklzxcvbnmqwertyuiop
asdfghjklzxcvbnmqwertyuiopasdfg
EVALUACIN DE IMPACTO DE PROGRAMAS
hjklzxcvbnmqwertyuiopasdfghjklzx
ANALISIS DE 3 CASOS
cvbnmqwertyuiopasdfghjklzxcvbnm
qwertyuiopasdfghjklzxcvbnmqwert
yuiopasdfghjklzxcvbnmqwertyuiop
asdfghjklzxcvbnmqwertyuiopasdfg
hjklzxcvbnmqwertyuiopasdfghjklzx
cvbnmqwertyuiopasdfghjklzxcvbnm
qwertyuiopasdfghjklzxcvbnmqwert
yuiopasdfghjklzxcvbnmqwertyuiop
MalexCaballero

CASO 1: EVALUACIN DE IMPACTO BAJO EL METODO DE REGRESION


DISCONTINUA BURKINA FASO PROGRAMA BRIGHT1.

1. DESCRIPCIN DEL PROGRAMA A EVALUAR.


El programa BRIGHT fue dicenado para mejorar los resultados educativos de los nios en Burkina Faso, el grupo
primario eran ninas, y fue implementado en 132 villas rurales atraves de 10 providencias en el pas donde las tasas
de matricula de las ninas eran bajas. La primera fase del programa opero desde 2005 al 2008 bajo el programa
threshold de Burkina Faso y consista en la construccin de escuelas primarias con 3 aulas implementando una seria
de intervenciones complementarias. Para continuar el xito del programa BRIGHT I el gobierno de Burkina Faso lo
extendi por un monto de 28 millones. Esta segunda fase fue del BRIGHT II fue implementada del 2009 al 2012 y
consista en construir 3 aulas adicionales para los grados de 4 a 6 en las 132 villas seleccionadas y continuar
intervenciones complementarias iniciadas durante los primeros 3 a;ons del programa. Un consorcio

de

organizaciones no gubernamentales lideradas por Plan International e incluyendo Catholic Relief Services (CRS), Tin
Tuan y el foro para la educacin de las mujeres en Africa (FAWE) implementaron todos los componentes del BRIGHT I
y BRIGHT II bajo la supervicion de U.S. Agency for International Development (USAID).
La MCC con el gobierno de Burkina Faso trabajaron una inversin de $480.5 millones en cuatro proyectos : proyecto
desarrollo de la gricultura, proyecto de gobernabilidad para las tierras rurales, proyecto de carreteras y el proyecto
de respuesta de Burkina Faso para mejorar las posibilidades de xito para las ni;as (BRIGHT) el proyecto BRIGHT
incluyo nueve componentes y represento el 5.6% del total asignado.
1. Construccin de escuelas
2. Jardn de infancia
1 El nombre oficial del programa BRIGHT es Burkinabe Response to Improve Girl Chances to Succeed

3.
4.
5.
6.
7.
8.
9.

Construccin de comedores escolares


llevar a casa raciones
Campa;a de movilizacin social
Entrenamiento de la sensibilidad de genero
Programa de mujeres modelo
Asociacin de madres profesoras
Campa;a de alfabetizacion

El programa se desarrollo en dos partes el BRIGHT I y el BRIGHT II, el programa BRIGHT II fue una extencion del
primero programa que se implemento bajo la supervisin de la MCC desde 2005 al 2008. El programa original
consista en la construccin de 3 aulas de primaria ( una para cada grado de 1 a 3) en villas donde la matricula de
ni;as y el rendimiento escolar era bajo. El programa BRIGHT II construyo 3 aulas adicionales ( para los grados de 4
-6) en cada escuelas asi como tambin letrinas, instalaciones de jardn de ni;os y programas complementarios como
los comedores, llevar raciones de comida a los hogares, alfabetizacin, capacitacin y la sensibilidad de genero
( todo lo anterior era extenciones de lo que ya se haba iniciado en el programa BRIGHT I)

2. OBJETIVOS DE LA EVALUACIN.
Comparar la informacin recolectada de las 132 comunidades usadas por el programa BRIGTH II (el Grupo de
Tratamiento) con la informacin de las 161 comunidades que aplicaron pero no fueron seleccionadas para el
programa ( el Grupo de Comparacion). Usando la tcnica estadstica de regresin discontinua.
Realizar un estudio para determinar el merito de la inversin en el programa BRIGHT, realizando un anlisis costo
beneficio y costo efectividad, calculando la tasa econmica de retorno, siendo capaz de responder preguntas
respecto a la sostenibilidad del programa y comparando el programa con intervenciones e inversiones sociales en
otros sectores.

3. PREGUNTAS CLAVES DE LA EVALUACIN.

El propsito de la evaluacin de impacto busca responder las siguientes 4 preguntas claves:

Cual fue el impacto del programa BRIGHT en la matrcula de las escuelas?


Cual fue el impacto del programa en el aprendizaje?
Cual fue el impacto del programa BRIGHT en resultados relacionados con Salud y trabajo infantil?
Fue el impacto diferente entre los nios y las nias?

4. CACTERSTICAS DEL DISEO DE LA EVALUACIN.


La evaluacin busca estimar el impacto del programa comparando los resultados entre los beneficiarios del
programa y lo relativo a que es lo que hubiera pasado en ausencia del mismo. Para estimar el impacto del programa
BRIGHT. Se evaluo como los ni;os seleccionados recibieron el programa BRIGHT en comparacin como les hubiera ido
si no hubieran sido seleccionados. Como no es posible observar un escenario despus previo a la intervencin
(conocida como el contrafactual), se selecciono un grupo de ni;os en una serie de villas que no fueron seleccionadas
para recibir el programa para estimar el contrafactual. Se estimaron las diferencias de los dos grupos utilizando una
tcnica estadstica llamada regresin discontinua .
El ministerio de educacin bsica de Burkina Faso (MEBA) recibe aplicaciones para escuelas BRIGHT de 293 villas
localizadas en 49 departamentos. El personal de MEBA califica cada una de estas villas basados en criterios preestablecidos para identificar comunidades que se podran beneficiar mas de las escuelas. MEBA califica las villas
dentro de cada departamento y selecciona la mitad superior de las aldeas para la implementacin del programa. El
dice;o se basa en que las aldeas con calificaciones justo por debajo de la mitad superior estn en promedio muy
similares a las villas con calificacin suficientemente altas para ingresar al programa. Como resultado los ni;os
viviendo es estas villas son similares en todos los aspectos , excepto por el factor que aquellos viviendo en las villas
selectas son mas propensos a recibir los beneficios del programa BRIGHT, permitiendo atribuir diferencias a los
resultados de los ni;os al programa. Tcnicamente los ni;os en las villas estrechamente colocados en la mitad
inferior, permite estimar las condiciones para el contrafactual para aquellos con la calificacin suficientemente alta
para estar en la mitad superior. El propsito de este modelo es estimar el resultado promedio para las villas

hipotticas que han calificado cerca del punto de corte cuando todava no han sido seleccionadas o no seleccionadas
para el programa.

5. ESPECIFICACIONES DE LA MUESTRA UTILIZADA.


El MEBA selecciono un grupo de villas en las cuales se aplicara el programa BRIGHT, las escuales siguieron un
proceso dice;ado para asegurarse que las escuelas serian asignadas de una manera objetiva de acuerdo a criterios
transparentes y predeterminados. La estrategia trato de llegar a las villas que serian capaces de servir al mayor
numero de ni;os posibles. El proceso de seleccin se dio de la siguiente manera:

De las 45 provincias del pas, 301 departamentos y aproximadamente 8,000 villas, 293 fueron nominadas de

10 provincias y 49 departamentos debido a su bajo nivel de matricula primaria.


Miembros del MEBA administraron una encuesta a cada villa. La encuesta recopilo informacin acerca del
numero de ni;as menores de 12 a;os , el numero de ni;as de educacin primaria en las escuelas, la distancia

entre las villas y las escuelas mas cercanas, y otro tipo de informacin.
El resultado de esta encuesta determino un puntaje para cada villa utilizando una formula fija que asigno
puntos adicionales para el numero de ni;os supceptibles de ser beneficiados desde las villas propuestas y
vecinas. Puntos adicionales se asingnaron tambin a las villas que tenan mas ni;as y por la presencia de villas

cercanas. Asi como tambin el numero de ni;as en las villas solicitantes.


El MEBA acontinuacion clasifica cada villa dentro de los 49 departamentos , la seleccin de la mitad superior
de villas dentro de cada departamento para recibir una escuela BRIGHT. En el caso de un numero impar de
villas, la villa media no recibi una escuela, y los dos departamentos que tenia una sola villa nominada fue
seleccionada esta.

Aunque el algoritmo de seleccin no se sigui a la perfeccion, la implementacin real del programa BRIGHT sigui de
cerca el resultado del algortimo, el mismo selecciono 138 villas para participar en el programa, pero 11 de estas no
participaron. Esto se debio principalmente a problemas de la ubicacin. Por lo tanto solo 127 villas de las 138

elegidas recibieron el programa. Adicional a esto 5 villas que no fueron inicialmente seleccionadas por el algoritmo
fueron incluidas en el programa BRIGHT.

La informacin para la evaluacin del impacto de los siete a;os en los participantes y el grupo de comparacin
fueron recolectados entre marzo y mayo del 2012 por una empresa para la recoleccin de datos de Burkina Faso
(BERD), con la supervicion de Mathematica, de las siguientes fuentes:

Una encuesta de hogares que incluy preguntas sobre las caractersticas y las posesiones de los hogares, los
resultados educativos de los nios (por ejemplo, la inscripcin y asistencia ), la percepcin de la educacin de
los padres , y el grado en que trabajaron los nios en el hogar . Las medidas antropomtricas , tambin se
recogieron y se incluyen altura de los nios , peso y circunferencia de la parte superior del brazo . La tasa de

respuesta para la encuesta de hogares fue del 99,95 por ciento ; la encuesta se complet a 10.507 hogares.
Pruebas de matemticas y francs fueron administrados a todos los nios de 6 a 17 aos que vivan en los
hogares entrevistados en la encuesta de hogares , independientemente de la matrcula escolar . Estas
pruebas fueron administradas inmediatamente despus de la encuesta de hogares . Las preguntas provenan
de los libros de texto de educacin primaria de Burkina Faso para los grados 1 , 2 y 3. Un total de 25.291 nios

tomaron la evaluacin de matemticas y 23,613 nios tomaron la evaluacin Francs


Una encuestas escolar recoge informacin sobre la infraestructura y materiales de construccin, asi como las
caractersticas del personal de las escuelas ubicadas a 10 km de las villas de muestra de los ni;os de la
encuesta de hogares. La encuesta tambin recoge los datos de matricula y asistencia para ni;os que se
inscribieron en la escuela, segn lo informado por los padres en la encuesta de hogares . la tasa de respuesta

de la encuesta escolar fue de 97,43 por ciento, se realizo para 341 escuelas.
Esta evaluacin tambin utiliza datos recogidos por MEBA a principios del 2005 de cada una de las 293 villas.
Esta informacin se utiliza para calcular la puntuacin de eligilibilidad de las cuales a su vez, determinan que
villas fueron elegidas para participar en el programa BRIGTH.

6. DESCRIPCIN DEL INSTRUMENTO PARA RECOPILAR DATOS.


Las instrumentos para la recopilacin que se utilizaron fueron dos, uno para las familias y otro para las escuelas.
Adems de los exmenes que se les realizaron a los estudiantes, las pruebas fueron administradas a 10,507 familias
y 341 centros educativos, el nivel de respuesta de las familias fue de 99.95% y de los centros 97.43%.
La encuesta de hogares incluyo preguntas de las caractersticas del hogar y poseciones, los resultados educativos de
los ni;os ( por ejemplo inscripcin y asistencia), la percepcin de los padres de la educacin, mediciones
antropomtricas de los ni;os y los grados en que los hijos del hogar trabajaron. Mediciones antropomtricas de
altura, peso y la circunferencia del brazo superior
La encuesta integral para los centros escolares se utilizo para recopilar informacin sobre las caractersticas de las
mismas ubicadas a 10 km de los pueblos incluidos en la muestra de las encuestas de hogares. Esta recoge la
informacin de 341 escuelas acerca de la infraestructura fsica de las escuelas, suministros, asi como tambin
caractersticas del personal de la escuela se recopilo informacin de la matricula y asistencia para ni;os que se
inscribieron en la escuela basado en los informes de los padres de la encuesta de hogares. La encuesta escolar se
administro en el mismo perioro de tiempo que la encuesta de hogar permitiendo que los entrevistadores confirmaran
visualmente la asistencia de los ni;os de los hogares. El cuestionario de las escuelas se basa en gran medida en el
estudio de niveles de vida del Banco Mundial, con modificaciones para tratar el contexto especifico educativo en
Burkina Faso y responder a las preguntas de investigacin especificas.

7. ANLISIS DE LOS DATOS DE LA LNEA BASE, INTERMEDIA Y FINAL.

8. RESULTADOS Y CONCLUSIONES OBTENIDAS DE LA EVALUACIN.


Las escuelas BRIGH son mas accesibles , tienen mejores infraestrucura y recursos, mas maestros y han mantenido
sus caractersticas favorables a las ni;as, en los resultados atra ves de los 7 a;os del programa este tuvo impactos
estadsticos significativos sobre la matricula y sobre los estudios pero ningn impacto sobre la salud infantil. El
programa tambin redujo el numero de ni;os que participan en diversas actividades en el hogar. Los impactos de los
7 a;os en la puntuacin de inscripcin y de las pruebas fueron mayor para las ni;as que para los ni;os .

Las escuelas en las villas seleccionadas para el programa BRIGHT son mas accesibles para los ni;os que
aquellas villas que no fueron seleccionadas.

Las villas BRIGHT tiene 14.8 porciento mas de probabilidad de tener una escuela, esta es una reduccin de una
diferencia de 33 que exista en el 2008. La reduccin se debe a la construccin de escuelas en villas no
seleccionadas y suguiere que aunque las villas con escuelas BRIGHT todava tiene un mejor acceso a las escuelas ,
los efectos observados en el anlisis se impulsaron principalmente por las diferencias en las caracterisiticas de las

escuelas en lugar de simplemente por su presencia. Sin embargo las escuelas del programa BRIGHT son mas
accesibles, las familias son 5.5 porciento mas problames de indicar una ruta directa para las escuelas en las villas
seleccionadas, y el tiempo medio de viaje a estas es de 7.36 minutos, en comparacin de los 28.4 miuntos en las
villas no seleccionadas.

Siete a;os despus del inicio del programa las villas seleccionadas para el programa todava tienen mejor
infraestructura y recursos.

Las escuelas en las villas BRIGHT han estado abiertas durante ms tiempo (por casi dos aos en promedio) , son
menos propensos a reportar tener un exceso de solicitudes ( 19,4 puntos porcentuales ) , y ofrecen ms grados que
las escuelas de las villas no seleccionados Las escuelas medias en las villas del programa pasan por sobre el 6
grado , mientras que otras escuelas el promedio es de casi un grado menor. Las villas seleccionadas para el
programa cuentan con un mayor nmero de aulas utilizables (aproximadamente dos ms) , aulas de mejor calidad ,
alojamiento de maestros , programas de raciones secas para todos los nios, y un mejor suministro de escritorios. En
comparacin con los datos del 2008, los estudiantes en las escuelas brillantes no son ms propensos a tener los
libros de texto de lectura , pero son ligeramente ms propensos a tener los libros de texto de matemticas .

Las escuelas en las villas seleccionadas para el programa tienen mas profesores, pero sus calificaciones no
parecen significativamente diferente de las escuelas no seleciconadas.

Las escuelas en aldeas seleccionadas en las villas tienen ms de 2,17 profesores por escuelas y los ratios de
estudiantes y maestros son ms pequeos, ocho estudiantes por maestro, que las escuelas de las aldeas no
seleccionadas . En trminos de calidad , la falta de diferencias en el ndice de calificaciones indica que la calidad
de los maestros en las aldeas seleccionadas es similar a los de otros maestros .
Las escuelas han mantenido sus caractersticas favorables para ni;as que fueron incorparadas como parte de
la implementacin del programa.
Las escuelas BRIGTH son de 35 a 62 puntos porcentuales ms probables de tener amenidad. Estas diferencias
son en general mucho mayor que en el ao 2008 , a pesar del hecho de que las escuelas de los pueblos no
seleccionados tambin mejoraron significativamente . La nica excepcin , sin embargo, fue la sensibilidad de
gnero de formacin , est se encuentra a 17,8 puntos porcentuales en el ao 2012 en comparacin con los 50
puntos porcentuales en 2008. En la medida en el nivel de formacin de las villas no seleccionadas se ha
mantenido ms o menos igual, este efecto pequeo debe posiblemente a que un menor nmero de profesores en
las villas seleccionados de haber recibido la formacin. Esto podra ser debido a los maestros que recibieron la
capacitacin como parte del programa se ha movido a otra escuela . Independientemente de la causa , la
disminucin de la diferencia sugiere la necesidad de que el gobierno contine la formacin de los maestros de las
escuelas BRIGHT.

La inscripcin de los ni;os en las villas seleccionadas fue 15.4 puntos porcentuales arriba de aquellas que no
fueron seleccionadas.

Sigue teniendo un gran efecto en la matrcula siete aos despus del inicio de la operacin , tal como lo haba
hecho cuatro aos antes, en 2008.

Los estudiantes de las villas seleccionadas calificaron 0.29 puntos arriba de la desviacin estndar de los
estudiantes que no fueron seleccionados.

El programa no tuvo impacto en ninguna de las 5 medidas antropomtricas de la salud de los ni;os.

El programa redujo modestamente el numero de ni;os que participan en cada actividad durante la semana de
2.1 a 5.2.

9. RECOMENDACIONES PARA MEJORAR DISEO DEL PROGRAMA.

You might also like