Proyecto Intersectorial sobre Indicadores de Bienestar

de la Primera Infancia

Estudio de Campo para Pilotear Instrumentos y Metodologas

de Indicadores del Desarrollo, Calidad de Programas y Contextos

Informe 1
Descripcin del Trabajo en Campo

Robert Myers
Jos Luis Durn
Vania Guerreo
Vernica Gonzlez
Cynthia Melndez

Junio 2005

Hacia una Cultura Democrtica, A.C. (ACUDE)

Se autoriza la reproduccin total o parcial de este documento, siempre y cuando
se realice sin fines de lucro y se otorgue crdito a sus autores y a ACUDE, citando
la fuente completa y su direccin electrnica.

TABLA DE CONTENIDOS

Pgina
Presentacin

I. Para tener presente

II. Organizacin del estudio piloto

A. Preparacin de condiciones
B. La Capacitacin
C. Organizacin de la aplicacin del instrumento
y el proceso de acompaamiento
D. Recuperacin de la informacin
III. Resultados

16

A. Localidades y centros
B. Nios y nias
C. Evaluadores
D. Coordinacin
IV. Comentarios sobre el proceso y lecciones aprendidas

18

Anexo 1. Gua para el trabajo en campo

Presentacin
El Proyecto Intersectorial de Indicadores de Bienestar para la Primera Infancia, desarrollado desde
el ao 2001, tiene como finalidad la de construir un sistema de indicadores que permita conocer la
situacin de bienestar de la primera infancia en Mxico y contribuya as a la rendicin de cuentas y
la formulacin de polticas a favor de la niez. El Proyecto ha pasado por diversas fases en su
consolidacin, hasta mediados del 2004, se llevaron a cabo las siguientes: 1) la formacin del grupo
interdisciplinario y la organizacin de tres mesas de trabajo dedicadas a la construccin de las
escalas de evaluacin (sobre el desarrollo de competencias, la cobertura, equidad y calidad de
servicios y los contextos familiar y comunitario); 2) la bsqueda y el anlisis de informacin terica
y prctica sobre el tema; 3) la definicin y redefinicin de las categoras conceptuales e indicadores
necesarios para la elaboracin de las escalas y su sistematizacin en un matriz, y 4) el diseo
preliminar de los instrumentos para obtener la informacin que se requiere para concretar cada
indicador.1
Con los antecedentes de trabajo y los instrumentos en diferentes momentos de construccin, la tarea
importante fue finalizar los instrumentos y llevarlos a prueba en un estudio de campo, necesario
para probar la confiabilidad de las escalas y su efectividad para captar informacin relacionada con
el bienestar de la infancia.
Para ayudar en el financiamiento de estos prximos pasos del Proyecto Intersectorial, UNICEF,
participante en el Proyecto, present en julio de 2004 una propuesta a la Fundacin General Electric
para llevar a cabo un estudio piloto y diseminar los resultados.
Los objetivos de este proyecto fueron:
1. Definir indicadores de bienestar y desarrollo, probarlos en un estudio piloto y afinar los
instrumentos para obtener la informacin necesaria para crear indicadores.
2. Obtener una primera descripcin de la situacin de los nios y nias respecto a su bienestar
y entender mejor el funcionamiento de los contextos (especialmente escuela, familia y
comunidad) que lo influyen.
3. Dar a conocer al pblico y directamente a las autoridades los indicadores y los resultados
del estudio por medio de: difusin en reuniones; participacin de personas claves en
distintas fases del estudio; y publicaciones y su diseminacin.
La solicitud del estudio piloto fue aprobada por General Electric. En los ltimos meses de 2004 y en
enero de 2005, las mesas de trabajo del Proyecto Intersectorial trabajaron intensamente para
1

Se puede encontrar informacin ms detallada sobre los origines del proyecto, su conceptualizacin y los
pasos anteriores en: SEP, SSA, DIF, UNICEF, UNESCO, UNAM. Memoria del Foro sobre indicadores de
bienestar en la primera infancia en Mxico. Mxico, D.F.: UNICEF, 2002 y en: SEP, SSA, DIF. Bienestar
en la Primera Infancia. Un informe de avances del Proyecto Intersectorial sobre Indicadores de Bienestar de la
Primera Infancia en Mxico. 2004.

finalizar los instrumentos, proceso que incluy un pre-pilotaje y los ajustes necesarios para aplicar
los instrumentos en campo.
Este reporte, describe el trabajo en campo del estudio piloto que se llev a cabo en tres estados de la
Repblica durante los meses de Febrero, Marzo y Abril del ao en curso. Las acciones realizadas
cubren una parte de la primera de las tres fases generales del estudio: la prueba en campo de los
instrumentos de evaluacin.
En este documento presentamos, con ojo crtico, el diseo del estudio piloto, la metodologa
utilizada y el proceso de organizacin y recoleccin de datos. Valoramos la disposicin de las
instituciones para apoyar el estudio, las estrategias en la preparacin de condiciones, la dinmica de
capacitacin, la estrategia de acompaamiento y la recuperacin de informacin. Describimos los
alcances del trabajo en campo en trminos cuantitativos y cualitativos y cerramos con algunas
lecciones aprendidas e implicaciones para la organizacin de un estudio a futuro a nivel nacional.
En informes subsecuentes presentaremos un anlisis detallado de cada instrumento, con sugerencias
para ajustes y la forma de aplicarlos. Adems, presentaremos resultados de la aplicacin de las
escalas en diferentes contextos, lo que nos dar una primera aproximacin a la condicin de los
nios y nias y sus contextos de escuela, familia y comunidad.

I. Para tener presente

Objetivos del estudio
El estudio piloto se diseo con la intencin de probar la capacidad de los instrumentos para
describir el estado de bienestar de los nios y nias menores de 6 aos de edad. Forma parte de una
estrategia para ofrecer herramientas probadas y fciles de usar para obtener informacin que sirva
para orientar las polticas en materia de educacin e infancia.
Los objetivos especficos del estudio piloto fueron:

Probar la capacidad que tienen los instrumentos para obtener informacin confiable
sobre el desarrollo de competencias, la calidad de los programas y la influencia del
contexto sobre el bienestar de los nios y nias del nacimiento a los 6 aos.

Determinar que tan factible es aplicar los instrumentos en tiempos cortos y

procedimientos eficientes para obtener informacin pertinente.

Asegurar que la informacin obtenida de los instrumentos permita describir una imagen
del estado de bienestar de la infancia temprana en Mxico que sea til para la rendicin
de cuentas y el ajuste de polticas y programas de la primera infancia.

Este proceso servir como un insumo para un estudio futuro a nivel nacional basado en los
instrumentos validados en campo.
Diseo del estudio
1. Dimensiones de bienestar. La definicin de bienestar proveniente del Proyecto
Intersectorial y el trabajo de las mesas, exigi un diseo que permitira obtener informacin sobre el
desarrollo de competencias de nios y nias menores de 7 aos, la salud y el estado nutricional y los
contextos de escuela, familia y comunidad.
2. La poblacin objetiva.
Los nios y las nias. Se incluy en el estudio nios y nias (en una proporcin igual) de 1
ao, 3 aos y 6 aos, debido a que las escalas de desarrollo de competencias fueron creadas para
estas edades. Todos los nios de 6 aos se ubicaron en centros preescolares ya que ms de 90 por
ciento de nios de esta edad estn matriculados. Por esta razn, el diseo no permite una
comparacin entre nios matriculados y nios no matriculados en la edad de 6 aos. En cambio,
para nios de 3 aos de edad, el diseo permite una comparacin; 50% deben estar matriculados en
centros preescolares y 50% no deben estar matriculados. A pesar de que muy pocos nios de 1 ao
estn actualmente matriculados en programas formales de atencin, se seleccionaron algunos nios
de esta edad en programas de educacin inicial y guarderas para comparar con la gran mayora de
nios que se encuentra atendidos en sus casas.

Las familias. Para obtener informacin sobre las familias, entrevistamos a madres de
familia o cuidadores de los nios seleccionados en las tres categoras de edad.
3. Contextos: localidades y centros de atencin. Para probar la confiabilidad de los
instrumentos y tener un primer acercamiento a una respuesta a la pregunta de Cmo vamos?
respecto al bienestar, fue necesario disear en el estudio la recoleccin de informacin con una
poblacin que viviese en contextos variados, representativa, de una manera, de las condiciones de
vida de la sociedad mexicana. Para aproximarse a esta representatividad,2 se tomaron en cuenta
varias condiciones:
la ubicacin geogrfica: en zonas urbanas (de diferentes tamaos), peri-urbanas y rurales;
en zonas fronteras y centrales; en zonas de la costa y montaa; en reas del Norte, Sur y
Centro del pas.
el nivel socio-econmico de la poblacin. En esta categora se incluyeron localidades y
centros con nios y nias de una procedencia predominantemente de clase baja,
normalmente en reas marginadas, as como localidades y centros con nios de una
procedencia de clase media o alta.
las caractersticas culturales de la poblacin. Especficamente, se seleccionaron algunas
reas con una poblacin indgena y otros clasificados como no-indgenas.
las caractersticas de los ambientes de atencin a los nios y nias. La primera distincin
fue entre nios atendidos en casa (es decir, no matriculados en centros formales de
atencin), y nios y nias matriculados en centros de atencin. Para los nios y nias
matriculados en centros, el diseo contempl diferentes tipos de programas con distintas
instituciones responsables para su operacin. Se integraron centros administrados por:
-

La Secretara de Educacin Pblica: Jardines de Nios, Centros de Desarrollo Infantil,

Centros de Educacin Inicial, Centros semi-escolarizados y Centros Comunitarios de
CONAFE)
DIF: Centros de Asistencia Infantil Comunitario (CAIC), Centros de Asistencia al
Desarrollo Infantil (CADI),
IMSS: Guarderas,
Organizaciones no gubernamentales: Jardines de Nios Particulares, Centros
Comunitarios

Presentamos ms adelante, en Tabla 2 la distribucin de los centros y localidades que result

del proceso de seleccin.
4. El tamao de la muestra. La idea original fue recolectar informacin en cuatro entidades
federativas y 80 localidades. Pero tanto la ubicacin de localidades y centros como el tamao de la
muestra cambio, influidos por el tiempo disponible para la aplicacin del estudio, combinado con el
aumento en el clculo del tiempo necesario para la aplicacin de las escalas; los cambios en este
aspecto estuvieron relacionados con la composicin de los equipos (aadimos un miembro), por la

Para el estudio piloto, optamos por seleccionar localidades y centros de atencin intencionalmente en vez de
buscar una muestra aleatoria. Esto permiti asegurar que los contextos deseados fueran incluidos, aunque la
muestra no fuese grande.

ubicacin de las localidades, las condiciones de trabajo de ciertos estados y por los limites del
presupuesto. La tabla siguiente muestra las variaciones.
Tabla 1. Variaciones en el tamao de las muestras

Clculo inicial
Primer cambio
Muestra final

Entidades
Federativas
4
4
3

Escuelas y
localidades
80
64
48

Nios

Padres

1,440
960
576

1440
960
576

La primera seleccin de estados incluy el Distrito Federal, Oaxaca, Michoacn y

Veracruz; en la segunda se contaba con Distrito Federal, Michoacn, Oaxaca y Sonora; al
final, los estados que participaron fueron Distrito Federal, Oaxaca y Sonora. El cambio de
Veracruz por Michoacn se debi a la necesidad de incluir un estado de alta migracin
hacia el Norte. La eliminacin de Michoacn, a su vez, obedeci a causas de conflictos
sindicales en el sector educativo del estado. Se consider la inclusin de Nayarit, pero el
clculo en los tiempos y costos de investigacin dict un lmite para tres estados.

El nmero de localidades y de centros educativos tambin sufri variacin, originalmente

estaba previsto cubrir 80 localidades en los cuatro estados, se redujo a 64 y finalmente se
cubrieron 48 en tres estados. Dentro del diseo, la escuela es el punto de entrada y de
coordinacin para las acciones de aplicacin de todas las escalas, por ello su fuerte
condicionamiento a las variaciones de los nios y nias.

La meta de nios y nias entrevistados cambi de 1440 planteados inicialmente, a 960 en la

primera variacin, y 576 finalmente. La reduccin obedeci a la disminucin del nmero de
escuelas y un clculo del tiempo real necesario para aplicar las escalas. Con la reduccin en
el nmero de nios y nias, disminuy tambin el nmero de madres/padres en la muestra.

El grupo de evaluadores integrado en cada estado se plante de 20 y se integr realmente de 24,

atendiendo a la necesidad de contar dos evaluadores por instrumento.

II. Organizacin del trabajo en campo

Durante la organizacin del estudio piloto se pusieron en marcha un conjunto de estrategias para
asegurar, hasta donde fue posible, la solidez del proceso, el control en la administracin de las
escalas y la recuperacin de toda la informacin deseada.
Preparacin de condiciones
Construccin de una red de apoyos en cada estado
Para llevar a cabo el estudio piloto, se construy en cada estado seleccionado una red de
apoyos. Para construir la red fue necesario identificar y acordar con los equipos tcnicos de las
instituciones participantes en cada estado las acciones necesarias para preparar el estudio. En cada
estado el proceso fue diferente.
En el Distrito Federal, la coordinacin se llev a cabo con funcionarios de la Direccin de
Educacin Preescolar. Tambin participaron: la Direccin de Educacin Inicial, el DIF
Nacional y del Distrito Federal y las autoridades de Salud en el D.F.3
En el estado de Sonora,* la coordinacin fue con funcionarios del Programa Escuelas de
Calidad (PEC) y el Centro de Investigacin Agropecuaria y Desarrollo (CIAD).
Participaron adems la Direccin de Educacin Inicial, la Direccin de Educacin Indgena,
el DIF del estado, CONAFE y la Secretara de Salud del estado.
En el estado de Oaxaca*, la coordinacin fue con Educacin Preescolar y la Direccin de
Proyectos Educativos de la SEP, con la participacin tambin de la Direccin de Educacin
Inicial, CONAFE, el DIF Nacional y la Secretaria de Salud del Estado.
La red en cada estado, apoy en los procesos de seleccin de los centros y localidades, la bsqueda
y seleccin de evaluadores, la organizacin de los talleres de capacitacin y el acceso a los centros
de atencin, a los nios y sus familias.
Seleccin de centros y localidades. El equipo tcnico y la coordinacin estatal, junto con
las instancias participantes, emprendieron la tarea de seleccionar los centros escolares y las
localidades correspondientes que seran incluidos en el estudio. La seleccin obedeci a los criterios
establecidos en el diseo del estudio y fue hecha aprovechando el conocimiento que tienen las
instituciones participantes de las caractersticas de los centros y localidades.
Seleccin del personal para aplicar los instrumentos. Fue necesario buscar en cada estado
por lo menos 24 evaluadores y organizarlos en 4 equipos de seis personas por equipo, dos para
aplicar la escala de calidad, dos para los instrumentos de competencias y dos ms para el
instrumento de contexto. Las instituciones en cada estado nominaron candidatas para participar con
perfiles diversos. Se trat de ubicar las caractersticas profesionales de los evaluadores que se
presentaron con las cualidades de cada instrumento para obtener mayor afinidad al momento de la
3

Queremos agradecer especialmente la ayuda de Isaura Lpez Prieto, Directora de Educacin Inicial, Ana
Virginia Das Mundo, Subdirectora Tcnica en Educacin Inicial, Diana Gonzlez Almaraz Subdirectora
Tcnica de Educacin Preescolar, Blanca Casas de la Torre, DIF Nacional, Clotilde Jurez, catedrtica de la
UPN en el DF; de Martha Olivia Tllez y ngel Vera en Sonora y Margarita Lpez y Raymundo
en Oaxaca.

aplicacin. Para complementar la oferta de las instituciones, fue necesario contratar evaluadores,
proceso que facilit la Universidad Pedaggica Nacional (UPN) al proponer estudiantes de
psicologa educativa y pedagoga para participar.
Finalmente se incluy entre los evaluadores seleccionadas, personas con los siguientes perfiles:
Educadoras, Supervisoras, Apoyos Tcnico y Pedaggicos y estudiantes universitarios para el
instrumento de Calidad; Psiclogos, Pedagogos, Educadoras y estudiantes para el instrumento de
Competencias; Trabajadoras sociales, socilogos y otros4 para el instrumento de Contexto.
Los perfiles predominantes de los evaluadores variaban por estado:
En el D.F., la composicin de los evaluadores se caracterizo por ser personal relacionado con la
educacin; apoyos tcnicos pedaggicos de educacin preescolar y educacin inicial, y se integran
estudiantes de Psicologa Educativa de la Universidad Pedaggica Nacional. Tambin se integraron
trabajadoras sociales de DIF.
En Sonora, el grupo de evaluadores se integr con educadoras de preescolar, apoyos tcnico
pedaggicos, psiclogos y pedagogos que laboraban en educacin inicial, trabajadoras sociales y
personal tcnico de DIF estatal, tcnicos del sector salud, estudiantes de la UPN y de la Universidad
de Sonora, as como estudiantes del propio centro de investigacin.
En Oaxaca, el personal evaluador estuvo compuesto por tcnicos de la direccin de Proyectos
Educativos, apoyos tcnico pedaggico de preescolar, psiclogas de educacin inicial, tcnicos del
sector salud del estado y estudiantes de la UPN.
Acuerdo de lugares y tiempos para la capacitacin. Una parte central de la investigacin
fue la preparacin de los recursos humanos para aplicar los instrumentos que se probaran. En un
proyecto que dependa en mucho de las facilidades de las instituciones para proporcionar personal,
de los tiempos y actividades de los candidatos para evaluar, fue importante acordar con tiempo
suficiente el lugar y la fecha para iniciar las acciones de capacitacin. Las capacitaciones en cada
estado duraron tres das, organizadas de la siguiente manera:
En el Distrito Federal, las acciones de capacitacin se llevaron a cabo en el Centro para
Maestros Emilio Abreu los das 23, 24 y 25 de Febrero del 2005. El centro, prestado por la
SEP, contaba con espacios adecuados pero faltaban servicios, los cuales se tuvieron que
contratar.
En el estado de Sonora, se cont con el apoyo del Centro de Investigacin Agropecuaria y
Desarrollo los das 9, 10 y 11 de Marzo del 2005. Las condiciones para la capacitacin
fueron adecuadas.
En el estado de Oaxaca, ante la dificultad de conseguir el lugar en las instituciones
participantes, fue necesario rentar especio en la Hostera Alcal para llevar a cabo la
capacitacin los das 11, 12 y 13 de Abril de 2005.

El personal seleccionado como otros, fue heterogneo y se incluyeron Ingenieros, Contadores,

Nutricionistas o Qumicos aplicando los tres instrumentos.

Para contar con las condiciones necesarias para llevar a cabo la capacitacin, se hicieron arreglos a
fin de mantener a los evaluadores dedicados exclusivamente al conocimiento y manejo de los
instrumentos; dos arreglos bsicos se completaron en una u otra sede:
La contratacin o prstamo de equipos de proyeccin y computadoras en los grupos que los
necesitaron. Para el Distrito Federal se contrat un proyector de can y otro lo proporcion en
prstamo la UNICEF; en Oaxaca fue necesario contratar dos proyectores de can para apoyar la
capacitacin; en cambio, en Sonora, el CIAD contaba con el equipo necesario para llevar a cabo las
sesiones de capacitacin.
El segundo elemento de apoyo a la capacitacin fue el servicio de alimentacin, en los tres estados
se contrat el servicio para todos los participantes, con el fin de impedir que el receso de comida
fuese prolongado ms all del horario establecido.
En general estos dos elementos fueron importantes para apoyar la capacitacin, desde las sesiones
de trabajo, hasta los intervalos de receso y comida; fue notoria la actitud positiva que demostraron
los evaluadores durante las sesiones y los recesos para formar sus equipos de trabajo.
Preparar los materiales para la aplicacin de los instrumentos
Para llevar a cabo el estudio piloto, se necesitaron una serie de materiales fundamentales
para aplicar los instrumentos, especficamente para la escala de competencias y para la de contexto.
A cada evaluador se le entreg un kit de material para su labor; en l se incluy una bolsa para los
materiales, una tabla de acrlico de apoyo, un cuaderno para diario de campo, marcadores, lpices y
plumas, el Manual para la aplicacin del instrumento, la Gua de campo, as como los instrumentos
respectivos para su aplicacin. En total se formaron 100 juegos para los evaluadores.
La reproduccin de los instrumentos signific un volumen altsimo, por ejemplo, solamente para el
instrumento de competencias para nios de 3 aos, con 20 pginas, se tuvo que reproducir una
cantidad de 3840 pginas para asegurar la aplicacin a todos los nios y nias seleccionados.
Aunado a ello, fue necesario hacer acopio y formar juegos de los materiales utilizados para trabajar
con los nios y nias, necesarios para cada evaluador; muecas, lpices, bolsas de dulces, pelotas,
espejo, reloj o cuentos son algunos de los materiales que forman parte de los juegos que cada
evaluador llevaba consigo para aplicar el instrumento.
Los instrumentos fueron catalogados de acuerdo a un cdigo que permiti identificar estado,
escuela, instrumento, edad y condicin de prueba.5

Por ejemplo, los cdigos para el Distrito Federal, cubrieron de la letra A a la letra Q; los cdigos para
Sonora cubrieron de la letra AA a la QQ y para Oaxaca, de la letra AAA a la QQQ. En general se utilizaron
dos formas de codificacin para organizar los instrumentos: para el instrumento de calidad, se utiliz un
compuesto de letra y nmero para indicar la escuela y el mbito de evaluacin, por ejemplo, J-C indicaba la
escuela (J) y la aplicacin al centro (C), diferente a J-3 que sealaba la escuela (J) y el grupo de nios y nias
con edad de 3 aos.
La segunda forma de codificacin se utiliz para los instrumentos de Competencias y Contexto,
debido a la relacin entre el nio seleccionado y la entrevista a su familia. El cdigo sealaba los siguientes
elementos, por ejemplo 160-J- 3, significaba el nmero del instrumento (160), la escuela y estado (J del D.F.)
y la edad (3 aos), la otra variacin a esta codificacin se refiri a los nios y nias que no eran atendidos por
un centro escolar, para estos casos se utiliz la siguiente codificacin: 115-0-3, indica el nmero de
instrumento (115), la condicin de no atencin por centro educativo (0) y la edad (1 ao).

10

La capacitacin
Objetivos
Conocer la estructura y organizacin de las escalas para la evaluacin de la calidad de los
programas, el desarrollo de competencias y la influencia de los contextos.
Desarrollar las habilidades para el manejo y la aplicacin de los instrumentos en la
poblacin objetivo
Organizar el desarrollo de las acciones en aplicacin de las escalas en los tiempos y lugares
de cada estado.
Formar una masa crtica en cada estado con la experiencia en el manejo y aplicacin de
instrumentos de evaluacin de bienestar.
Organizacin de los evaluadores.
Para asegurar un conocimiento ms detallado y un mejor manejo de los instrumentos, el
grupo de 24 evaluadores fue dividido en tres grupos de 8 personas. Cada grupo fue dedicado a una
escala en particular: calidad, competencias o contexto. Para elegir los integrantes en cada grupo se
tom en cuenta su perfil profesional, la dependencia de origen y su inters por alguna de las escalas.
La organizacin inicial de los equipos por especialidad para cada escala permiti se una atencin
directa del capacitador a los menores detalles en la comprensin y aplicacin de la evaluacin.
Dinmica de las sesiones.
La dinmica de trabajo en la capacitacin sigui la premisa metodolgica de flujo
permanente entre la teora y la prctica. Los diferentes momentos en los que se llev a cabo,
permiti a los participantes conocer, aplicar y corregir en un proceso de reestructuracin y
perfeccionamiento de las habilidades.
Para cumplir con este fin, se disearon tres momentos importantes: primero, la adquisicin
conceptual de los elementos que permiten la comprensin de la escala y familiarizacin con el
contenido; segundo, la aplicacin de las escalas a los centros, nios y familias, y tercero, la
discusin de dudas y dificultades para poder mejorar la comprensin y la habilidad en la aplicacin.
La capacitacin en los tres estados se realiz en tres das de acuerdo al siguiente plan:
Da 1. Presentacin del proyecto y conocimiento general de los instrumentos.
Durante las primeras horas de este da, el equipo de capacitadores present de forma general, el
Proyecto Intersectorial de Indicadores de Bienestar para proporcionar un contexto desde donde se
comprendiese la importancia del estudio piloto. Posteriormente, cada equipo formado se dedic,
junto con su capacitador, a revisar y conocer el instrumento y las bases que lo sustentan.
Despus se llev a cabo una actividad de simulacin en aula para habilitar a los evaluadores en el
manejo del instrumento. Cada equipo se organiz para aplicarse mutuamente la escala;

11

el equipo de calidad presenci algunas imgenes escogidas de acuerdo a las

subcategoras del instrumento, para simular la aplicacin de la escala
el equipo de competencias asumi un juego de roles nio-adulto para incrementar el
manejo de los indicadores y sus materiales respectivos
el equipo de contexto, por su parte, simul una entrevista con la madre para comprender
la dinmica a seguir en el planteamiento de preguntas y la manera en que se maneja la
entrevista.

La simulacin se lleva a cabo en forma muy dinmica, las preguntas y comentarios se presentaron
en todo momento durante la aplicacin, poda regresarse a plantear nuevamente la pregunta,
manejar el material o consultar el instrumento para comprender mejor el sentido del indicador
Durante el proceso de capacitacin en los tres estados, se acumul en el segundo estado, la
experiencia generada en el primero. En los estados de Sonora y Oaxaca se introdujeron algunos
cambios que fueron detectados como importantes en el Distrito Federal. Por ejemplo, adems de
manejar el contenido de las escalas, fue evidente que era necesario preparar los evaluadores en la
presentacin del proyecto a las autoridades de los centros o de la localidad. En el grupo de contexto
se incorpor casos para ejemplificar la informacin que se obtiene de una familia
Da 2. Prctica: la aplicacin del instrumento en el centro educativo y en la localidad y
reflexin sobre la prctica
Para el segundo da, se llev a cabo la aplicacin de la escala en un centro educativo, con las
directoras y las maestras, con los nios y nias de las edades establecidas y con la madre, el padre o
el cuidador, segn lo estableci cada uno de los instrumentos. Para ello, cada capacitador fue
responsable de acompaar a su grupo en la prctica de campo.
Los centros utilizados para la prctica se eligieron con anticipacin, tratando que fueran de las
mismas instituciones participantes. En los tres estados se tomaron como centro de prctica, los
Jardines de Nios de Preescolar para la prctica de calidad, Centros de Desarrollo Infantil de
Educacin Inicial para la prctica de Competencias y Centros de Atencin al Desarrollo Infantil del
DIF (excepto en Oaxaca) para la prctica de contexto.
En la prctica se busc que los evaluadores vivieran todo el proceso: presentacin del estudio a la
autoridad respectiva y las maestras, eleccin de los nios y nias del estudio y contacto y acuerdo
con padre o madre de familia para la entrevista, segn fuese el caso del instrumento que se aplicara.
Al final de la prctica se comentaron las experiencias de los evaluadores y del capacitador para
hacer las correcciones o ajustes que fuesen pertinentes a la forma de aplicar las escalas, la manera
de familiarizarse con el entrevistado o la captacin de informacin pertinente a cada instrumento.
Da 3. Elaboracin del Plan de Trabajo.
En el tercer da se planific la aplicacin de los instrumentos, para ello se presentaron varias
medidas:
- Organizacin de los equipos con dos evaluadores por instrumento, a los cuales se
determinaban escuelas, cuotas y distribucin de visitas en la aplicacin. A cada equipo de
trabajo se asigno cuatro escuelas que visitar para levantar la informacin, estas cuatro
escuelas fueron distribuidas dos por semana, de tal forma que tuviesen tiempo razonable
para aplicar las escalas. Para cada equipo se especific las das para visitar a cada localidad

12

y centro. Era necesario coordinar la transportacin y discutir tambin la manera de

mantener contacto con los miembros del equipo tcnico responsable para la supervisin del
proceso.
- Una discusin y resea de de la llegada en equipo a la escuela. El base para la discusin
est presentada en el Gua para el Trabajo en Campo (Vea Anexo 2).
- La clarificacin de responsabilidades. Un resumen de las responsabilidades de cada uno
de los seis evaluadores en un equipo est presentado en la Gia de Trabajo.
- Criterios para la seleccin de aulas, nios y hogares.
- Medidas administrativas. Tambin fue necesario discutir el proceso de la entrega de la
informacin y los procedimientos para la comprobacin de gastos, tambin presentado en la
Gua.
Manuales y presentaciones
En apoyo a la capacitacin en cada uno de los tres grupos, el miembro del equipo tcnico
responsable para la capacitacin en su rea especfica desarroll un manual o gua. Adems el
proceso fue apoyado por presentaciones en power point.
La aplicacin de instrumentos y el proceso de acompaamiento
Tiempos de aplicacin
La aplicacin de los instrumentos se organiz de acuerdo a las condiciones de cada estado,
cada aplicacin se plane para llevarla a cabo en un periodo de 10 a 15 das. El clculo de los das
se hizo con base en los tiempos promedios que utilizaron los equipos del Proyecto Intersectorial
cuando probaron en campo sus propios instrumentos.
Las fechas en las que se llev a cabo la aplicacin fueron las siguientes:
Distrito Federal:
Sonora:
Oaxaca:

del 28 de Febrero al 11 de Marzo del 2005

del 14 al 18 de Marzo y del 4 al 8 de Abril del 2005
del 18 al 29 de Abril del 2005

En los tres estados se instal un centro de monitoreo desde el cual se pudiese llevar la coordinacin
de los desplazamientos de los equipos y facilitar las aplicaciones en los centros y comunidades.
La instalacin del centro de monitoreo sirvi como apoyo a los equipos para una mejor aplicacin;
el espectro de asuntos fue diverso, asesorar la aplicacin de los instrumentos, ayudar a la toma de
decisiones respecto a la eleccin de lugares alternos y la edad de nios y nias, bsqueda de
alternativas ante la dificultad para conseguir padres, opciones para llegar a lugares lejanos, medidas
de seguridad en las comunidades de riesgo, coordinacin con las instituciones locales, preparacin
de material faltante, reposicin de material para la siguiente aplicacin, as como la entrega de
viticos y pasajes para evaluadores y al acompaamiento, recopilacin de informacin y liquidacin
y comprobacin de gastos en el estado.

13

Acompaamiento y asesora a los equipos

En todo el proceso de aplicacin, los equipos de evaluadores estuvieron acompaados por
un miembro del equipo coordinador o por los supervisores que las instituciones designaron para este
fin. En todos los casos, el acompaamiento se desplaz con el equipo evaluador a los lugares y
escuelas asignadas para el estudio; su papel principal fue ayudar a resolver dudas, ayudar a aplicar
instrumentos en caso de dificultades, explicar con mayor amplitud el proyecto cuando as se
requiera, ayudar a la toma de decisiones respecto a la aplicacin de los otros instrumentos y
mantener comunicacin permanente con el centro de monitoreo.
De especial ayuda fue la participacin de los supervisores que las instituciones designaron para
acompaar a los equipos, como el DIF Nacional y la Direccin de Educacin Inicial en el D.F.; del
DIF Nacional e IMSS en Sonora, y del DIF Nacional en Oaxaca.
En los estados elegidos, se aplicaron las escalas primero en la ciudad, despus en lugares
conurbanos y posteriormente a los centros ms alejados.
La medida hizo posible que mejoraran varios puntos:
La habilidad de los evaluadores en la aplicacin de la escala. En la medida en que se
ejercit la aplicacin, los evaluadores tienen mayor capacidad para detectar la informacin
sustantiva para el proyecto; se incrementa el manejo de los materiales que se necesitan para
respaldar o aplicar la escala, tal es el caso de los documentos de gestin escolar en el
instrumento de calidad, el uso de muecos o vasos en competencias y la escala de depresin
y la visita al hogar en la escala de contexto.
Otro punto donde se not mejor habilidad fue en el intercambio que se tena entre el
evaluador con los entrevistados; de una aplicacin mecnica y de lectura del indicador, se
pas a un intercambio fluido y contextualizado que permiti una mayor confianza y
consecuentemente una informacin de mayor calidad.
El acompaamiento ayud entre otras cosas, a brindar confianza a los evaluadores para la
presentacin y convencimiento del proyecto de indicadores a directivos escolares y
autoridades locales; sin embargo, en las primeras visitas, fue necesario que el
acompaamiento apoyara la presentacin, puntualizando aquellos aspectos necesarios para
comprender la idea central del proyecto. En este sentido, el alejamiento de los equipos de
los lugares cercanos a la cabecera municipal, tuvo sus momentos de prueba para exponer y
presentar la investigacin a las autoridades escolares y comunitarias que lo demandaron.
Recuperacin de informacin
El proceso de recuperacin de informacin fue pensado desde el inicio del estudio como una
medida paralela al acompaamiento y al monitoreo. Ambas acciones permitan seguir de cerca el
destino de los instrumentos, la forma de aplicacin, las adecuaciones o posibles cambios en las
indicaciones originales. Las medidas que permitieron recuperar la informacin fueron:
Integracin de expediente por cada equipo

14

Cada equipo de evaluadores fue asignado a un grupo de escuelas, las cuales fueron
previamente codificadas. El grupo de instrumentos fueron entregados al coordinador del equipo
quin se encarg de distribuir y concentrar de acuerdo al instrumento que se aplicaba.
Cada evaluador al trmino de su tarea, concentraba nuevamente los instrumentos calificados con la
coordinadora y se informaba al acompaamiento del avance o de los pendientes de la jornada, de
esta forma se detectaba el avance en cada equipo y los pendientes especficos por cumplir.
Programacin de las entregas de escalas aplicadas por semana de trabajo
Debido a la distribucin de cuotas para cada equipo en un tiempo especfico, se pudo contar
con una programacin tentativa de entrega de escalas aplicadas por semana de trabajo; en todos los
equipos del estudio, se indic que la entrega fuera de escalas completas aplicadas a los centros
educativos.
En los tres estados fue posible recuperar informacin desde la primera semana de aplicacin.
Entrega de gastos y justificaciones por evaluador.
Por su parte, la entrega de gastos y su comprobacin fue ms difcil de regularlo; la entrega
de viticos y pasajes para cada evaluador resulto en muchos casos insuficientes y hubo necesidad de
hacer otras entregas cuando se encontraban en campo.
Cada evaluador recibi un cuota para gastos dependiendo de las condiciones de cada estado, en todo
momento se mantuvo la atencin para apoyar los desembolsos y no mermar el proceso de
aplicacin. Mientras se alejaban de la ciudad, creci el volumen de gasto por persona y por estado.
El estado con mayor gasto por evaluador fue Sonora, le sigui Oaxaca y por ltimo el D.F.
La recuperacin de comprobaciones de gastos result con mayores dificultades que la recuperacin
de las escalas calificadas, aunado a las dificultades de comprobacin cuando acudan a sitios
alejados.
Para recuperar la informacin de justificacin de gastos, se fij un da de la semana que coincida
con el fin de la aplicacin para aprovechar la entrega de los instrumentos, junto con la relacin de
gastos. A pesar de ello, en los tres estados quedaron pendientes de comprobacin algunos de los
evaluadores.

15

III. Resultados
Lo planeado para un trabajo en campo no es siempre lo que resulta; de vez en cuando es
necesario hacer cambios sobre la marcha y las condiciones no siempre permiten incluir todos los
lugares o personas contempladas. En este apartado, presentamos informacin que describe los
participantes actuales en el estudio de piloto. En general, los cambios necesarios y las perdidas por
razones fuera de nuestro control fueron mnimos.
Localidades y Centros visitados
En cada uno de las tres entidades federativas (D.F., Oaxaca, Sonora), fue posible recolectar
informacin en 16 localidades, con nios y padres de las localidades y para los centros
correspondientes. La distribucin de los centros no cambio mucho de la muestra pensada al iniciar
el trabajo en campo. La distribucin de los centros que actualmente participaron, por tipo de
programa y estado, est presentada en Tabla 2.
Tabla 2
La Distribucin de localidades y centros que participaron en el estudio
Estado 1
Estado 2
Estado 3 Sonora Total
Instituciones
D.F.
Oaxaca
SEP Preescolar
General, urbana.
Condicin
econmica alta
SEP. Preescolar
general, urbana.
Condicin
econmica baja.
SEP. Preescolar
General Rural
SEP. Preescolar
Rural indgena
SEP Preescolar
urbana indgena
SEP Preescolar
comunitaria
(conafe)
SEP. Preescolar
semi-escolarizado
SEP Cendi
DIF Caic urbano
DIF Caic rural
DIF Cadi
IMSS Guardera
Preescolar privada,
comunitaria urb
Preescolar privada,
urb condicin
econmica alta
Preescolar para
nios de jornaleros,
Sedesol
Total
Urbana
Rural

1
3

2
2

2
3
1

4
3
1
3
4
1

16
16
0

1
1
1

16
5
11

16
9
7

48
30
18

Si se compara esto con la distribucin al inicio (presentada al final de Anexo 1), es evidente que el
nmero es lo mismo y la distribucin urbana/rural no cambia (quede en 30:18). Los cambios que
ocurrieron fueron:

16

En Sonora, se dej un CAIC rural para sustituir un centro preescolar que atiende a nios y
nias de jornaleros.
En Oaxaca, se cambio un CAIC urbana para un CADI, los dos bajo de la responsabilidad de
DIF.
En Oaxaca tambin se cambi un CENDI de SEP para un CENDI de IMSS.

En los centros con ms de un grupo de preescolares, se observ ms de un aula. El nmero

total de aulas observadas y calificadas con la Escala de Calidad fue 80.
Nios y nias
En cada uno de los centros se pretendi aplicar 12 evaluaciones de la escala de competencias a
nios y nias, 6 integrados al sistema escolar y 6 no escolarizados para un total de 576. Sin
embargo, en algunos casos no fue posible de encontrar el nmero deseado de nios escolarizados o
no escolarizados. As, el total de nios y nias evaluados con la escala de competencias fue 502
nios y nias; es decir, 12.6 por ciento menos que lo diseado. La dificultad de ubicar nios y
aplicar las escalas fue ms para nios de 1 y 3 aos de edad que para los de 6 aos.
Table 3
Nmero de Nios que Participaron en el Estudio
Edad
1. Un Ao
3. Tres Aos
6. Seis Aos
Total general

No apli.
29
35
10
74

Aplicadas
163
157
182
502

Total general
192
192
192
576

%
15
18
5
12.6%

En todo momento se busc conservar el equilibrio en el nmero de nias y nios, aunque solo se
haya logrado parcialmente.
Padres y madres
La entrevista a padres y madres sigui un comportamiento similar al grupo de nios y nias, se
aplicaron 495 escalas de contexto; en la mayora se trato de completar la informacin con visitas a
sus domicilios.
La aplicacin de esta escala fue ms accidentada en cuanto al acceso y disponibilidad para
entrevistar al pap o mam; en algunos centros como los del IMSS del D.F., o los centros escolares
particulares de Sonora fue difcil concertar las citas para la entrevista, al parecer la disponibilidad de
tiempo fue el factor predominante.
Evaluadores
En el trabajo de campo se involucr 80 evaluadores, seis de estos sustitutos cuando, por razones
personales, un evaluador que empez tuvo que salir del trabajo durante el periodo de la recoleccin

17

de informacin. 6 En los casos de la sustitucin, fue posible en algunos casos recurrir a una persona
que particip en la capacitacin pero en otros implic una capacitacin rpida y personalizada.
Coordinacin del proyecto
La coordinacin del estudio piloto estuvo a cargo de un equipo integrado por 5 miembros, quienes
llevaron a cabo las diversas actividades que el estudio demandaba. Gracias a la colaboracin del
DIF Nacional, la Direccin de Educacin Inicial y el IMSS, se cont con 4 personas adicionales que
se integraron al equipo coordinador en diferentes momentos, pero especialmente en el
acompaamiento a los equipos de evaluadores cuando se encontraban en campo.

El trabajo con los evaluadores tuvo varias facetas, una de ellas fue la capacitacin. En ella se invirtieron
189 horas, 63 horas por estado. Los 80 evaluadores que participaron en la aplicacin de las escalas
acumularon 2880 horas hombre aproximadamente de trabajo, equivalentes a 120 das aproximadamente.

18

IV. Comentarios sobre el proceso y lecciones aprendidas

En esta seccin, reflexionamos sobre el proceso de organizar y llevar a cabo el trabajo en
campo. Esperamos que las lecciones aprendidas sean aprovechadas para la organizacin de un
estudio nacional.
Determinacin de la muestra
El estudio piloto se diseo en una manera propositiva. Esto permiti, con un presupuesto
limitado incluir una gran diversidad de localidades, centros, nios y familias. Sin embargo, no fue
una muestra nacional y aleatoria. Para obtener la informacin adecuada que permite generalizar los
resultados a todos los centros y nios y nias y contextos del pas, se necesita una muestra nacional
que es representativa y aleatoria.
En este estudio interinstitucional, se incluyeron centros preescolares oficiales bajo la
responsabilidad de diferentes entidades del gobierno (SEP, DIF, IMSS, SEDESOL) y centros
particulares. Pensamos que en un estudio nacional, cualquiera que sea la ubicacin institucional del
estudio, sera importante tomar para base de la muestra representativa todos los centros en
operacin, independiente de la responsabilidad administrativa para operacin de los centros.
El proceso de seleccin de localidades enfatiz diversidad geogrfica, socio-econmica y cultural;
no tom en cuenta cuestiones importantes de acceso y de inseguridad en algunas localidades.
Acceso: las distancias fueron diversas, extensas y en algunos casos hizo difcil el acceso. Para
llegar a ellas requirieron la contratacin de transporte; fue el caso en Sonora de las comunidades de
Costa de Hermosillo, Cajeme y lamos; en Oaxaca, en Ayutla y Cuajimoloyas. Este comentario no
se hace con la idea de que se debe restringir localidades en una muestra a las ms accesibles sino
destacar que es importante constatar las rutas y condiciones para llegar a las comunidades con el fin
de disear mecanismos en la organizacin que permitan una aplicacin eficiente. Tambin es
importante anticipar distancias y accesibilidad en la creacin del presupuesto.
Inseguridad. En los tres estados se present una situacin de inseguridad y riesgo para los equipos
de evaluadores. Este problema fue resuelto en diferentes formas. En un caso en el D.F. el equipo
evaluador requiri del auxilio de la polica auxiliar para salir de la localidad. En Hermosillo,
Sonora, los evaluadores se acompaaron de un grupo de madres de familia para localizar y
entrevistar a los padres seleccionados; en una comunidad de Oaxaca, el equipo evaluador fue
retenido en el centro escolar por autoridades municipales y comunitarias por dudar de su
legitimidad y procedencia, situacin que fue resuelta por verificacin de los oficios.
Estas observaciones nos hace recomendar que

es necesario contar con algunas medidas de seguridad para todo el personal que participe en
el estudio nacional. Seguridad en su repertorio para resolver diferentes situaciones que
enfrenta en campo, seguridad en su desplazamiento a los lugares donde se apliquen las
escalas y seguridad para evitar sitios que pongan en riesgo su integridad.

La preparacin de condiciones para aplicar las escalas, debe incluir entre sus tareas, la
deteccin de zonas de riesgo que estn incluidas en la muestra para tomar las medidas
necesarias.

19

Seleccin de los evaluadores

El involucramiento de las instituciones al nivel estatal y su participacin en la seleccin de
evaluadores tuvo por lo menos dos ventajas. Primero, la misma participacin implic un proceso de
aprendizaje para los participantes. Segundo, nos present con una diversidad de evaluadores, con
diferentes perspectivas y niveles de experiencia en evaluacin, lo cual nos permiti hacer
comparaciones en cuanto al manejo de las escalas. Al mismo tiempo, la hetrogeniedad complic el
proceso de capacitacin y se llev a ms dudas al entrar en el trabajo de campo que esperbamos.
En este sentido, la supervisin result ser un elemento importante para el xito del estudio.
En la seleccin de los evaluadores, es importante contar con personal con experiencia previa en
aplicar instrumentos, esta fue una de las caractersticas que mejor funcionaron en el estudio piloto,
adems, si est dedicado de tiempo completo a esta labor, se obtendrn mejores resultados.
La capacitacin para todos los participantes que vayan a fungir como evaluadores es obligatoria, las
escalas no son un instrumento que se aplica de forma mecnica, sino que exige cierta habilidad para
dialogar y obtener la informacin que se requiere.
En este sentido se puede aprovechar la masa crtica que se ha formado en el estudio piloto en tres
zonas del pas: norte (Sonora), centro (D.F.) y sur (Oaxaca). Una aplicacin a nivel nacional
requiere incrementar el grupo de evaluadores, del equipo de coordinacin y acompaamiento, sin
embargo, el estudio piloto mostr la posibilidad de ser eficientes si se cuenta con los procesos
adecuados y definidos.
En el futuro, sera importante buscar un conjunto de evaluadores con ms experiencia y con
caractersticas ms homogneas.
La capacitacin
El proceso fue creciendo en opciones y en experiencia; por un lado, se ampliaron las alternativas
para lograr una mejor transmisin del sentido y trascendencia del estudio, por el otro, la experiencia
se enriqueci con el planteamiento de situaciones conflictivas y la solucin de casos que pudiese
enfrentar un evaluador.
Los recursos que se integraron ayudaron a lograr sesiones ms dinmicas; casos, situaciones
simuladas, juego de roles, demostraciones, reflexiones y anlisis detallados, fueron algunas medidas
que se capitalizaron de un estado a otro.
Las sesiones prcticas en escenarios reales, contribuy a solidificar el conocimiento y la habilidad
en la aplicacin, adems de permitir una correccin de los aspectos aplicados inadecuadamente y un
manejo conciente de la habilidad.
La sesin de prctica result apropiada aunque insuficiente para lograr su cometido; por la forma en
que se organiz, hubiese resultado importante extender un da ms el proceso para rectificar en la
prctica las aplicaciones inadecuadas.
Esto dicho, pensamos que es necesario fortalecer mucho ms el proceso de capacitacin, tomando
en cuenta lo siguiente:
1. Se necesita ms ejemplos y materiales visuales para ayudar introducir los evaluadores al
tema. Aunque contamos con algunos de estos apoyos y presentamos en power point durante las

20

sesiones, vale incluir videos cortos que pueden servir como base de discusin. Dentro de las
posibilidades del estudio se logro recuperar algunos testimonios visuales que pueden servir para dar
inicio a la formacin del banco de imagen del proyecto de indicadores.
2. El periodo de dos das para conocer las escalas y practicar su aplicacin no fue
suficiente. Parece que los evaluadores necesitan prcticas adicionales para asegurar que su manejo
es adecuado.
3. En la capacitacin no prestamos suficiente atencin a la correspondencia entre
evaluadores de sus observaciones de situaciones. En una futura capacitacin, se debe asegurar que
personas observando la misma situacin logran evaluaciones parecidas (Inter-observer reliability).
La importancia de un respaldo institucional slido
La experiencia en el estudio piloto fue contundente, si se invierte en la preparacin de condiciones
de cada uno de los lugares donde se aplicarn las escalas, como el respaldo de las instituciones para
entrar a las escuelas y para entrevistar a las familias, el proceso resulta ms eficiente; si se descuida
esta medida, se entorpece el levantamiento de informacin y se requiere mayor tiempo y esfuerzo
para cumplir con las cuotas que designe la muestra.
La preparacin de condiciones a nivel nacional, requiere que el diseo de la aplicacin a nivel
nacional, especifique cada uno de los factores que intervienen y desplace personal para acordar y
coordinar con anticipacin las acciones previas al trabajo de los evaluadores. Sera especialmente
importante contar con los oficios necesarios para entrar en las escuelas, trabajar con los nios y
nias y pedir apoyo en contactar a los padres de familia.
La coordinacin con salud, fue difcil de concretar, aun cuando contaran con censos de nios y
nias por regin y por sector como en Oaxaca, la identificacin y seleccin de nios y nias no se
logr completamente.
Prcticamente en los tres estados no comunicaron a los centros escolares seleccionados de las
acciones del estudio, con el fin de facilitar y agilizar el proceso de aplicacin. Lo que pareca un
tramite sencillo de persona a persona, se convirti en la necesidad de contar con oficios de
presentacin que identificarn y brindaran seguridad a los aplicadores, tal fue el caso de algunas
comunidades en Oaxaca y en los centros de riesgo.
Es importante tomar en cuenta la dinmica oficial de las instituciones para los asuntos de
comunicacin con todos los sectores: elaboracin y envi de oficios a todos los eslabones de la
cadena operativa, subdirectores, jefes de departamento, jefes de sector, supervisores, directores de
plantel, educadora; amn de informar a las autoridades de las comunidades donde se encuentra el
centro para ingresar a las escuelas y entrevistar a los padres de familia.
El proceso de encontrar a los nios y nias y sus padres
El aspecto sobresaliente en el seguimiento fue el compromiso por cumplir con las cuotas
sealadas en la capacitacin. Si faltaban grupos escolares, el equipo se desplaz a otro centro
cercano para cubrir el faltante; lo mismo suceda si no se localizaban a los nios y nias de 1 y 3
aos en la comunidad, se trasladaban a otra cercana para cumplir con las cuotas respectivas.

21

La aplicacin de la escala de contexto no estuvo exenta de dificultades para localizar a los padres y
madres de los nios y nias, ms an si se trataba de poblacin que no reciba la atencin escolar;
en estos casos los equipos de evaluadores se empearon en cubrir la aplicacin, incluso en
ocasiones sin medir el riesgo en el que incurran.
En un nmero apreciable, que hasta ahora no podemos precisar, no fue posible entrevistar los padres
de familia en sus casas, hecho que hizo difcil corroborar informacin por medio de observacin
directa de los contextos familiares.
Aplicacin de los instrumentos
En general, los instrumentos resultaron relativamente fciles para aplicar. El instrumento de
calidad result ms fcil de aplicar por dos razones, no requiere de material para obtener la
respuesta y la poblacin objetivo se encuentra cautiva en el centro escolar, no se tiene que conseguir
de otro lado.
Los evaluadores, conforme aplicaron los instrumentos, lograron una mejor ejecucin en el manejo y
la interaccin con el evaluado. Cada equipo aplicaba en ocho ocasiones el mismo instrumento, lo
que formaba experiencia en la administracin de preguntas, manejo de materiales e intercambio de
respuestas con los evaluados.
El tiempo de aplicacin de los instrumentos nos pareci un poco largo, especialmente en el caso del
instrumento de Contexto con las madres y padres de familia quienes, en muchos casos, tienen poco
tiempo para dedicar a proporcionar informacin.
Es evidente que cada uno de los instrumentos va requerir algunas ajustes en sus reactivos porque
algunas presentaron ms dificultades que otros. El anlisis de las dificultades de aplicacin, por
reactivo, se va presentar en informes subsecuentes sobre, respectivamente, calidad, competencias y
contexto. Sin embargo, opinamos que:

Por los tiempos y desplazamientos que se invierten en la aplicacin de las escalas, es

conveniente revisar y ajustar los instrumentos para lograr una aplicacin ms gil; sobre
todo en las escalas de competencias y de contexto.

Esta medida puede complementarse con la identificacin de los indicadores que pueden
reflejar informacin de importancia capital para evaluar las competencias la influencia de
contextos.

Contar con indicadores clave en los instrumentos, favorece la aplicacin y hace dinmico el
tratamiento de la informacin, lo que redunda en la obtencin de resultados ms rpidos y
con menos costo.

Respecto a la ficha de salud, una posible alternativa consiste en recuperar la informacin

sobre el estado de salud de la poblacin infantil e integrarla como un componente de
contexto para la evaluacin del bienestar infantil, sin que se incluya dentro de una de las
escalas.

22

La supervisin
Aunque no fue pensado as desde principio, result que la supervisin del trabajo en campo
por el equipo tcnico y miembros de las organizaciones participantes en el Proyecto Intersectorial
fue muy importante. Hubo muchos imprevistos que los supervisores ayudaron a destrabar para que
el trabajo fluyera. Hemos hecho mencin de dificultades administrativas, de acceso, adems de la
necesidad de reemplazar evaluadores y proporcionar capacitacin sobre la marcha en casos
extremos.
Es importante destacar que este proceso fue posible en un estudio relativamente pequeo limitado a
tres entidades federativas y 48 localidades. En un estudio nacional con, por decir, diez veces el
nmero de localidades, es probable que limitaciones de presupuesto hagan difcil el mismo nivel de
atencin mientras los evaluadores estn en campo. Por esto, nos parece importante fortalecer el
proceso de capacitacin y asegurar con anticipacin la participacin y compromiso de las
instituciones locales.
Por ltima
Esperamos que las observaciones ofrecidas sobre el proceso de montar el trabajo en campo puedan
servir a los encargados en el futuro con la organizacin y realizacin de un estudio nacional

23

Anexo 1. Gua para el trabajo en campo del

Proyecto para Pilotear Instrumentos y Metodologas de Indicadores
De Desarrollo, Calidad de Programas y Contextos
Febrero 2005

Formacin de equipos de trabajo

Para el trabajo en campo se formarn equipos de trabajo de seis personas, de
preferencia, con evaluadores de diferentes instituciones (Educacin Preescolar, Educacin
Inicial, Educacin Indgena, DIF, Universidades, otros) en el mismo equipo. Diversificar
los equipos tiene la ventaja de tener diferentes perspectivas sobre la misma localidad.
El equipo puede estar compuesto de: educadoras, trabajadoras sociales, pedagogas,
psiclogas, tcnicos en salud o pasantes de licenciaturas afines a la educacin.
Dos personas del equipo aplican el instrumento del desarrollo de competencias
(hacemos referencia en el futuro al instrumento de competencias)
Dos personas del equipo aplican el instrumento de la calidad de programas
preescolares (hacemos referencia al instrumento de calidad)
Dos personas del equipo aplican el instrumento de contexto.
Cada equipo debe tener una coordinadora responsable para la presentacin del
equipo. Dentro de cada equipo se asignar a una persona para que funja como coordinadora
adems de realizar la evaluacin que le corresponda.
Seleccin de localidades para el pilotaje
Se han preseleccionado 16 localidades en tres entidades federativas, lo que suma un
total de 48 localidades. Se las seleccionaron segn el esquema presentado en anexo 1. La
seleccin fue intencional para asegurar la comparacin y diversidad entre las localidades en
cuanto a las siguientes caractersticas: urbana/rural, nivel socio-econmico, indgena/noindgena y el tipo de atencin educativa preescolar ofrecida a los nios y nias. Es decir,
no debe ser necesario para un equipo de evaluacin seleccionar una localidad, pero
Si por algn imprevisto no es posible trabajar en una de las localidades escogidas
con anticipacin (por ejemplo, se encuentra que el centro de atencin no esta funcionando
por problemas locales) el equipo tiene dos opciones. La primera y mejor es postergar la
fecha de visita y cambiar su agenda, y visitar otro centro ya seleccionado. Esta opcin ser
la prioritaria siempre y cuando se pueda visitar ese centro dentro de los das dedicados al
trabajo de campo en cada entidad. La segunda opcin es escoger otra localidad con las
mismas caractersticas para el reemplazo. Esperamos que esto no sea necesario.

24

Lo que el equipo debe llevar al campo

Informacin: nombre del centro de atencin donde se van a observar y de la persona

responsable. Direcciones sobre como llegar.
Un oficio para ingresar en los centros educativos y de salud.
Los instrumentos (de contexto, competencias y calidad) y sus manuales.
Un diario de campo para cada persona donde escribir impresiones, cuestiones,
pendientes, dudas, acertados.
Un lpiz o pluma para registrar la informacin, saca puntas, goma
Tabla para sujetar los instrumentos
Copia de esta gua y la hoja adjunta para el registro de gastos comprobados.
La llegada al centro de atencin (Jardn de nios, CENDI, CAIC, etc.)

1. Se debe llegar por lo menos una media hora antes de que empieza el horario de
atencin a los nios y las nias en el centro. Como es obvio del punto que sigue,
esto es necesario para presentarse y organizar la visita antes de la llegada de los
ni@s.
2. La coordinadora7 del equipo debe presentarse con el responsable del centro. La
presentacin debe incluir:
- la presentacin del oficio
- una explicacin breve del propsito de la visita (con nfasis en el hecho de
que la visita es de observar con fines de investigacin y no para calificar el
centro. Pedir su ayuda en el estudio. Mencionar que en cuando se tengan
los resultados del estudio se enviarn resultados del anlisis a cada centro
que particip.)
- una presentacin del equipo
- descripcin sobre que se quiere hacer durante la visita de dos das
entrevistar con el responsable
observar aulas
aplicar un instrumento a nios seleccionados de las aulas que se
van a observar y ver sus expedientes
entrevistar a las madres de familia o la persona responsable de
cuidar a los nios seleccionados
La distribucin de tareas
Para llevar a cabo su responsabilidad como evaluador, algunos miembros del equipo
van a estar todo el tiempo en el centro, hablando con la directora y educadoras y
observando el centro en operacin, aplicando la escala de competencias a los nios o
entrevistando padres de familia. Otros miembros del equipo van a tener que salir del centro
y buscar nios y familias en otros lugares porque no todos los nios en la muestra van a
7

En la mayora de los casos la evaluadora con la responsabilidad de observar el centro y entrevistar con la
Directora sera la persona ms indicada para actuar como la coordinadora del equipo.

25

estar matriculados en un centro, sobre todo los comprendidos en edades de 1 y 3 aos. La

tabla 1 presenta un resumen de las responsabilidades de los seis evaluadores.
- Evaluadores de Calidad. Las dos personas designadas para aplicar el instrumento de
calidad permanecen en el centro para empezar el proceso de evaluacin y visitarn todos
los centros escolares hasta completar la muestra designada.
- Evaluadores de Competencias. Por lo menos una de las dos personas con
responsabilidad para aplicar el instrumento de competencias tambin debe quedarse en el
centro escolar para ayudar seleccionar los nios de 6 aos y 3 aos con quienes se van a
hacer la evaluacin. En el caso de un CENDI u otro centro que tiene nios de 1 ao a 1 ao
y media de edad, la segunda evaluadora de competencias puede quedarse tambin para
trabajar con nios de esta edad en el centro.
Si no es un CENDI, la segunda evaluadora buscara, con ayuda del personal del centro
de salud, 6 nios y nias de 1 (4 nios) y 3 (2 nios) aos de edad que no asisten al
preescolar mientras la primera evaluadora queda en el centro para aplicar la escala con los
nios que asisten al centro.
-

Evaluadores del Contexto

Primer escenario: los padres de nios de 3 y 6 aos pueden ser identificados al

momento de entregar sus nios a la escuela. En este caso se puede pedir permiso de hacer
la entrevista en el momento de la entrega de los nios, o, se puede aprovechar su presencia
para concertar una cita para la entrevista posteriormente con una visita a su casa.
Segundo escenario: no es posible identificarlos en el momento de la entrega. En este
caso ser necesario pedir ayuda de la Directora (responsable) para llamar a los padres, o,
obtener su direccin para buscarles directamente en sus casas.
Para el primer y el segundo escenarios es necesario que una evaluadora responsable de la
evaluacin del contexto permanezca en el centro escolar mientras el otro evaluador sale a la
comunidad, junto con un evaluador de competencias, a localizar nios de 1 y 3 aos de
edad. Despus de la introduccin en el centro preescolar, estas dos personas saldran a la
comunidad, rumbo al centro de salud para seleccionar los 6 nios que no asisten a un centro
y empezar con las aplicaciones de las escalas de competencias y de contexto con estos
nios.
Tercer escenario: en el caso de un CENDI u otro centro que matricula nios de un
ao de edad, es posible que las dos personas encargados de las entrevistas del contexto
quedaran en el centro, buscando entrevistas tambin a los padres de nios de 1 aos de edad
que estn matriculados en el centro. Aun en este escenario, sera necesario salir en algn
momento para identificar dos nios de 3 aos de edad que no asisten al centro.

26

La seleccin de grupos (aulas) en el centro preescolar

1. Si el centro tiene solamente uno o dos grupos, no es necesario seleccionar aulas.
Se observa los grupos que hay y se hace la seleccin de nios de estos grupos.
2. En los dems preescolares, con varios grupos y aulas, se debe seleccionar,
Un grupo (aula) del 3 grado
Un grupo (aula) del 1 grado
Si hay ms de un grupo por cado grado, seleccione al azar una del 3 grado y una
del 1 grado.
3. Una excepcin sera el caso en que una aula es integrado y los dems no son
integrados en cualquier caso se debe seleccionar el aula integrado. Un aula
integrado tiene incluida un nio o nia con necesidades especiales o
discapacidad.
La seleccin de ni@s:
En cada localidad se debe seleccionar 12 ni@s, algun@s identificados para
observacin en el centro y otr@s de la comunidad que no asisten al centro. Se hace la
seleccin en la siguiente manera:
- 4 ni@s entre 6 aos y 6 aos y medio. Estos nios estarn seleccionados de
listas de matrcula en los preescolares. Deben ser nios matriculados en el aula del
3 grado seleccionado para observacin.
Puede ocurrir que un centro preescolar y/o el grupo seleccionado no tienen 4 nios
en este rango de edad. En este caso, se debe trabajar con el nmero de nios de
este rango de edad que estn en el centro y el grupo seleccionado. No se debe hacer
un reemplazo con nios de otra edad.
- 4 ni@s entre 3 aos y 3 aos y medio. Para propsitos del estudio se
quiere comparar ni@s de esta edad que estn matrculad@s en preescolares con
l@s que no estn matriculadas. Por eso:
a. se debe escoger, al azar, solamente 2 ni@s de la lista de matrcula de los
preescolares en el grupo del 1 grado seleccionada para la observacin.
b. L@s otr@s 2 ni@s se deben buscar fuera del centro. Una forma de
localizar a los dos nios de esta edad (que NO ACUDAN A UN CENTRO
PRESCOLAR) es con la ayuda del personal de los centros de salud. Se puede
preguntar a la Directora cual es el centro de salud ms cerca o el centro con que
existe un acuerdo mdico para atender a sus nios. Una vez identificado el centro

27

de salud, sera necesario de visitarlo con la intencin de pedir su ayuda en la

seleccin.
Para identificar los nios se puede:
- tomar nios y familias que estn en el centro de salud en el momenta al
llegar al centro y que son de las edades apropiadas.
- buscar entre registros nominales u otras listas de los nios que acudan a
consulta en el centro de salud.
- buscar entre las fichas del Control de Nio Sano.
- consultar con las promotoras o trabajadores sociales del centro de salud
para tener sus sugerencias.
Con el nombre del nio y su direccin sera necesario visitar a su casa para pedir
una entrevista sobre contexto y permiso para hacer la evaluacin de competencias.
- 4 ni@s entre 1 ao y 1ao y medio.
a. Si el centro es en una localidad de la muestra donde seleccionaron un
CENDI (o guardera o casa cuna) se puede escoger los 4 nios al azar de la lista de
matricula de los nios de esta edad en el CENDI.
b. Si no hay nios de esta edad en el centro, se debe recurrir al centro de
salud para seleccionar los 4 nios.
Consideraciones para hacer la seleccin de los nios y nias
1.

Los nios de 3 y 6 aos de edad deben estar dentro de los grupos (aulas)
seleccionadas para observacin.

2. La seleccin debe ser al azar, dentro de cada grupo de edad y se busca un balance
entre nios y nias en la muestra.
Ejemplo: El grupo seleccionada para la observacin de calidad tiene 30 ni@s
matriculad@s. De estos 30, 8 son nios y 7 son nias entre 6 y 6 aos y 6 meses. Para
seleccionar 2 nias entre 6 y 6 se pone los 8 nombres en papeles individuales, se
dobla el papel y se los ponen en un sombrero. Pide alguien seleccionar 2 de los 8.
Estas seran las dos nias para evaluar. Se repite el proceso para los 7 nios.
La razn principal para insistir en la seleccin al azar es QUEREMOS EVITAR
QUE LA DIRECTORA O LAS EDUCADORAS ESCOGAN A LOS MEJORES
NIOS Y NIAS.

28

La seleccin de hogares familiares y cuidadores para hacer la entrevista de contexto

Las personas que se van a entrevistar con el instrumento sobre Contexto deben ser
las madres (u otra persona) que tienen la responsabilidad de cuidar a los 12 nios y nias
seleccionadas. Los hogares deben ser los hogares de estos nios. Algunos de estos nios
pueden ser seleccionados de las listas en el preescolar y otros de listas en el centro de salud.
La aplicacin de los instrumentos
Para cada instrumento se debe consultar el manual respectivo.
El diario del campo
Cada evaluador va contar con un diario de campo. El propsito del diario es
registrar observaciones personales sobre:
- lo observado en aulas o casas (incluso para una bitcora al entrar en las aulas
- el proceso de aplicacin
- los instrumentos
- las aulas, los nios o las familias que parecen importante pero que no estn
cubiertos en las escalas.
La entrega de la informacin, una vez recolectada
Cuando se termina de hacer la aplicacin de cada escala escala, revisar la
informacin, las respuestas de cada reactivo para asegurarse que no quedaron preguntas sin
respuesta. ES MUY IMPORTANTE que se llene correctamente las fichas de identificacin
y las hojas de concentracin, que no falte ningn dato que sta solicitado.
Cuando se termina la aplicacin de todas las escalas que les corresponden, se
entrega el material a la persona que est coordinando todo el trabajo de campo. Al mismo
tiempo se debe hacer cuentas sobre el nmero de instrumentos otorgados inicialmente y los
aplicados, adems de los gastos ocurridos en campo.
Se contempla realizar una sesin final de reflexin sobre la experiencia y la entrega
de constancias.

29

Viticos: comprobacin de gastos

1. El proyecto cubrir los viticos de los evaluadores. Estos incluyen gastos para
alimentacin, alojamiento y transporte. Tambin puede incluir gastos para comprar
materiales para el uso en la evaluacin, si es que se justifica la necesidad de la compra.
2. Cada evaluador recibir un adelanto antes de iniciar el trabajo de campo para su uso
durante el periodo que dura el estudio.
3. Al terminar el trabajo de campo, cada evaluador debe presentar un registro de sus
gastos, con comprobaciones para cada gasto. Para facilitar la comprobacin adjuntamos
un formato para mantener el registro (anexo 2). Abajo, presentamos un ejemplo de un
registro.
Registro de gastos
Proyecto del Pilotaje de Indicadores
Ejemplos
Nombre de Evaluador:________________________________
Fecha

Tipo de gasto

3/III/05
3/III/05

Comida
Taxi

8/III/05
8/III/05

Desayuno
Alojamiento

Explicacin y/o nombre

de la empresa
Restaurant La Abuela
Ir a una casa para una
entrevista con una madre
En casa particular del
pueblo
Hotel El Cansado,
doble compartido

Monto del Comprobacin

Gasto
$86.00
Factura
$35.00

Nota

$18.00

Papel firmado

$150.00

Factura

Se adjunta un formato en blanco que se puede utilizar para mantener el registro. Si el total
de los gastos comprobados es menos del adelanto el evaluador debe regresar el monto que
no fue gastado. Si el total de los gastos comprobados excede el adelanto el proyecto debe
rembolsar, dentro lo razonable, la diferencia.
Constancias
Se entregarn constancias de participacin al concluir el trabajo de campo.

30

NOMBRE DEL EVALUADOR____________________________________________

Fecha

Tipo de gasto

Explicacin y/o nombre

de la empresa

Monto del Comprobacin

Gasto

31

Tabla 1. Resumen de las responsabilidades de los evaluadores

Evaluador 1
Calidad

Evaluador 2
Calidad

Evaluador 3
Competencias

Evaluador 4
Competencias

Evaluador 5
Contexto

Evaluador 6
Contexto

Da
1

- Llegar al Jardn
hora antes de
abrir
- Hacer
introduccin del
equipo
- Seleccionar aulas
y nios (4 de 6aos
y 2 de 3 aos)
-ENTREVISTAR
CON LA
RESPON-SABLE
Y HACER LA
OBSERVACIN
DEL CENTRO
- Calificar la
Escala
- Llenar la hoja de
concentracin
OBTENER
DATOS DE LOS
EXPEDIENTES
- Escribir en el
Diario de Campo

- Llegar al
Jardn hora
antes de abrir
- Ayudar con la
seleccin de
aulas y nios
- OBSERVAR
AULA #I
durante toda la
sesin
- Calificar la
Escala
- Llenar la hoja
de
concentracin
- Escribir en el
diario de
campo

- Llegar al Jardn
hora antes de abrir
- Buscar un espacio
para aplicar la escala
- APLICAR LA
ESCALA A 3 DE
LOS NIOS
SELECCIONADOS
(de 6 o 3 aos de
edad)
- Llenar La hoja de
concentracin
- Escribir en el diario
de campo

- Llegar al Jardn con

el equipo
- Despus de la introduccin, desplazarse
para el centro de
salud para escoger
nios de 1 y 3 aos
(o si es un CENDI o
CADI se selecciona
nios del mismo
centro)
-- APLICAR LA
ESCALA A 3 DE
LOS NIOS
SELECCIONADOS
(de 1 o 3 aos de
edad)
- Llenar La hoja de
concentracin
- Escribir en el diario
de campo

- Llegar al
Jardn con el
equipo
- Identificar
madres de los
nios 6 o 3
seleccionados.
- Buscar madres
en la entrega de
los nios para
entrevistar o
hacer cita.
- APLICAR LA
ES-CALA (en
casa) CON LAS
INDICADAS
- Llenar la hoja
de
concentracin
- LLENAR
HOJA DE
SALUD
- Escribir en el
diario de campo

Da
2

- Llegar al centro
hora antes de
abrir
- OBSERVAR
AULA #2 durante
toda la sesin
- Calificar la
Escala
- Llenar la hoja de
concentracin
- Escribir en el
Diario de Campo

- Llegar al
centro hora
antes de abrir
- OBSERVAR
AULA #2
durante toda la
sesin
- Calificar la
Escala
- Llenar la hoja
de
concentracin
- Escribir en el
Diario de
Campo

- APLICAR LA
ESCALA A 3 DE
LOS NIOS
SELECCIONADOS
(de 6 o 3 aos de
edad)
- Llenar la hoja de
concentracin
- Escribir en el diario
de campo

- Llegar al sitio de
aplicar la escala
(centro o casa)
-- APLICAR LA
ESCALA A 3 DE
LOS NIOS
SELECCIONADOS
(de 1 o 3 aos de
edad)
- Llenar La hoja de
concentracin
- Escribir en el diario
de campo

- Llegar al
Jardn con el
equipo
- Despus de la
intro-duccin,
desplazarse con
Evaluador 4 al
centro de salud
para identificar
madres de nios
de 1 y 3 aos (o
si es un CENDI
o CADI se
selecciona
madres de los
nios del mismo
centro)
- Hacer una cita
con las madres
seleccionadas
- APLICAR LA
ES-CALA (en
casa) CON LAS
INDICADAS
- Llenar La hoja
de
concentracin
- LLENAR
HOJA DE
SALUD
- Escribir en el
diario de campo
- Ir directamente
al lugar para
entrevistar
- APLICAR LA
ES-CALA (en
casa) CON LAS
INDICADAS
- Llenar La hoja
de
concentracin
- LLENAR
HOJA DE
SALUD
- Escribir en el
diario de campo

- Ir directamente
al lugar para
entrevistar
(Jardn o casa)
- APLICAR LA
ES-CALA (en
casa) CON LAS
INDICADAS
- Llenar la hoja
de
concentracin
- LLENAR
HOJA DE
SALUD
- Escribir en el
diario de campo

32

Anexo 1
La muestra: Distribucin de localidades y centros al inicio del trabajo en campo

Instituciones
SEP Preescolar
General, urbana.
Condicin
econmica alta
SEP. Preescolar
general, urbana.
Condicin
econmica baja.
SEP. Preescolar
General Rural
SEP. Preescolar
Rural indgena
SEP Preescolar
urbana indgena
SEP Preescolar
comunitaria
(conafe)
SEP. Preescolar
semiescolarizado
SEP Cendi
DIF Caic urbano

Estado 1
D.F.
1

Estado 2
Oaxaca
1

Estado 3
Sonora
1

Total

1
3

IMSS Guardera
Preescolar
privada,
comunitaria urb
Preescolar
privada, urb
condicin
econmica alta

Total
Urbana
Rural

2
2

1
1

2
1
2

5
4
2
2
3
1

DIF Caic rural

DIF Cadi

2
3
1
1
16
16
0

16
5
11

16
9
7

48
30
18

33