Referencia:

Valenzuela, J. R. y Ramrez, M. S. (2008). Construccin de un modelo de evaluacin

institucional para la mejora de la gestin y la calidad educativa. Memorias del
congreso internacional de evaluacin educativa. Tlaxcala, Tlaxcala.

Construccin de un modelo de evaluacin institucional

para la mejora de la gestin y la calidad educativa

por:

Jaime Ricardo Valenzuela Gonzlez

Mara Soledad Ramrez Montoya
Tecnolgico de Monterrey

Resumen
En forma anloga a como un piloto de aviones emplea diversos instrumentos para controlar su
nave, la gestin de instituciones educativas exige el empleo de ciertos indicadores que le
permitan a los cuadros directivos lograr las metas de las instituciones que dirigen. Este artculo
presenta los resultados de un proyecto de investigacin orientado a generar un modelo de
evaluacin de instituciones educativas. El modelo propone un total de 54 indicadores
agrupados en 10 categoras: (1) formacin integral y calidad, (2) capital humano, (3) capital
social, (4) investigacin, (5) consultora, (6) servicio social, (7) promocin cultural, (8)
patrimonio fsico, (9) prestigio social y (10) sustentabilidad econmica. El modelo muestra
adems la forma en que, para cada una de estas categoras, existen estrategias de gestin
1

orientadas a una mejora de la calidad educativa. El estudio reporta adems evidencia colectada
en forma emprica para validar el modelo en el contexto particular de instituciones de
educacin media-superior y superior.

Reconocimiento:
La ponencia que aqu se presenta fue parte de un proyecto titulado: Modelo sistmico de
evaluacin institucional para el mejoramiento de la calidad educativa, el cual fue financiado
por el Fondo Mixto de Fomento a la Investigacin Cientfica y Tecnologica del CONACYT y
del Gobierno del Estado de Guanajuato. Los investigadores agradecemos el apoyo que se nos
ha brindado para el desarrollo de esta investigacin.

Introduccin
Da a da, miles de vuelos estn siendo operados en todo el mundo de una forma que no
para de sorprendernos, por lo que implica el sustentar en el aire a un vehculo de varias
toneladas de peso y poderlo operar a lo largo del da (y de la noche) bajo distintas condiciones
atmosfricas. Buena parte de que los viajes por avin tengan un alto ndice de seguridad se
debe al uso de instrumentos de control, que proporcionan al piloto un conjunto de indicadores
de muy distinta especie: un indicador de rumbo o giroscopio direccional para indicar la
direccin que lleva el avin, un indicador de velocidad aerodinmica o anemmetro para
medir la velocidad del avin con respecto al aire que se mueve alrededor, un altmetro para
conocer la altitud a la cul est volando el avin, un indicador de actitud u horizonte artificial

para saber si el eje longitudinal del avin est nivelado, un indicador de las reservas de
combustible con que cuenta la aeronave y muchos ms que sera largo citar. Cada indicador
lleva consigo un propsito y le proporciona al piloto informacin valiosa que le permite
conducir la aeronave en forma segura su aeronave y llegar a su destino siguiendo una ruta
ptima.
La descripcin anterior sirve para proponer una analoga con el trabajo que el director (o
los cuadros directivos) de una institucin educativa realizan. As como un piloto de aviones
cuenta con un conjunto de instrumentos para poder operar su nave, los directivos de una
institucin educativa deben contar tambin con instrumentos que le permitan tomar decisiones
para mejorar la gestin de la institucin y cumplir con metas que sean congruentes con la
misin y visin institucional. La responsabilidad que el director tiene para conducir su escuela
y universidad es similar a la de un piloto de avin: mientras que el segundo lleva consigo la
responsabilidad de realizar un viaje sin que ocurran accidentes que le cuesten la vida a cientos
de pasajeros, el primero tiene tambin una responsabilidad enorme en la que se pone en juego
no la vida, pero s la calidad de vida de los estudiantes en trminos de la educacin que estn
recibiendo. En ambos casos, la responsabilidad no es exclusiva de los "capitanes": as como el
piloto depende de todo un equipo de tierra y aire para que el avin opere sin falla alguna, el
director de una institucin educativa cuenta con un equipo de profesores y personal acadmico
y administrativo para brindar a los alumnos una educacin que aspira a ser de calidad.
Si bien estas ideas se escuchan razonables en lo general, la realidad de muchas
instituciones educativas es distinta. Sus "pilotos" tienen que volar, en muchas ocasiones, "a la
ciega", ya que no cuenta con instrumentos apropiados que les den informacin para la toma de
decisiones.

El proyecto de investigacin, cuyos resultados aqu se reportan, surgi precisamente

como una forma de satisfacer esa necesidad: la de contar con un conjunto de indicadores
institucionales que estuvieran claramente vinculados con las acciones de gestin. Fue as como
se plante, como objetivo general de la investigacin, el generar un modelo de evaluacin de
instituciones educativas orientado a la mejora de la gestin escolar y, por ende, a la mejora de
la calidad educativa. El modelo, as pensado, no debe ser visto como una forma de recopilar
informacin muy puntual, en ciertos perodos especficos de tiempo, como ocurre en procesos
de acreditacin de instituciones educativas. En su lugar, la idea de los autores era generar un
modelo que estuviera integrado a los procesos de gestin; no algo "extra" que los cuadros
directivos de la institucin tuvieran que hacer en forma adicional a sus otras responsabilidades,
sino como una tarea que debiera ser parte sustancial de esas responsablidades.

Marco terico
A la evaluacin educativa se le reconoce un doble papel: si bien se le aprecia
simplemente como una forma de medir eso que se llama calidad educativa (como quiera que
sta se defina), tambin se le reconoce que la evaluacin puede ser un medio para promover
esa calidad. Tal como Valenzuela (2004, p. 5) comenta:
La evaluacin es una parte esencial de cualquier proceso administrativo. Presente desde
el momento mismo de la planeacin, nos permite diagnosticar el estado en que se
encuentra una institucin. Al emplearse durante las etapas de ejecucin, nos permite
regular nuestras acciones para corregir el rumbo en caso de estarnos apartando de los
objetivos perseguidos. Aplicada al trmino del proceso, nos ofrece una mirada
retrospectiva de lo que hemos hecho, de los aciertos que hemos tenido, de los errores
que hemos cometido y del grado en el que hemos alcanzado los objetivos que nos
propusimos lograr. Con todo y su evidente importancia, tambin hay que reconocer que
la evaluacin es un proceso complejo y difcil, que en muchas ocasiones trae consigo
descontento y malestar. A algunas personas no les gusta ser evaluadas, y siempre
aparecen muestras de inconformidad por ms cuidado que pongamos en nuestro trabajo
de evaluacin.
4

Cuando hablamos de evaluacin educativa, sta se entiende, por lo general, como el

grado en el que un proceso educativo favorece el logro de las metas para las que fue creado.
Desde luego, hay muchos tipos de evaluacin educativa y se usa este trmino como el gran
"paraguas" que cubre o incluye la evaluacin del aprendizaje, la evaluacin del proceso de
enseanza-aprendizaje, la evaluacin curricular y la evaluacin de las institucin educativas,
entre otras. Sobre evaluacin educativa se ha escrito mucho, mas no as sobre la evaluacin
institucional en particular. Ciertamente, hay un buen nmero de libros que se orientan a
estudiar diversas componentes de las instituciones educativas, como pueden ser la evaluacin
del aprendizaje (e.g., Kubiszyn y Borich, 2003; y Carey, 2001), los programas educativos
(e.g., Fitzpatrick, Sanders y Worthen, 2004) o, incluso, los espacios arquitetnicos (e.g.,
Salmern, 1992). Hay otro buen nmero de libros orientados a evaluacin organizacional,
pero con un enfoque empresarial que pone nfasis en temas de diagnstico (e.g., Rodrguez,
1999), en temas de gestin (e.g., Kaplan y Norton, 1997) o en temas de evaluacin del
personal (e.g., Edwards y Ewen, 1996). Por otra parte, tambin existen algunos libros que
hablan de la evaluacin educativa en general y que dedican slo un captulo a la evaluacin
institucional (e.g., Domnguez, 2000; y Mayor, 1998). Hay tambin libros orientados a la
evaluacin en general (e.g., Isaac y Michael, 1995; Rossi, Lipsey y Freeman, 2004; y Weiss,
1997), pero sin un enfoque especfico a la educacin y mucho menos a las instituciones
educativas. Y, eventualmente, s se llegan a encontrar libros que abordan slo el tema de la
evaluacin institucional, pero que lo hacen de manera muy focalizada (e.g., Ruiz, 1998,
aborda la evaluacin de un conjunto particular de centros educativos espaoles; y, Lora, 2002,
propone un modelo de evaluacin basado en ndices que permiten generar rankings entre
universidades pblicas mexicanas). Un ejemplo de un libro con una orientacin especfica al
5

tema de evaluacin de instituciones educativas es el que propone Valenzuela (2004). Estas

referencias sirven de antecedentes tericos para la elaboracin del modelo de evaluacin que
aqu se propone.

Mtodo
La investigacin realizada no estuvo orientada a un planteamiento formal de hiptesis
que pudieran ser comprobadas a partir de evidencia emprica y eventualmente interpretadas
dentro de marcos tericos preestablecidos. En su lugar, la investigacin sigui ms bien un
proceso de diseo de un modelo de evaluacin institucional compuesto por diversos
indicadores, y la prueba de dicho modelo por parte de diversos usuarios (personas e
instituciones educativas). En ese sentido, el problema por atender pudiera planterase en
trminos de identificar cules son las caractersticas que debe tener un modelo de evaluacin
que proporcione informacin a los cuadros directivos de una institucin educativa para
mejorar los procesos de toma de decisiones, la gestin de la institucin y, eventualmente, la
calidad del servicio educativo que ofrece.
El problema as planteado llev a los investigadores a proponer un proyecto consistente
en tres etapas:

Etapa 1: Diagnstico de necesidades de evaluacin institucional

El propsito de la primera etapa del proyecto de investigacin fue el de realizar un
diagnstico de necesidades de evaluacin institucional en el contexto del Estado de
Guanajuato, sitio en que se ubica el proyecto. Buscando saber que "tierra pisaban", los
investigadores se dieron a la tarea de identificar: (1) las prcticas de evaluacin institucional
que se estn llevando a cabo en las instituciones pblicas de educacin media-superior y
superior del Estado de Guanajuato; (2) aquellos aspectos que no se estn evaluando o que
podran evaluarse mejor; (3) el vnculo que puede tenerse entre la informacin resultante de un

trabajo de evaluacin, el proceso de toma de decisiones, la mejora en la gestin de la

institucin y la eventual mejora de su calidad educativa; y (4) aquellos factores que afectan la
posibilidad de realizar una evaluacin institucional vinculada a la gestin. Esta etapa se llev a
cabo entre el 15 de agosto de 2006 y el 15 de marzo de 2007.

Etapa 2: Propuesta y validacin de un modelo de evaluacin institucional

El propsito de la segunda etapa del proyecto de investigacin fue el de generar
propiamente el modelo de evaluacin institucional y el de ponerlo a prueba con instituciones
educativas interesadas en participar en el proyecto. Esta etapa se llev a cabo entre el 16 de a
marzo de 2007 y el 15 de noviembre de 2007.

Etapa 3: Transferencia del modelo a travs de procesos de formacin de evaluadores, as

como la difusin de los resultados
El propsito de la tercera etapa del proyecto de investigacin fue el de promover la
transferencia del modelo de evaluacin institucional por medio de procesos de formacin de
evaluadpres y, al mismo tiempo, difundir los resultados de la evaluacin en congresos y
revistas arbitradas (como la presente). Esta etapa se llev a cabo entre el 16 de noviembre de
2007 y el 15 de abril de 2008.

Resultados
Es complejo presentar en este documento los hallazgos de las distintas etapas de un
proyecto de tan gran magnitud como el que se llev a cabo. Tan solo la etapa del diagnstico
de necesidades de evaluacin institucional o la documentacin de la experiencia de formacin

de evaluadores proporcionaron material suficiente para la elaboracin de dos tesis de

estudiantes de maestra que estuvieron apoyando en este proyecto (ver Lafn, 2008; y
Meymar, 2008). Para los propsitos de este artculo, los resultados que los autores quieren
compartir van en dos lneas: (1) por una parte, el mayor aporte de este proyecto es el modelo
de evaluacin mismo; y, (2) por otra parte, se presentan los hallazgos en el proceso de
validacin del modelo.

Descripcin del modelo

El objetivo fundamental del proyecto era el de identificar cules son las caractersticas
que debe tener un modelo de evaluacin que proporcione informacin a los cuadros directivos
de una institucin educativa para mejorar los procesos de toma de decisiones, la gestin de la
institucin y, eventualmente, la calidad del servicio educativo que ofrece.
Objeto por evaluar. El modelo tiene como objeto por evaluar a las instituciones
educativas, concretamente, instituciones de educacin media superior y superior. El modelo,
con las adecuaciones pertinentes, puede ser aplicado a cualquier institucin educativa, en sus
diferentes niveles.
Propsito del modelo. El propsito de este modelo es poder generar informacin acerca
de distintas componentes de una institucin educativa, que permita tomar decisiones para
mejorar la gestin educativa y, por consecuencia, la calidad del servicio que la institucin
presta. La informacin que se genere provendr precisamente del modelo de evaluacin que
aqu se propone. El modelo de evaluacin debe verse no como un fin ltimo, sino como un
medio para llegar a un fin. El fin es mejorar la calidad del servicio que ofrece la institucin
educativa. La Figura 1 ilustra los elementos fundamentales del modelo propuesto.

Componentes e
indicadores

Sistema de
informacin

Gestin
Misin y visin de
la institucin

Figura 1. Representacin grfica del modelo de evaluacin institucional.

Alcances y limitaciones. El modelo aqu propuesto va orientado a valorar informacin

relevante de las instituciones de educacin media-superior y superior. El modelo reconoce que
dentro de estos niveles educativos hay una gran heterogeneidad de instituciones. Desde luego,
un bachillerato es muy distinto a una universidad; una institucin privada tiene diferencias
importantes respecto a una institucin pblica; un bachillerato tecnolgico es muy distinto a
uno propedutico que prepare a sus estudiantes para una institucin de educacin superior; y
una universidad orientada a la docencia es muy distinta a otra orientada a la investigacin.
Cada institucin educativa podra tener un modelo propio. Sin embargo, para los propsitos de
10

este proyecto, la idea de los autores fue generar un modelo relativamente general que pudiera
aplicarse a instituciones educativas de distinta naturaleza y en distintos contextos, de una
manera tal que cada institucin pueda tomar del modelo aquello que sea ms significativo para
su realidad concreta. No se propone un modelo encaminado a generar rankings, aunque puede
ser usado para tal fin. Tampoco se propone un modelo orientado a asegurar acreditaciones o
certificaciones de instituciones educativas, aunque puede servir para tal fin. Como ya se ha
indicado en el propsito, la idea de este modelo es apoyar la toma de decisiones del trabajo de
gestin, a travs de proveer informacin valiosa acerca de la institucin educativa.

Premisas. El modelo de evaluacin propuesto parte de las siguientes premisas:

1.

Orientacin a la calidad. El modelo propuesto pretende alinear la informacin que resulte

de la evaluacin con el proceso de gestin y con la calidad del servicio educativo
prestado. En ese sentido, el modelo es instrumental y no pierde de vista que debe servir
para el logro de la misin y la visin institucional. En la medida en que el modelo
promueva el mejoramiento de las instituciones, estar cumpliendo con ciertos estndares
de utilidad que todo modelo de evaluacin debe tener (Joint Committee on Standars for
Educational Evaluations, 1988 y 2004).

2.

Simplicidad. El modelo propuesto pretende que el trabajo de evaluacin se realice de

manera eficaz. No se trata de un modelo complejo que requiera que las instituciones
educativas inviertan una gran cantidad de tiempo y recursos en generar sistemas de
informacin complejos. Al proponerlo, se parte de la premisa de que la evaluacin debe
ser parte de las funciones propias de cada entidad de la institucin educativa. En la
medida en que el modelo pueda ser fcilmente implementado en la institucin educativa,

11

estar cumpliendo con ciertos estndares de factibilidad que todo modelo de evaluacin
debe tener (Joint Committee on Standars for Educational Evaluations, 1988 y 2004).
3.

Enfoque sistmico. El modelo propuesto puede ser visto como un subsistema dentro de
otro gran sistema que es la institucin educativa. Al asumir la idea de un enfoque
sistmico, la evaluacin es concebida como un conjunto de procesos que tienen insumos y
salidas. El proceso de evaluacin asume que el evaluador se mueve a lo largo de una
dimensin que va desde una perspectiva atomista (evaluando las componentes de la
institucin) a una perspectiva holista (evaluando a la institucin en conjunto, o de manera
integral) y viceversa (Valenzuela, 2004).

4.

Adaptabilidad. El modelo de evaluacin debe poderse adaptar a las peculiaridades de cada

institucin educativa y de los entornos en donde se ubica. No se pretende que el modelo
sea rgido, sino que ste debe concebirse como un modelo flexible que pueda ir
evolucionando a lo largo del tiempo.

5.

Precisin de la informacin. La calidad de un modelo de evaluacin depende, en buena

medida, de la calidad de la informacin que se genere. Dicha calidad es lo que, en
trminos psicomtricos se conoce como confiabilidad y validez de los datos generados.
En la medida en que el modelo logre lo anterior, estar cumpliendo con ciertos estndares
de precisin que todo modelo de evaluacin debe tener (Joint Committee on Standars for
Educational Evaluations, 1988 y 2004).

6.

tica. El cumplimiento con ciertos estndares de tica es fundamental cuando se establece

un modelo de evaluacin institucional (Joint Committee on Standars for Educational
Evaluations, 1988 y 2004). Es por ello que el modelo aqu propuesto debe asegurar un
respeto absoluto hacia la persona, lo cual implica mantenerla informada de qu es lo que
se va a evaluar y para qu se va a evaluar; quin va a conocer los resultados, entre otros.
12

Componentes del modelo. Para definir las componentes del modelo, se comenz por
definir un conjunto de metas vinculadas a las instituciones educativas. Esas metas fueron
denominadas como "axiomticas", por ser un tanto obvia (sin mayor necesidad de
demostracin o justificacin) su importancia para la institucin. A partir de estas metas, se
definieron 10 componentes para configurar el modelo educativo: (1) formacin integral y
calidad, (2) capital humano, (3) capital social, (4) investigacin, (5) consultora, (6) servicio
social, (7) promocin cultural, (8) patrimonio fsico, (9) prestigio social y (10) sustentabilidad
econmica. Vinculados a estas 10 componentes, se propuso un total de 54 indicadores, en
trminos de su relevancia para proveer de informacin a los cuerpos directivos y alinear sus
acciones al logro de las metas axiomticas. La Tabla 1 presenta en forma sinttica las
componentes e indicadores del modelo propuesto.

Tabla 1
Componentes del modelo de evaluacin institucional
Componentes
1. Formacin integral y
calidad. Es el proceso
educativo que permite el
desarrollo de los estudiantes en
todas sus dimensiones (fsica,
psicolgica, sociocultural,
ecolgica, trascendente y
profesional), con miras de
asegurar que los egresados de
un programa educativo
cumplen con estndares
definidos por los curricula de
la institucin educativa.

Indicadores
1.1. Frecuencia de actualizacin de planes y programas de
estudio.
1.2. Proporciones relativas de materias destinadas a las
distintas dimensiones de formacin del estudiante.
1.3. Grado de cumplimiento de lo establecido en los
curricula, en trminos del nmero de temas que se
abordaron y que se debieron haber abordado.
1.4. Grado de cumplimiento de lo establecido en los
curricula, en trminos del nmero de clases que se
impartieron y que se debieron haber impartido.
1.5. Resultados del sistema de evaluacin de profesores.
1.6. Resultados de la evaluacin de los programas.
1.7. Resultados de exmenes departamentales.
1.8. ndice de desercin de los alumnos.
1.9. Nmero promedio de alumnos en cada grupo escolar.
1.10. Estadsticas de calificaciones de los alumnos.
13

Componentes

Indicadores
1.11. Proporcin de alumnos egresados que se encuentran
trabajando en su rea profesional.
1.12. Ingresos anuales promedio de los alumnos que
egresaron hace cinco y diez aos.
1.13. Resultados de sistemas de evaluacin de los egresados
aplicados a empleadores.

2. Capital humano. Es el
potencial del personal que
tiene una institucin educativa,
dado por el nivel de
competencias y experiencia
que poseen los trabajadores y
que se pude traducir en valor
para la institucin.

2.1. Nmero de horas de capacitacin ofrecidas a los

profesores anualmente.
2.2. Nmero de horas de capacitacin per cpita tomadas
por los profesores anualmente.
2.3. Proporcin relativa de cada rea de capacitacin
ofrecida por la institucin anualmente.
2.4. Proporcin relativa de cada rea de capacitacin
tomada por los profesores anualmente.
2.5. Nmero de profesores perteneciente a los distintos
escalafones o sistemas de clasificacin.
2.6. Nmero de profesores de planta versus de ctedra.
2.7. Nmero de profesores pertenecientes al SNI.
2.8. ndice de mejora del nivel de calidad de vida de los
trabajadores en funcin de su retribucin econmica.
2.9. Resultados de la evaluacin del clima laboral.
2.10. ndice de rotacin interna.
2.11. ndice de rotacin externa.

3. Capital social. Es el
potencial que tienen las redes
internas y externas de los
trabajadores y que se traducen
en valor para la institucin.

3.1. Nmero de redes internas bien identificadas en las que

participa el personal de la institucin.
3.2. Nmero de redes externas bien identificadas en las que
participa el personal de la institucin.
3.3. Nmero de personas involucradas en redes internas.
3.4. Nmero de personas involucradas en redes externas.
3.5. Resultados de la evaluacin del trabajo en redes.

4. Investigacin. Es el proceso 4.1. Nmero de proyectos de investigacin de distintas

por medio del cual se
reas en los que participan los profesores.
contribuye a la generacin de
4.2. Montos de los proyectos de investigacin que entran al
conocimiento cientfico para
presupuesto de la institucin.
beneficio de la sociedad.
4.3. Proporcin de proyectos que estn vinculados a las
lneas de investigacin definidas por la institucin.
4.4. Nmero de artculos publicados por los profesores en
revistas especializadas, arbitradas y no arbitradas.
4.5. Nmero de participaciones en congresos nacionales e
internacionales, por parte de los profesores.
5. Consultora. Es el proceso
por medio del cual personal

5.1. Nmero de proyectos de consultora de distintas reas

en los que participan los profesores.
14

Componentes

Indicadores

experto de la institucin
educativa contribuye a dar
soluciones al sector productivo
que las solicita.

5.2. Montos de los proyectos de consultora que entran al

presupuesto de la institucin.
5.3. Proporcin de proyectos que estn vinculados a las
lneas de consultora definidas por la institucin.

6. Servicio social. Es la
contribucin que la institucin
educativa ofrece a su entorno
social a travs del trabajo de
sus estudiantes.

6.1. Nmero de programas de servicios social.

6.2. Nmero de personas involucradas en los programas de
servicio social.
6.3. Resultados del sistema de evaluacin del servicio
social.
6.4. Porcentaje de alumnos con beca.

7. Promocin cultural. Es la
7.1. Nmero de eventos de difusin cultural organizados
preservacin, difusin,
por la institucin.
creacin y recreacin de los
7.2. Proporcin relativa del nmero de eventos de difusin
valores culturales y de las
cultural realizados en las distintas reas de
distintas manifestaciones
manifestacin artstica.
artsticas propias de un entorno
social y de la humanidad en
general.
8. Patrimonio fsico. Es el
8.1. Proporcin del presupuesto destinado a mantenimiento
conjunto de recursos materiales
preventivo y correctivo.
que permiten a la institucin
8.2. Inventario de recursos materiales de la institucin
educativa cumplir sus
educativa.
funciones para la presente y
futuras generaciones.
9. Prestigio social. Es el
9.1. Resultados de los alumnos en exmenes nacionales
reconocimiento que la sociedad
estandarizados.
9.2. Nmero de programas acreditados.
otorga a la institucin
9.3. Posicin de la institucin educativa en rankings.
educativa por el servicio que
presta en la formacin de los
estudiantes, as como por su
impacto social.
10. Sustentabilidad
econmica. Es aquello que
asegura que una institucin
educativa pueda operar
manteniendo un equilibrio
entre sus ingresos y sus
egresos.

10.1. Registro de ingresos en funcin del tiempo.

10.2. Registro de egresos en funcin del tiempo.
10.3. Discrepancias entre el presupuesto programado y el
presupuesto ejercido.
10.4. Estados contables de flujo de efectivo.
10.5. Proporciones relativas de ingresos recibidos segn
presupuesto gubernamental e ingresos conseguidos por
la misma institucin.
10.6. Proporciones relativas de los gastos de operacin y de
inversin.
15

Validacin del modelo

La validacin de un modelo como el aqu propuesto implica el poner a prueba el modelo
y estimar el grado en el que ste cumple las funciones para las que ha sido creado. En este
sentido, la informacin recabada para la validacin del modelo fue muy rica y se resume en
los siguientes puntos:
1.

Un primer aspecto por destacar es que ms que hablar de un modelo de evaluacin,

deberamos estar hablando de un metamodelo; esto es, un modelo de modelos. Con esto se
quiere decir que el modelo planteado, con sus 10 componentes y sus 54 indicadores,
ciertamente no es aplicable, en forma completa, para toda institucin educativa. Nunca fue
esa la intencin. Ms bien, la intencin era abrir las posibilidades de las instituciones
educativas para que cada una de ellas definiera, segn su contexto, su estructura y su
misin y visin institucionales, cules de todas las componentes e indicadores podran ser
aplicables para ellas.

2.

Si bien la Tabla 1 muestra en forma estruturada a las distintas componentes e indicadores

del modelo de evaluacin institucional, es claro que al entrar al detalle de la
determinacin de los indicadores, surge inevitables confusiones o discrepancias sobre sus
definiciones. sta fue una de las partes ms interesantes que se analizaron al contrastar las
definiciones que diversos informantes daban sobre un mismo indicador. Pngase por
ejemplo uno de ellos, el ndice de desercin de los alumnos, el cual muchas instituciones
llegan a determinar, pero que no necesariamente lo hacen de igual manera. Esto llev a los
investigadores a desarrollar un manual detallado del modelo, el cual se espera publicar
prximamente.

16

3.

Las discrepancias de las que se habla en el punto anterior nos hablan de la dificultad
concpetual para entender lo que un indicador es. En trminos generales, la claridad
conceptual sobre cada tipo de indicador depende, en buena medida, de qu tanto los
directores (o las personas a cargo de generar esos indicadores) han tenido que calcularlos
en el pasado (bien sea como parte de procesos de acreditacin o como prctica comn de
los procesos de gestin), o de qu tanto cuentan con una capacitacin previa sobre
cuestiones de evaluacin institucional. En entrevistas con algunos informantes, los
investigadores llegaron a apreciar que ni siquiera el concepto de indicador es
suficientemente claro para algunos. En contraste, otros informantes rpidamente
reconocieron el tipo de informacin que se les solicitaba, y podan generar ms de una
estimacin de cada tipo de indicador. Lo importante de este anlisis no era el generar
distintas definiciones para cada indicador. Lo importante radicaba en buscar aquella
definicin que cumpliera con las cuatro caractersticas que se supone debe tener cada
indicador (Joint Committee on Standars for Educational Evaluations, 1988 y 1994):
precisin, utilidad, factibilidad (para su determinacin) y propiedad (aplicacin de
principios ticos para generarlo).

4.

El mero clculo de un indicador no debe verse como un hecho aislado, sino como un
proceso que est inmerso en un ambiente en donde entran en juego dos elementos: las
competencias que tengan las personas a cargo de definir y generar un cierto indicador, y la
existencia (o inexistencia) de una cultura de evaluacin dentro de la institucin. Por
comentarios con los informantes, se lleg a subrayar la importancia de que un modelo de
esta naturaleza fuera implementado junto con una adecuada capacitacin del personal de
la institucin. Esa capacitacin deba incluir no slo cuestiones tcnicas sobre el clculo
de cada indicador, sino tambin el desarrollo de cierto tipo de competencias
17

interpersonales para facilitar la consecucin de informacin, competencias de

comunicacin oral y escrita para comunicar adecuadamente los resultados y competencias
de orden tico para asegurar un proceso de evaluacin con respeto absoluto a la persona
humana. Por otra parte, se destac tambin la importancia de que un modelo de esta
naturaleza estuviera vinculado con una cultura de evaluacin al interior de la institucin.
Este vnculo debe ser bidireccional: un modelo como el aqu propuesto debe fomentar el
desarrollo de una cultura de evaluacin pero, al mismo tiempo, el xito al implementar el
modelo depende en buena medida de que exista previamente una cultura de aceptacin de
procesos de evaluacin.
5.

Las aportaciones analizadas coinciden en manifestar que es muy importante dejar de

considerar a los procesos de evaluacin como un fin y no como un medio para alcanzar
las metas que la institucin determine para s misma. Precisamente uno de los aspectos
que ms se valoraron en el modelo propuesto fue la claridad conceptual de vincular a cada
indicador con posibles estrategias de gestin y stas a su vez encaminadas a lograr ciertas
metas institucionales.

Conclusiones
El proyecto de investigacin aqu descrito permiti muchos aprendizajes sobre la forma
de concebir la evaluacin institucional y los procesos de gestin de instituciones educativas.
Uno de los aspectos que aflor desde la primera etapa del proyecto fue la enorme
heterogeneidad estructural en las instituciones de educacin media-superior y superior del
Estado de Guanajuato. Los contrastes se hacen palpables tanto por el nmero de alumnos,
como por los recursos con los que cuentan, las orientaciones curriculares para la formacin,

18

entre otros muchos factores. Esta misma heterogeneidad que se observa en el tamao e
infraestructura de las instituciones, se manifiesta tambin en las prcticas de evaluacin y en
los sistemas con los que cuentan para tal fin. Desde luego, tambin se observan coincidencias
entre las instituciones cuando, al hablar de evaluacin, se mencionan la que se hace del
aprendizaje (internamente o mediante tests estandarizados a nivel nacional) o de los profesores
(a travs de encuestas aplicadas a los alumnos). Asimismo, hay muchas coincidencias en
cuanto a las evaluaciones no realizadas, como podra ser la que implica un seguimiento a
egresados (son contadas las instituciones que manifestaron estudios en esta lnea). Fuera de
estas coincidencias, la diversidad de formas de evaluar es palpable. Desde esta perspectiva, era
preciso proponer un modelo de evaluacin que retomara las prcticas recurrentes de
evaluacin, pero que tambin viera la forma de integrar al modelo las "ausencias" detectadas.
Un patrn recurrente de las instituciones educativas fue que no existen prcticas que
sistemticamente vinculen a la evaluacin con los procesos de gestin. Esto no implica que se
carezca de evaluaciones. Por el contrario, existen muchos esfuerzos para realizarlas. A veces
se llevan a cabo simplemente para cumplir con registros estadsticos que se le solicitan a la
institucin; y a veces por un deseo de contar con una acreditacin como institucin o en
alguno de sus programas. Sin embargo, estas evaluaciones son "puntuales" y no se llevan a
cabo de una manera continua en que se aprecie un vnculo claro con los procesos de toma de
decisiones y de gestin. En ese sentido, el modelo propuesto pretendi establecer precisamente
ese vnculo entre la informacin que se genere de los procesos de evaluacin y los procesos de
gestin asociados con la calidad educativa.

19

Referencias
Carey, L. M. (2001). Measuring and evaluating school learning (3a. ed.). Boston, MA,
EE.UU.: Allyn and Bacon.
Domnguez, G. (2000). Evaluacin y educacin: Modelos y propuestas. Buenos Aires,
Argentina: Fundec.
Edwards, M. R. y Ewen, A. J. (1996). 360 feedback: The powerful new model for employee
assessment & performance improvement. New York, EE.UU.: American Management
Association.
Fitzpatrick, J. L., Sanders, J. R. y Worthen, B. R. (2004). Program evaluation: Alternative
approaches and practical guidelines (3a. ed.). Boston, MA, EE.UU.: Pearson.
Isaac, S. y Michael, W. B. (1995). Handbook in research and evaluation: A collection of
principles, methods, and strategies useful in the planning, design, and evaluation of
studies in education and the behavioral sciences (3a. ed.). San Diego, CA, EE.UU.:
EdITS.
Joint Committee on Standars for Educational Evaluations, The. (1988). The personnel
evaluation standards: How to assess systems for evaluating educators. Newbury, Park,
CA, EE.UU.: Corwin Press.
Joint Committee on Standars for Educational Evaluations, The. (1994). The program
evaluation standards: How to assess evaluations of educational programs (2a. ed.).
Thousand Oaks, CA, EE.UU.: Sage.
Kaplan, R. S. y Norton, D. P. (1997). El cuadro de mando integral: The balanced scorecard.
Barcelona, Espaa: Gestin 2000.
Kubiszyn, T. y Borich, G. (2003). Educational testing and measurement: Classroom
application and practice (7a. ed.). Hoboken, NJ, EE.UU.: Wiley.
Lafn, M. R. (2008). Deteccin de necesidades de evaluacin institucional en educacin
media-superior y superior. Tesis de maestra indita, Tecnolgico de Monterrey, Ciudad
Jurez, Chihuahua, Mxico.
Lora, E. (2002). La competitividad de las universidades pblicas mexicanas: Una propuesta
de evaluacin. Distrito Federal, Mxico: Universidad Autnoma del Estado de Mxico y
Plaza y Valds.
Mayor, C. (1998). La evaluacin como estrategia de mejora: Evaluacin de programas,
centros y profesores. Sevilla, Espaa: Kronos.
20

Meymar, O. A. (2008). Formacin de evaluadores para la evaluacin institucional a travs de

una modalidad de e-learning. Tesis de maestra indita, Tecnolgico de Monterrey,
Len, Guanajuato, Mxico.
Rodrguez, D. (1999). Diagnstico organizacional (3a. ed.). Distrito Federal, Mxico:
Alfaomega.
Rossi, P. H., Lipsey, M. W. y Freeman, H. E. (2004). Evaluation: A systematic approach (7a.
ed.). Thousand Oaks, CA, EE.UU.: Sage.
Ruiz, J. M. (1998). Cmo hacer una evaluacin de centros educativos (2a. ed.). Madrid,
Espaa: Narcea.
Salmern, H. (1992). Evaluacin de los espacios arquitectnicos escolares. Granada, Espaa:
Universidad de Granada.
Valenzuela, J. R. (2004). Evaluacin de instituciones educativas. Distrito Federal, Mxico:
Trillas.
Weiss, C. H. (1997). Evaluation (2a. ed.). Upper Saddle River, NJ, EE.UU.: Prentice Hall.

21

Anexo

Primer autor:

Jaime Ricardo Valenzuela Gonzlez

Adscripcin:

Tecnolgico de Monterrey

Direccin:

Av. Eugenio Garza Sada No. 2501 Sur, Edificio CEDES, Stano 1
Col. Tecnolgico
Monterrey, Nuevo Len 64849, Mxico

Telfono:

(81) 8358 2000, ext. 6628

Correo
electrnico:

jrvg@itesm.mx

Currculum
sinttico:

Jaime Ricardo Valenzuela Gonzlez es profesor-investigador de la

Escuela de Graduados en Educacin del Tecnolgico de Monterrey.
Realiz estudios de Doctorado en Psicologa Educativa en la
Universidad de Texas en Austin (EE.UU.). Adems de sus actividades
docentes, ha incursionado en el rea de administracin educativa,
llegando a ocupar cargos como el de Vicerrector Acadmico de la
Universidad La Salle Morelia y el de Director del Programa de
Doctorado en Innovacin y Tecnologa Educativas de la Universidad
Virtual del Tecnolgico de Monterrey. Sus actividades actuales
incluyen tambin las de investigacin. Es miembro del Sistema
Nacional de Investigadores, teniendo como lneas principales de
trabajo las de educacin a distancia y evaluacin educativa. Es autor
del libro Evaluacin de instituciones educativas (Ed. Trillas, 2004), as
como de diversos artculos en revistas cientficas y captulos en libros
editados.

Segundo autor:

Mara Soledad Ramrez Montoya

Adscripcin:

Tecnolgico de Monterrey

Direccin:

Av. Eugenio Garza Sada No. 2501 Sur, Edificio CEDES, Stano 1
Col. Tecnolgico
Monterrey, Nuevo Len 64849, Mxico

Telfono:

(81) 8358 2000, ext. 6623

Correo
electrnico:

solramirez@itesm.mx

Currculum
sinttico:

Mara Soledad Ramrez Montoya es profesora-investigadora de la

Escuela de Graduados en Educacin del Tecnolgico de Monterrey.
22

Realiz estudios de Doctorado en Filosofa y Ciencias de la Educacin en

la Universidad de Salamanca (Espaa). Adems de sus actividades
docentes, ha incursionado en el rea de administracin educativa,
llegando a ocupar cargos como el de Directora del Departamento de
Diseo Educativo de la Universidad Virtual del Tecnolgico de
Monterrey. Sus actividades actuales incluyen tambin las de
investigacin. Es miembro del Sistema Nacional de Investigadores,
teniendo como lnea principal de trabajo la de enseanza. Es coautora del
libro Calidad y efectividad en instituciones educativas (Ed. Trillas, 2001),
as como de diversos artculos en revistas cientficas y captulos en libros
editados.
Ttulo del trabajo:

Construccin de un modelo de evaluacin institucional para la

mejora de la gestin y la calidad educativa

Resumen
(abstract):

En forma anloga a como un piloto de aviones emplea diversos

instrumentos para controlar su nave, la gestin de instituciones
educativas exige el empleo de ciertos indicadores que le permitan a los
cuadros directivos lograr las metas de las instituciones que dirigen. Este
artculo presenta los resultados de un proyecto de investigacin orientado
a generar un modelo de evaluacin de instituciones educativas. El
modelo propone un total de 54 indicadores agrupados en 10 categoras:
(1) formacin integral y calidad, (2) capital humano, (3) capital social,
(4) investigacin, (5) consultora, (6) servicio social, (7) promocin
cultural, (8) patrimonio fsico, (9) prestigio social y (10) sustentabilidad
econmica. El modelo muestra adems la forma en que, para cada una de
estas categoras, existen estrategias de gestin orientadas a una mejora de
la calidad educativa. El estudio reporta adems evidencia colectada en
forma emprica para validar el modelo en el contexto particular de
instituciones de educacin media-superior y superior.

Modalidad del
trabajo:

Ponencia escrita

Naturaleza del
trabajo:

Reporte final de investigacin

Temtica:

Evaluacin institucional

Requerimientos
para la
exposicin:

Computadora con Power Point

Proyector para computadora
Pantalla de proyeccin

23