Revisi n de Tres Criterios para la Acreditaci n de o o Carreras de la Facultad de Ingeniera

Pablo Vanegas
Facultad de Ingeniera Universidad de Cuenca Pablo.Vanegas@ucuenca.edu.ec

Patricio Guerrero
Facultad de Ingeniera Universidad de Cuenca Patricio.Guerrero@ucuenca.edu.ec

ResumenEl Consejo de Evaluaci n y Acreditaci n y Aseguo o ramiento de la Calidad de la Educaci n Superior (CEAACES), o creado por disposici n de la constituci n de la Republica del o o Ecuador, tiene como nalidad el mejoramiento de la calidad acad mica y de gesti n de las universidades, escuelas polit cnicas e o e e institutos superiores t cnicos y tecnol gicos del pas, a trav s de e o e los procesos de auto-evaluaci n institucional, evaluaci n externa o o y acreditaci n. Las instituciones de educaci n superior as como o o sus carreras disponen de un plazo de cinco anos, a partir de la entrada en vigencia de la constituci n, para ser evaluados o y acreditados conforme a la ley. De los nueve criterios que considera la acreditaci n de carreras, la CEAACES entrega m s o a importancia a los que evaluan el Cuerpo Docente y los Logros del Aprendizaje. Este ultimo criterio es de particular importancia, no solamente porque evalua el conocimiento, las habilidades y actitudes de los estudiantes al t rmino de una carrera, sino porque e est en estrecha relaci n con otros dos criterios de evaluaci n: a o o A) Objetivos Educacionales y B) Currculo. El presente texto resume una revisi n bibliogr ca de metodologas y experiencias o a que buscan evaluar los logros del aprendizaje en carreras de ingeniera, revisi n que m s all de ser informativa pretende o a a identicar herramientas utiles para el proceso de acreditaci n o de las carreras de la Facultad de Ingeniera de la Universidad de Cuenca.

I.

I NTRODUCCI ON

Como profesores universitarios estamos convencidos de que nuestros estudiantes est n capacitados para contestar preguntas a fundamentales de la ingeniera; sin embargo no contamos con evidencias formales que permitan documentar y vericar que este sentir corresponda con la realidad. Contar con m todos e adecuados para medir y evaluar el conocimiento, las destrezas y las aptitudes de nuestros estudiantes permitir por una parte a rearmar ante la sociedad el prestigio que han alcanzado los profesionales formados en nuestra universidad, y por otro lado facilitar n la denici n o fortalecimiento de metas para la a o formaci n acad mica. o e El proyecto Tunning para Latinoam rica [1] plantea la e necesidad de informaci n able y objetiva sobre la oferta de o programas educativos como un medio para conocer de forma fehaciente lo que signica en la pr ctica una capacitaci n o a o titulaci n determinada. Por otro lado, seg n la CEAACES [2], o u la evaluaci n de carreras de grado o tercer nivel constituye o un eje fundamental para alcanzar la excelencia acad mica en e el Ecuador y lograr su reconcimiento a nivel internacional. Esta evaluaci n es considerada [2] por la CEAACES como o

un elemento que permitira la movilidad y reconocimiento de estudios y ttulos a nivel internacional. El modelo de acreditaci n que establece el Consejo de o Evaluaci n, Acreditaci n y Aseguramiento de la Calidad de o o Educaci n Superior est basado en nueve criterios: A) Objeo a tivos Educacionales, B) Currculo, C) Infraestructura y Equi pamiento, D) Cuerpo Docente, E) Gesti n Acad mica Estuo e diantil, F) Resultados o Logros del Aprendizaje, G) Ambiente Institucional, H) Investigaci n Formativa y I) Vinculaci n con o o la colectividad. Los criterios D) y F) son los que tienen mayor importancia, juntos alcanzan un peso de 0.4 de un total de 1 de acuerdo al modelo propuesto. El criterio F) adquiere particular relevancia tomando en cuenta que su evaluaci n se asienta en o gran medida sobre los criterios A) y B). En consecuencia, los criterios A), B) y F) deben ser abordados en conjunto. M s all de iniciar un proceso que nos conduzca a acrea a ditarnos ante la CEAACES, es imprescindible analizar la estructura, los m todos y procedimientos acad micos de la e e Facultad de Ingeniera. El presente artculo realiza una revisi n o bibliogr ca y recoge experiencias de procesos de acreditaci n a o para carreras de ingeniera. Mientras la secci n 2 describe los o indicadores que forman parte de los criterios A), B) y F), la secci n 3 resume metodologas utilizadas para el dise o o n de cursos (materias) para carreras de ingeniera. La secci n 4 o discute la factibilidad de aplicar estas metodologas en nuestra facultad. II. C RITERIOS A), B) Y F) DE LA CEAACES

La estructura de la evaluaci n del CEAACES tiene como o base el objetivo general: asegurar una educaci n de calidad. o Este objetivo se alcanza por medio de sub-objetivos de menor nivel y de un detalle mayor que corresponden a los nueve criterios especicados en la secci n anterior (A ... I). Los o nueve sub-objetivos o criterios son todava muy generales y ambiguos para nes operacionales de la evaluaci n. Un o criterio puede ser denido como una herramienta que permite comparar dos objetos o situaciones de acuerdo a un eje particular de signicancia o a un punto de vista [3]. Cuando existen varios puntos de vista a considerar en la comparaci n, o el an lisis busca construir m ltiples criterios sobre la base de a u estos puntos de vista. Cada sub-objetivo o criterio puede dividirse nuevamente, proceso que se repite de manera iterativa hasta alcanzar

un grado de especicaci n adecuado para los nes de la o evaluaci n, asegurando que la estructura resultante cubra todos o los aspectos importantes. En el nivel inferior de la estructura de evaluaci n se encuentran los indicadores. La CEAACES dene o el t rmino indicador como una variable, por lo tanto como e la representaci n operacional de un atributo de un sistema o [4]. Cada variable est asociada a un conjunto particular de a estados o valores, informaci n que especica la condici n y/o o o tendencia de un atributo o atributos del sistema considerado. Como parte del proceso de evaluaci n se determina el valor o asociado a cada uno de los indicadores. En algunos casos esta valoraci n se realiza mediante funciones de tipo lineal, o donde el valor del indicador aumenta proporcionalmente con variaciones dentro de la escala denida para el indicador. En otros casos es necesario determinar los valores mediante funciones no lineales. De los ejemplos presentados por la CEAACES, se toma la valoraci n para el indicador Docentes o con dedicaci n a tiempo completo para ilustrar un funci n no o o lineal. La escala es denida por dos valores: el valor inferior de 25 % corresponde al mnimo requerido para la creaci n o de una universidad (LOES, 1998) y el valor superior del 60 % corresponde a la nueva LOES (2010) y actualmente a la universidad del pas con mayor porcentaje de docentes a tiempo completo (benchmark). Sin embargo, se asume que a medida que la valoraci n se acerca al lmite superior, o las ganancias en t rminos de calidad de la ense anza, son e n marginalmente decrecientes, y para valores cercanos al lmite inferior, la tendencia es contraria. En este caso, se requiere una funci n que permita capturar de manera satisfactoria estos dos o comportamientos. II-A. Criterio A: Objetivos Educacionales

A. Criterio Objetivos Educacionales A0. Denominacin La denominacin del ttulo corresponde o no con similares nacionales o internacionales? A1. Misin y Visin A11. Docentes Porcentaje de profesores que conocen la misin y la visin. A12. Estudiantes Porcentaje de estudiantes que conocen la misin y la visin. A2. Perfil Consultado Documentacin a cerca de los procesos que permiten definir el perfil de egreso de una carrera. A3. Perfil Publicado Porcentaje de estudiantes que conocen el perfil de egreso. A4. Sistema de seguimiento a graduados A4.1. Sistema Implementado La carrera cuenta con polticas y un responsable para monitorear el cumplimiento del perfil de egreso. A4.2. Resultados Conocidos Porcentaje de estudiantes que conocen los resultados del monitoreo. A5. Evaluacin por pares Existe un reglamento para la evaluacin de los contenidos de las materias por pares y se ha aplicado la evaluacin de por lo menos el veinte por ciento de estas.

Cuadro I I NDICADORES DEL CRITERIO O BJETIVOS E DUCACIONALES

B. Currculo B1. Plan curricular Segn la malla curricular, el estudiante posee todos lo logros del aprendizaje especificados en el perfil y en los niveles indicados. B2. Slabos Porcentaje de materias del plan curricular que tienen slabos completos (contenidos, logros del aprendizaje, evaluacin). B3. Currculo equilibrado Matemticas, ciencias bsicas e informtica: 25% Ciencias bsicas: 20% Ciencias profesionalizantes: 20% Prcticas y laboratorios: 25% Materias de educacin general: 10% Suma Abs ((% ideal - % real) / % ideal)

De acuerdo a la metodologa propuesta por el CEAACES [2], los objetivos educacionales de la carrera son declaraciones establecidas por los responsables de una carrera que describen de forma amplia los logros profesionales y de desarrollo de la carrera de los egresados. El cuadro I resume los sub-criterios e indicadores del criterio objetivos educacionales. II-B. Criterio B: Currculo

El CEAACES [2] establece que el currculo es el resultado de la planicaci n de cursos, actividades, pr cticas internas y o a externas y otros elementos que permitan al estudiante alcanzar el perl de egreso y los resultados o logros del aprendizaje al t rmino de la carrera. El currculo no detalla cada curso sino e que especica areas de concentraci n de conocimientos de la o carrera. El plan curricular relaciona las materias del currculo con los resultados o logros del aprendizaje a ser desarrollados durante la formaci n profesional. El plan o malla curricular o incluye los niveles de los resultados o logros del aprendizaje (inicial, medio, avanzado) alcanzados en cada asignatura o componente que otorga cr ditos para la carrera. Cada materia e de la carrera debe contar obligatoriamente con un slabo o programa de la materia que especique claramente: 1. los contenidos, 2. los resultados o logros del aprendizaje a ser desarrollados y 3. los mecanismos utilizados para evaluarlos.

INDICADORES DEL

Cuadro II C RITERIO C URRCULO I

El slabo debe incluir adem s la bibliografa de base y la a bibliografa complementaria. Debe existir constancia de que estas han sido objeto de revisiones peri dicas que permitan o la actualizaci n del plan curricular. El cuadro II resume o los indicadores del criterio Currculo, donde la valoraci n o del indicador Currculo Equilibrado se basa en la suma de los porcentajes de desviaci n con respecto porcentaje ideal o por grupo de materias. La valoraci n nal se realiza por o comparaci n (benchmarking). o

II-C.

Criterio F: Resultados o Logros del Aprendizaje

Los resultados o logros del aprendizaje describen lo que los estudiantes deben conocer y ser capaces de hacer al momento de graduarse, al terminar una asignatura o un grupo de las mismas, as como especica las formas en que esto va a vericarse. El criterio Resultados o logros del aprendizaje se divide en dos sub-criterios: 1. Resultados o logros del aprendizaje especcos y 2. Resultados o logros del aprendizaje gen ricos. Mientras el primer sub-criterio hace e referencia a los conocimientos, habilidades o actitudes que se esperan puedan ser demostradas por estudiantes de la carrera objeto de evaluaci n, el segundo sub-criterio corresponde o a los conocimientos, habilidades o actitudes comunes para todas las carreras. Los cuadros III y IV listan los indicadores de los Resultados o Logros del Aprendizaje junto con una descripci n b sica. Estos indicadores deben especicar en cada o a materia relacionada con el resultado del aprendizaje el nivel que debe ser alcanzado y la manera de medirlo o evidenciarlo. Para el primer proceso de evaluaci n y acreditaci n el o o CEAACES exigir solamente que para cada resultado del a aprendizaje enunciado por la carrera, esta tenga denidos mecanismos para evidenciar el resultado y la manera de medirlo. En la renovaci n de la acreditaci n de acuerdo a lo dispuesto o o en el art. 95 de la LOES, a las que han sido acreditadas, se deber demostrar el grado en que los resultados o logros a del aprendizaje se han alcanzado, mediante la descripci n o del nivel logrado en cada resultado de aprendizaje. De igual forma se deber demostrar al equipo evaluador las evidencias a que justiquen los niveles de logro de cada resultado de aprendizaje. III. M ETODOLOGAS Y E XPERIENCIAS PARA EL D ISE NO I DE M ATERIAS EN I NGENIERA I

F1. Resultados Especficos F1A. Aplicacin de Matemticas y CCBB de la Carrera F1A1. Aplicacin de Matemticas Formulacin y solucin de modelos que describan el comportamiento y operacin de procesos y sistemas fsicos, qumicos, biolgicos y de procesamiento de informacin. F1A2. Aplicacin de CCBB Utilizacin de los principios bsicos de las ciencias y la ingeniera con el propsito de analizar la operacin y rendimiento de procesos y sistemas. F1B. Diseo de Experimentos F1B1. Diseo y Conduccin de Experimentos Planificacin de un experimento que rena la informacin adecuada que permita un anlisis objetivo que conduzca a deducciones vlidas con respecto al problema establecido. F1B2. Anlisis de Datos e Interpretacin de la Informacin Transformacin de un conjunto de datos a travs del uso de mtodos y tcnicas adecuadas con el objetivo de poder verificarlos y llegar a conclusiones que acepten o permitan rechazar la validez de un experimento. F1C. Diseo de Ingeniera F1C1. Identificacin y Definicin del Problema Identificar los deseos y necesidades, sean stos formulados o implcitos que motivan el esfuerzo del diseo y traducirlos y sin ambigedades. F1C2. Planificacin, Control del Diseo y Modelizacin Desarrollo una estrategia general para el diseo, incluyendo los pasos que le permitan la descomposicin de un problema de diseo en subtareas, priorizacin de las sub-tareas, establecimiento de un cronograma e hitos mediante los cuales se puede evaluar el progreso en la ejecucin del diseo. F1C3. Factibilidad, Evaluacin, Seleccin y Comunicacin Evaluacin de la factibilidad de las distintas alternativas o soluciones propuestas considerando las restricciones establecidas as como las restricciones implicadas por el diseo. F1D. Solucin de Problemas de Ingeniera F1D1. Identificacin y Formulacin del Problema Identificar un problema a travs de la aplicacin de un conjunto de principios que pueden conducir a plantearse interrogantes. F1E. Herramientas de Ingeniera F1E1. Identificacin y Aplicacin de Herramientas Identificar las habilidades, tcnicas y herramientas de ingeniera para la aplicacin en la resolucin de problemas de su profesin. F1E2. Aplicacin de Herramientas Aplicar las habilidades, tcnicas y herramientas de ingeniera para la solucin de problemas de ingeniera.

El Comit de Acreditaci n para Ingeniera y Tecnologa e o (Accreditation Board for Engineering and Technology ABET), creada en 1932 por siete sociedades de ingeniera en Estados Unidos, adopt en 1997 el proceso de acredio taci n EC2000 (Engineering Criteria 2000), en su momento o considerado un enfoque revolucionario. EC2000 se enfoca en aquello que se aprende en lugar de aquello que se ense a, n losofa que se reeja en todos sus programas de acreditaci n. o La acreditaci n es un proceso que tiene por objeto denir o un mecanismo estructurado para medir, evaluar y mejorar la calidad de una carrera. Por otro lado, la acreditaci n entrega o informaci n sobre la calidad de la educaci n tanto a futuros o o estudiantes as como a posibles empleadores de los graduados. Si bien las carreras de la Universidad de Cuenca han sido reconocidas como programas que forman profesionales de alta calidad, es imprescindible que este reconocimiento se realice en forma explcita por organismos externos independientes como un medio para fortalecer y validar el prestigio alcanzado. En un mundo contempor neo altamente competitivo, es necea sario establecer mecanismos que m s all de formar buenos a a profesionales faciliten tambi n su movilidad a nivel global. e

Cuadro III I NDICADORES DEL C RITERIO R ESULTADOS E SPECFICOS DEL I A PRENDIZAJE

Los criterios seleccionados por la CEAACES para evaluar la calidad de las carreras coinciden en gran medida con los utilizados por ABET, coincidencia particularmente importante en aquellos criterios relacionados con los objetivos educacionales y los logros del aprendizaje. Las guras ?? y 2 se alan n con azul obscuro los criterios que coinciden en los procesos de acreditaci n propuestos por el CEAACES y ABET, entre o los cuales se encuentran los criterios Logros del Aprendizaje, Objetivos Educacionales y Currculo. Las siguientes secciones abordan en su orden revisiones bibliogr cas sobre los siguiena tes criterios: Objetivos Educacionales, Logros del Aprendizaje y Currculo. III-A. Objetivos Educacionales

A pesar de la poca atenci n que la literatura ha entregado al o criterio 2 de ABET, el cual corresponde con el criterio A del

F2. Resultados Genricos F2A1. Cooperacin Evidencia la capacidad del estudiante para trabajar conjuntamente con otros para un mismo fin. F2A2. Comunicacin Transmitir informacin y conocimiento a los otros miembros del equipo, para facilitar el desarrollo del proyecto o trabajo. F2A3. Manejo de Conflictos Capacidad del estudiante para resolver conflictos, es decir, cuando se manifiestan tendencias contradictorias en el equipo. F2A4. Estrategia y Operacin Establecer lneas estratgicas desde el punto de vista de su campo profesional para la consecucin de los objetivos y metas del proyecto o trabajo. F2B. Trabajo en Equipo Capacidad de los estudiantes para trabajar como parte de un equipo de profesionales de diferentes reas. F2C. Comportamiento tico F2C1. Responsabilidad Profesional Evala la aceptacin de las consecuencias de sus actos en sus relaciones profesionales con el estado, con personas, con objetos o productos, en situaciones de dilemas ticos en el campo de la profesin. F2C2. Conocimiento de Cdigos Profesionales Conocimiento de los cdigos profesionales, que lo obligan legal y moralmente a aplicar sus conocimientos de forma que beneficien a sus clientes y a la sociedad en general. F2D. Comunicacin Efectiva F2D1. Comunicacin Escrita Efectividad de la comunicacin escrita del estudiante. F2D2. Comunicacin Oral Efectividad de la comunicacin oral del estudiante. F2D3. Comunicacin Digital Evala la efectividad de la comunicacin a travs de medios digitales utilizando las tecnologas de la informacin. F2E. Compromiso de aprendizaje continuo F2E1. Reconocimiento de Oportunidades Capacidad para identificar y reconocer las oportunidades de aprendizaje necesarias para el desarrollo y mejoramiento continuo en el campo de conocimiento relacionado con su profesin. F2E2. Compromiso con el Aprendizaje Capacidad del estudiante para establecer y seguir sus propias estrategias a nivel general para continuar aprendiendo a lo largo de su vida. F2F. Conocimiento del Entorno Contemporneo F2F1. Inters por Temas Contemporneos Inters del estudiante para mantenerse informado sobre temas contemporneos y la utilizacin adecuada de diferentes fuentes de informacin. F2F2. Anlisis de Temas Contemporneos Capacidad del estudiante para analizar temas contemporneos y su relacin con su profesin

H. Investigacin Formativa

I. Vinculacin con la Colectividad A. Objetivos Educacionales

G. Ambiente Institucional Criterios de Acreditacin Nacional

B. Currculo

F. Resultados o Logros del Aprendizaje

E. Gestin Acadmica Estudiantil

D. Cuerpo Docente

C. Infraestructura, Equipamiento

Figura 1. Criterios de la CEAACES

8. Soporte

9. Criterios del Programa 1. Estudiantes

7. Infraestructura Criterios de Acreditacin ABET 6. Cuerpo Docente 2. Objetivos Educacionales del Programa

5. Currculo

3. Resultados del Programa 4. Mejora Continua

Figura 2. Criterios de ABET

que deberan tener las siguientes caractersticas: 1. Consistentes con la misi n de la instituci n o o 2. Consistentes con las necesidades de una circunscripci n o regional y de partes interesadas 3. Comprensivos, deben proveer una visi n general de todo o el programa 4. Consistentes con los otros criterios 5. Denidos con un detalle adecuado 6. Escritos de forma que pueden ser cualitativa o cuantitativamente medibles 7. Flexibles 8. Publicados De acuerdo a Carter, Brent y Rajala [5], cada carrera debe contar con procedimientos bien denidos y efectivamente implementados para generar y evaluar los Objetivos Educacionales. A pesar de que la acreditaci n no impone procesos, o existen est ndares que emergen de la literatura; en base a lo a cual se determina que el proceso para determinar y evaluar los objetivos educacionales debe:

Cuadro IV I NDICADORES DEL C RITERIO R ESULTADOS G EN E RICOS DEL A PRENDIZAJE

CEAACES (Objetivos Educacionales - OE), este es reconocido como el m s importante de todos los criterios [5], debido a que a juega un rol importante en la mejora continua de los programas de ingeniera. Los Objetivos Educacionales (O.E.) son los menos concretos pues no proveen de guas claras a cerca de lo que este criterio debera incluir. Carter, Brent y Rajala [5] de North Carolina State University proponen un procedimiento para denir en forma operacional el criterio 2 de ABET. Los objetivos educacionales son metas amplias de cada programa

LISTA DE PARTES INTERESADAS Categoras de personas que son afectadas por una carrera

RELACION ENTRE LOS O.E. Y LAS NECESIDADES DE LAS PARTES INTERESADAS Debe ser Validado en conjunto con las partes interesadas RELACION ENTRE O.E. CON OTROS CRITERIOS Crear una matriz para relacionar los objetivos educacionales con los logros del aprendizaje DOCUMENTAR LAS ACTIVIDADES RELACIONADAS CON LA DETERMINACION DE LOS O.E. Importante para la Escritura de reportes PROCEDIMIENTO PARA REVISIN PERIDICA DE LOS OBJETIVOS Como base para la mejora continua

DESCRIPCION DE LOS REPRESENTANTES DE LAS PARTES Establecer mtodos para obtener la participacin de los representantes

ANLISIS DE LA MISIN INSTITUCIONAL Conseguir documentos clave: misin, planes a largo plazo.

PLAN PASO A PASO PARA GENERAR OBJETIVOS Fechas, plazos, informacin a obtener, personas responsables. LISTA FINAL DE OBJETIVOS Amplios, comprensivos, especficos para ser medidos pero flexibles para cubrir la mayor parte de las partes interesadas.

DESCRIPCIN DEL PROGRAMA COMO UN SISTEMA CON PARTES INTERELACIONADAS Dirigidas por los O.E.

Cuadro V TAREAS A REALIZAR PARA DETERMINAR LOS OBJETIVOS

EDUCACIONALES

1. Involucrar a los elementos relacionados con la carrera: estudiantes, profesores, empleadores, ex-alumnos. 2. Considerar la misi n de la instituci n. o o 3. Evaluaci n peri dica de los OE. o o 4. Determinar los medios para mejorar las carreras a partir de los resultados de la evaluaci n. o 5. Formar parte de un sistema m s amplio: logros del a aprendizaje, currculo. La combinaci n de las caractersticas de los OE con el o proceso para evaluarlos y generarlos proveen el n y los medios, aquello que se debe generar junto con el proceso a seguir. Como resultado de la integraci n entre el n y los o medios, Carter, Brent y Rajala [5] sugieren un conjunto de tareas que pueden realizar las carreras para determinar los objetivos educacionales. El cuadro V muestra estas tareas, de las cuales cobran especial importancia para la acreditaci n o aquellas que especican la relaci n con otros criterios, las o revisiones peri dicas y la descripci n del programa como un o o sistema con partes relacionadas unas con otras. III-B. Logros del Aprendizaje

Los indicadores relacionados con los logros del aprendizaje cubren un espectro amplio de cualidades que deberan tener los graduados, amplitud que junto con el bajo grado de especicidad de los indicadores entregan exibilidad para alinear el aprendizaje con los objetivos de un programa acad mico. Esta e exibilidad ha generado varias formas de denir y medir las cualidades de los graduados (logros del aprendizaje), situaci n o que se reeja en el alto n mero de publicaciones (e.j. [6], [7], u [8]) que abordan temas relacionados con el criterio 3 de la ABET (Learning Outcomes). De acuerdo a Bestereld-Sacre et al. [6] la amplitud de la evaluaci n as como su nivel de o especicidad son dos aspectos que deben considerarse cuando

se eval an los logros del aprendizaje de los estudiantes. u En el ambito de la amplitud de la evaluaci n, Nichols [9] o menciona que los logros del aprendizaje son descripciones de lo que las facultades esperan que los estudiantes conozcan (cognitivo), piensen (actitud) o hagan (comportamiento) cuando completan su carrera. Por otro lado existe una atenci n o creciente entre los educadores (incluyendo educadores en ingeniera) sobre habilidades de orden mayor como el pensamiento crtico [10]. Al igual que los 11 criterios sobre logros del aprendizaje de ABET, los criterios de la CEAACES consideran los elementos cognitivo, de actitud y comportamiento. Por ejemplo, mientras el conocimiento del entorno contempor neo a es un aspecto de adquisici n de conocimiento, la identicao ci n y formulaci n de problemas pueden considerarse como o o habilidades que requieren pensamiento crtico. Finalmente, la aplicaci n de habilidades, t cnicas y herramientas de ino e geniera es un aspecto relacionado con el comportamiento (hacer). La integraci n de estos tres elementos constituyen o una herramienta adecuada para denir un logro del aprendizaje especco. En cuanto al nivel de especicidad, Bestereld-Sacre et al. [6] menciona que es necesario denir operacionalmente los logros del aprendizaje del estudiante como un medio para evaluar carreras de ingeniera, y dene estos logros como manifestaciones medibles y observables del conocimiento aplicado. A pesar de que el nivel de especicidad es bastante alto en el caso de los indicadores de la CEAACES, estos indicadores deberan ser alineados con las necesidades de cada carrera y especicados a n m s de ser necesario. En u a contraste, el nivel de especicidad de la ABET es bastante bajo, los criterios son vagamente construidos con la nalidad de que cada carrera dena su propio nivel de especicidad. Por lo tanto ABET considera las particularidades de cada carrera de ingeniera. En cualquier caso, cada uno de los logros del aprendizaje del EC-2000 deben reejar la integraci n de o aspectos cognoscitivos y de comportamiento (conocer y hacer). Bestereld-Sacre et al. [6] hacen uso de la taxonoma presentada por Bloom [11] para detallar los logros del aprendizaje. Esta taxonoma est basada en seis niveles cognoscitivos: a conocimiento, comprensi n, aplicaci n, an lisis, sntesis y o o a evaluaci n. Adicionalmente Besterleld et al. [6] hacen uso o de un atributo afectivo: valoraci n. Estos 7 componentes son o distribuidos en las categoras de Nichols [9]: 1) conocimiento y compresi n (cognoscitivo); 2) aplicaci n, an lisis, sntesis y o o a evaluaci n (comportamiento); y 3) valoraci n (actitud). Estos o o niveles de Bloom son traducidos en logros del aprendizaje para facilitar la medida de los atributos. Los cuadros VI y VII son tomados de Bestereld-Sacre et al. [6] y muestran los atributos relacionados con dise o y conducci n de experimentos. Si n o bien el dise o y conducci n han sido tratados individualmente n o en el cuadro VI, el conocimiento y comprensi n del cuadro o VII se aplica tanto para dise o como para conducci n de n o experimentos. En otro esfuerzo para entregar especicidad a los logros del aprendizaje Strauss y Terenzini [7] desarrollan y eval an una u medici n basada en 36 atributos que valora el rendimiento de o

HABILIDADES DE ANLISIS Y DISEO Disear soluciones para cubrir necesidades Aplicar procedimientos de diseo sistemtico para problemas conocidos Definir problemas clave en ingeniera Formular un rango de soluciones para problemas de ingeniera Entender los aspectos esenciales del proceso de diseo de ingeniera Aplicar conocimiento especfico de ingeniera ASPECTOS SOCIALES Y GLOBALES Entiende aspectos contemporneos (econmicos, medio ambientales, polticos, etc). Entiende decisiones de ingeniera y aspectos contemporneos. Entiende el impacto de las soluciones de ingeniera en el contexto social. Utiliza el conocimiento de aspectos contemporneos para la toma de decisiones en ingeniera. Entiende el impacto de las soluciones de ingeniera en un contexto global. CDIGOS Y TICA Entiende el cdigo de tica de la ingeniera. Considera aspectos ticos cuando trabaja en problemas de ingeniera. Trabaja en base a aspectos ticos de la ingeniera. Entiende cdigos tcnicos y estndares. Se comporta profesionalmente. HABILIDADES EXPERIMENTALES Analiza evidencias o datos de un experimento. Interpreta resultados de un experimento. Es capaz de llevar adelante un experimento. Es capaz de disear un experimento. APLICACIN DE HABILIDADES DE INGENIERA Aplica herramientas de ingeniera en la prctica de la ingeniera. Aplica habilidades de ingeniera en la prctica de ingeniera. Aplica tcnicas de ingeniera en la prctica de profesional. Integra tcnicas, habilidades y herramientas para solucionar problemas del mundo real. HABILIDADES GRUPALES Trabaja con otros para alcanzar objetivos de equipo. Trabaja en equipos de personas con habilidades y formacin diferente. Trabaja en equipos donde necesitan aplicarse conocimiento e ideas de mltiples disciplinas de ingeniera. APRENDIZAJE CONTINUO Est preparado para adquirir y aplicar nuevas tecnologas. Desea tomar ventaja de las nuevas oportunidades para aprender. Es capaz de aprender y aplicar nuevas tecnologas y herramientas. APLICACIN DE HABILIDADES BSICAS Aplica conocimiento de matemticas. Aplica conocimiento de ciencias fsicas.

Cuadro VI ATRIBUTOS PARA EL DISE NO Y CONDUCCI ON DE EXPERIMENTOS

Cuadro VIII ATRIBUTOS ESPECFICOS DE LOS LOGROS DEL APRENDIZAJE (EC2000) I

Cuadro VII C ONOCIMIENTO Y COMPRENSI ON ( DISE NO Y CONDUCCI ON )

los estudiantes con respecto de los logros del aprendizaje de ABET. Este trabajo parte de una exploraci n que dene 286 o atributos utilizados por investigadores y evaluadores para medir las cualidades de los graduados. Este n mero inicial de 286 u es posteriormente reducido a 38 en base a discusiones entre miembros del equipo del proyecto as como entre profesores de la Universidad de Pennsylvania con amplia experiencia en acreditaciones ABET. Dos atributos son eliminados posteriormente en base al an lisis de las respuestas obtenidas en una a prueba piloto con estudiantes que han alcanzado m s de 72 a cr ditos. Los 36 atributos (cuadro VIII) son nalmente utilizae dos para encuestar a una poblaci n de 12621 estudiantes cerca o de graduarse en diferentes carreras de ingeniera. Esta lista de atributos podra ser considerada como un buf de logros e especcos a desarrollar como parte de un curso o programa, lista que facilitara por una parte la medici n de los logros del o aprendizaje y por otra parte la construcci n de herramientas de o evaluaci n adecuadas. Parte de estas herramientas podran ser o las encuestas (mediciones indirectas) o las preguntas y tareas especcas que tienen que contestar/realizar los estudiantes como parte de un curso (materia) determinada (mediciones directas).

III-C.

Currculo

Misin Institucional Misin del Programa Objetivos Educacionales Logros o resultados del aprendizaje Objetivos del aprendizaje

Universidad Facultad de Ingeniera, Carreas Carreras Currculo por carrera Materia

El criterio para evaluaci n del currculo es parte del CEAAo CES as como de ABET. A pesar de que el currculo no tiene el mayor peso dentro del esquema del CEAACES es sin duda el criterio m s importante porque es la base para cumplir a con los logros del aprendizaje. Una adecuada planicaci n o curricular facilitar no solo la consecuci n de los logros del a o aprendizaje sino asegurar que estos ultimos est n alineados a e con los objetivos educacionales de una carrera as como con la misi n de una facultad dentro en una universidad. o Felder y Brent [12] establecen que una vez denidos los objetivos educacionales de la carrera es necesario denir su n cleo, es decir un grupo de materias que permitan alcanzar u el conocimiento, las habilidades y la actitud especicadas en los resultados o logros del aprendizaje. Para nuestro caso las materias profesionales de ingeniera seran las primeras candidatas sin dejar de lado cursos obligatorios impartidos por otras facultades (humansticas, ingl s). Cada curso debe contar e con objetivos de aprendizaje especicados mediante acciones observables (verbos) que permitan evidenciar el conocimiento, las habilidades y actitudes adquiridas. Los objetivos del aprendizaje de cada materia relacionados con los resultados o logros de la carrera deben alcanzarse en cada edici n de un o curso sin importar quien lo imparte. A pesar de que se pueden especicar objetivos adicionales, aquellos relacionados con los resultados del aprendizaje no varan. Para manejar la relaci n objetivos educacionales - logros del o aprendizaje de las carreras, la CEAACES sugiere la construcci n de 3 matrices de evaluaci n de carreras. La primera matriz o o con la descripci n de los resultados o logros del aprendizaje o permite mostrar c mo estos aportan al cumplimiento de los o Objetivos Educacionales de la Carrera. Mientras la segunda matriz describe la relaci n entre los cursos del currculo y los o resultados o logros del aprendizaje, la tercera matriz agrega columnas con los objetivos educacionales con la nalidad de determinar la medida en que las materias contribuyen con los logros o resultados del aprendizaje y con los objetivos educacionales. Felder y Brent [12] sugieran la construcci n de una o matriz que apoya la construcci n de las 3 anteriores propuestas o por la CEAACES. Esta matriz (ejemplo en el cuadro IX) relaciona los objetivos de aprendizaje de cada materia con los resultados o logros de aprendizaje de la carrera, informaci n o que puede servir como apoyo para construir las dos matrices propuestas por la CEAACES. Los valores 1, 2 y 3 en cada celda de esta matriz denotan respectivamente una relevancia ligera, moderada y sustancial de los objetivos de aprendizaje en los logros o resultados. La gure 3 describe el proceso para la de denici n de los resultados del aprendizaje a nivel de o curso compatibles con la misi n institucional. o III-C1. Evaluaci n del aprendizaje: Para garantizar que o una evaluaci n es v lida y conable es necesario utilizar varias o a m todos para obtener y vericar los resultados (triangulaci n). e o Felder y Brent [12] establecen algunos m todos de evaluaci n e o a nivel de carrera (C) y a nivel de materia (M) de los cuales se mencionan los m s importantes: entrevistas y encuestas a a

Figura 3. Proceso para denir resultados a nivel de materia [12]

Cuadro IX E JEMPLO DE MATRIZ OBJETIVOS DEL APRENDIZAJE - LOGROS

ex-alumnos y a empleadores (C), ofertas de trabajo y salarios iniciales (C), rendimiento en pasantas y en aprendizaje basado en problemas (C,M), tareas, reportes y pruebas parte del dise o n de la materia (C,M), pruebas estandarizadas (C,M), entrevistas a estudiantes (C,M), portafolio del estudiante (C,M), Pruebas escritas enlazadas con los objetivos del aprendizaje, reportes escritos (M), presentaciones orales (M), propuestas de investigaci n (M), etc. Para calicar estas diferentes formas de o evaluaci n es necesario identicar aspectos del producto o o presentaci n a ser valorados y luego establecer un nivel de o importancia (peso) para cada aspecto [12]. En base a esto se construye una r brica, denida como una forma en la cual u el evaluador asigna una calicaci n num rica a cada aspecto o e

Logros del aprendizaje Taxonoma de Bloom Objetivos de aprendizaje Objetivos del instructor

Tecnologa para la enseanza Clases en aula Laboratorios

Estudiantes

Tcnicas para evaluacin en clase

Instruccin Aprendizaje activo y cooperativo Aprendizaje basado en problemas Otros

Evaluacin

Pruebas

Encuestas Otros

Figura 4. Elementos del dise o de un curso n

especicado [12]. Con el prop sito de generar una r brica o u conable es recomendable triangular entre varios evaluadores quienes deber n llegar a un consenso en cuanto a las caraca tersticas que esta debe poseer. Como se puede observar en la gura 4, La creaci n de o un curso o materia que permita alcanzar logros especcos requiere de esfuerzo en tres dominios [12] 1) Planicaci n: o identicar los contenidos de un curso y denir objetivos de aprendizaje medibles; 2) Instrucci n: implementar m todos o e que permitan que el estudiante alcance los objetivos; 3) Valoraci n y evaluaci n: implementar m todos para determinar el o o e nivel de cumplimiento de los objetivos. IV. D ISCUSI ON

La Universidad de Cuenca ha sido colocada en la m s a alta categora (A) del sistema de clasicaci n de institucio o nes de educaci n superior del Ecuador. Este reconocimiento o tiene singular importancia porque valida la larga tradici n o de formaci n de calidad que se adquiere en este centro de o estudios, importancia que se acrecenta a n m s al tomar u a en cuenta que la clasicaci n se realiza por un organismo o externo a la universidad. Si bien nos encontramos en la categora A, nuestras carreras tambi n necesitan acreditarse e individualmente como un medio para validar la formaci n que o ah se imparte. Como antes, el proceso de evaluaci n previo a o la acreditaci n se realiza por pares acad micos externos a la o e instituci n evaluada. o El presente texto resume una revisi n bibliogr ca de o a metodologas y experiencias que buscan evaluar los logros del aprendizaje en carreras de ingeniera. Los criterios de evalua ci n propuestos por la CEAACES son similares a los criterios o de ABET; particularmente los 11 sub-criterios de los logros o resultados del aprendizaje (learning outcomes) coinciden en las dos organizaciones de evaluaci n. Estos 11 sub-criterios o pretenden determinar si un estudiante posee o no habilidades especcas para el ejercicio profesional en ingeniera. A diferencia de ABET el CEAACES establece indicadores que permiten medir los logros del aprendizaje, sin embargo estos

indicadores no especican formas de valoraci n. La revisi n o o bibliogr ca de experiencias y metodologas que faciliten a el proceso de valoraci n de estos indicadores ha permitido o determinar que existe una discusi n muy amplia a cerca de o esta tem tica y por lo tanto se ha podido acceder a valioso a material que servir de base para desarrollar herramientas que a permitan alcanzar la acreditaci n ante el CEAACES. o Las metodologas y experiencias revisadas en este texto van en la direcci n de centrar la atenci n en una educaci n que o o o privilegia lo que el estudiante aprende sobre lo que el profesor ense a. Para cumplir con esta condici n es necesario establen o cer y desarrollar polticas, procedimientos, reglamentos y por supuesto sistemas inform ticos y de captura y an lisis de datos a a que permitan conocer con certeza el conocimiento, actitudes y habilidades de nuestros estudiantes. Estos resultados guiar n a la b squeda de t cnicas para fortalecer, mejorar y sobre todo u e documentar nuestro sistema de ense anza-aprendizaje. Una n revisi n preliminar de estas herramientas nos indican que los o portafolios de curso, del docente, del estudiante son necesarios para llevar adelante procesos de mejora continua. Es necesario tomar el proceso de acreditaci n como una o oportunidad para establecer polticas de mejora continua en el desarrollo de las actividades en nuestra universidad y particularmente en nuestra facultad. La evaluaci n en s misma o no tiene sentido si no se la considera como un mecanismo que nos permita revisar nuestra situaci n actual y buscar estrateo gias para fortalecer o mejorar nuestras pr cticas acad micas. a e Cualquier proceso de acreditaci n, nacional o internacional, es o un proceso largo y laborioso que requiere de la colaboraci n o y compromiso de profesores, estudiantes y empleados. Tomando en cuenta las similitudes entre los criterios de ABET y el CEAACES, es necesario preguntarse si es oportuno buscar simult neamente la acreditaci n internacional a o ante ABET. Para contestar esta pregunta es imprescindible considerar que otras universidades latinoamericanas est n ya a acreditadas ante esta organizaci n y que esta necesidad emo pieza tambi n a sentirse en universidades nacionales como la e Escuela Polit cnica del Litoral (ESPOL), la cual inici en el e o a o 2008 un proceso para alcanzar la acreditaci n ABET. Se n o desconoce si otras universidades ecuatorianas se encuentran en procesos similares, pero si el proceso de la ESPOL es exitoso seguramente otras universidades ecuatorianas emprender n a tambi n en la tarea de acreditarse internacionalmente. Por otro e lado, empresas alrededor del mundo empiezan a seleccionar personal que proviene de universidades acreditadas, por lo tanto una acreditaci n internacional facilitar que estudiantes o a de universidades nacionales adquieran movilidad para acceder a posiciones en el extranjero. Si bien la acreditaci n intero nacional trae consigo benecios, tambi n es cierto que este e proceso requiere de una inversi n importante cada cinco a os. o n R EFERENCIAS
[1] P. Beneitone, C. Esquetini, J. Gonz lez, M. Malet , G. Siu, and a a R. Wagenaar, Reexiones y perspectivas de la Educaci n Superior en o Am rica Latina, Informe Final Proyecto Tunning. Publicaciones de la e Universidad de Deusto, 2007. 1

[2] CEAACES, Modelo General para la Evaluaci n de Carreras con nes o de Acreditaci n. Consejo de Evaluaci n, Acreditaci n y Aseguramiento o o o de la Calidad de la Educaci n Superior del Ecuador, 2011. 1, 2 o [3] B. Roy, Methodologie Multicritere d Aide a la Decision. Economica, Paris, 1985, vol. 71. 1 [4] C. Gallopin, Indicators and Their Use: Information for Decision-making, en: B. Moldan, S. Billharz y R. Matravers, Sustainability Indicators: A Report on the Project on Indicators of Sustainable Development. John Wiley & Sons., 1997. 2 [5] M. Carter, R. Brent, and S. Rajala, Ec 2000 criterion 2: A procedure for creating, assessing, and documenting program educational objectives, in Proceedings of the ASEE Annual Conference American Society for Engineering Education, 2001. 4, 5 [6] M. Bestereld-Sacre, L. Shuman, H. Wolfe, C. Atman, J. McGourty, R. Miller, B. Olds, and G. Rogers, Dening the outcomes: A framework for ec-2000, IEEE Transactions on Education, vol. 49, pp. 100110, 2000. 5 [7] L. Strauss and P. Terenzini, Assessing student performance on ec2000 criterion 3.a-k. in Proceedings of the 2005 American Society for Engineering Education Annual Conference & Exposition, 2005. 5 [8] L. Albano, R. D. Andrea, P. Mathisen, and G. Salazar, ABET Outcomes Assessment, Civil and Environmental Engineering Department. Worcester Polytechnic Institute, 2000. 5 [9] J. Nichols, A Practitioners Handbook for Institutional Effectiveness and Student Outcomes Assessment Implementation. Agathon Pres, 1995. 5 [10] M. Mentkowski and A. W. Chickering, Linking educators and researchers in setting a research agenda for undergraduate education, Revisions of Higher Education, vol. 11, pp. 137160, 1987. 5 [11] B. Bloom, M. Englehart, E. Furst, W. Hill, and D. Krathwohl, Taxonomy of Educational Objectives: Handbook 1 Cognitive Domain. New York: Longman, 1956. 5 [12] R. Felder and R. Brent, Designing and teaching courses to satisfy the abet engineering criteria, Journal of Engineering Education, vol. 92, pp. 725, 2003. 7, 8