SECRETARA DE EDUCACIN PBLICA

UNIDAD DE INNOVACIN DESARROLLO ACADMICO Y DIRECTIVO

CURSO-TALLER ELABORACIN DE INSTRUMENTOS

(Construccin de Reactivos)

OBJETIVOS DEL CURSO-TALLER

Dar a conocer una propuesta terico-metodolgica para la elaboracin de instrumentos de evaluacin.

Introducir a los participantes en la elaboracin de pruebas escritas vlidas y confiables, que midan el aprovechamiento escolar de los alumnos.

LOGSTICA DEL CURSO-TALLER

Tratamiento referencial de aspectos metodolgicos que se involucran en los procesos de construccin de reactivos e instrumentos

Carcter tericoprctico

Ejercitacin de lo tratado en el plano terico, con nfasis en los procesos de anlisis de materiales y construccin de reactivos Realizacin de todas las etapas que involucra la elaboracin de instrumentos, desde el anlisis de materiales hasta el ensamblaje de los instrumentos definitivos, incluidos los procesos de revisin y validacin

Captacin de Informacin Observacin

y/o

EVALUACIN
Medicin

Juicios de valor en funcin de parmetros

TIPOS DE EVALUACIN
(TEMPORALIDAD)

EVALUACION DIAGNSTICA

Se realiza para conocer el nivel de aprendizajes precurrentes que tienen los educandos para iniciar un curso, rea, asignatura, tema o unidad.

EVALUACION FORMATIVA

Se realiza para conocer el nivel de aprendizajes que han alcanzado los educandos al trmino de cada etapa del proceso enseanza-aprendizaje.

EVALUACION SUMARIA

Se realiza para conocer el nivel de aprendizajes adquiridos por los educandos al trmino del curso escolar.

EVALUACIN DEL APRENDIZAJE

Con referencia a NORMA Con referencia a CRITERIO

Se compara al individuo con los resultados del grupo evaluado. til para establecer el orden o jerarqua de los individuos dentro de un grupo, de acuerdo con sus resultados.

Se comparan los aciertos de un individuo con un criterio absoluto.

til para determinar si se domina o no un contenido; si se cuenta con los elementos mnimos indispensables para saber y saber hacer.

CARACTERSTICAS DE LOS INTRUMENTOS DE MEDICIN

VALIDEZ

CONFIABILIDAD
Permite determinar si un
instrumento mide lo que se quiere medir, cumple la funcin para la cual se construy.

ALGUNOS TIPOS DE VALIDEZ

DE CONTENIDO
EL INSTRUMENTO REFLEJA PERTINENTEMENTE LOS CONTENIDOS A EXPLORAR Y LA RELEVANCIA DE ELLOS ?

DE CONSTRUCTO
EL INSTRUMENTO EXPLORA CONSTRUCTO TERICO ? PERTINENTEMENTE EL

PREDICTIVA
EL INSTRUMENTO PERMITE SUPONER UN COMPORTAMIENTO FUTURO DE UN SUJETO O UNA POBLACIN ?

PROCESO DE ELABORACIN DE INSTRUMENTOS

ANALIZAR MATERIALES

RELACIONAR Y SELECCIONAR CONTENIDOS

ELABORAR TABLA DE ESPECIFICACIONES

NO

APROBAR REACTIVOS

DISCUTIR REACTIVOS

CONSTRUIR REACTIVOS

ENSAMBLAR

ANLISIS DE LOS MATERIALES

El anlisis de contenido de los materiales es un

proceso ordenado, objetivo, cuantitativo y cualitativo. Los materiales son: plan y programas, libros de texto

(libro de alumnos y docentes).

ANLISIS DEL MATERIAL FUENTE

CONTENIDOS REFERENCIAS BIBLIOGRAFICAS

En estas dos columnas el docente deber identificar como estn agrupados los contenidos, de acuerdo a los planes y programas de estudio de su nivel y modalidad educativa.

10

PROCESO PARA EL ANLISIS DE MATERIALES

OBJETIVO: ELABORAR TABLA DE ESPECIFICACIONES

MATERIAL FUENTE

DEFINIR LA UNIDAD DE ANLISIS

ESTABLECER CRITERIOS

DESARROLLAR EL ANLISIS

REPLANTEAR O CORREGIR

NO

REVISIN DEL ANLISIS

SI

RELACIN DE OBJETIVOS O CONTENIDOS

11

MODELO DE ANLISIS
CRITERIOS DE ANLISIS APRENDIZAJES ESPERADOS RELEVANTE SI NO MENSURABLE SI NO OBSERVACIONES

Conocer los antecedentes

Conocer los antecedentes Diferenciar los modelos Conocer los autores de la Esc. alemana Conocer el origen de los autores de la Esc. Humanista, Comparar la funcin de la teora Conocimiento de mtodos de inv. Anlisis del concepto de adaptacin y desadaptacin

Elaborar una entrevista y desarrollar una lista de cotejo en la visita al psiquitrico

12

TABLA DE ESPECIFICACIONES

Con

base

en

los

aprendizajes

seleccionados

producto del anlisis de los materiales, se procede a construir la tabla de especificaciones, que es la estructura o esquema del instrumento.

13

ELABORACIN DE LA TABLA DE ESPECIFICACIONES

UNIDAD DE ANLISIS

CRITERIOS DE ANLISIS

RELACIN DE APRENDIZAJES A MEDIR

IDENTIFICACIN DE LOS NIVELES DE COMPLEJIDAD

TABLA DE ESPECIFICACIONES

14

NIVELES DE COMPLEJIDAD TAXONOMIA

1. HECHOS
En este nivel se alude a procesos de memorizacin. Se identifican y reconocen, objetos, sucesos, ideas o fenmenos en funcin de

sus atributos o caractersticas.

Supone la evocacin o recuerdo de informacin concreta, asociada a smbolos especiales o trminos sencillos directos. Palabras clave: Datos, nombrar, identificar, repetir, qu, quin, cundo, dnde?.

Ejemplos:

El autor de una novela La notacin aritmtica Partes de una planta Recursos naturales de una regin Los nombres de acontecimientos, fechas y lugares Las capitales de los estados

15

NIVELES DE COMPLEJIDAD TAXONOMIA

2. CONCEPTOS Y PRINCIPIOS
En este nivel se reconocen significados, es decir trminos que designan a un conjunto de ideas, sucesos o atributos. Se definen y agrupan propiedades, alrededor de una clase.

Comprensin o uso de un conocimiento e idea especfica, sin la necesidad de agruparla con otras o de conocer sus implicaciones totales.
En el caso de los principios, estos aluden a los fundamentos o bases en los que se apoya la formulacin de un estudio o conocimiento.

Palabras clave: comprensin, explicacin, descripcin, asociacin, diferenciar, interpreta, compara, parafrasea

Ejemplos:

Conceptos Isomorfismo del sistema de nmeros reales y puntos de una recta El ciclo hidrolgico Fundamentos de la nomenclatura empleada en la clasificacin de los climas Los principios del federalismo

16

NIVELES DE COMPLEJIDAD TAXONIMIA

3. APLICACIN DE PROCEDIMIENTOS
Este nivel significa hacer uso del conocimiento. Permite identificar una secuencia de acciones en el tiempo. En procedimientos complejos se evoca la estructura conceptual del sistema.

La conceptualizacin permite realizar relaciones de covariacin, causalidad o prescripciones descriptivo explicativo o prescritiva segn las caractersticas de las relaciones en juego.
Selecciona transfiere y utiliza informacin para completar una tarea

Palabras clave: aplicacin de procedimientos, ordenamiento, secuencias, organizar, clasificar, experimenta, construye.

identificacin

de

Ejemplos:

La organizacin de un debate El algoritmo de las operaciones aritmticas bsicas Metabolismo Transformaciones energticas Los pasos a seguir en la inscripcin de un alumno irregular

17

NIVELES DE COMPLEJIDAD TAXONOMIA

4. RESOLUCIN DE PROBLEMAS
En este nivel se analizan, comprenden y resuelven problemas. Permite el desarrollo del pensamiento divergente. Implica la seleccin y empleo de una o ms reglas, normas y operaciones posibles, a la par del manejo de la estructura terica. Conlleva a un anlisis de medios y fines, supone el empleo de operaciones por analoga o por transferencia.

Palabras clave: anlisis, sntesis, inferir, solucionar, arreglar, contrastar

Ejemplos:

La resolucin de problemas aritmticos. Efectos secundarios de la eliminacin de un eslabn de cadenas alimenticias. La deduccin de la escala de un mapa. Causas, factores y consecuencias que posibilitan la aparicin de acontecimientos o fenmenos.

18

NIVELES DE COMPLEJIDAD TAXONOMIA

5. GENERALIZACIN
Este nivel supone elaboracin de juicios acerca de materiales y mtodos utilizados. Construccin de nuevos planteamientos a partir de relaciones, propiedades,

procesos y/o sistemas.

Lleva a valorar o criticar con base en criterios previamente definidos. Permite combinar ideas para integrar un producto, plan o propuesta nuevos.

Palabras clave: generalizacin, emisin de juicios, evaluacin, construccin de

propuestas, innovacin, plantea hiptesis, disea, planea, justifica qu pasa si?

Ejemplos:

Frmulas generales en ciencias. Procesos de sntesis. Planteamiento de teoremas. Mapas conceptuales.

19

4. RESOLUCIN DE PROBLEMAS
Analiza, sintetiza modela, deriva, interpreta

5. GENERALIZACIN

Alto nivel

Juzga, justifica, propone, disea, critica

2. CONCEPTOS Y PRINCIPIOS
Explica, parafrasea

Bajo nivel
1. HECHOS

3. APLICACIN DE PROCEDIMIENTOS
Calcula, resuelve, determina, aplica

Recordar, reconocer informacin

20

TABLA DE ESPECIFICACIONES

NIVELES DE COMPLEJIDAD UNIDAD CONTENIDOS

T O T A L

Fundament os de la psicologa clnica

Conocer los antecedentes Diferenciar los modelos Conocer el origen de los autores de la Esc. Humanista,
SUBTOTAL

SUBTOTAL

SUBTOTAL TOTAL

21

PROCESO DE ELABORACIN DE REACTIVOS

TABLA DE ESPECIFICACIONES

CONSTRUCCIN DE REACTIVOS

REVISIN Y DISCUSIN EN COLEGIADO REACTIVOS S

NO

REALIZAR CORRECCIONES

22

QUE ES UN REACTIVO

Unidad mnima de una de una prueba

Pregunta o sentencia diseada para explorar la existencia de un conocimiento, habilidad o actitud. Preguntar lo que queremos medir. Se elabora para medir y no solamente preguntar Tiene como fin determinar cuanto sabe el alumno y no demostrar que no sabe.

23

CLASIFICACIN DE REACTIVOS

Segn tipo de respuesta Abierta: Ensayo Respuesta breve o complementacin Canev sin opciones Cerrada: Falso-verdadero Correspondencia Opcin mltiple Canev con opciones

Caractersticas Subjetivos Difcil calificacin e interpretacin

Objetivos Mayor facilidad de calificar exento de interpretaciones

24

NORMAS GENERALES PARA LA CONSTRUCCION DE REACTIVOS

Deben apegarse a la informacin fuente y considerar los contenidos establecidos en la tabla de especificaciones.

Debe plantear un problema o situacin bien definida: incluir los elementos necesarios y suficientes para su solucin, escribirse con claridad.

Deben ser redactarse en trminos sencillos, claros y precisos, con base en el lenguaje propio de nivel, asignatura y grado educativo.

Deben ser independientes entre si para evitar que unos ayuden a contestar otros.

25

NORMAS GENERALES PARA LA CONSTRUCCION DE REACTIVOS

Para cada tipo de reactivo es pertinente sealar el procedimiento de

resolucin.
Debe evitarse formularlos con la misma redaccin utilizada en las fuentes de informacin, excepto cuando se trate de leyes y definiciones, (estas debern entrecomillarse). Debe evitarse el planteamiento de reactivos que incomoden al alumno. Debe evitar involucrar de manera irnica, nombres de funcionarios o instituciones. Evitar la mencin de marcas de productos y/o situaciones que fomenten su consumo y los vicios.

26

NORMAS PARA LOS REACTIVOS DE RESPUESTA CERRADA

Los enunciados debern tener una estructura y extensin similar.

La disposicin de los enunciados y de las opciones de respuesta debe ser azarosa o, en tal caso, ordenarse por su extensin.

Entre la pregunta y las opciones debe haber coherencia gramatical; una

excepcin a esta norma se da cuando se explora correspondencia gramatical.

Los distractores deben erigirse como virtuales soluciones al problema planteado, es decir, deben ser errores de razonamiento. Pero la construccn de estos deben realizarse con la pretensin de que stos sean abordados por los que no saben.

Las opciones propuestas deben estar equilibradas en cuanto a su extensin.

27

NORMAS PARA ELABORAR REACTIVOS DE RESPUESTA ALTERNA (FALSO O VERDADERO)

Ser expresado en forma de enunciado e implicar una sola idea. Ser categricamente verdadero o falso, correcto o incorrecto. El enunciado falso, deber ser susceptible de considerarse como verdadero y no ser fcilmente identificado por absurdo. Evitar el uso de palabras que funcionan como determinantes especficos (siempre o nunca, por ejemplo), ya que inducen la respuesta.

28

NORMAS PARA ELABORAR REACTIVOS DE RESPUESTA ALTERNA (FALSO O VERDADERO)

El bloque de reactivos de respuesta alterna deber aludir a una sola temtica.

En un bloque de reactivos de respuesta alterna, la cantidad de enunciados verdaderos, deber ser similar a la cantidad de

proposiciones falsas.

Un bloque de reactivos de respuesta alterna deber ser relativamente grande, de tal modo que permita apreciar con mayor precisin si un sustentante domina o no la temtica abordada.

29

NORMAS PARA ELABORAR REACTIVOS DE CORRESPONDENCIA (RELACIN DE COLUMNAS)

El bloque de reactivos de correspondencia consta de dos componentes: Un conjunto de preguntas y un grupo de respuestas correctas con opciones distractoras. Tanto preguntas como opciones de respuesta pueden tener una estructura variada (ser nombres, ideas completas, dibujos o grficos). La estructura de las preguntas debe ser la misma. De igual forma, debe ser con el conjunto de opciones (aunque su estructura respecto de las preguntas sea diferente). Se recomienda que tanto las preguntas como las opciones de respuesta sean breves en su expresin. No obstante, en las preguntas la extensin puede ser un poco mayor por ser el planteamiento base.

30

NORMAS PARA ELABORAR REACTIVOS DE CORRESPONDENCIA (RELACIN DE COLUMNAS)

Es recomendable que la cantidad de preguntas en un bloque sea de acuerdo con la extensin y complejidad del contenido a evaluar. En el grupo de respuestas se recomienda incluir dos distractores. Debe evitarse la repeticin de trminos entre el grupo de preguntas y el grupo de opciones de respuesta. Cada una de las opciones de respuesta del bloque debe ofrecer una virtual solucin a cada una de las preguntas. Cada una de las preguntas debe admitir slo una respuesta correcta.

31

NORMAS PARA ELABORAR REACTIVOS DE OPCIN MLTIPLE

La pregunta debe estar bien definida, que tenga sentido propio. La comprensin del problema a resolver no debe de depender de la lectura de las opciones de respuesta.

Slo una de las opciones debe responder correcta y

completamente el problema planteado.

Los distractores no deben ser parcialmente correctos. Slo en el caso en que se pregunte por la opcin ms correcta, y se recomienda resaltar dicha expresin.

32

NORMAS PARA ELABORAR REACTIVOS DE OPCIN MLTIPLE

Las opciones deben guardar entre s un equilibrio en su aspecto gramatical en: sintaxis, gnero, nmero, persona, tiempo y modo, excepto cuando se pregunte por estos aspectos en ingls y espaol.

Debe evitarse la sinonimia o repeticin de trminos entre la base y las opciones de respuesta. En el caso de que la repeticin sea necesaria, debe equilibrarse en todas las opciones.

Debe evitarse el uso de declaraciones negativas en las opciones, pero si fuese necesario hacerlo, debe equilibrarse en las otras opciones (al menos en la mitad de ellas).

33

NORMAS PARA ELABORAR REACTIVOS DE OPCIN MLTIPLE

Si las opciones de respuesta estn constituidas por cifras numricas,

stas deben ordenarse en funcin de su valor (ascendente o descendentemente) y alinearse en referencia con el punto decimal (sea explcito o implcito). Esta norma no procede cuando se trata de

expresiones algebraicas.

No deben plantearse a modo de opciones expresiones del tipo: todas las anteriores, ninguna de las anteriores...

Para fines de controlar en lo posible el factor azar al contestar, se recomienda que, la respuesta correcta se ubique en un porcentaje similar en cada una de las opciones (y sin guardar algn orden o sin seguir repetitivamente un tren de respuestas).

34

NORMAS PARA ELABORAR REACTIVOS DE CANEV CON Y SIN OPCIONES

La pregunta debe expresar con claridad qu se espera como respuesta del sustentante, as como el procedimiento para emitir la respuesta. Dado que este tipo de reactivos es una variante del de opcin mltiple en trminos de su presentacin y de la forma de emitir la respuesta, se deber aplicar la misma normatividad. Para los reactivos de canev sin opciones, tambin se aplican las normas de los reactivos de opcin mltiple, con la diferencia que no se presentan las opciones de respuesta.

35

NORMAS PARA ELABORAR REACTIVOS DE RESPUESTA BREVE

Los reactivos de respuesta breve o complementacin se redactan comnmente como enunciados incompletos, como rdenes o como preguntas que manifiestan el problema o situacin a resolver y que exigen -a manera de respuesta- una palabra o una frase breve susceptible de ser debidamente controlada. Ello implica abordar completamente la gama de posibles respuestas correctas.

El reactivo de respuesta breve debe inquirir sobre un problema nico y bien definido.
El reactivo debe expresarse de manera tal que la repuesta se manifieste con una sola palabra (o elemento, segn el caso) o una frase breve.

36

NORMAS PARA ELABORAR REACTIVOS DE RESPUESTA BREVE

El reactivo debe admitir una sola respuesta que satisfaga

pertinentemente el problema o situacin-, aunque sta pueda ser enunciada con sinnimos. En este sentido, los criterios de calificacin deben considerar dichos sinnimos.

El espacio determinado para la emisin de la respuesta debe

indicarse con una lnea continua. La lnea no debe ser fraccionada aun cuando la respuesta implique ms de una

palabra o elemento.

La extensin de la lnea para la emisin de la respuesta no debe constituirse en un determinante especfico para contestar.

37

ALGUNAS CONSIDERACIONES DE LOS REACTIVOS DE ENSAYO

Los reactivos de ensayo (llamados tambin de composicin o por temas) obedecen a una clasificacin de los instrumentos para indagar bajo un criterio amplio que se refiere al diseo del instrumento y otro ms especfico que tiene que ver con la estructura. Ante este tipo de reactivo, el sujeto sustentante debe dado un planteamientodesarrollar informacin con libertad (acotado nicamente por las condiciones que se establezcan en el planteamiento), demostrar su habilidad para organizar sus ideas respecto del tema que se aborda, manifestar su creatividad y su capacidad para analizar, argumentar, enjuiciar... y plantear soluciones. En este sentido, su uso para explorar habilidades es muy rico (por ejemplo, para observar procesos de desarrollo, sntesis o extrapolacin de informacin). No obstante, quiz slo el maestro de aula con otros indicadores del comportamiento cotidiano del educando- podra controlar mejor la respuesta y sugerir un diagnstico ms atinado.

38

FORMATO PARA EL CONTROL DE REACTIVOS

ASIGNATURA/ BLOQUE/NUCLEO: Qumica (Bloque II) GRADO: Tercero CONTENIDO: Combustibles qumicos. Alcoholes EJES TEMTICOS:

REACTIVO:

18. Lee lo siguiente:

El etanol es el compuesto que se emplea en medicina y se conoce como alcohol de caa o alcohol industrial. De los alcoholes que a continuacin se presentan. Cul es el etanol?.

A) B) C)

CH3 - OH CH3 CH2 -OH CH3 CH2 CH2-OH

D)
No. REAC.: 18

CH3 CH2 CH2 -CH2 -OH

AUTOR:
RC: FECHA:

DGE
B 24/10/99

REF. BIBLIOGRFICA: Plan y Programas de Estudio de Educacin Secundaria 1993 pp. 95 Telesecundaria, Asignaturas Acadmicas, Conceptos Bsicos, volumen I. pp. 443

Nivel de complejidad: 2

39

FORMATO PARA EL CONTROL DE REACTIVOS

ASIGNATURA: GRADO: CONTENIDO: UNIDAD:

REACTIVO:

No. DE REACTIVO: AUTOR: FECHA: NIVEL DE COMPLEJIDAD:

REF. BIBLIO.:

RESPUESTA CORRECTA:

40

CRITERIOS PARA EL ENSAMBLAJE DEL INTRUMENTO

ALGUNAS RECOMENDACIONES PARA CONSTRUIR BUENOS INSTRUMENTOS

Que la prueba sea examinada por otra persona Se recomienda incluir entre tres y cuatro tipos de reactivos, ya que cada uno supone en su resolucin una operacin mental distinta Hacer comprensibles las instrucciones de resolucin.

SECUENCIA CRONOLOGICA

5
GENERALIZA CIBN

2 1
HECHOS
CONCEPTOS Y PRINCIPIOS

3
APLICACIN DE PROCEDIMIENTOS

RESOLUCIN DE PROBLEMAS

GRADO DE DIFICULTAD

NIVEL DE COMPLEJIDAD

41

Pgina del Sistema Nacional de Evaluacin Educativa www.snee.sep.gob.mx Bibliografa de apoyo Instrumentos de medicin del rendimiento escolar. Fernando Carreo Huerta. Ed. Trillas. Anlisis e interpretacin de los resultados de la evaluacin educativa. Irene Livas Gonzles. Ed. Trillas.

42

DIRECCION DE EVALUACION EDUCATIVA

CORREO.

evaluacionpuebla@yahoo.com.mx

TELEFONO. 01-222-2296901
43