Professional Documents
Culture Documents
MANUAL DE INSTRUMENTOS
DE EVALUACIN
FACULTAD DE MEDICINA
CAS- UDD
Santiago, 2014
EDITORA
Janet Bloomfield
COMIT EDITORIAL
Janet Bloomfield
Astrid Jiusan
Constanza Rodrguez
Josefina Santa Cruz
Astrid Valenzuela
COLABORADORES
Carla Benaglio
Marcela Castillo
Ricardo Lillo
Katherine Marn
Andrs Maturana
Ricardo Ronco
Alejandra Rubio
Estimados Acadmicos,
Con el presente manual, queremos poner a su disposicin una herramienta
que puede ser de gran utilidad en vuestra labor como formadores de
profesionales de la salud.
La evaluacin es un motor potente para los alumnos y estmulo primordial
para su estudio y aprendizaje. Para los docentes, es un pilar fundamental de su
quehacer profesional, ya que es el medio para certificar a los estudiantes como
profesionales competentes para servir al pas.
Realizar una evaluacin de calidad constituye, sin embargo, una dificultad
mayor, ya que a pesar de su relevancia para el aprendizaje, no existe un mtodo
nico ni ideal para llevarla a cabo.
Con el presente manual, hemos querido entregar una herramienta que facilite
esta tarea a los profesores. Con este fin, se presentan los instrumentos de
evaluacin de uso frecuente, sealando las condiciones ms indicadas para su
empleo junto a algunos ejemplos. Se hace mencin tambin a algunos
lineamientos de evaluacin de nuestra institucin, lo que promover tener
una unidad de visin sobre este proceso tan relevante en la formacin de los
estudiantes. Por ltimo, se ha incluido informacin en los anexos, para que el
lector pueda complementar algunos contenidos entregados en el cuerpo del
documento.
Esperamos que este trabajo contribuya a su desarrollo como docente y
fomente la introduccin de cambios en sus actuales sistemas de evaluacin,
con el propsito de optimizar el aprendizaje de nuestros estudiantes, del cual
el docente es en gran parte responsable.
Finalmente, como Oficina de Desarrollo Educacional, reiteramos nuestra
permanente disponibilidad para colaborar con los docentes en esta rea y en
otras tareas relacionadas con la enseanza y el aprendizaje de nuestros
estudiantes.
Enero 2014
INDICE
I.
15
15
15
15
20
25
25
28
31
33
33
35
39
44
44
44
47
50
2. EXAMEN ORAL
3. EVALUACIONES PRCTICAS
3.1 OSCE
3.2 Mini C-ex
4. PORTAFOLIO
IV. HERRAMIENTAS DE APOYO COMUNES A LOS INSTRUMENTOS
1. HERRAMIENTAS DE ANLISIS Y REGISTRO
1.1 Pautas de cotejo y Escalas de apreciacin
1.2 Rbricas
2. TABLA DE ESPECIFICACIONES O BLUEPRINT
3. FEEDBACK
V. ANEXOS
1. Pirmide de Miller.
2. Taxonoma de Bloom de habilidades del pensamiento.
3. Tabla de especificaciones, ejemplos.
4. Pautas para revisar calidad de las preguntas de seleccin mltiple.
5. Plantillas para elaborar preguntas de seleccin mltiple.
6. Examen oral, ejemplos.
7. Rbricas.
7.1- Cmo construir una rbrica.
7.2- Rbrica para evaluacin de internado, ejemplo.
8. Escala de apreciacin, ejemplo.
9. Lista de cotejo, ejemplo.
10.Documentos OSCE.
10.1- Cmo elaborar un OSCE?
10.2- Estacin OSCE, ejemplo.
11. Sugerencias para un feedback efectivo.
12. Pauta de evaluacin de portafolio, ejemplo.
13. Frmula para calcular la nota de una prueba.
53
55
56
57
60
63
65
70
70
71
74
76
77
77
83
91
93
95
Qu es evaluar?
Es un proceso sistemtico de obtencin de evidencia para verificar el aprendizaje de los estudiantes, con el propsito de asegurar el logro de los objetivos
y retroalimentar la enseanza.
8 Evaluacin Sumativa: su propsito es dar cuenta de las metas de aprendizaje alcanzadas para certificarlas. Asignar notas o grados, enjuiciar competencias, certificar, promover a otros cursos.
8 Evaluacin Diagnstica: su propsito es identificar los conocimientos previos de los estudiantes, como punto de partida para el nuevo proceso pedaggico.
EVALUAR
EJECUTAR /
APLICAR
PLANIFICAR
/ DECICIDIR
EVALUAR
Cundo Evaluar?
La planificacin de toda actividad de aprendizaje (cursos, pasadas prcticas,
seminarios, etc.) debe incorporar intencionadamente instancias de evaluacin
a lo largo de todo el proceso, ya que cada evaluacin permite tomar decisiones
de ajuste, tanto a estudiantes como a profesores.
Cmo evaluar?
u Utilizando los instrumentos adecuados para medir el logro de cada objetivo
de aprendizaje.
y Retroalimentando cada vez a los estudiantes, en toda instancia de evaluacin. Para progresar en el proceso de aprendizaje ellos necesitan saber qu
han logrado y qu deben mejorar.
Los objetivos corresponden al logro esperado del estudiante durante un perodo determinado de formacin (unidad de aprendizaje, clase, pasanta, semestre, ao curso, seminario, taller, etc.). Responden a la pregunta qu nuevo
desempeo ser capaz de realizar el estudiante al trmino de este perodo?
Los objetivos guiarn la seleccin de contenidos, estrategias metodolgicas y
evaluacin.
8 Medibles a travs de un instrumento adecuado. En relacin al ejemplo anterior, el procedimiento de toma de presin es observable por el docente.
u Considerando que lo que se mide usualmente a travs de pruebas o exmenes termina siendo lo ms valorado, es necesario asegurarse de que el nfasis que se da en la evaluacin resalte lo ms importante que los estudiantes
deban aprender. En este sentido, la evaluacin es un tema de diseo curricular ms que de simple medicin.
x Procurar que la evaluacin est en sintona con las estrategias de enseanza. Ejemplo: si se plantea casos clnicos en una evaluacin, es porque se ha
enseado usando casos clnicos.
y Usar los instrumentos adecuados para evaluar los distintos tipos de objetivos (declarativos, procedimentales y actitudinales). Ejemplo: Para los objetivos actitudinales, se debe evaluar observando el desempeo de los alumnos
con una pauta o rbrica, en una situacin de evaluacin planificada para este
efecto (OSCE, examen prctico).
z Usar diferentes instrumentos. Un solo tipo de evaluacin no permite objetivar el logro de todos los estudiantes dado su heterogeneidad. Adems permite disminuir el sesgo parcial que cada mtodo tiene.
No olvidar que la evaluacin tiene tambin un componente tico y de justicia que se debe considerar en todo momento.
REFERENCIAS
1. Epstein R. Assessment in Medical Education. N. Engl. Med. 2007; 356: 387-96.
2. Mc Aleer S. 2005 Choosing assessment instruments Dent J, Harden R Eds. A Practical Guide for Medical
teacher Textbook. 2005. Chapter 33:302-310.
3. Van der Vleuten CP, Schuwirth LT. Model for programmatic assessment fit for purpose. Med Teach 2012;
34:205-214.
II
Del reglamento UDD hemos extrado los artculos que se relacionan directamente con el quehacer docente en lo referente a evaluacin, y aquellos en los
que hay sugerencias a considerar para optimizar el proceso
de aprendizaje de los alumnos de la facultad.
A partir de dicho reglamento, hemos agregado propuestas que fueron compartidas con los directores y coordinadores de todas las carreras de la salud,
integrando en este captulo las observaciones de cada uno de ellos.
De la Evaluacin Acadmica
ARTCULO 33 (19)
Se entiende por evaluacin acadmica el proceso que mide el trabajo acadmico
del alumno en forma permanente, continua, sistemtica y formativa.
ARTCULO 34
Son procedimientos de evaluacin los que permiten demostrar el dominio o
adquisicin progresiva de conocimientos conceptuales, procedimentales y actitudinales de los estudiantes, entre otros:
- Pruebas orales, exposiciones, debates;
- Pruebas escritas, de respuesta guiada, de respuesta breve, resolucin de situaciones problemticas, elaboracin de esquemas o mapas conceptuales, alternativas, seleccin mltiple, apreciacin de mejor respuesta, ensayos, correspondencia de pares, ordenamiento cronolgico, ordenamiento lgico;
- Informes de investigacin, de visitas, de trabajos en terrero;
- Listas de cotejo, escalas de apreciacin y registros anecdticos; etc.
Ser obligatorio aplicar, a lo menos, dos de estas modalidades evaluativas en cada
asignatura.
Sugerencia
*
ARTCULO 35
Los resultados de la evaluacin sern expresados en notas, de acuerdo con la siguiente escala de calificaciones:
- 7 Sobresaliente
- 6 Muy Bueno
- 5 Bueno
- 4 Suficiente
- 3 Menos que suficiente
- 2 Deficiente
- 1 Malo
La nota final 4.0 corresponder al mnimo de aprobacin de una asignatura o actividad curricular. Dicha aprobacin supone el cumplimiento satisfactorio de a lo menos el 60 % de los objetivos medidos.
Atencin
Se suele cometer el error de disear pruebas con puntaje de 7 (o mltiplos de
7) y /o de asignar puntajes de 1 a 7 por pregunta y luego promediar para obtener la nota final. Con este sistema, el porcentaje de aprobacin equivale a un
57%, resultando menor a lo reglamentado por la universidad.
Para reflexionar
Es justo para el futuro paciente que algunos de nuestros alumnos hayan logrado aprobar con el 40% de los objetivos de un curso no logrados?
Los profesionales formados por nosotros, debieran conformarse con un 60%?
A partir de esta reflexin, es posible definir que en los cursos o pasadas de los
niveles ms avanzados en la carrera, la aprobacin requiera de un 70% de objetivos logrados.
An ms, en cualquier nivel, si el profesor estima conveniente puede elevar el
nivel de la exigencia de su asignatura, acordndolo previamente con el comit
curricular y sealndolo claramente en su programa.
SUGERENCIA
La realizacin de varias evaluaciones con sus
respectivas calificaciones a lo largo del proceso,
facilita el cumplimiento de esta norma y evita
tener porcentajes (ponderaciones) elevados en
las pruebas finales. Y lo ms importante, otorga
mltiples oportunidades al alumno de revisar
sus aprendizajes.
ARTCULO 36.
Toda asignatura o actividad curricular deber considerar como parte de su proceso evaluativo, una evaluacin final de carcter global cuya calificacin tendr una
ponderacin entre un 30% y 50% de la nota del curso.
Esta evaluacin final o examen deber considerar los aspectos centrales del programa de la actividad, midiendo el grado en que el alumno ha alcanzado los objetivos
del Programa.
ARTCULO 40.
En la primera semana del respectivo perodo acadmico, cada profesor deber,
de acuerdo con la Direccin de la respectiva Carrera o Programa, entregar a los
alumnos un programa de la asignatura que contenga adems de otros elementos, informacin precisa sobre el sistema de evaluacin, que incluye los diversos
tipos de evaluacin que se aplicarn durante el curso, sus contenidos y la calendarizacin de stas.
Como la evaluacin debe estar absolutamente alineada con los objetivos, se sugiere desarrollar un programa de evaluacin para la globalidad del curso, indicando cuntas evaluaciones se realizarn, cmo se medirn los distintos objetivos y los tipos de instrumentos que se utilizarn. As mismo, para cada evaluacin
se debe explicitar su propsito, estableciendo una tabla de especificaciones con
MANUAL DE INSTRUMENTOS DE EVALUACIN - FACULTAD DE MEDICINA CAS-UDD 10
ARTCULO 42
Los alumnos debern conocer las notas y correccin de todas las evaluaciones en
un plazo no superior a 10 das hbiles contados desde la fecha en que se aplic el
procedimiento evaluativo.
Adems de la entrega del resultado en el plazo establecido, cada evaluacin
debe incluir, idealmente en forma calendarizada, un tiempo de revisin conjunta con los estudiantes, en que se aclaren dudas y se refuercen conceptos. Es
una instancia clave para el aprendizaje de los alumnos y para retroalimentar al
profesor.
Debemos lograr que los alumnos tomen conciencia de la relevancia del aprendizaje desde los propios errores. As entendern la evaluacin como parte del
proceso y no como producto.
2 . RECOMENDACIONES
PARA LAS EVALUACIONES
2.1. Recomendaciones
para evaluaciones de
aprendizajes tericos.
8 Confeccionar una tabla de especificaciones (blueprint) que contenga los objetivos a evaluar, sus dimensiones observables y los indicadores con que los
evaluar (ejemplo en Anexo 3).
8 Elegir el instrumento que ms se acomode a los objetivos que se va a evaluar y a la estrategia de enseanza utilizada.
8 Revisar la evaluacin en su totalidad para ver si si se estn evaluando los contenidos con los niveles de profundidad con que se trabajaron los objetivos
relacionados con ellos.
8 Considerar en la planificacin de la prueba el tiempo necesario para responderla. Se recomienda 1 a 2 minutos por pregunta de seleccin mltiple dependiendo de su complejidad y el nivel de los alumnos.
8 Intentar que las pruebas tengan al menos una pregunta de desarrollo, que
permita a los alumnos reflexionar y plantear sus ideas por escrito. Recuerde
que la expresin escrita de las ideas es una competencia esperada para todos los profesionales.
8 Validar las evaluaciones con otros docentes involucrados en el proceso antes de aplicarla, para verificar su claridad y recibir sugerencias.
8 Incluir en cada evaluacin un instructivo por escrito y asegurarse que sea ledo y firmado por alumnos. La ODE cuenta con un Instructivo para pruebas
escritas que puede ser adaptado por cada docente en sus evaluaciones.
8 Preocuparse activamente de desincentivar la copia, separando adecuadamente a los alumnos y no permitindoles entrar a la sala con telfonos mviles, tablet, apuntes, etc.
Pregunta mal construida? enunciado de difcil comprensin? Entonces es conveniente revisarla con el equipo de profesores.
Objetivo no logrado? Entonces se debe volver a mirar la forma de enseanza y retomar el contenido con los alumnos para aclarar conceptos.
Se puede pensar en eliminar un tem cuando ha sido bien respondida por menos del 10% de quienes la rindieron. Recomendamos solicitar la asesora de la
ODE antes de decidir eliminar una pregunta una vez rendida la prueba.
8 Evitar publicar las notas, son privadas. Puede utilizarse el nmero de alumno o RUT.
2.2. Recomendaciones
para evaluaciones en
actividades prcticas
o prcticas clnicas.
8 Asegurarse que los tutores estn familiarizados con las pautas de evaluacin, y que stas sean conocidas previamente por los alumnos.
MANUAL DE INSTRUMENTOS DE EVALUACIN - FACULTAD DE MEDICINA CAS-UDD 13
III
1. PRUEBAS ESCRITAS
1.1 De respuesta
estructurada
Cundo no usarlas?
8 Si los objetivos a evaluar requieren observacin directa (actitudinales o procedimentales).
8 Cuando se espera que el alumno desarrolle una hiptesis diagnstica, demuestre un razonamiento clnico, desarrolle un diagrama de flujo o indique
una decisin teraputica basada en el razonamiento.
Exigir del alumno ms profundidad en sus conocimientos que solo memoria: integrar, aplicar conocimientos, interpretar informacin y tomar
decisiones, resolver problemas, etc. Para este efecto y como gua para
la confeccin, se sugiere utilizar los verbos que propone la taxonoma
de Bloom en sus niveles ms altos (Anexo 2) , y redactarlas utilizando
vietas clnicas.
v Al construirla, plantearla de inmediato con 2 o 3 variaciones mnimas , originando formas distintas para utilizar en cursos siguientes, evitando as repetirla antes de 3 aos.
x Se puede facilitar su confeccin utilizando plantillas prediseadas (ver plantillas en Anexo 5).
Ser redactado como vieta clnica, buscando la aplicacin del conocimiento ,privilegiando resolucin de problemas versus preguntas que
requieran slo memoria para ser respondidas.
Evitar las descripciones largas que no aportan a la respuesta, y la informacin superflua. Su extensin no debiera superar 10 a 12 lneas.
Evitar dar pistas gramaticales: debe existir concordancia gramatical entre el enunciado y cada una de las opciones.
Evitar trminos absolutos o ambiguos como: nunca, siempre, generalmente, a veces, mucho, todos.
Errores ms frecuentes
8 Redactar las preguntas con frases como: en relacin a seale lo correcto,
o bien: es cierto que, o escribir: seale la alternativa correcta, en vez de
proponer un enunciado con un problema a resolver.
8 Preguntar hechos poco relevantes del contenido, al creer que este tipo de
pregunta slo permite evaluar conocimiento superficial (memoria).
8 Transgresin de uno o ms de los acpites mencionados en las reglas bsicas descritas antes, para enunciado, pregunta introductoria u opciones
(preguntas en negativo, uso de ninguna o todas las anteriores, discordancia
gramatical, etc).
8 Formular las preguntas pareciendo pedir la opinin personal del estudiante, (cul cree Ud. que es o cul piensa Ud, en vez de: cul es ). La
opinin de l puede no coincidir con lo que se espera, pero es SU opinin
sobre lo preguntado.
Algunos ejemplos
1. Hombre de 65 aos tiene dificultad para levantarse desde una posicin
sentada y enderezar su tronco, pero no tiene dificultad para flectar sus
muslos. Cul de los siguientes msculos es el que est ms probablemente comprometido?
a. Glteo mayor
b. Glteo menor
c. Psoas ilaco
d. Obturador interno
2. Mujer de 42 aos presenta desde hace 2 meses cefaleas matinales, odinofagia,
parestesias linguales, cervicalgia e imposibilidad de sentarse en 90 por intenso
dolor lumbar en el lado izquierdo. Al examen, presenta dolor a la palpacin, a
nivel de apfisis espinosas de C2 a C6., contractura de msculos suboccipitales
bilaterales, erectores espinales, cuadrado lumbar, psoas y tensor de la fascia
lata, todos de predominio derecho.Tiene como antecedentes trabajar como ejecutiva de banco.
Cul es la mejor tcnica para elongar la musculatura occipital de esta paciente?
a- Elongacin esttica.
b- Autoelongacin esttica
c- Elongacin con principio de FNP de inhibicin recproca.
d- Autoelongacin con FNP de inhibicin autgena
3. Paciente de 43 aos ingresa con cuadro de fiebre elevada, crisis de calofros,
anemia y plaquetopenia en el hemograma. Regres hace 14 das de un Safari
en Tanzania. Cul es el diagnstico ms probable, que se debe estudiar sin
demora?
a.- Dengue
b.- Malaria
c.- Fiebre Amarilla
d.- Leptospirosis
MANUAL DE INSTRUMENTOS DE EVALUACIN - FACULTAD DE MEDICINA CAS-UDD 18
REFERENCIAS
1. Haladyna TM. Downing SM, A review of multiple-choice tem writing guidelines.
Appl Meas Educ 2002;15:309-333
2. Case, S. M., & Swanson, D. B. 3 Edicin en espaol, 2006. Constructing written test questions for the
basic and clinical sciences. Philadelphia, PA: National Board of Medical Examiners
Extrado el 27 de febrero de 2013 desde http://www.medbev.umontreal.ca/gtea/NBME_MCQ.pdf
3- Collins, J Writing Multiple-Choice Questions for Continuing Medical Education Activities
and Self-Assessment Modules Radiographics, 2006;2: 543-552
u Un tema general
v Una lista de opciones
w La introduccin o instruccin
x Al menos dos enunciados que contienen el caso a resolver
Ejemplo
3- Introduccin o instruccin
Para cada paciente que padece cansancio en los casos descritos a continuacin,
seleccione de la lista de opciones el diagnstico ms probable.
4- Enunciados o casos relacionados
1. Una joven de 19 aos presenta desde hace una semana, cansancio,
fiebre y odinofagia. Al examen destaca t de 38,3C, linfadenopatas cervicales y hepato-esplenomegalia.
Exmenes: hemograma muestra un recuento de leucocitos de 5.000/mm3
con 80% de linfocitos, muchos de ellos con caractersticas atpicas. La actividad de la aspartatoaminotransferasa (AST, GOT) srica es de 200 U/L. La concentracin de bilirrubina y la actividad de la fosfatasa alcalina sricas se encuentran en valores normales.
Respuesta: I (de la lista de opciones)
MANUAL DE INSTRUMENTOS DE EVALUACIN - FACULTAD DE MEDICINA CAS-UDD 20
Cundo no usar?
8 Si no hay un elemento comn fcilmente identificable para los casos expuestos.
vRedactar la introduccin o instruccin para el conjunto de casos o situaciones clnicas. Es esencial su claridad y precisin ya que indica la relacin entre
los casos y las opciones, aclarando la pregunta que se plantea a los alumnos.
Ejemplo: Para cada paciente en que presenta el tema general escogido (descrito
x Redactar los tems o casos que constituyen la pregunta. Deben tener una
estructura similar, en forma de vietas clnica.
y Revisar los tems. Verificar que haya una sola respuesta correcta para cada
tem y varios distractores razonables. Como control final, se recomienda
que pida a otros profesores revisarlos, sin indicar cul es la respuesta correcta. Si ellos manifiestan alguna dificultad para determinar cul es, modificar
la lista de opciones o el tem completo para eliminar la ambigedad.
Errores ms frecuentes
Los errores son los mismos referidos para las preguntas de seleccin mltiple
habituales, en cuanto a la redaccin del enunciado y de la lista de opciones.
Los ms frecuentes:
8 Preguntar hechos poco relevantes del contenido, privilegiando conocimiento superficial (memoria).
8 Redactar los casos en forma confusa o ambigua, dificultando la identificacin de la respuesta correcta en la lista de opciones.
8 Formular la instruccin pareciendo pedir la opinin personal del estudiante, (cul cree Ud. que es o cul piensa Ud, en vez de cul es). La
opinin de l puede no coincidir con lo que se espera, pero es SU opinin
sobre lo preguntado.
Algunos ejemplos
b) Hombre de 20 aos, consulta en Servicio de Urgencia por dolor toracico intenso y de comienzo sbito en hemitorax izq, con dificultad para respirar . El
campo pulmonar derecho se percibe ms sordo que el izquierdo a la percusin.
Los ruidos respiratorios estan muy disminuidos a izquierda.
Respuesta______
c) Mujer de 55 aos, presenta tos desde hace 3 das, agregndose fiebre, sensacin de cansancio y compromiso del estado general. No refiere dolor torcico. Al examen pulmonar, se encuentra matidez en base izq con vibraciones
vocales aumentadas.
Respuesta______
3. Tema: enfermedades psiquitricas
Instruccin o introduccin: Para cada uno de los siguientes casos clnicos,
elija el diagnstico ms probable de la lista de opciones. Cada opcin puede ser
usada una o ms veces, o bien ninguna.
Opciones:
a. Ciclotimia
b. Delirium
c. Desorden Bipolar
d. Episodio depresivo
e. Episodio manaco
f. Esquizofrenia
a) Hombre de 30 aos presenta delirios persecutorios y alucinaciones auditivas ,
sin alteraciones importantes del nimo.
Respuesta______
b) Mujer de 28 aos, presenta nimo inestable, energa ilimitada y sueo escaso.
Tiene antecedentes de episodios depresivos en el pasado.
Respuesta______
c) Mujer de 40 aos refiere presentar desde hace 2 meses, falta de energa, despreocupacin por su cuidado personal y desanimo.
Respuesta______
FUENTES CONSULTADAS
1. Case, S. M., & Swanson, D. B. 3 Edicin en espaol, 2006. Constructing written test questions for the
basic and clinical sciences. Philadelphia, PA: National Board of Medical Examiners
http://www.nbme.org/PDF/IWG-Sp/IWG-Spanish2006-3.pdf
2. Oxford University Press, online resources center
http://global.oup.com/uk/orc/medicine/cox/01student/emqs/
http://fdslive.oup.com/www.oup.com/orc/resources/medicine/stringer/resources/emqs/ch10/page_02.htm
1.2 De respuesta
abierta
Cundo no usarlas?
8 Cuando el contenido se puede evaluar con preguntas de otro tipo que requieren menos tiempo de correccin, como por ejemplo, preguntas de respuesta breve (Captulo siguiente). Ejemplo: Seale los pasos que se deben
considerar para tomar decisiones ticas. Lstelos en el orden que corresponde.
En cambio, si el objetivo es que el alumno comprenda cada uno de los pasos
y la relevancia de cada cual, sera recomendable una pregunta de desarrollo
como la siguiente: Explique de qu manera la falla en la aplicacin del paso
5 del proceso para la toma de decisiones ticas, impactara su capacidad para
tomar este tipo de decisiones. Presente un ejemplo que ilustre este impacto.
En este segundo caso, los estudiantes pueden presentar una variedad de
ejemplos para ilustrar el impacto y pueden estructurar su respuesta de variadas maneras, las que podrn diferir en precisin, claridad, originalidad y
relevancia entre otros criterios.
v Escriba la pregunta y asegrese que va a permitir a los alumnos mostrar razonamiento crtico, hacer conexiones, que los va a estimular a pensar.
w Las preguntas pueden ser escritas como una afirmacin: Resuma en una pgina el contenido del artculo presentado, considerando la idea principal, tesis
central del autor y dos argumentos dados o como pregunta: Qu papel juegan la ciencia y la tecnologa en la produccin y el desarrollo sustentables?.
y Indique los criteriosde evaluacin, por ejemplo: precisin, claridad , originalidad, organizacin, relevancia.
z Elabore una pauta que mencione los atributos que deber tener la pregunta
para obtener el puntaje total y los puntajes parciales, lo ideal es elaborar
una rbrica (ver Anexo 7.2), pero si no es posible al menos habra que entregar una pauta de correccin.
Asegrese de resguardar que todo lo que se evale, efectivamente se desprenda de las instrucciones dadas al alumno, de lo contrario, no se est brindando una situacin de evaluacin justa al examinado.
Asegrese de que va a disponer de tiempo suficiente para corregir las preguntas en un plazo oportuno.
Errores ms frecuentes
8 Pretender evaluar habilidades de orden superior sin destinar un esfuerzo
importante a escribir una pregunta que suscite en el alumno este tipo de
pensamiento.
8 Preferir las preguntas de ensayo creyendo que benefician a todos los estudiantes. Este tipo de preguntas no beneficia a quienes no tienen habilidades
de comunicacin escrita, puede haber estudiantes que dominan el tema
pero que tienen dificultades para expresar sus ideas.
Algunos ejemplos
1. Lea esta afirmacin y responda la pregunta que aparece a continuacin:
Actualmente hay una tendencia hacia el uso de formas alternativas de medicina. Sin embargo, en el mejor de los casos estos mtodos son ineficaces, y en
el peor, pueden ser peligrosos
Argumente a favor y en contra de esta afirmacin teniendo en cuenta las lecturas
y discusiones que se han realizado durante el curso. Ulilice mximo 2 pginas.
2. Nio,11 meses de edad, presenta retardo de crecimiento, hepatomegalia, esplenomegalia y compromiso auditivo. Ha tenido otitis y bronquitis recurrentes-
FUENTES CONSULTADAS
1. Reiner, C., Bothell, C., Sudweeks, R. & Wood, B. (2002). Preparing effective essay questions,
A self-directed workbook for educators. Extraido el 1 de febrero de 2013 desde
http://testing.byu.edu/info/handbooks/WritingEffectiveEssayQuestions.pdf
2. The MEQ paper: sample questions and model answers (1990). Occas Pap R Coll Gen Pract.1990
November; (46): 50-52. Extraido el 21 de febrero desde http://www.ncbi.nlm.nih.gov/pmc/articles/
PMC2560116/ IELTS Sample Essay Alternative Medicine (n.d.) Extraido el 21 de febrero de 2013
desde http://www.ieltsbuddy.com/ielts-sample-essay.html
3. Modified Essay Questions (MEQs) (n.d.) King Saud bin Abdulaziz University for Health Sciences, College
of Medicine, Department of Medical Education. Extraido el 21 de febrero de 2013 desde http://com.
ksau-hs.edu.sa/eng/images/DME_Fact_Sheets/fact%2015.pdf
8 Cuando las alternativas que habra que utilizar en una pregunta de seleccin
mltiple son complejas de escribir.
Cundo no usarlas?
8 Cuando se pretenden evaluar habilidades prcticas.
8 Si se pretende evaluar en una pregunta temas muy amplios, imposibles de
responder con respuesta breve.
Errores ms frecuentes
8 Pretender evaluar dominios cognitivos muy superiores, habilidades prcticas
o temas muy amplios, que preguntas de este tipo no son capaces de abarcar.
Algunos ejemplos
1. La Sra. Mara le consulta sobre la posibilidad de tener un hijo afectado con la
distrofia muscular de Duchenne porque tiene un hermano que padece la
enfermedad. Usted recuerda que esta condicin est ligada al cromosoma X.
Explique brevemente el riesgo que tiene Mara de ser portadora de la condicin
y sus riesgos de tener un hijo varn afectado con la enfermedad.
2. Carolina y Javiera son gemelas monocigticas de 30 aos de edad. Han sido
sanas, pero Carolina acaba de ser diagnosticada con una depresin severa.
Javiera, que no tiene depresin, sabe que esta enfermedad tiene un componente gentico y quiere saber cul es su riesgo de desarrollarla, dado el diagnstico de su gemela. Nombre y explique 4 mecanismos, que involucren aspectos genticos, que podran explicar por qu Javiera no ha desarrollado
una depresin.
3. Explique cmo algunos animales pueden digerir la celulosa sin producir clulas
digestivas.
4. Algunos zoologistas creen que las limitaciones impuestas por el agua del sistema vascular podran explicar porque los equinodermos no viven en agua fresca
o en tierra seca. Ests de acuerdo con esta hipptesis ? Fundamente .
5. Mencione 2 signos que se auscultan en una estenosis artica.
FUENTES CONSULTADAS
1. Stiggins R., Arter J., Chappuis J. Chappuis S.l (2004). Assess How? Designing Assessments to Do
What You Want. En Classroom assessment for student learning: doing it rigth-using it well, 89-121.
Recuperado de: http://www.pbs.org/teacherline/courses/inst325/docs/inst325_stiggins.pdf Recuperado
23 septiembre 2013
2. TheUniversity of Adelaide. (s.f). Short-AnswerExams. Recuperado de: Recuperado 21 septiembre 2013
Basoredo C. (2010). Criterios para el diseo de pruebas objetivas de respuesta breve o de eleccin de
alternativas. Quaderns digitals: Revista de Nuevas Tecnologas y Sociedad. 65. 1-28. Recuperado de:
http://dialnet.unirioja.es/servlet/articulo?codigo=3668996 Recuperado 21 septiembre 2013
2. EXAMEN ORAL
Descripcin General
Consiste en la evaluacin individual de un estudiante, en la cual uno o ms examinadores formulan preguntas acerca de un determinado tema y el estudiante
responde verbalmente. El tema o pregunta puede ser asignado por la comisin
o sorteado por el estudiante al comienzo del examen, otorgndosele un tiempo
para que lo prepare y luego responda las preguntas de los examinadores.
Bien estructurado, examina no slo la profundidad del conocimiento sino tambin la comprensin de ste. El estudiante se ve enfrentado a la necesidad de
sistematizar sus conocimientos y comunicarlos en forma precisa y clara, estableciendo conexiones entre los temas aprendidos. Una forma de lograrlo es
haciendo contrapreguntas mientras el estudiante expone su respuesta.
Apunta al segundo nivel de la pirmide de Miller. Sin embargo tiene gran relevancia en los cursos clnicos, dado que es una herramienta til para evaluar el
proceso cognitivo que constituye el razonamiento clnico.
8 Efecto de halo.
8 La subjetividad de los examinadores.
8 La variabilidad de criterios de los examinadores.
Estos dos ltimos inconvenientes pueden ser minimizados eligiendo docentes idneos y entrenndolos. Por lo tanto, la participacin de dos o ms
examinadores entrenados por evento junto a la preparacin de una pauta
con las respuestas correctas esperadas, son elementos imprescindibles
para lograr mejorar la confiabilidad del examen.
8 Cuando se espera que el examinado transparente su proceso de razonamiento clnico que implica evaluar la capacidad de aplicar el conocimiento y
MANUAL DE INSTRUMENTOS DE EVALUACIN - FACULTAD DE MEDICINA CAS-UDD 31
efectuar una correcta disquisicin diagnstica, seguida de una toma de decisiones coherente con el razonamiento previo.
Cundo no usarlo?
8 Cuando slo se quiere evocar conocimiento.
8 Cuando se quiere verificar la secuencia de un determinado proceso.
8 Cuando se necesita evaluar habilidades clnicas tales como toma de historia
y examen fsico.
Errores ms frecuentes
* Ejemplos de exmen oral en Anexo 6.
BIBLIOGRAFA
1. Memon MA, Joughin GR, Memon B: Oral assessment and postgraduate medical examinations:
Establishing conditions for validity, reliability and fairness. Adv Health Sci Educ Theory Pract. 2010 May
2. Epstein, R: Assessment in Medical Education N Engl J Med 2007;356:387-96.
3. Wright, AC: El examen oral; apuntes de Diplomado en Educacin Mdica, Pontificia Universidad Catlica
de Chile
3. EVALUACIONES
PRCTICAS
3.1 OSCE
Descripcin General
El OSCE (Objetive Structured Clinical Evaluation) o ECOE en espaol, es una
instancia para evaluar competencias clnicas o las habilidades que son parte de
stas. Evala la competencia a travs de la observacin directa, utilizando
pautas predeterminadas para asegurar la objetividad. Se utiliza para medir el
tercer nivel de la pirmide de Miller (Muestra como). Es preciso, objetivo y
reproducible, permitiendo una evaluacin uniforme de los estudiantes en una
amplia gama de habilidades clnicas.
El formato bsico consiste en un circuito de estaciones secuenciales por las que
los estudiantes rotan, cada una de las cuales representa un problema clnico que
el alumno debe resolver o un procedimiento que debe efectuar. Para cumplir
estas tareas, las estaciones pueden utilizar pacientes entrenados (tambin llamados estandarizados), videos con casos clnicos, fantomas (o muecos de simulacin), exmenes de laboratorio, imgenes, etc., y cuentan con docentes
que observan el desempeo y lo evalan con una pauta (evaluadores).
Este mtodo de evaluacin permite que el estudiante reciba retroalimentacin inmediata de su rendimiento por parte del observador, y en ocasiones,
por el paciente entrenado. Retroalimenta adems a los profesores sobre el
aprendizaje de los alumnos, permitiendo hacer revisin y ajustes al currculo.
v Cuando se debe evaluar un amplio rango de conocimientos y habilidades clnicas a un gran nmero de estudiantes durante un solo perodo de examen.
x Para la certificacin de competencias clnicas: el OSCE considera un estndar mnimo y puede ser capaz de discriminar si el estudiante merece pasar
a la siguiente etapa del curso.
Cundo no utilizar?
u Cuando lo que se va a evaluar corresponde preferentemente al rea cognitiva (sabe o sabe cmo) y es medible con otra forma de evaluacin,
como una prueba escrita, examen oral, etc.
v Cuando no se cuenta con el nmero adecuado de observadores o los recursos materiales necesarios.
Errores ms frecuentes
8 Evaluar en un OSCE contenidos que pueden ser evaluados en un examen
escrito u oral.
8 Utilizar recursos cuya calidad pueda inducir a error (imgenes, radiografas, videos).
FUENTES CONSULTADAS
1. R. M. HARDEN, Centre for Medical Education, The University, Ninewells Hospital and Medical School,
Dundee, Scotland : Twelve tips for organizing an Objective Structured Clinical Examination (OSCE):
Medical Teacher, Vol. 12, No. 314, 1990
2. Marliyya Zayyan: Objective Structured Clinical Examination: The Assessment of Choice Oman Med J.
2011 July; 26(4): 219222.
3. MARGERY H. DAVIS : OSCE: the Dundee experience : Medical Teacher, Vol. 25, No. 3, May 2003,
pp. 255261
Descripcin General
Consiste en la observacin pauteada del desempeo de un estudiante en un
encuentro clnico cotidiano, seguida de una retroalimentacin. El resultado de
esta evaluacin genera un compromiso por parte del alumno para mejorar las
reas deficientes. Se efectan varios de dichos encuentros para obtener un
muestreo representativo del desempeo (validez), los que son observados por
evaluadores diferentes. Esto aumenta la confiabilidad del instrumento y permite verificar la superacin de los dficits. Dichos encuentros pueden, en condiciones ideales, suceder en diferentes escenarios clnicos, tales como servicio
de urgencia, sala de hospitalizados o policlnico, por ejemplo.
Su objetivo es verificar el desarrollo de competencias clnicas en estudiantes
que se encuentran en etapas finales de la prctica clnica de la carrera. Por lo
tanto apunta al nivel ms alto de la pirmide de Miller en trminos de autenticidad profesional, ya que el estudiante ve evaluada su capacidad de usar sus
conocimientos, habilidades y criterio para llevar adelante eficientemente los
problemas de su prctica en diferentes escenarios clnicos.
Se utiliza para evaluar destrezas en las siguientes reas:
Cundo no usarlo?
8 Cuando se quiere evaluar la adquisicin de aprendizajes tericos.
8 Cuando se necesita evaluar tcnicas de examen fsico o anamnesis sin considerar el contexto clnico (nivel 3 pirmide de Miller).
v Control de un paciente hospitalizado. El desempeo esperado del estudiante es que sea capaz de reconocer los elementos que marcan la evolucin del
paciente y la efectividad del tratamiento.
x Control de una patologa en un servicio ambulatorio. Se espera del estudiante que verifique el cumplimiento del tratamiento y sea capaz de detec-
Errores ms frecuentes
8 El encuentro se transforma en una interrogacin conceptual acerca de la
patologa. El Mini Cex mide destrezas clnicas y no el conocimiento profundo y acabado de una determinada enfermedad. Existen otros instrumentos
para cumplir dicho objetivo.
8 El tiempo asignado al encuentro es transgredido. Al ocurrir esto, pierde la caracterstica de ser un encuentro real y se transforma en una situacin ficticia.
8 El paciente se dirige al evaluador, no al estudiante. Se debe explicar inicialmente al paciente en qu consiste este encuentro y el examinador debe tomar una distancia adecuada.
8 El examinador no ve o no escucha bien. La distancia que tome debe considerar que no puede perder fidelidad del encuentro.
8 Diferentes evaluadores califican de diferente manera. Para esto es importante que la pauta sea consensuada por todos y que se efecten reuniones
peridicas de evaluacin del mtodo.
Pauta de evaluacin
4 (muy bueno)
3 (bueno)
2 (aceptable)
1 (inaceptable)
HISTORIA CLNICA
Precisa, detallada,
apropiada
al escenario
(ambulatorio u
hospitalizado);
focalizado
Poco confiable,
sin precisin;
omisiones
evidentes;
inapropiado
EXAMEN FSICO
Organizado,
focalizado,
relevante
Encuentra los
hallazgos ms
importantes
Incompleto
o insensible
al confort del
paciente
No confiable,
incapaz de
encontrar
hallazgos
fundamentales.
RAZONAMIENTO
CLNICO
Interpreta los
datos en forma
consistente
Construye una
lista de problemas,
aplica diagnsticos
diferenciales
Frecuentemente
reporta datos sin
analizarlos. Debe
mejorar la lista de
problemas
No puede
interpretar los
datos bsicos. La
lista de problemas
es imprecisa.
MANEJO
Decisiones
diagnsticas son
consistentemente
razonables
Manejo apropiado,
consciente de
sus propias
limitaciones
Priorizacin
inconsistente de
los problemas
clnicos
Juicio pobre,
acciones pueden
ser riesgosas para
el paciente
COMUNICACIN
Entrega la
informacin en
forma coherente y
fluida.
Entrega toda la
informacin, pero
sin priorizar. No
le da coherencia
global a sus
explicaciones
Utiliza un lenguaje
poco comprensible
para el paciente;
usa trminos
mdicos
No es capaz de
mantener una
comunicacin
fluida con
pacientes y
familiares:
interrumpe, no
escucha.
PROFESIONALISMO
Identifica
emociones,
preocupaciones,
temores,
significados o
creencias.
Identifica algunas
emociones,
preocupaciones,
temores,
significados o
creencias.
No identifica
emociones,
preocupaciones,
temores,
significados o
creencias.
Demuestra falta
de empata con
pacientes (dolor,
disconfort, pudor,
creencias) y
familiares.
BIBLIOGRAFA
1. Norcini J; Blank L.; Duffy, D; and Fortna S. The Mini-CEX: A Method for Assessing Clinical Skills. Ann
InternMed. 2003;138:476-481.
2. John J. Norcini: The Mini Clinical Evaluation Exercise (mini-CEX). www.theclinicalteacher.com; June
2005 | Volume 2 | No 1| Disponible en URL: http://onlinelibrary.wiley.com/journal/10.1111/(ISSN)1743498X
3. Holmboe E, Hawkins R, editores. Practical Guide to the Evaluation of Clinical Competence. 1 edMosby,
Inc; 2008
4. PORTAFOLIO
Descripcin General
El Portafolio se define como una coleccin individual y organizada de documentos, certificados y trabajos que demuestran el desarrollo profesional a lo
largo del tiempo. Se ocupa para documentar logro de competencias, para el
aprendizaje reflexivo, para documentar el aprendizaje de los estudiantes y
para la evaluacin de las competencias clnicas.
Los beneficios de contar con un portafolio son:
Para que se produzca el aprendizaje esperado y la reflexin sobre ste es critico el feed back constante del tutor y la evaluacin formativa del portafolio, ya
que el tutor apoya al estudiante y le ayuda a identificar sus necesidades de
aprendizaje, sus fortalezas y debilidades.
En qu consiste?
Es una coleccin que evidencia en forma escrita los productos y los procesos
del aprendizaje. El portafolio puede ser desarrollado para el aprendizaje, para
la evaluacin o ambos, sin embargo en la literatura no existe un consenso en
relacin a la definicin de portafolio, a lo que debiera incluir y cmo se tendra
que evaluar.
Algunos ejemplos
1. Ejemplos de preguntas para guiar la reflexin en la prctica clnica para
estudiantes que tienen un primer acercamiento al paciente:
Para cada da de prctica contestar las siguientes preguntas.
En relacin a la prctica del da de hoy:
1. Cul fue el hecho ms significativo?
2. Qu aprendizajes me llevo de esta prctica?
2. Ejemplos de preguntas de reflexin sobre elementos relacionados a la profundizacin del caso clnico
Problemas y recursos emocionales y psicosociales del paciente
Identifique los elementos emocionales (presentes y pasados) que inciden en el
problema de salud de su paciente. Especifique qu emociones es posible identificar, su origen o causa y de qu manera pueden influir en su salud.
Preguntas gua
1. Cul es el estado de nimo que el paciente le transmite? Por qu?
2. Cmo se siente el paciente dada su situacin de salud?
3. Qu estrategias usa el paciente para poder manejar las emociones negativas asociadas con su situacin de salud?
4. Qu otros elementos del contexto o de su situacin de vida cree que estn
influyendo en la manera cmo se siente, vive y percibe el paciente su problema?
5. Qu recursos personales, sociales, entre otros, dispone el paciente para
poder enfrentar estas situaciones?
6. Qu consecuencias trae el problema del paciente para sus redes (familia,
amigos, etc.), y para la comunidad?
7. Identifique especialistas u otros profesionales que puedan ayudar/apoyar
en estas circunstancias
8 Cuando es necesario documentar los vacos y las fortalezas en conocimientos, habilidades, y competencias.
Cundo no usarlo?
8 Cuando se pretenden evaluar habilidades prcticas.
8 Cuando se pretende evaluar un contenido especfico.
8 Cuando se necesita recopilar materiales sin un proceso reflexivo.
Elaborar una gua del portafolio y las instrucciones relacionadas (con fechas de entrega de los trabajos, fechas de reuniones tutoriales, fechas de
feedback, etc.).
Formato
Tpicamente un portafolio se conserva en un archivo que contiene todos los
documentos que lo constituyen. En el archivo se pueden incorporar tambin
reflexiones escritas a mano, (esto permitira la evaluacin de la escritura acadmica) certificados de participacin a congresos, trabajos, etc. Sin embargo
un portafolio de este tipo es muy complejo de evaluar, por lo tanto se puede
organizar un portafolio electrnico que se llama eportafolio y que tiene la ventaja de ser flexible y de garantizar la transparencia total del trabajo del estudiante. Tambin la facilidad de acceso permitira ms aplicaciones.
Cmo se evala?
El portafolio contiene mas evidencias cualitativas que cuantitativas del aprendizaje, y por lo tanto el evaluador expresa un juicio cualitativo sobre los materiales y las reflexiones producidas por el estudiante.
Cuando es necesario calificar el trabajo, se sugiere evaluar en forma sumativa
elementos que son facilmente identificables y medibles con rbricas o listas de
cotejo (Captulo IV, 1). La evaluacin sobre la reflexin y el proceso mantiene
un carcter formativo, holstico y cualitativo, considerando la subjetividad del
evaluador. Se aconseja tambin que los estudiantes auto evalen su portafo-
Errores ms frecuentes
8 Llamar Portafolio una coleccin de casos o de materiales que no considera las reflexiones sobre el proceso ni el auto aprendizaje.
8 No garantizar la suficiente confidencialidad al estudiante sobre sus reflexiones, sobretodo en relacin a elementos relacionados a profesionalismo, accidentes crticos (errores) y a los valores.
FUENTES CONSULTADAS
1. Riquelme A, Mndez B, DE LA Fuente P, Padilla O, Benaglio C, Sirhan M, Labarca J. (2011). Development
and validation of a questionnaire on perception of portfolio by undergraduate medical students. Rev
Med Chil. Jan;139(1):45-53.
2. Diessen E W, Tartwijk JV, Overeem K, Vermut JD, Van der Vleuten CPM. (2005). Conditions for successful
reflectie uses of portfolios in undergraduate medical education. Med Ed; 39:1230-35
3. Matus O, Torres A, Parra P. (2009), Utilizacin del Portafolio en Educacin Mdica.
Rev Educ Cienc Salud. 6(1): 10-19
IV
1. HERRAMIENTAS DE
ANLISIS Y REGISTRO
1.1 Pautas de cotejo
y Escalas de
apreciacin
Descripcin General
Las pautas de cotejo y las escalas de apreciacin son herramientas para el anlisis y registro que permiten evaluar objetivos declarativos (de tipo cognitivo),
procedimentales y actitudinales, basndose en la observacin de conductas
expresadas a travs de afirmaciones. Permiten asignar puntajes al logro de
distintos aspectos a evaluar en trabajos escritos, presentaciones orales, OSCE,
Mini Cex, prcticas clnicas, etc. Estas conductas se desglosan y expresan a travs de criterios o indicadores que muestran los resultados esperados. Ambas
pautas permiten observar los 4 niveles de la Pirmide de Miller.
Las pautas de cotejo evalan la presencia o ausencia de determinadas conductas observables. Se componen de tres columnas: la primera es una lista de
afirmaciones que muestran caractersticas, cualidades, secuencias de acciones, etc. a ser observados en un desempeo o ejecucin prctica; la segunda y
tercera columna se utilizan para determinar la presencia o ausencia del indicador (s o no; logrado o no logrado). No intenta evaluar gradualidad en la calidad
del trabajo.
Indicadores
SI
NO
Saluda al paciente
Pregunta motivo de consulta
Completa la ficha del paciente
Explica diagnstico al paciente
Da indicaciones de tratamiento al paciente
Ejemplo
a. Categoras Cuantitativas: Mucho, Bastante, Poco, Casi nada, Nada.
(Porcentaje).
b. Categoras de Frecuencia: Siempre, Casi siempre, A veces, Casi nunca, Nunca. (Porcentaje de ocasiones en que se presenta la conducta).
* Ejemplo de Escala
de apreciacin:
ver Anexo 8.
(100%)
(entre 40 y 60%)
Casi nunca
(entre 10 y 30%)
Nunca
(0%)
v Definir las conductas observables relevantes (indicadores) que permitirn evidenciar el logro de los objetivos.
w Definir si es conveniente usar una pauta de cotejo o una escala de apreciacin de acuerdo a lo que se quiere evaluar: presencia de la conducta o grado de manifestacin o calidad de la conducta.
x Redactar cada indicador de manera simple y clara con frases cortas y afirmativas.
Cundo usarlas?
8 Para guiar el aprendizaje de los alumnos frente a determinadas tareas; al tener la pauta en forma anticipada los estudiantes saben qu se espera de ellos.
8 Para utilizarlas en evaluaciones formativas durante el feedback: los alumnos comprendern mejor sus logros y debilidades.
8 Para dar feedback preciso a los estudiantes sobre sus evaluaciones sumativas.
8 Para determinar la asignacin de puntajes a trabajos escritos, presentaciones orales, OSCE, Mini Cex, prcticas clnicas, procedimientos, etc.
Cundo no usarlas?
8 Cuando hay dificultad para traducir los objetivos de aprendizaje en conductas
observables.
8 Para evaluar objetivos actitudinales en que no basta slo una instancia de observacin para determinar su logro. Salvo que se utilice en varios momentos
una misma pauta durante un tiempo prolongado.
Errores frecuentes
8 Indicadores que no estn relacionados directamente con los objetivos que se
pretenden medir.
BIBLIOGRAFA
1. www.inacap.cl/data/e_news_sde/boletin_8.htm
2. http://www.educarchile.cl/Portal.Base/Web/VerContenido.aspx?GUID=4dff075f-ef97-4138-9d04332826cc9f18&ID=217556 (Portal Educar Chile)
BIBLIOGRAFA RECOMENDADA
1. http://www.rmm.cl/index_sub.php?id_contenido=10966&id_portal=727&id_seccion=6013 (ejemplos
de pautas Red de Maestros)
1.2 Rbricas
Descripcin General
La rbrica es una herramienta para el anlisis y registro que permite evaluar
aprendizaje de contenidos, procedimientos y actitudes, a travs de un conjunto de criterios que se utilizan para determinar el nivel cualitativo de logro. Para
ello tiene una escala graduada de calificacin que se expresa en evidencias,
que definen la cantidad y calidad del trabajo del estudiante en relacin al logro
de ese aspecto. Permite observar los 4 niveles de la Pirmide de Miller y facilita
la asignacin de puntajes a trabajos escritos, presentaciones orales, OSCE,
Mini Cex, prcticas clnicas, etc.
La rbrica es bsicamente una tabla de doble entrada que se compone de 4 o
5 columnas. La primera columna contiene una lista de aspectos a observar en
un desempeo, producto o ejecucin prctica. De la segunda columna en adelante va mostrando los niveles de logro de ese desempeo o producto, desde
el nivel superior de logro hasta el no logro de ste, describiendo en cada columna la gradualidad en la calidad del trabajo. A diferencia de una escala de
apreciacin -que tambin mide gradualidad de logro-, la rbrica se utiliza para
describir aspectos a observar que son ms complejos, imprecisos o subjetivos
y que el evaluador puede desglosar en una suma de conductas en orden decreciente o creciente de logro.
Existen 2 tipos de rbricas: las analticas y las holsticas.
La rbrica analtica desglosa el producto o desempeo en una serie de conductas observables y especficas que permiten entregar al alumno una retroalimentacin ms rica de su desempeo en cada situacin particular. Cada conducta observable es descrita en distintos niveles de logro en relacin a su
Bien
Insuficiente
No aceptable
Describe motivo
especfico en
forma clara y
sinttica
Describe el motivo
especfico de la
consulta en forma
clara, aunque dentro
de un relato extenso
Describe el relato
del paciente con
datos inespecficos o
insuficientes
Describe un
motivo errado o no
consignado por el
paciente.
Relata historia
del dolor
incluyendo inicio,
localizacin,
carcter,
irradiacin,
variacin,
evolucin, EVA.
Relata historia
incompleta
incluyendo 3 a 4
factores esperados,
o el relato es poco
detallado.
Relata historia
del dolor en
forma superficial
incluyendo 2 o
menos factores.
Estado general
del paciente
Relata detalles
atingentes sobre
el estado general
del paciente:
estado de nimo,
dificultad para
comer, dolores
asociados.
Relata en forma
superficial 1 o 2
factores relacionados
con el estado general
del paciente.
No hace referencia
al estado general del
paciente o describe
un estado que no
refleja lo observado
ni expuesto en la
entrevista.
3 puntos
Motivo de consulta
2 puntos
1 punto
0 punto
Anamnesis prxima
calidad.
La rbrica holstica entrega informacin del desempeo del alumno en forma global, calificando la totalidad del trabajo.
Descripcin
Excelente
o muy bien
Bien
Regular
Insuficiente
En ambos tipos de rbricas la gradualidad del logro de cada aspecto a evaluar se puede medir en distintos tipos de categoras cuantitativas y a cada
nivel se le debe asignar un puntaje o porcentaje. La gradualidad de las categoras se puede dividir en 3 o ms niveles de logro. Por ejemplo:
v Definir los indicadores o conductas observables que permitirn ver el logro de esos objetivos.
x Redactar cada nivel de logro para cada aspecto a evaluar, de manera simple
y clara con frases que contengan conductas observables, tanto en su logro
como no logro, incluyendo tipos de errores frecuentes de los alumnos.
Cundo usarlas?
8 Como gua del trabajo a realizar por los alumnos, disponiendo anticipadamente de ella para mostrar explcitamente lo que se espera de ellos.
Cundo no usarlas?
8 Cuando las conductas a evaluar son simples y no requieren de mayor descripcin en cada categora de logro. En este caso es preferible usar una escala de
apreciacin. ( Ver descripcin anterior).
8 Cuando se quiere evaluar cantidad y no calidad, presencia o ausencia de conductas; en ese caso, usar una pauta de cotejo. (Ver descripcin anterior).
Errores frecuentes
8 Falta de claridad en la descripcin del aspecto a evaluar.
8 Falta de consistencia en la descripcin de cada categora que define la gradualidad de logro.
8 Descripcin de categoras que abarcan muchas conductas que no va en relacin directa al aspecto a evaluar.
BIBLIOGRAFA
1. http://rubistar.4teachers.org/index.php?lang=es&skin=es (rubistar plataforma para elaborar rbricas
con modelos prediseados)
2. http://es.scribd.com/doc/2905226/Rubricas-de-evaluacion (inscripcin en scribd)
3. http://www.educarchile.cl/Portal.Base/Web/VerContenido.aspx?ID=217516
2. TABLA DE
ESPECIFICACIONES
O BLUEPRINT
Descripcin General
Blueprint o tabla de especificaciones, es un documento que define de manera
precisa en qu consiste lo que se desea medir o evaluar. Su propsito es orientar
el proceso de evaluacin, ya sea de un curso completo o en la construccin de un
instrumento, estableciendo y organizando de manera clara y resumida las relaciones entre objetivo a evaluar, contenidos e indicadores de evaluacin. stos
ltimos, son las manifestaciones observables o medibles de que el aprendizaje
se ha logrado.
Esta tabla es importante porque, si est bien formulada, permite elaborar instrumentos vlidos (miden lo que pretenden medir), obliga a revisar y a enfocar el
proceso de enseanza y es una gua para el profesor para promediar los aprendizajes, evitando que predomine un solo tipo de contenido o nivel cognitivo.
Cundo usarlos?
u En el diseo global del sistema de evaluacin de un curso.
v Al planificar todo tipo de evaluacin ya que se requiere precisar cmo va a
demostrarse el aprendizaje de determinado objetivo.
Cmo se construye?
Dependiendo de la instancia de evaluacin que se est planificando, la tabla de
especificaciones puede contener distintos elementos, combinados de la forma
ms adecuada para la tarea. Algunos de stos pueden ser:
8 Objetivos y contenidos.
8 Contenidos, clasificados en ejes temticos y sub-ejes.
8 Aprendizajes esperados, (en funcin de los objetivos y contenidos).
8 Nmero y tipo de instrumentos.
8 Ponderacin por instrumento, (segn el nivel cognitivo a evaluar, el tipo de
contenidos, etc.).
8 Criterios de evaluacin.
8 Indicadores de evaluacin.
Se construye en forma de tabla, poniendo en primer lugar los objetivos y a partir
de estos, se plantean finalmente los indicadores de evaluacin y los tipos y proporcin de las preguntas. Es importante que la diagramacin permita entender
las conexiones que existen entre los indicadores de logro y el aprendizaje que se
va a evaluar.
Objetivos a evaluar
Ejemplo
Objetivo: Reconocer y fundamentar las acciones de la atencin inmediata
neonatal.
Contenidos: Ejes temticos
Sub ejes
- Termorregulacin
- Determinacin vitalidad
- Test de Apgar.
- Signos clnicos de hipoxia.
Hay conocimientos bsicos y otros ms complejos? Deben estar todos representados? O solo se consideraran aquellos ms importantes?
o ms complejos?
Hay otras conductas o tareas que podran representar mejor estos conocimientos y habilidades?
Esta determinacin est hecha en base a un acuerdo entre los docentes o se basa en repaldo bibliogrfico?
FUENTES COSULTADAS
1. Hossam H. (2006) Blueprinting for the assessment of health care professionals.The clin
Teach.3:175-179.
2. Diseo y Construccin de Instrumentos de Evaluavin: Diplomado en evaluacin y medicin de
aprendizajes. Facultad de ciencias sociales-Escuela de Psicologa ,MIDEUC, Pontificia Universidad
Catlica de Chile, 2013.
3. http://ww2.educarchile.cl/Portal.Base/Web/verContenido.aspx?ID=217415
3. FEEDBACK
Descripcin General
La Evaluacin Formativa tiene como propsito retroalimentar el aprendizaje y
proveer informacin para mejorar, al definir las medidas necesarias para lograr
la meta. La herramienta para este objetivo es el feedback, palabra inglesa que ha
logrado ganar espacio en el lenguaje de la educacin. Es una instancia en que el
profesor retroalimenta en forma precisa a su alumno respecto a un objetivo de
aprendizaje, logrado o por lograr, con la finalidad de que el estudiante reafirme
sus fortalezas o bien reconozca sus falencias y realice acciones encaminadas al
logro de dicho objetivo.
Como parte de la evaluacin formativa, es inherente al proceso de aprendizaje y
por lo tanto debe estar incluido en la programacin de toda actividad docente.
8 Al final de cada actividad docente: clases, cursos, rotaciones prcticas, seminarios, laboratorios, etc. La retroalimentacin de los estudiantes a la docencia recibida tambin debe ser considerada, ya que comunica, al profesor
lo que se logr bien y lo que se debe mejorar , y a los alumnos, que tienen
responsabilidad en su aprendizaje.
Cundo no entregarlo?
8 Cuando no se cuenta con los datos para poder efectuar un feedback preciso
y contextualizado.
8 Cuando no se cuenta con el tiempo necesario y la relacin de confianza podra ser interrumpida o prestarse a interpretaciones equvocas.
8 Cuando el estado de nimo del docente o del alumno, producto del mismo
evento, podra entorpecer la fluidez del encuentro.
8 Estimulando que el alumno reconozca de sus fortalezas y debilidades, a travs de preguntas dirigidas a este fin.
8 Debe ser criterioso, entregado en pequeas dosis. Aunque haya varios elementos que corregir, elegir 1 o 2 ms importantes.
BIBLIOGRAFA
1. Cantillon P, Sargeant J.(2008) Giving feedback in clinical settings. BMJ;337:1292-1294
2. Bienstock J, et als (2007) To the point: Medical education reviews-providing feedback. Am J of Obs &
Gy.Jun; 2007:508-513
3. Harden R, Laidlaw J. (2013). Be fair to studenrs: four principles that lead to more effective learning.
Med Teach; 35:27-31
A1
Instrumentos de evaluacin
ms adecuados para cada nivel
PRCTICA PROFESIONAL
HACE
Observacin directa
Portafolio, Mini C-ex, long case, etc
DESTREZAS Y ACTITUDES
MUESTRA CMO
SABE CMO
TEST DE CONOCIMIENTOS
TEST DE CONOCIMIENTOS
SABE
BIBLIOGRAFA
1. Miller GE. The assaessment of clinical skills/competence/performance.
Academic Medicine (Supplement) 1990; 65:S63-S7.
A2
EVALUAR
BIBLIOGRAFA
1. Bloom, B.S. and Krathwohl, D. R. (1956)
Taxonomy of Educational Objectives: The
Classification of Educational Goals, by a
committee of college and university examiners.
Handbook I: Cognitive Domain.
NY, NY: Longmans, Green
SINTETIZAR
ANALIZAR
APLICAR
FUENTE DE REFERENCIA
1. www.cuautitlan.unam.mx/descargas/edudis/
recursosacademicos/taxonomiadebloom.pdf.
Visitada 22 de noviembre 2013
COMPRENDER
CONOCER
COMPRENDER
APLICAR
ANALIZAR
SINTETIZAR
EVALUAR
Escribir
describir
enumerar
etiquetar
reproducir
seleccionar
hacer listas
nombrar
definir
sealar cundo
indicar qu
sealar quin
rotular
listar
definir
caracterizar
nombrar
identificar
Clasificar
convertir
estimar
explicar
generalizar
dar ejemplos
exponer
resumir
ilustrar
parafrasear
resumir
interpretar
explicar
diferenciar
Usar
calcular
construir
producir
proyectar
relacionar
solucionar
transferir
aplicar
resolver
utilizar
demostrar
Analizar
discriminar
categorizar
distinguir
comparar
ilustrar
contrastar
precisar
separar
limitar
priorizar
subdividir
ordenar
dividir
seleccionar
categorizar
Crear
adaptar
anticipar
planear
categorizar
elaborar hiptesis
inventar
combinar
desarrollar
re formular
integrar
modificar
reconstruir
reorganizar
revisar
alinear
sustituir
validar
facilitar
generar
incorporar
iniciar
reforzar
Valorar
concluir
criticar
decidir
definir
interpretar
juzgar
justificar
ayudar
argumentar
A3
Preguntas
Casos
Clnicos
Otra
Modalidad
MEDICINA INTERNA
30
60
45
15
CIRUGA
15
30
22
GINECOLOGA OBSTETRICIA
17
34
26
PEDIATRA
18
36
27
10
20
15
CIENCIAS BSICAS
10
20
TOTAL
100
200
20
135
65
Prueba escrita
OSCE
Examen oral
Realizar el control
de salud completo
de un lactante.
Antropometra
Anamnesis
Antropometra,
diagnstico y
comunicacin
con la madre
Establecer
plan teraputico
en patologas
respiratorias ms
frecuentes
Neumonia
Laringitis
SBO
Diagnstico diferencial
Realizar examen
fsico completo
Ex del RN
Ex del lactante y prescolar
Ejes
temticos
Realizar
Diagnstico
el control
nutricional
de salud
completo de 30%
un lactante.
Alimentacin
20%
Subejes
temticos
Objetivos
de evaluacin
Indicadores
de evaluacin
Ponderacin Nmero de
preguntas
%
por eje
Crecimiento
Conocer la velocidad
de crecimiento
del lactante
Determina
las medidas
antropomtricas
esperadas en un
caso dado
20
Antropometra
Establecer diagnstico
nutricional utilizando
las curvas OMS
antropomtricas
Establece
diagnstico
nutricional
aplicando
la curva
10
Caractersticas
de la alimentacin
de un lactante
Introduce slidos
en el momento
adecuado
Desarrollo
psicomotor
Reconoce la edad
del lactante a
partir de los hitos
sealados
30
Analizar ausencia
de un hito y sospechar
alteraciones del
desarrollo
En un caso dado,
reconoce un factor
de alarma en el
desarrollo
10
Vacunas
10%
Aplicar el programa
nacional de
inmunizaciones
Indica la vacuna
correspondiente
a la edad propuesta
10
Prevencin
accidentes
10%
Predecir posibles
riesgos a distintas
edades
Entrega
indicaciones a los
padres de acuerdo a
la edad del nio
30%
Puntaje
100 %
20 preguntas
40 ptos.
Estaciones
Para cada
objetivo
Competencias
(del Perfil de
Egreso de la
carrera)
Contenidos
(temas)
Objetivo
de la estacin
Desempeo
(indicador
del logro del
objetivo)
N Estacin
Corresp.
Realizar
Anamnesis
Habilidades
clnicas
RGE patolgico
Realizar
anamnesis
dirigida al
problema
presentado
Realizar
anamnesis a
madre simulada
de lactante 3
meses
Realizar
Examen fsico
Habilidades
clnicas
Dolor abdominal
Realizar examen
abdominal
Realizar examen
abdominal a una
adolescente de
14 aos
Establecer
una relacin
emptica y
fluida, con
pacientes y
familia
1
(tambin se ve en
estaciones 7 y 10)
Habilidades de
comunicacin
Manejo de fiebre
Establecer
relacin emptica
y fluida con la
madre
Dar indicaciones
de manejo de la
fiebre a madre
entrenada de un
lactante
Realizar
control de
nio sano
incorporando
todos los
aspectos
involucrados
Habilidades
clnicas
Alimentacin
Preparar
mamadera de
acuerdo a la edad
Preparar frmula 6
lctea para un
nio de 10 meses
eutrfico
Habilidades de
comunicacin
Inmunizaciones
Indicar vacunas
de acuerdo a la
edad
Indicar vacunas
para un nio de
1 ao a madre
simulada
Evaluacin
crecimiento y
desarrollo.
Realizar
antropometra
Pesar y medir a
un lactante de 6
meses
Hacer diagnstico
nutricional
interpretando
curvas de
crecimiento
Hacer
diagnstico
nutricional
interpretando
curvas de
crecimiento y
comunicarlo
a la madre
Prevencin
Explicitar riesgos
y su prevencin
Entregar
indicaciones
de prevencin
a madre de
lactante de 18
meses
10
Profesionalismo
Profesionalismo
Interpretar
exmenes de
laboratorio e
imgenes
Razonamiento
clnico
Neumona en
escolar
11
Establecer
plan
teraputico
racional
Razonamiento
clnico
Shock
anafilctico
Reconocer el
cuadro clnico y
dar indicaciones
de manejo inicial
12
Reconocer
cuadro clnico
referido por
una enfermera
simulada, y dar
indicaciones de
manejo inicial
A4
v Cada tem debiera evaluar la aplicacin del conocimiento y no el recuerdo de un hecho aislado.
u
Resumen de la pauta
8 Asegrese que el tem puede responderse sin leer las opciones.
8 Las opciones deben ser absolutamente verdaderas o falsas, sin ambigedades que se presten a confusiones. Ojala ser revisadas por varios profesores.
FUENTE
1. National Board of Medical Examiners Constructing Written Test Questions For the Basic and Clinical
Sciences Susan M. Case, PhD and David B. Swanson, PhD*
PAUTA 2:
Instrucciones para calcular
ndice de calidad en
preguntas de seleccin
mltiple.
Para construir el ndice se revisaron varias publicaciones, de las cuales se extrajeron 10 recomendaciones sobre la calidad tcnica de una pregunta de seleccin
mltiple bien construida. Los factores que se tomaron en cuenta para evaluar la
calidad tcnica de cada pregunta son los siguientes :
8 Enunciado completo: cuando al cubrir las opciones el lector puede responder a la pregunta despus de leer el enunciado.
8 Extensin similar entre las opciones: es usual que si existe una opcin con
excesiva longitud en relacin a las otras, tiende a ser la respuesta correcta
por tener mayor detalle.
8 Evitar las opciones ninguna y todas las anteriores: bastara saber que dos
opciones son correctas para saber que si existe una opcin de todas las
8 Opciones ordenadas: ya sea lgicamente o numricamente. Si hay nmeros, por ejemplo, 5, 10, 15, 20, 25, estos deben colocarse en ese orden. No
es recomendable poner opciones con nmeros sin ordenar. Complica la respuesta innecesariamente.
FUENTE
1. Galofr Alberto. Instrucciones para calcular un ndice de calidad para preguntas de seleccin mltiple.
Universidad Catlica del Norte.
A5
La estructura general de un tem puede representarse por medio de una plantilla. Se pueden elaborar muchos tems usando la misma plantilla, haciendo pequeas variaciones. Por ejemplo, la siguiente plantilla podra usarse para elaborar una serie de preguntas relacionadas con anatoma:
8 Edad, sexo (por ejemplo, hombre de 45 aos de edad, mujer de 69, etc).
8 Lugar de la atencin (llega al servicio de urgencias, consulta en APS, etc).
8 Motivo de consulta (cefalea, dolor abdominal, etc).
8 Duracin y/o tipo del sntoma (constante desde hace 2 das, tipo clico, etc).
8 Historia clnica del paciente (incluir antecedentes personales y/o familiares
si son necesarios ).
8 (Descripcin del paciente) tiene (datos de la historia clnica) y toma (medicamentos). Cul de los siguientes medicamentos es ms probable que sea la
causa de su (un hallazgo de laboratorio, examen fsico o historia clnica)?
8 (descripcin del paciente) tiene (signos y sntomas). Estas observaciones sugieren que la enfermedad es el resultado de la (ausencia o presencia) de cul
de las/los siguientes (enzimas, mecanismos)?
8 (descripcin del paciente) presenta (sntomas, signos o una enfermedad especfica) y est bajo tratamiento con (medicamentoo tipo de frmaco). Cul de
las/los siguientes (funciones, procesos) se ve inhibida/o por la accin de este
medicamento?
8 (descripcin del paciente) presenta (hallazgos anormales). Cul de los siguientes (resultados positivos de laboratorio) se anticipara?
8 (perodo de tiempo) despus de (evento, tal como un viaje o una comida con
ciertos alimentos), (descripcin de paciente o grupo) se enferm y presenta (signos y sntomas). Cul de los siguientes (organismos, agentes) es ms probable que se encuentre en el anlisis del (alimento)?
8 Luego de (procedimiento), (descripcin del paciente) desarrolla (signos y sntomas). Los hallazgos de laboratorio muestran (hallazgos). Cul de las siguientes opciones sera la causa ms probable?
8 (descripcin del paciente) muere a causa de (enfermedad). Cul de los siguientes hallazgos sera el ms probable en una autopsia?
8 Cul de los siguientes mecanismos es el ms probable en el efecto teraputico de esta (clase de frmaco) en pacientes que padecen de (enfermedad)?
FUENTE
1. Case, S. M., & Swanson, 3 Edicin en espaol, 2006. Constructing written test questions for the basic
and clinical sciences. Philadelphia, PA: National Board of Medical Examiners Copyright 2006 National
Board of Medical Examiners (NBME) Pag 120
http://www.medbev.umontreal.ca/gtea/NBME_MCQ.pdf
A6
Ejemplo 1:
El alumno sortea un tema. Tiene 5 minutos para prepararlo. El tema es Sindrome coqueluchoideo: prevencin y tratamiento.
Objetivos:
u
Elegir y fundamentar la antibiticoterapia ms adecuada para el tratamiento de la enfermedad por Bordetella Pertussis.
8 Pregunta 1:
Indique cules son las razones para hospitalizar a un lactante menor de 3
meses.
Respuesta esperada:
u
8 Pregunta 2:
Hay medidas epidemiolgicas que se toman, asumiendo que la inmunidad
tanto de la vacuna como de la enfermedad no son ptimas: podra mencionar algunas?
Respuestas esperadas:
u
8 Pregunta 3:
El frmaco recomendado para el tratamiento de la coqueluche es la eritromicina. Sin embargo en el recin nacido se usa azitromicina. Explique por qu
Respuesta esperada:
u Por la asociacin del uso de eritromicina con estenosis hipertrfica
del ploro.
Se podra preguntar:
u Y si no hay eritromicina, se podra usar claritromicina?
En los ejemplos 2 y 3 se despliega un caso clnico comenzando por el motivo de
consulta. El alumno deber resolver el caso, haciendo preguntas correspondientes a la anamnesis, examen fsico y exmenes de laboratorio. A partir de las respuestas entregadas por la comisin, enunciar los diagnsticos diferenciales
ms probables, la conducta a seguir y los resultados esperados.
Ejemplo 2:
8 Pregunta 1:
Cules considera Ud. que pudieran ser los diagnsticos ms probables?
Respuesta esperada:
Exantema sbito ( Se puede preguntar por qu este cuadro clnico no corresponde a una enfermedad de Kawasaki o a una rubola, por ejemplo).
8 Pregunta 2:
Qu datos de la historia y del examen requiere para confirmar a su hiptesis?
Respuestas esperadas:
u
8 Pregunta 3:
Solicitara exmenes de laboratorio? En caso afirmativo, cules?
Fundamente.
Respuesta esperada:
No. (Se podra contrapreguntar: en qu casos s pedira? O: qu sucedera
si Ud. lo examinara a las 48 horas de fiebre y el paciente se encontrara muy
decado?).
8 Pregunta 4:
Y si el exantema comenzara simultneamente de fiebre, cambiara su
apreciacin del cuadro?
Respuestas esperadas:
Ejemplo 3:
Se deben descartar otras infecciones virales (enterovirus, adenovirus), enf. de Kawasaki (al 5 da).
Si se desea indagar mayor profundida de conocimientos y conexiones mentales, se puede preguntar al examinado qu opina de un sarampin o rubola, esperando una respuesta aduciendo a la epidemiologa y la vacunacin (an no tiene trivrica).
Seleccionar elementos clnicos y de laboratorio que permitan determinar el origen de una poliuria.
8 Pregunta 1:
Enuncie los datos de la anamnesis que necesita conocer del cuadro clnico
para poder orientarse en el diagnstico, fundamentando su respuesta.
Respuestas esperadas:
u
8 Pregunta 2:
Tomando en cuenta los antecedentes que Ud. recogi, indique cmo enfocara
el caso y cules seran los diagnsticos diferenciales a considerar. Fundamente
respuestas.
Respuesta esperada:
La paciente presenta una poliuria.
Diagnsticos diferenciales:
u
Diabetes mellitus.
Patologas renales.
(Se despliega el caso, contestando las preguntas que haya hecho el examinado).
La nia era sana, no tomaba ningn medicamento y su orina es clara. No
presenta molestias para orinar. Bebe ms agua que antes, incluso de noche. Refiere prdida de peso no objetivada.
8 Pregunta 3:
Cmo enfocara el estudio de esta paciente? Fundamente fisiopatolgicamente.
Respuestas esperadas:
u
Anlisis de la orina:
w Descartar infeccin urinaria: leucocitos como clulas inflamatorias, nitritos producidos por gram negativos.
w Osmolalidad urinaria: mecanismos de concentracin renal dados a partir de la hormona antidiurtica y qu ocurre cuando falta. Tambin explicar mecanismo de poliuria en diabetes (diuresis
osmtica); reconocer elementos.
8 Pregunta 4:
Cul es su sospecha diagnstica y su conducta?
Respuestas esperadas:
u
Diabetes inspida
Puede profundizar preguntando al alumno si puede diferenciar si la diabetes inspida es central o perifrica. La respuesta esperada es que indique
que la administracin de desmopresina exgena reemplaza la insuficiencia en la produccin de ADH. Si no responde, es porque es nefrognica.
A7
ANEXO: RBRICAS
Uso
Diseo
Criterio
1 Inaceptable
2 Aceptable
3 Ejemplar
Calidad de la redaccion
La redaccion no es
comprensible para todos
los usuarios de la Rubrica,
incluidos los estudiantes.
Utiliza un lenguaje vago y
poco claro, que dificulta que
se pongan de acuerdo sobre
los puntajes, los distintos
usuarios de sta.
La redaccion es en su mayoria
comprensible para todos
los usuarios de la rubrica,
incluidos los estudiantes.
Algunos usos del lenguaje
pueden causar confusion
entre los diferentes usuarios.
La redaccion es comprensible
para todos los usuarios
de la rubrica, incluyendo
los estudiantes. Utiliza un
lenguaje claro y especifico
que ayuda a los diferentes
usuarios a ponerse de
acuerdo sobre el puntaje.
Participacion de los
estudiantes en el
desarrollo de la Rubrica [1]
Los estudiantes no
participan en el desarrollo
de la Rubrica.
Docentes y estudiantes
construyen en conjunto la
Rubrica, utilizando algunos
ejemplos del producto o tarea.
La Rubrica se comparte
con los estudiantes cuando
el producto o tarea se ha
completado.Solo se usa
para evaluar el trabajo del
estudiante.
CRDITOS
Traduccion al espanol y adaptacion realizada por Eduteka de la Rubrica para elaborar Rubricas adaptada
por Dr. Bonnie B. Mullinix de la Universidad Monmouth, NJ, USA. Esta Rubrica fue publicada por el Buck
Institute for Education (http://www.bie.org) bajo licencia Creative Commons (Atribucion, No Comercial).
FUENTE
1. http://www.eduteka.org/rubrica2.php
Insuficiente (1pto.)
No Logrado (0 pto.)
Profesionalismo (20%)
Responsabilidad
Puntualidad
Se ha atrasado o se
ha retirado antes en
mximo 2 ocasiones.
Se atrasa o se retira
antes entre 3 y 6 de las
veces.
Se atrasa o se retira
antes en 7 o ms
oportunidades.
Cumplimiento
de tareas
Comunicacin
Frecuentemente
informa al equipo sobre
conductas y cambios
referentes al manejo del
paciente considerando
sus observaciones,
aunque en algunas
ocasiones no lo hace.
Ocasionalmente
informa al equipo
sobre conductas y
cambios referentes al
manejo del paciente y
le cuesta considerar sus
observaciones.
No informa al equipo
sobre conductas y
cambios referentes al
manejo del paciente
y por lo tanto no
tiene la oportunidad
de considerar sus
observaciones.
Su presentacin personal
cumple parcialmente con
lo exigido por la Facultad
y el Hospital.
Su presentacin
personal cumple en
forma ocasional y parcial
con lo exigido por la
Facultad y el Hospital.
No cumple con la
presentacin personal
exigida por la Facultad y
el Hospital.
Se traza metas
personales pero requiere
permanente apoyo del
tutor para abordarlas.
No se plantea metas
personales.
Preparacin y estudio
para la atencin de
sus pacientes
Demuestra iniciativa en
preparacin de lecturas y
temas en forma autnoma,
para resolver las necesidades
de sus pacientes.
En escasas ocasiones
cumple con las
indicaciones de estudio
dadas por el tutor para
una mejor atencin de
sus pacientes.
No se presenta
preparado en temas y
lecturas sugeridas por
el tutor para atender
las necesidades de sus
pacientes.
Nivel de reflexin
Es reflexivo, se autoevala en
forma habitual demostrando
cambios de actitud cuando lo
amerita.
Realiza autoevaluacin
con un nivel de baja
reflexin, logrando en
pocas oportunidades
profundizar en lo que
debe cambiar para
mejorar su actitud.
Actitud ante el
feedback del tutor
Recibe positivamente la
retroalimentacin y mejora
sus desempeos posteriores
en base a ella.
Recibe positivamente
la retroalimentacin y
generalmente mejora sus
desempeos posteriores
en base a ella.
Recibe retroalimentacin
con algunos reparos
y logra pocas o inconsistentes modificaciones
de conductas posteriores
a ella.
Recibe retroalimentacin
con una actitud negativa
y no demuestra cambios
posteriores en base a ella.
Insuficiente (1pto.)
No Logrado (0 pto.)
Mantiene comunicacin
fluida con pacientes y
familiares. Se adapta al
nivel de comprensin del
paciente y familiares; verifica
comprensin.
Entrega la informacin
en forma desordenada,
usa jerga mdica o
palabras complejas y no
verifica comprensin.
No es capaz de
mantener una
comunicacin fluida con
pacientes y familiares;
necesita apoyo del tutor
la mayora de las veces.
Acogida con el
paciente y familiares
Identifica y acoge
empticamente emociones,
preocupaciones, temores,
significados o creencias de los
pacientes y/o familiares.
Identifica emociones,
preocupaciones,
temores, significados
o creencias de los
pacientes y/o familiares
dando acogida en
la mayora de las
oportunidades.
Identifica en ocasiones
algunas emociones,
preocupaciones,
temores, significados
o creencias de los
pacientes y/o familiares
logrando dar una pobre
acogida.
Demuestra falta de
empata con pacientes
y/o familiares (dolor,
incomodidad, pudor,
creencias), sin lograr
entregar acogida.
Conocimiento (20%)
Conocimientos
tericos.
Demuestra conocimiento
terico amplio y actualizado
para el nivel.
Demuestra
conocimientos
tericos adecuados
en el enfrentamiento
clnico de pacientes
y/o situaciones clnicas
comunes.
Incorporacin de
conocimientos
tericos a la prctica
Incorpora conocimientos
tericos a la prctica,
considerando determinantes
sociales de la salud.
Incorpora conocimientos
a la prctica, aunque
no considera todos los
determinantes de salud.
Requiere de apoyo
frecuente del tutor para
incorporar la teora y
nuevos conocimientos a
la prctica clnica.
Examen fsico
Identifica hallazgos ms
importantes con examen
organizado aunque le
falta focalizar para hallar
todos los elementos
relevantes
Realiza examen
organizado pero
incompleto, lo que
no permite encontrar
hallazgos importantes.
Completacin de
formularios
Requiere habitualmente
de ayuda del tutor para
completar formularios,
no lo logra en forma
autnoma
Al final de la rotacin
an comete errores
relevantes o no
completa formularios
cuando corresponde.
Insuficiente (1pto.)
No Logrado (0 pto.)
No logra interpretar
datos bsicos. Realiza
una lista de problemas
imprecisa.
Decisiones
diagnsticas y
teraputicas
Realiza el
enfrentamiento
diagnstico y teraputico
en forma razonable pero
hay errores u omisiones
no relevantes en la
interpretacin de los
datos.
Realiza un juicio
pobre y desarrolla
conclusiones que
afectan adversamente
al paciente en el
diagnstico y decisin
teraputica
A8
1)
2)
3)
4)
5)
Nombre de evaluador:
TEM I: ASPECTOS GENERALES
Excelente /
Muy bien (3)
Bien/ Regular
(2)
Insuficiente
(1)
Inaceptable
(0)
Bien/ Regular
(2)
Insuficiente
(1)
Inaceptable
(0)
Bien/ Regular
(2)
Insuficiente
(1)
Inaceptable
(0)
Excelente /
Muy bien (3)
Excelente /
Muy bien (3)
Excelente /
Muy bien (3)
Bien/ Regular
(2)
Insuficiente
(1)
Inaceptable
(0)
Puntaje Obtenido:
Nota:
Firma evaluador
A9
El Estudiante deber realizar un examen de biometra con tcnica de inmersin y contacto. Este examen se realizar en el
campo clnico, ante dos o ms evaluadores. Para la realizacin del procedimiento en ambos ojos, el alumno dispondr de
un tiempo mximo de 30 minutos.
Nombre Alumno:
Puntaje Total:
Nota:
SI
NO
SI
NO
Fecha
A10
Etapa 1: Planificacin
inicial.
Definir la Tabla de Especificaciones o Blueprint (representacin resumen de los contenidos y objetivos que sern evaluados en cada estacin).
Estaciones
Para cada
objetivo
Competencias
(del Perfil de
Egreso de la
carrera)
Contenidos
(temas)
Objetivo
de la estacin
Desempeo
(indicador
del logro del
objetivo)
N Estacin
Correspondiente
Realizar
Anamnesis.
Habilidades
clnicas.
RGE patolgico.
Realizar
anamnesis
dirigida al
problema
presentado.
Realizar
anamnesis a
madre simulada
de lactante 3
meses.
Realizar
Examen
fsico.
Habilidades
clnicas.
Realizar examen
abdominal a una
adolescente de
14 aos.
Establecer
una relacin
emptica y
fluida, con
pacientes y
familia.
1
(tambin se ve en
estaciones 7 y 10)
Habilidades de
comunicacin.
Dar indicaciones
de manejo de la
fiebre a madre
entrenada de un
lactante.
Realizar
control de
nio sano
incorporando
todos los
aspectos
involucrados.
Habilidades
clnicas.
Alimentacin
Preparar
mamadera de
acuerdo a la edad
Preparar frmula 6
lctea para un
nio de 10 meses
eutrfico.
Habilidades de
comunicacin.
Inmunizaciones
Indicar vacunas
de acuerdo a la
edad.
Indicar vacunas
para un nio de
1 ao a madre
simulada.
Evaluacin
crecimiento y
desarrollo.
Realizar
antropometra.
Pesar y medir a
un lactante de 6
meses.
Hacer diagnstico
nutricional
interpretando
curvas de
crecimiento.
Hacer
diagnstico
nutricional
interpretando
curvas de
crecimiento y
comunicarlo a la
madre.
Prevencin
Explicitar riesgos
y su prevencin.
Entregar
indicaciones
de prevencin
a madre de
lactante de 18
meses.
10
Profesionalismo
Profesionalismo
Interpretar
exmenes de
laboratorio e
imgenes.
Razonamiento
clnico.
Neumona en
escolar.
11
Establecer
plan
teraputico
racional.
Razonamiento
clnico.
Shock
anafilctico.
Reconocer el
cuadro clnico y
dar indicaciones
de manejo inicial.
12
Reconocer
cuadro clnico
referido por
una enfermera
simulada, y dar
indicaciones de
manejo inicial.
w Estaciones: Contienen los casos que deben basarse en los objetivos a evaluar; constituyen el elemento esencial de un OSCE:
u
Etapa 2: Elaboracin
Nombre estacin
Recurso humano
Evaluador
Recurso material
Encargado
RGE Fisiolgico.
Madre entrenada
(nombre de la
actriz).
Si
Nombre del
evaluador.
Ambiente consulta
Mesa , sillas (3)
Fantoma lactante.
Dra
Nombre
Antropometra
Adolescente.
Madre entrenada
(nombre).
Si
Nombre del
evaluador.
Ambiente consulta
Balanza Tallmetro
Mesa + 3 sillas.
Dra
Neumona en
escolar.
Madre entrenada
(nombre).
SI
Nombre del
evaluador.
Mesa + 3 sillas
Rx de trax +
Negatospcopio.
Dr...
Laringitis.
Operador de video
(nombre).
No
Video
Hoja de respuesta.
Dr...
8 Enviar los guiones a los actores , al menos una semana antes del examen.
8 Designar las funciones de los diferentes participantes: cronometrista,
operador de video, encargados del caf, ayudantes, secretarias, etc.
Etapa 3: Realizacin
u Da Previo al OSCE:
u
v Da del OSCE:
u
Uno de los integrantes del comit debe recibir a los alumnos, instruirlos sobre el examen, poner identificacin con nombres y nmeros
grandes y claros, adems de retirar celulares.
Recibir de cada evaluador las estaciones en las que participaron, certificando que se haya entregado el total de evaluaciones realizadas y
estn debidamente identificadas.
Recibir comentarios de los participantes: evaluadores, pacientes entrenados, cuidadores, que podrn ser de mucha utilidad para ir mejorando el instrumento.
MANUAL DE INSTRUMENTOS DE EVALUACIN - FACULTAD DE MEDICINA CAS-UDD 81
8 Al elaborar una nueva estacin, asegrese que las instrucciones sean claras,
tanto para el alumno como para el observador, que la tarea solicitada pueda
llevarse a cabo en el tiempo planificado y que lo que est preguntando sea
un objetivo relevante de su curso. Antes de utilizar la estacin por primera
vez, mustrela a otros docentes para que la revisen y haga lo posible por
ponerla a prueba.
8 Se recomienda intercalar una estacin de descanso o caf cada 7 estaciones de evaluacin. Los alumnos necesitan bajar nivel de ansiedad e hidratarse. Esto se considera como otra estacin en trminos de tiempo y ubicacin en el circuito.
8 El tiempo total del OSCE no debiera sobrepasar los 100 minutos. Despus
de ese tiempo, los alumnos, evaluadores y pacientes entrenados van experimentando el cansancio que podra atentar contra la objetividad y confiabilidad del examen.
FUENTE
1. R.M.HARDEN, Centre for Medical Education,
The University, Nine wells Hospital and Medical
School, Dundee, Scotland :
Twelve tips for organizing an Objective
Structured Clinical Examination(OSCE).
OSCE que van a realizar, el cual debe contener: N estaciones, tiempo total
de OSCE y tiempo requerido para cada estacin, tiempo de feedback , nmero de timbres que se van a emplear ( para evitar confusiones), lugar y
hora en que cada uno realizar el OSCE, as como el reglamento general del
examen (no llevar celular, no conversar con sus compaeros, permanecer
en la estacin hasta que el timbre le indique cambiar, toda sospecha de copia ser sancionada, etc.).
Lo anterior no elimina el hecho que el mismo da del OSCE se debe leer y/o
explicar nuevamente este instructivo.
2. Ejemplo de
estacin OSCE
Portada
Nombre: Leucemia.
Competencia: Habilidades clnicas y de comunicacin.
Contenido:
Leucemia, interpretacin de hemograma.
Objetivos:
Realizar diagnstico de leucemia en preescolar y plantear.
manejo inicial.
Establecer comunicacin efectiva con la madre.
Desempeo:
3- Derivar a especialista.
Paciente:
Madre simulada.
Ambiente:
Box de atencin ambulatoria APS.
Materiales: Escritorio.
Hemograma sugerente de la enfermedad.
PAUTAS:
Evaluador:
S
Puntaje:
20 puntos.
Docente responsable:
Comportamiento de la estacin:
Instrucciones
8 COMPLEMENTE LA HISTORIA REFERENTE AL MOTIVO
DE CONSULTA.
8INTERPRETE EL EXAMEN.
8COMUNIQUE A LA MADRE LA SOSPECHA DIAGNSTICA.
8 ENTREGUE INDICACIONES PARA EL MANEJO INICIAL DEL PROBLEMA DE SU HIJO.
Nmero:
SI
NO
1. Comunicacin
8 Se presenta
8 Saluda
8 Mira a los ojos
8 Usa lenguaje comprensible por la madre
2. Investiga ms sobre historia clinica:
Otros sntomas
8 sangramientos
8 equimosis
8 infecciones
8 lesiones orales
8 fiebre
3. Interpreta o le explica a la madre los hallazgos en el hemograma , mencionando que tiene :
8 leucopenia ( o glbulos blancos bajos)
8 neutropenia ( o glbulos blancos especficos de defensa bajos)
8 anemia ( glbulos rojos bajos)
4. Explica a la madre sospecha diagnstica:
8 Leucemia o cncer a la sangre
5. Menciona la gravedad del cuadro
6. Deriva en forma inmediata a hematologa y/o urgencia
7. Pregunta a la madre si tiene alguna duda
8. Demuestra actitud emptica ante la angustia materna
9. Se despide
1
1
1
1
1
1
1
Puntaje final
20
u Permanecer en silencio; apagar y/o no contestar el telfono celular durante el curso de la estacin.
Excelente
Bueno
Regular
Mnimo Aceptable
<4
No Aprueba
No logra completar la estacin. Realiza alguna accin que pone en riesgo la vida del
paciente. Manifiesta conocimientos claramente errados.
No decir lo hiciste bien o mal, sino intentar que el alumno autoevale su actuar, perciba lo que hizo bien y lo que no logr o que podra
mejorar y lo manifieste; puede repetir la accin en forma correcta si el
tiempo lo permite.
Bueno
Regular
Malo
Comentarios: ___________________________________________
Si
No
Comentarios: ___________________________________________
Adecuado
Corto
Excesivo
Excesivo
Adecuado
Corto
Si
No
Neutro
Comentarios: ___________________________________________
El paciente entrenado:
Bien
Regular
Deficiente
A11
Antes de empezar
8 Procurar un ambiente seguro, de confianza y ojala privado.
8 Manifestarse como colaborador o aliado en la formacin, no como juez.
8 Disponer de un registro de los hechos a comentar (referirse solo a hechos
concretos observados y no a caractersticas personales).
Durante el feedback
u Explicitar que se dar feedback y cul es su objetivo.
v Comenzar con una pregunta abierta de autoevaluacin (ASK). Preguntarle
cul es SU visin, estimularlo a expresar su pensamiento y/o sentimientos
respecto a la experiencia. Ejs. Cmo te sentiste en la experiencia? Cmo te
pareci tu trabajo? Qu sientes que hiciste bien? Qu aprendiste? Qu estrategias fueron tiles y puedes considerar para la usarlas la prxima vez? Etc.
Permitir que el alumno haga su propio anlisis sin interrumpirlo.
Evitar discusiones, utilizando en todo momento preguntas que lo lleven a reflexionar en torno al problema y al reconocimiento de ste.
(Sin reconocimiento de la falencia, es difcil la mejora).
MANUAL DE INSTRUMENTOS DE EVALUACIN - FACULTAD DE MEDICINA CAS-UDD 91
Concluir la sesin con una sntesis y una actitud y/o comentario positivos.
Documentar el encuentro.
A12
u Confeccionar una historia clnica (obtener y registrar) asegurando la confiabilidad de los datos y confidencialidad con el paciente.
v Transmitir confianza al paciente a travs del saludo, presentacin y explicacin de lo que se le va a realizar.
Siempre
3 ptos.
Frecuente
2 ptos.
Rara vez
1 pto.
Nunca
0 pto.
Siempre
3 ptos.
Frecuente
2 ptos.
Rara vez
1 pto.
Nunca
0 pto.
Siempre
3 ptos.
Frecuente
2 ptos.
Rara vez
1 pto.
Nunca
0 pto.
Puntaje Final:
Puntaje obtenido:
Nota:
Evaluacin Formativa (apreciacin global del proceso de reflexin y del trabajod e portafolio del alumno).
A13
Frmulas
8 Alumno con puntaje de aprobacin o sobre ste:
((
PA PMi x 3 + 4
PMa Pmi
((
PA
PMi
x3 +1
Ejemplo de aplicacin
de la frmula.
( ( PA/24 ) *3 ) + 1