Professional Documents
Culture Documents
PISA 2012 Resolucin de problemas de la vida real. Resultados de matemticas y lectura por ordenador
Imagen de cubierta: CollegeDegrees360.com
(licencia Creative Commons)
Edita:
SECRETARA GENERAL TCNICA
Subdireccin General
de Documentacin y Publicaciones
Edicin: 2014
PROLOGO 4
Lectura
Conclusiones
Conclusiones
REFERENCIAS 110
ANEXO 111
Prlogo
4
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador
Prlogo
http://www.mecd.gob.es/inee/portada.html
http://www.mecd.gob.es/inee/Ultimos_informes/PISA2012resolucionde
problemas.html
http://www.mecd.gob.es/dctm/inee/internacional/pisa2012
resolucionproblemas/preguntasliberadasproblemasweb.pdf?documentId=0901e72b81
8f14e4
Ismael Sanz
(Director del Instituto Nacional de Evaluacin Educativa)
5
1. Introduccin: Qu es CBA (Computer-
Based Assessment, Evaluacin por
ordenador)?
El impacto de las tecnologas digitales ha sido tan enorme en la ltima dcada, con la
explosin de los aparatos mviles e interactivos, que ya resulta cotidiano hablar de un
mundo distinto, afectado por cambios revolucionarios en la percepcin de la realidad y en
su potencial en futuros prximos, superados cada vez a un ritmo ms acelerado.
Estas tecnologas afectan a la forma de leer textos, y a las distintas estrategias y
disposiciones para enfrentarse al aprendizaje acadmico y profesional. Las pruebas de
evaluacin educativa internacional, tales como PISA no podan quedar al margen de estos
cambios. En su edicin de 2012, el Estudio PISA se aplic en dos tipos de pruebas de
evaluacin educativa: las impresas en papel y las digitales o por ordenador (CBA, Computer-
Based Assessment). Desde 2006, ya PISA haba comenzado sus primeros pasos en la
evaluacin electrnica, aunque solo tres pases (Dinamarca, Islandia y Corea del Sur)
acometieron el reto, con una prueba de competencia cientfica implementada en 2006
(OECD, 2010).
Para intentar resolver algunos problemas surgidos en la aplicacin de las pruebas
en ordenadores porttiles (costes, requisitos del sistema para el examen, etc.), la siguiente
fase trat de superarlos acudiendo a los recursos de las Tecnologa de la Informacin y la
Comunicacin (TIC) de los propios centros escolares. Esto suceda en el nuevo ciclo que
comenz en 2009, centrado en la comprensin lectora. Fue la prueba ERA (Electronic
6
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
RESOLUCIN DE PROBLEMAS
Los problemas son situaciones sin una solucin obvia. Si no hay que pensar, no hay problema
(OECD, 2014, vol. V, p.1).
7
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
duracin y orden de las acciones llevadas a cabo por los alumnos cuando contestan a las
preguntas planteadas.
En consonancia con estos cambios, se dise para 2012 un nuevo marco y nuevas
metodologas de evaluacin que recogan, como caracterstica esencial, la interaccin del
alumno con el problema. Esta es un rea en la que se evala la competencia individual para
resolver problemas que se presentan o pueden presentar en la vida cotidiana. En una
edicin posterior, la de 2015, se explorarn adems las destrezas colaborativas, importantes
para resolver problemas dentro de un grupo, as el individuo forma parte de un equipo
integrado por varios especialistas que pueden trabajar en lugares distintos.
Otra caracterstica general de esta rea es que, a diferencia de lo que ocurre en
muchos casos con las competencias troncales de PISA, en esta se intenta evitar la necesidad
de recurrir a conocimientos especializados y se centra en la medicin de los procesos
cognitivos fundamentales para la resolucin de problemas.
Algunos de los ejemplos tratados en esta prueba se refieren a los problemas que
hay que afrontar cuando se utilizan dispositivos cotidianos, aunque no familiares, como los
mandos a distancia, los aparatos digitales personales (p. ej., telfonos mviles),
electrodomsticos y mquinas expendedoras. Otros ejemplos se presentan en situaciones
tales como la preparacin deportiva, la cra de animales, el cultivo de plantas y las
interacciones sociales. Las destrezas relativas a la resolucin de problemas son necesarias
para alcanzar un nivel de competencia superior al bsico cuando se aborden dichas
situaciones. A la concepcin del rea en 2003, que se restringa a las dimensiones
cognitivas, en 2012, se incorporan tambin las dimensiones afectivas (inters, empata,
capacidad de reaccin ante lo desconocido, etc.). Insistiendo en su carcter innovador, esta
es la primera vez que se incluyen problemas interactivos de este tipo en un estudio
internacional a gran escala, lo que ha sido posible gracias a la aplicacin electrnica de la
evaluacin.
La definicin que PISA 2012 da a esta competencia (OCDE, 2014, p. 12) es la
siguiente:
La competencia para la resolucin de problemas es la capacidad del individuo para emprender
procesos cognitivos con el fin de comprender y resolver situaciones problemticas en las que la
estrategia de solucin no resulta obvia de forma inmediata. Incluye la disposicin para
implicarse en dichas situaciones para alcanzar el propio potencial como ciudadano constructivo
y reflexivo.
A partir de esta definicin, se elaboran las unidades de evaluacin para la prueba
PISA. Normalmente, cada pregunta se centra, en lo posible, en un nico proceso de
resolucin de problemas. En algunas, es suficiente demostrar un reconocimiento del
problema; en otras, basta con describir una estrategia de solucin; en muchas se exige que
esa estrategia sea eficaz y eficiente; e incluso hay otras donde el cometido es valorar las
soluciones propuestas y decidirse por la ms adecuada para el problema planteado. Lo
interesante de incluir preguntas que se centren en un proceso es que, muchas veces, lo que
se ensea en clase suele incidir en la ejecucin, mientras que las principales dificultades para
la mayora de quienes resuelven un problema tienen que ver con la representacin,
planificacin y autorregulacin (OCDE, 2014).
Existen tres aspectos clave para elaborar las actividades de evaluacin: el contexto,
la naturaleza y los procesos de resolucin del problema (ver Cuadro 1.1). Los diferentes
contextos del problema se refieren a que aquel sea tecnolgico o no, personal o social. Lo
que determina la naturaleza del problema es si la informacin que sobre dicha situacin se
da a conocer a quien resuelve el problema al principio es completa (problemas estticos) o
8
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
si la interaccin con esa situacin es una parte necesaria de la actividad de resolucin para
descubrir informacin adicional (problemas interactivos).
Los procesos de resolucin de problemas son los procesos cognitivos implicados
en dicha resolucin; segn PISA, incluyen: explorar y comprender, representar y formular,
planificar y ejecutar, controlar y reflexionar. Esta clasificacin no significa que los procesos
implicados en la resolucin de un problema concreto sean secuenciales, o que todos los
procesos enumerados estn presentes en dicha resolucin. A medida que los individuos
afrontan, estructuran, representan y resuelven problemas autnticos que describen
exigencias vitales, pueden encaminarse hacia una solucin de un modo que traspase los
lmites de un modelo lineal, paso a paso. En la actualidad, casi toda la informacin relativa
al funcionamiento del sistema cognitivo de los humanos respalda la opinin de que este es
capaz de un procesamiento paralelo de la informacin (Lesh & Zawojewski, 2007).
Cuadro 1.1. Caractersticas del marco de resolucin de problemas
Formato
Se refiere a un dispositivo
Tecnolgico
CONTEXTO DEL PROBLEMA tecnolgico? No tecnolgico
En qu situacin cotidiana se
da el problema? Personal (uno mismo, la familia,
Enfoque los amigos)
Con qu mbito se relaciona? Social (la comunidad o la
sociedad en general)
Se encuentra desde el Interactiva: no se encuentra toda; hay parte que se debe descubrir
principio toda la informacin para explorar la situacin
necesaria para resolver el Esttica: toda la informacin est disponible desde un principio
problema?
Qu procesos cognitivos se
requieren para resolver esta
Planear y ejecutar: Establecer objetivos, incluyendo el objetivo
general y objetivos parciales cuando sea necesario; disear un plan; y
tarea concreta? ejecutar los pasos del plan.
Por otro lado, cada uno de los procesos de resolucin de problemas recurre a una o
ms destrezas de razonamiento. Para comprender un problema, la persona que lo resuelve
puede que tenga que distinguir entre hechos y opiniones. Para formular una solucin,
necesitar identificar relaciones entre variables. Para seleccionar una estrategia, tendr en
cuenta la causa y el efecto. Y para comunicar los resultados, deber organizar la
informacin de forma lgica. Las destrezas de razonamiento asociadas a estos procesos
estn insertas en la resolucin de problemas y son importantes en el contexto de PISA
porque pueden impartirse y modelarse en el aula.
9
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
Cantidad de Cuanta ms informacin haya que tener en cuenta, ms difcil ser probablemente el
informacin ejercicio.
Familiaridad del Si el contexto le es familiar a la persona que resuelve el problema, esta se sentir
contexto mejor predispuesta para abordarlo.
Cada pregunta de la prueba, con su estmulo asociado, ocupa una sola pantalla de
ordenador y los alumnos pasan de una pregunta a otra segn la modalidad de paso
bloqueado. Se emplean distintos formatos de respuesta, incluidos los de opcin mltiple y
10
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
los de respuesta construida, que se pueden codificar de forma automtica (p. ej., arrastrar y
soltar), y la entrada de texto abierta, que se codifica por expertos. En el caso de algunas
preguntas, se recaban datos de comportamiento que dan una informacin fiable sobre la
competencia de resolucin de problemas (p. ej., estrategias de exploracin) e influyen en la
puntuacin.
Reproductor MP3
Fiesta de cumpleaos
Control climtico
Billetes
Trfico
Robot de limpieza
11
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
Observar y Social
4 Billetes P3 (579) reflexionar Interactivo
Tecnolgico
Explorar y No tecnolgico
Robot de limpieza P2 (559) Esttico
553 comprender Social
Planear y Social
Billetes P1 (526) ejecutar Interactivo
Tecnolgico
Climatizador P1
Representar Tecnolgico
3 (Completa : 523) Interactivo
y formular Personal
( Parcial: 492)
Explorar y No tecnolgico
Robot de limpieza P1 (490) Esttico
488 comprender Social
No se dispone de todos los datos referentes a las unidades Reproductor MP3 y Fiesta de cumpleaos puesto que se
utilizaron solamente en la prueba piloto. Por ello, no se incluyen en cuadro anterior.
12
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
En la unidad Reproductor MP3 se indica a los alumnos que un amigo les ha regalado un
reproductor MP3. No saben cmo funciona y deben interactuar con l para averiguarlo, de
modo que la naturaleza del problema para cada pregunta de esta unidad es interactiva.
Puesto que la unidad se centra en descubrir las reglas que regulan un dispositivo destinado
para uso individual, el contexto de cada pregunta de la unidad es tecnolgico y personal.
Pregunta 1
Tecnolgico
Explorar y comprender Interactivo
Personal
13
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
correctas y al grado en que la informacin deba descubrirse (al principio no se sabe nada
sobre el sistema, de modo que todo el conocimiento sobre las reglas del mismo debe
proceder de su interaccin con l). Para esta pregunta no exista puntuacin parcial.
Pregunta 2
Promedio de
Proceso Contenido Contexto
aciertos
OCDE
Tecnolgico
Completa: 39 % Planear y ejecutar Interactivo
Personal
Parcial: 33%
Pregunta 3
14
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
Promedio de
Proceso Contenido Contexto
aciertos
Representar y Tecnolgico
OCDE: 39% formular Interactivo
Personal
La tercera pregunta de la unidad se clasifica como representar y formular, pues requiere que
los alumnos elaboren una representacin mental de cmo funciona el sistema en su
conjunto para determinar cul de las cuatro opciones dadas muestra un estado posible para
este aparato. La posibilidad de devolver el reproductor a su estado original, que estaba
presente en la primera pregunta de la unidad pero no en la segunda, vuelve a aparecer aqu,
de modo que el alumno puede interactuar con el sistema tanto o tan poco como necesite
sin restriccin. No exista puntuacin parcial para esta pregunta y en la prueba piloto su
dificultad fue similar a la de la primera pregunta de la unidad, con un 39% de alumnos que
seleccionaron la respuesta correcta (B).
Pregunta 4
15
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
Puntuacin completa
Cdigo 1: Da una respuesta que describe cmo puede seguir funcionando el reproductor MP3 con
solo un botn con flecha.
Cambiar la forma en la que funciona el botn de arriba, para que una vez que hayas
alcanzado la parte derecha de la pantalla, un click ms te lleve de nuevo a la parte
izquierda de la pantalla.
Usando una flecha, cada fila hace un crculo cerrado, ej. Msica-Volumen-Bajos-Msica
La flecha hacia la derecha solo puede llevarte de nuevo a la parte izquierda de la pantalla
si llegas hasta la entrada que est ms a la derecha por ejemplo, una vez que ests en
bajos, pulsando el botn de la flecha a la derecha puedes volver a Msica.
El volumen est en 3 por defecto. Si quieres cambiarlo a dos o uno, puedes hacerlo de
modo que cuando hagas click en el botn del medio para ajustar el volumen, por defecto
pondr uno (el ajuste ms abajo). Luego puedes usar el botn con la flecha a la derecha
para cambiarlo a donde quieras.
Cuando quieres cambiar una propiedad y te mueves en la lnea en la que est, por defecto
aparecer el ajuste ms bajo para esa propiedad.
Usa la flecha para volver al sitio de partida (en crculo). [Mnimo.]
Sin puntuacin
Promedio de
aciertos Proceso Contenido Contexto
Observar y Tecnolgico
OCDE: 25% Interactivo
reflexionar Personal
16
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
Pregunta 1
En la nica pregunta de esta unidad los alumnos deben arrastrar y soltar nombres para
planificar la disposicin de los invitados en funcin de nueve condiciones dadas. Por tanto,
la pregunta se clasifica en los procesos de planificar y ejecutar. Puesto que toda la
informacin necesaria para resolver el problema se da a los alumnos al principio, la
pregunta se clasifica como esttica. Debe tenerse en cuenta que la pregunta solo es esttica
respecto a la definicin de la naturaleza del problema. El formato de respuesta (arrastrar y
soltar) se aprovecha del potencial de la administracin por ordenador: los alumnos pueden
elaborar, revisar y modificar su solucin mucho ms fcilmente de lo que sera posible con
una versin de esta pregunta en soporte impreso. La pregunta cuenta con puntuacin
parcial. Para obtener la mxima puntuacin se debe encontrar una de las doce posibles
soluciones que cumplen las nueve condiciones (p. ej., lvaro-Ana-Esther-Bruno-Bea-
Carlos-Diana-Fran); la puntuacin parcial se asigna a las soluciones que solo cumplen ocho
de las nueve condiciones (p. ej., lvaro-Ana-Esther-Bruno-Bea-Diana-Fran-Carlos; en este
caso, Carlos no cumple la condicin de estar sentado junto a Diana o Esther). En la prueba
17
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
piloto, el 54% de los alumnos obtuvieron una puntuacin parcial en esta pregunta y un
43% la mxima puntuacin. La dificultad radica en el gran nmero de condiciones
impuestas y las destrezas de razonamiento requeridas para controlar y ajustar soluciones
parciales con relacin a dichas condiciones hasta obtener una solucin completa.
Promedio de
Proceso Contenido Contexto
aciertos
OCDE
No tecnolgico
Completa: 43% Planear y ejecutar Interactivo
Personal
Parcial: 54%
Pregunta 1
En la primera pregunta de la unidad, los alumnos tienen que manejar los deslizadores para
descubrir cmo influye cada control sobre el nivel de la temperatura o de la humedad. El
proceso que se mide en esta pregunta es representar y formular: el alumno experimenta para
determinar qu controles influyen en la temperatura y cules en la humedad, y luego
representa las relaciones causales dibujando flechas entre los tres controles y los dos
factores (temperatura y humedad). No hay ninguna restriccin en el nmero de pasos de
navegacin que puede recorrer el alumno al explorar. La puntuacin total se da si el
diagrama causal se rellena correctamente. La puntuacin parcial se da si el alumno explora
18
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
de forma eficaz las relaciones entre las dos variables, pero no las representa correctamente
en un diagrama.
Puntuacin completa
Puntuacin parcial
Cdigo 1: El modelo es incorrecto Y el acceso a la pregunta revela que el alumno ha usado la estrategia
de variar una cosa una vez; mantener las otras variables a su nivel inicial para por lo menos
dos de las tres variables de resultado en algn momento.
Sin puntuacin
Puntuacincompleta
Nivel Dificultad en la Promedio de Proceso Contenido Contexto
escala PISA aciertos
OCDE: 53 % Representar y Tecnolgico
3 523 formular Interactivo
Espaa: 46 % Personal
Puntuacinparcial
Dificultad en la Promedio de
Nivel escala PISA aciertos Proceso Contenido Contexto
Pregunta 2
19
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
La segunda pregunta se dirige a que los alumnos apliquen su propio conocimiento para
entender cmo se regula el funcionamiento del aire acondicionado. sta es una pregunta de
planificar y ejecutar. Teniendo en cuenta el carcter cerrado de la prueba para asegurarse de
que no se requieren ms pasos de navegacin de los explorados previamente, se muestra un
diagrama con las relaciones de los controles y los factores. Al permitirse nicamente cuatro
pasos, los alumnos deben planificar y emplear una estrategia para acometer esta tarea. Sin
embargo, es posible alcanzar los niveles correctos de temperatura y humedad de varias
maneras dentro de estos cuatro posibles pasos se puede hacer como mnimo con dosy
los errores siempre se pueden corregir de inmediato. Una estrategia posible, por ejemplo, es
establecer sub-objetivos por separado y centrarse en cada factor en pasos sucesivos. Si el
alumno es capaz de realizar estos pasos para uno solo de los factores, se da puntuacin
parcial.
Puntuacin completa
Cdigo 2: El acceso a la pregunta revela que el rea que era nuestro objetivo se ha alcanzado para las
dos variables de resultado.
Puntuacin parcial
Cdigo 1: El acceso a la pregunta revela que la distancia al rea que era nuestro objetivo ha disminuido
en comparacin con el valor inicial para las dos variables de resultado.
Sin puntuacin
Puntuacincompleta
Nivel Dificultad en la Promedio de Proceso Contenido Contexto
escala PISA aciertos
Puntuacinparcial
Nivel Dificultad en la Promedio de Proceso Contenido Contexto
escala PISA aciertos
20
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
En la unidad BILLETES, los alumnos tienen que imaginar que acaban de llegar a una
estacin de tren con mquinas para sacar los billetes. El contexto es social y tecnolgico.
En la mquina, los alumnos pueden comprar billetes de metro o de tren regional,
con tarifa normal o reducida; pueden elegir billetes para un da o para un nmero concreto
de viajes. Todas las preguntas de esta unidad presentan un problema interactivo: se tienen
que enfrentar con una mquina no conocida y usarla para lo que necesitan.
Pregunta 1
En la primera pregunta, tienen que comprar un billete de tarifa normal para trenes
regionales, con dos viajes individuales. Se mide aqu el proceso cognitivo de planificar y
ejecutar. Primero tienen que elegir la red (trenes regionales), despus la tarifa (tarifa
normal), y luego o billete para un da o varios viajes individuales; y en este ltimo caso,
21
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
indicar el nmero de viajes (dos). La solucin incluye diversos pasos, y las directrices no se
dan en el orden que se necesita elegir. Es un problema relativamente lineal, comparado con
los siguientes, pero es la primera vez que se enfrentan con la mquina, lo que aade
dificultad.
Puntuacin completa
Cdigo 1: Compra una tarifa normal, un billete de tren regional con dos viajes individuales.
Sin puntuacin
OCDE: 58 % Social
3 526 Planear y ejecutar Interactivo
Espaa: 43 % Tecnolgico
Pregunta 2
En la segunda pregunta, se les pide que busquen y compren el billete ms barato que les
permita hacer cuatro viajes en metro por la ciudad en el mismo da. Como son estudiantes,
pueden sacar tarifa reducida. Se clasifica como explorar y entender. Deben emplear una
estrategia exploratoria, primero sabiendo al menos las dos alternativas ms obvias (un
billete diario de tarifa reducida o uno individual de cuatro viajes), y despus comprobar cul
es el ms barato. Si van a las dos pantallas y compran el ms barato, se les da una
puntuacin total. Si no comparan los precios, puntuacin parcial. Se requieren, pues,
diversos pasos.
22
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
Puntuacin completa
Cdigo 2: Compra un billete para el Metro urbano/Reducida/Billete(s) individual con cuatro viajes Y
visita la pantalla de COMPRAR para el caso del Metro urbano/Reducida/Para un da
para comparar los precios.
Puntuacin parcial
Sin puntuacin
Puntuacincompleta
Dificultad en la Promedio de
Nivel escala PISA aciertos Proceso Contenido Contexto
Puntuacinparcial
Nivel Dificultad en la Promedio de Proceso Contenido Contexto
escala PISA aciertos
Pregunta 3
En la tercera pregunta, tienen que comprar un billete para dos viajes individuales en metro.
Se les dice que pueden sacar tarifa reducida. Se clasifica como monitorizar y reflexionar,
porque tienen que modificar su plan inicial. Cuando seleccionan la tarifa reducida, la
mquina dice que no hay billetes disponibles de esta clase. En este ejercicio, los alumnos
se dan cuenta de que no se pueden cumplir todas las condiciones y acomodan su plan
comprando un billete normal.
23
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
Puntuacin completa
Cdigo 1: Intenta obtener un billete reducido con dos viajes individuales para el metro urbano Y
consigue CUALQUIERA de los dos siguientes billetes:
Metro urbano/Tarifa normal/ Individual con 1 viaje.
Metro urbano/Tarifa normal/ Individual con 2 viajes.
Sin puntuacin
Dificultad en la Promedio de
Nivel escala PISA aciertos Proceso Contenido Contexto
24
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
Pregunta 1:
En la primera pregunta, de planificar y ejecutar, se pide que digan la ruta ms corta de
Soto a Esmeralda. Se dan cuatro opciones de respuesta.
Puntuacin completa
Cdigo 1: A. 20 minutos
Sin puntuacin
OCDE: 86 % No tecnolgico
Inferior a 1 340 Planear y ejecutar Esttico
Espaa: 84 % Social
Pregunta 2:
25
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
Puntuacin completa
Sin puntuacin
Dificultad en la Promedio de
Nivel Proceso Contenido Contexto
escala PISA aciertos
OCDE: 70 % No tecnolgico
2 446 Planear y ejecutar Esttico
Espaa: 64 % Social
Pregunta 3
En la tercera, hay que usar el men desplegable para elegir el punto de encuentro que
cumple una condicin sobre el tiempo de viaje para los tres participantes. Se clasifica como
observar y reflexionar.
26
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
Puntuacin completa
Sin puntuacin
Dificultad en la Promedio de
Nivel escala PISA aciertos Proceso Contenido Contexto
27
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
situaciones presentadas son estticas, porque el alumno no puede intervenir en cambiar los
movimientos del robot. El contexto es social y no tecnolgico.
Puntuacin completa
Cdigo 1: Gira un cuarto de crculo (90 grados) y se mueve hacia adelante hasta que se encuentra con
otra cosa
Sin puntuacin
Pregunta 1
En la primera pregunta de la unidad, los alumnos deben entender lo que hace la aspiradora
cuando encuentra un bloque rojo. Se clasifica como explorar y comprender. Para mostrar esa
comprensin, tienen que seleccionar, entre cuatro opciones y segn lo observado, la
descripcin que corresponde a esta situacin: gira un cuarto de crculo (90 grados) y se
mueve hacia adelante hasta que se encuentra con otra cosa.
Dificultad en la Promedio de
Nivel Proceso Contenido Contexto
escala PISA aciertos
Pregunta 2
28
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
Puntuacin completa
Sin puntuacin
Pregunta 3
29
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
Puntuacin completa
Cdigo 2: Reconoce que la aspiradora empuja el bloque amarillo hasta que se encuentra con una pared
o con un bloque rojo Y que luego da un giro de 180 grados.
Empuja el bloque tan lejos como puede, luego da la vuelta (180 grados). [Tan lejos como
puede implica hasta que encuentra algo.]
Empuja el bloque hasta que se encuentra con algo ms, luego da la vuelta. [No es necesario
especificar qu es lo que se encuentra para recibir la puntuacin. Da la vuelta implica un giro de 180
grados.]
Puntuacin parcial
Cdigo 1: Reconoce BIEN QUE la aspiradora empuja el bloque Amarillo O que gira.
Cuando encuentra un bloque amarillo, lo empuja.
Lo empuja. [mnimo]
Gira. [mnimo]
Sin puntuacin
Puntuacincompleta
Dificultad en la Promedio de
Nivel Proceso Contenido Contexto
escala PISA aciertos
Puntuacinparcial
Dificultad en la Promedio de
Nivel Proceso Contenido Contexto
escala PISA aciertos
30
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
MATEMTICAS
En PISA, por primera vez en 2012, la competencia matemtica se ha evaluado tambin con
preguntas diseadas especialmente para medios digitales. Matemticas y lectura se
consideraron dos componentes opcionales en PISA 2012, mientras que resolucin de
problemas formaba parte de las troncales en esta edicin. Sin embargo, en los pases que
participaron en estas dos opciones, como ocurri en Espaa, la prueba digital incluy las
tres reas (resolucin de problemas, matemticas y lectura).
En PISA 2012, la competencia matemtica se define como:
La capacidad del individuo para formular, emplear e interpretar las matemticas en distintos
contextos. Incluye el razonamiento matemtico y la utilizacin de conceptos, procedimientos, datos y
herramientas matemticas para describir, explicar y predecir fenmenos. Ayuda a los individuos a reconocer
el papel que las matemticas desempean en el mundo y a emitir los juicios y las decisiones bien fundadas
que los ciudadanos constructivos, comprometidos y reflexivos necesitan.
En el soporte electrnico son posibles otros tipos de formato de pregunta que en
el soporte impreso. El primero se presta a ms modalidades de respuesta que el segundo y
tambin facilita la evaluacin de determinados aspectos de la competencia matemtica,
como la manipulacin y rotacin de representaciones de formas tridimensionales, que no se
pueden evaluar tan fcilmente en el medio impreso. As, se pueden ofrecer estmulos
mviles, representaciones de objetos tridimensionales que se rotan o un acceso ms flexible
a la informacin. Igualmente son posibles formatos de pregunta que permiten una mayor
variedad de tipos de respuesta, como son las preguntas de arrastrar y soltar o el empleo de
zonas activas en una imagen. De esa manera, menos ligada al lenguaje, se puede conseguir
en ocasiones una aproximacin ms completa a lo que de verdad entiende el alumno en
matemticas.
Adems, la posibilidad de una codificacin automatizada de las respuestas puede
sustituir algn trabajo manual o, lo que es ms importante, facilitar la codificacin de
caractersticas de los dibujos, demostraciones y procedimientos elaborados por los alumnos
que antes era imposible hacer (OECD, 2014).
Los parmetros en los que se inscribe la competencia matemtica digital son los
mismos que los de la impresa. En el Cuadro 1.4 se recoge la relacin entre los procesos
cognitivos matemticos y las capacidades, lo que constituye la competencia matemtica en
PISA.
31
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
Cuadro 1.4. Relacin entre los procesos matemticos y las capacidades matemticas fundamentales
Empleo de conceptos,
Interpretacin, aplicacin y
Formulacin matemtica datos, procedimientos y valoracin de los
de las situaciones razonamientos
matemticos resultados matemticos
Leer, descodificar e
interpretar enunciados, Articular una solucin,
preguntas, tareas, objetos, mostrar el trabajo asociado Elaborar y presentar
imgenes o animaciones a la obtencin de la misma explicaciones y argumentos
Comunicacin (en la evaluacin y/o resumir y presentar los en el contexto del
electrnica) para crear un resultados matemticos problema.
modelo mental de la intermedios.
situacin.
Activar mecanismos de
Seleccionar o disear un control eficaces y
sostenidos en un Disear e implementar una
plan o estrategia para estrategia para interpretar,
Diseo de estrategias para reformular procedimiento con
resolver problemas matemticamente mltiples pasos conducente valorar y validar una
a una solucin, conclusin solucin matemtica a un
problemas problema contextualizado.
contextualizados. o generalizacin
matemtica.
32
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
GRFICOS
VALLAS
CALCULADORA DE GASTOS DEL COCHE
PRODUCCIN DE CDs
PUNTOS ESTRELLA
FOTOS
NDICE DE MASA CORPORAL
Pregunta 1
33
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
Puntuacin completa
Sin puntuacin
Pregunta 2
Puntuacin completa
Sin puntuacin
34
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
Pregunta 1:
Pregunta 2:
Puntuacin completa
Cdigo 1: Una afirmacin que muestre una correcta comprensin de uno (o de ambos) de los mayores
cambios en la clasificacin de pesos del IMC en Zedland desde 2000 a 2010, incluyendo una
referencia tanto a la magnitud como a la direccin del cambio.
(i) que el porcentaje de los que tienen entre 12-19 aos dentro del rango de peso normal ha
descendido de 57,5% en 2000 a 51,5% en 2010 o descendi un 6% (puntos); o
(ii) que el porcentaje de los que tienen entre 12-19 aos que estn obesos se ha
incrementado en 12,1% en 2000 a 18,1% en 2010 o descendido un 6% (puntos).
El porcentaje de los que tienen entre 12-19 aos dentro del rango normal de peso ha
descendido de 57,5% en 2000 a 51,5% en 2010.
El porcentaje de los que estn obesos ha ido de 12,1% en 2000 a 18,1% en 2010.
El porcentaje de los que tienen un peso normal ha bajado un 6%.
La tasa de obesidad ha subido en un 6%.
Sin puntuacin
Cdigo 0: Otras respuestas.
La tasa de obesidad en 2010 es unas cuatro veces ms grande de lo que era en
2000.[magnitud del cambio incorrecta]
La tasa de obesidad ha subido entre 2000 y 2010.[no se da la magnitud]
El porcentaje de normalidad ha cambiado en un 6%. [no se da la direccin]
La obesidad ha subido. [no se da la magnitud]
Lo normal ha bajado en un 51,5% [magnitud del cambio incorrecta]
Cdigo 9: Sin respuesta.
35
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
LECTURA
En PISA 2009, se incluy por vez primera la lectura digital como una variante optativa de
evaluacin en un estudio comparativo internacional. Participaron 19 pases, entre ellos,
Espaa. La lectura digital en PISA es una evaluacin de la comprensin lectora en medios
electrnicos; se basa en la informacin adquirida a travs del ordenador, no se trata
simplemente de preguntas anteriormente impresas trasferidas a un medio digital. El lector
digital necesita desarrollar unas destrezas nuevas aparte de las precisas para la lectura
impresa, comunes tambin a la digital.
El marco de PISA 2012 para evaluar la competencia lectora de los alumnos hacia el
final de su educacin obligatoria se centr en las destrezas lectoras, tanto en soporte digital
como en impreso, que incluyen la localizacin, seleccin, interpretacin y valoracin de
informacin a partir de una serie completa de textos asociados a situaciones del aula o fuera
de ella. Como se indicaba en el Informe Espaol de PISA-ERA 2009 (INEE, 2011), las
mayores diferencias entre los textos impresos y los digitales estriban en:
El acceso a los textos, que depende tanto de las habilidades relativas al proceso de
textos en s, como de las habilidades visuales y espaciales que se tengan, por la
asimilacin de diferentes lenguajes icnicos.
La integracin de diferentes tipos de textos, que puede resultar ms elaborada en
los digitales que en los impresos, por las propias necesidades de la navegacin.
La valoracin crtica de los textos (autora, fiabilidad, tendenciosidad, sesgos
intencionados o inevitables, etc.), no tan fcilmente accesible en los textos digitales
como lo pueda ser en los impresos, es uno de los aspectos ms interesantes para
investigar en esta reciente sociedad de la informacin interconectada.
Por tanto, la definicin de lectura y de competencia lectora ha ido cambiando
acorde a los cambios en la sociedad y la cultura. Adems, el concepto de aprendizaje,
particularmente el aprendizaje a lo largo de la vida ha hecho ms amplio la percepcin de lo
que es leer. Ya no se considera que sea una habilidad adquirida nicamente en la infancia
durante los primeros cursos escolares; ahora se concibe ms bien como una suma de
conocimientos, destrezas y estrategias que se van construyendo en la vida en distintos
contextos, a travs de la interaccin con los ms cercanos y con comunidades cada vez ms
amplias.
Por ello, el estudio PISA ha ido adecuando la definicin primera de lo que es
comprensin lectora, aadiendo lo que significa leer en diferentes contextos. Por otro lado,
en el marco conceptual se reconoce que los aspectos cognitivos de la competencia resultan
tan relevantes como los afectivos, entre ellos, el inters y la motivacin, o engagement, como
se dice en el original ingls.
La definicin de competencia lectora en PISA 2012 (INEE, 2014, p. 55) es la
siguiente:
Competencia lectora es comprender, utilizar, reflexionar y comprometerse con textos escritos, para
alcanzar los propios objetivos, desarrollar el conocimiento y potencial personal, y participar en la sociedad.
Tanto en 2009 como en 2012, la muestra de alumnos evaluados se organiz de tal
modo que formaban un subgrupo de los que previamente haban realizado la prueba
impresa, lo que permita comparar las semejanzas y diferencias entre los dos formatos de
texto. Los resultados demostraron que la lectura digital aportaba algunas caractersticas
distintas que no tena la lectura impresa. As, se elaboraron dos tipos de escalas de niveles
de rendimiento, una en la que se recogan las puntuaciones en lectura digital y otra,
combinada con las puntuaciones de los mismos alumnos en los dos formatos.
36
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
QUIEROAYUDAR
OLFATO
CAF DE FILSOFOS
EL HELADO
PHISHING
BUSCAR EMPLEO
VAMOS A HABLAR
37
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
Esta unidad se bas en un foro de discusin on line sobre los retos de hablar en pblico.
La discusin la inicia Marga en la parte inferior de la pantalla del foro de discusin (que
se muestra en la pantalla 1E) haciendo referencia a su terror a hablar en pblico, delante
de la clase, y pide ayuda y consejo.
El tema de la discusin, enmarcado en una situacin educativa, es un ejemplo de
contexto que resultara familiar a la mayora de los alumnos de PISA. Por lo que
respecta al formato y al tipo de texto, VAMOS A HABLAR est clasificado como texto
mltiple, de varios autores, y argumentativo en cuanto a estructura retrica. Presenta
una situacin interactiva en la que cada participante responde directamente a los dems.
Se trata de un tipo de intercambio nuevo y ms rpido, que se ha convertido en una
forma habitual de comunicacin que va en aumento. En este tipo de texto mltiple, la
comprensin de cada texto depende del seguimiento de la cadena de participantes.
La pgina del foro de discusin es bastante larga: consta de ocho entradas. Para
leer la primera es necesario desplazarse hacia abajo. Las pantallas 1B-1E muestran lo que
ve el lector cuando se desplaza en esa direccin.
38
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
PANTALLA 1B
PANTALLA 1C
39
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
PANTALLA 1D
PANTALLA 1E
Adems de la pgina de inicio, la unidad incluye solo otro estmulo, al que se accede
haciendo clic sobre el enlace en uno de los blogs que lo recomienda como consejo del
experto. La segunda pantalla, que corresponde al asesoramiento ofrecido por la Dra.
Nauckunaite, tambin requiere desplazarse (vanse las pantallas 2A y 2B).
40
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
PANTALLA 2A
PANTALLA 2B
41
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
Mira el comentario de Marga del 10 de marzo. Haz clic en Escribe una respuesta y
escribe una respuesta a Marga. En tu respuesta, responde a su pregunta sobre qu
participante, en tu opinin, sabe ms sobre este tema.
Justifica tu respuesta.
Haz clic en Enva la respuesta para aadir tu respuesta al foro.
PANTALLA 3
42
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
1. Qu es CBA (Computer-Based Assessment, Evaluacin por ordenador)?
http://www.mecd.gob.es/inee/Recursos.html
43
2. Resolucin de problemas en ordenador
44
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
2. Resolucin de problemas por ordenador
45
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
2. Resolucin de problemas por ordenador
Figura 2.1. Puntuaciones medias estimadas e intervalos de confianza al 95% para la media
poblacional de resolucin de problemas
Corea (561)
Japn (552)
Canad (526)
Australia (523)
Finlandia (523)
Reino Unido (517)
Estonia (515)
Francia (511)
Pases Bajos (511)
Italia (510)
Repblica Checa (509)
Alemania (509)
Estados Unidos (508)
Blgica (508)
Madrid (507)
Austria (506)
Noruega (503)
Irlanda (498)
Dinamarca (497)
Pas Vasco (496)
Portugal (494)
Suecia (491)
Catalua (488)
Eslovaquia (483)
Polonia (481)
Espaa (477)
Eslovenia (476)
Hungra (459)
Turqua (454)
Israel (454)
Chile (448)
OCDE (500)
400 420 440 460 480 500 520 540 560 580 600
46
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
2. Resolucin de problemas por ordenador
47
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
2. Resolucin de problemas por ordenador
Rango
Media E.T.1 Rango Inferior
superior
Corea del Sur 561,1 (4,3) 1 2
Japn 552,2 (3,1) 1 2
Canad 525,7 (2,4) 3 6
Australia 523,1 (1,9) 3 7
Finlandia 522,8 (2,3) 3 7
Reino Unido 516,8 (4,2) 3 17
Estonia 515,0 (2,5) 4 16
Francia 511,0 (3,4) 6 19
Pases Bajos 510,7 (4,4) 4 21
Italia 509,6 (4,0) 6 21
Repblica Checa 509,0 (3,1) 6 21
Alemania 508,7 (3,6) 6 21
Estados Unidos 507,9 (3,9) 6 22
Blgica 507,7 (2,5) 6 21
Comunidad de 507,4 (13,0) 3 26
Madrid
Austria 506,4 (3,6) 6 22
Noruega 503,3 (3,3) 7 22
Irlanda 498,3 (3,2) 8 23
Dinamarca 497,1 (2,9) 9 23
Pas Vasco 496,3 (3,9) 9 25
Portugal 494,4 (3,6) 12 25
Suecia 490,7 (2,9) 16 25
Catalua 488,0 (8,4) 8 27
Eslovaquia 483,3 (3,6) 19 28
Polonia 480,8 (4,4) 19 28
Espaa 476,8 (4,1) 22 28
Eslovenia 475,8 (1,5) 23 28
Hungra 459,0 (4,0) 28 31
Turqua 454,5 (4,0) 28 31
Israel 454,0 (5,5) 28 31
Chile 447,9 (3,7) 28 31
1
Error Tpico.
48
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
2. Resolucin de problemas por ordenador
200 250 300 350 400 450 500 550 600 650 700 750
Percentil 25 Percentil 75
49
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
2. Resolucin de problemas por ordenador
560
Japn
540
Canad
Australia Finlandia
Mejores resultados
Media
Austria
OCDE
Irlanda
500 Pas Vasco
Portugal
Dinamarca
Suecia
Catalua
Eslov aquia
Polonia
480 Espaa Eslov enia
Hungra
460
Israel Turqua
Chile
440
50
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
2. Resolucin de problemas por ordenador
En esta seccin se describen los seis niveles de rendimiento construidos para el informe de
resolucin de problemas de PISA 2012. Adems, se aade un nivel inferior al 1 en el que se
incluyen los estudiantes que no pueden completar con xito la mayora de los tems con
dificultad de Nivel 1.
El Cuadro 2.3 incluye lo que los estudiantes pueden hacer en cada uno de los
niveles de rendimiento en resolucin de problemas. Las descripciones se basan en el
anlisis de las tareas requeridas en cada nivel.
Cuadro 2.3. Descripcin de los seis niveles de rendimiento en resolucin de problemas
51
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
2. Resolucin de problemas por ordenador
52
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
2. Resolucin de problemas por ordenador
Entre los pases de la OCDE, el 31% de los estudiantes alcanzan al menos el Nivel
4 de la escala de resolucin de problemas. En Corea del Sur (56,5%) y en Japn (51,5%)
ms de la mitad de los estudiantes pueden completar tareas de Nivel 4; adems, la
puntuacin media estimada de Corea del Sur (561,1) y Japn (552,2) pertenece a este nivel
de competencia. En el lado opuesto, en Chile (10,9%) y en Turqua (11,6%) apenas uno de
cada diez estudiantes alcanza el Nivel 4.
El 23,7% de los estudiantes espaoles alcanza el Nivel 4 de la escala, siendo esa
proporcin del 28,4% en el Pas Vasco, el 27,1% en Catalua y el 34,1% en Madrid.
Observndose ahora diferencias estadsticamente significativas de las comunidades
analizadas con el promedio de Espaa.
En el Nivel 3 de la escala, los estudiantes pueden manejar informacin presentada
en varios formatos diferentes. Pueden explorar el guin de un problema e inferir relaciones
simples entre sus componentes. En este nivel se combinan la anticipacin y planificacin
con la reestructuracin cognitiva; estos alumnos seran capaces de cambiar el plan inicial
ante una adversidad. Si hay mltiples condiciones o caractersticas interrelacionadas son
capaces de mantener una variable constante para ver el efecto de cambio en las otras
variables. Pueden disear y ejecutar pruebas para confirmar o refutar una hiptesis dada.
Los estudiantes en este nivel comprenden la necesidad de planificar y supervisar el
progreso en la solucin de un problema.
Un ejemplo para este nivel podra ser que los estudiantes tuvieran que comprar el
billete ms barato combinando metro/autobs y tren en una ciudad en la que nunca
hubieran estado antes y se encontraran con el inconveniente de no encontrar billetes para
uno u otro medio de transporte, que no queda la tarifa ms barata, etc.
En el conjunto de pases de la OCDE, la mayora (56,6%) de los estudiantes de 15
aos alcanza al menos el Nivel 3; alrededor de uno de cada cuatro (25,6%) llega como
mximo a este nivel. Adems, este es el nivel en el que la mayora de los pases tiene la
proporcin ms alta de estudiantes. Ms de tres de cada cuatro estudiantes en Corea del Sur
(80,2%) y Japn (78,3%) alcanzan este nivel de la escala de resolucin de problemas.
Mientras que en 8 pases de la OCDE, menos de uno de cada dos estudiantes puede
completar con xito tareas de Nivel 3.
Los estudiantes que alcanzan el Nivel 2 en la escala de resolucin de problemas
pueden explorar un problema en un entorno desconocido, que no les sea familiar, y
comprender una parte del mismo, tambin pueden contrastar una hiptesis simple que les
ha sido propuesta y resolver un problema con una nica restriccin especfica.
Los alumnos de Nivel 2 combinan la anticipacin y la planificacin en una situacin
novedosa, por ejemplo seran capaces de comprar el billete ms barato combinando
metro/autobs y tren en una ciudad en la que nunca han estado. Se trata de tareas de un
nico paso cuya finalidad es alcanzar un objetivo secundario, aunque estos alumnos tienen
cierta capacidad para supervisar el progreso global del proceso.
El Nivel 2 puede considerarse como el nivel bsico de aptitud, en el cual los
estudiantes comienzan a demostrar las competencias en resolucin de problemas que les
permitirn participar efectiva y productivamente en las sociedades del siglo XXI. En este
nivel de desempeo, los estudiantes se involucran en un problema cotidiano, progresan
hacia una solucin y en ocasiones lo alcanzan.
La Figura 2.3 muestra la proporcin de estudiantes de 15 aos en cada uno de los
niveles de rendimiento de la escala de resolucin de problemas ordenados de mayor a
menor proporcin de los que completan al menos tareas de Nivel 2. Los datos
corresponden a los de la Tabla 2.3.
53
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
2. Resolucin de problemas por ordenador
54
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
2. Resolucin de problemas por ordenador
Figura 2.3. Proporcin de estudiantes en cada uno de los niveles de rendimiento de la escala de
resolucin de problemas
Corea 2 5 13 24 29 20 8
Japn 2 5 15 27 29 17 5
Finlandia 4 10 20 27 24 11 4
Canad 5 10 19 26 23 12 5
Estonia 4 11 22 29 22 10 2
Australia 5 10 19 26 23 12 4
Reino Unido 6 11 20 26 23 11 3
Italia 5 11 22 28 22 9 2
Francia 7 10 20 28 23 10 2
Estados Unidos 6 12 23 27 20 9 3
Repblica Checa 6 12 21 27 22 10 2
Austria 6 12 22 27 22 9 2
Pases Bajos 7 11 20 26 22 11 3
Alemania 8 12 20 26 22 10 3
Madrid 7 14 20 26 22 10 3
Irlanda 7 13 24 28 19 7 2
Dinamarca 7 13 24 28 19 7 2
Portugal 6 14 26 28 18 6 1
Blgica 9 12 18 24 22 11 3
Pas Vasco 8 13 23 27 19 8 2
Noruega 8 13 22 25 19 10 3
Suecia 9 15 24 26 18 7 2
Catalua 11 12 24 25 18 7 2
Polonia 10 16 26 26 16 6 1
Eslovaquia 11 15 24 26 16 6 2
Espaa 13 15 24 24 16 6 2
Eslovenia 11 17 25 24 16 6 1
Hungra 17 18 24 22 13 5 1
Turqua 11 25 31 21 9 2
Chile 15 23 29 22 9 2
Israel 22 17 20 18 14 7 2
OECD 8 13 22 26 20 9 2
55
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
2. Resolucin de problemas por ordenador
56
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
2. Resolucin de problemas por ordenador
Finlandia
Eslovenia
Suecia
Noruega
Catalua
Polonia
Espaa
Australia
Estados Unidos
Hungra
Madrid
Pas Vasco
Francia
Estonia
Pases Bajos
Irlanda
Canad
Reino Unido
Israel
Alemania
Repblica Checa
Blgica
Dinamarca
Austria
Corea
Chile
Turqua
Portugal
Italia
Japn
Eslovaquia
OCDE
En algunos pases, las chicas han obtenido mejores puntuaciones medias que los
chicos, aunque las diferencias no son significativas. Es el caso de Finlandia (-6,2 puntos),
Eslovenia (-4,0 puntos), Suecia (-3,6 puntos), Noruega (-3,2 puntos) y Polonia (-0,1
puntos), como tampoco es significativa la diferencia a favor de las chicas observada en
Catalua (-1,7).
La diferencia observada entre el rendimiento de los chicos y las chicas puede ser
atribuida al mayor porcentaje de chicos en los niveles altos de adquisicin de competencias
(5 y 6). En la Figura 2.5 se puede ver la distribucin por niveles de competencia de chicos y
chicas para cada uno de los pases y comunidades autnomas, y para el conjunto de la
OCDE. Los datos se recogen en la Tabla 2.5.
57
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
2. Resolucin de problemas por ordenador
Figura 2.5. Distribucin por niveles de rendimiento de chicos y chicas en resolucin de problemas
Chicos Chicas
Alemania 8 12 19 24 22 11 4 7 11 22 27 22 9
Australia 5 11 19 25 22 13 5 5 10 20 27 23 12 4
Austria 6 11 21 26 23 10 3 7 13 23 28 21 8
Blgica 9 12 17 23 22 13 4 9 12 20 26 22 10
Canad 5 10 18 25 23 13 6 5 10 20 27 23 12 4
Catalua 13 12 22 24 18 8 3 9 13 26 27 18 6
Chile 14 21 27 24 11 3 16 25 30 21 7
Corea 5 12 22 29 22 9 5 14 26 29 18 6
Dinamarca 7 13 23 27 20 8 8 13 26 29 18 6
Eslovaquia 9 15 23 24 18 8 12 16 25 28 14 4
Eslovenia 13 17 24 22 16 6 9 18 27 25 15 5
Espaa 14 16 21 24 16 7 12 15 26 25 16 5
Estados Unidos 7 12 21 26 21 10 3 5 13 24 28 20 8
Estonia 4 11 21 28 22 10 3 4 11 22 30 22 9
Finlandia 5 11 20 26 22 11 4 4 9 20 28 25 12 3
Francia 7 10 20 27 23 11 3 6 10 21 30 22 9
Hungra 19 17 22 22 14 6 16 19 26 23 12 4
Irlanda 7 13 23 27 19 8 3 7 13 25 28 19 7
Israel 24 15 17 17 15 9 3 20 19 23 20 12 5
Italia 6 11 19 26 24 12 3 5 12 26 31 20 5
Japn 5 13 24 29 20 7 6 16 30 29 14 3
Madrid 7 14 18 25 22 10 3 7 13 21 26 21 9
Noruega 9 13 21 24 19 10 4 7 13 22 25 20 10 3
Pas Vasco 8 13 22 26 19 8 8 13 24 28 18 7
Pases Bajos 8 11 19 25 23 12 3 7 11 21 27 21 10
Polonia 12 15 23 24 17 7 8 16 28 28 14 5
Portugal 6 13 23 28 21 8 7 15 28 29 16 5
Reino Unido 6 10 20 25 23 12 4 5 11 21 27 22 10 3
Repblica Checa 7 11 20 26 23 11 3 6 13 22 28 21 8
Suecia 10 15 23 25 18 7 7 14 25 28 18 7
Turqua 9 24 31 22 11 3 13 26 32 20 8
OCDE 9 13 21 25 20 10 3 8 14 23 27 19 8
0 20 40 60 80 100 0 20 40 60 80 100
58
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
2. Resolucin de problemas por ordenador
medida de la equidad de los sistemas educativos: a mayor impacto del ndice, menor
equidad en el sistema educativo.
El ESCS se elabora a partir de las respuestas de los estudiantes a los cuestionarios
de contexto que se responden junto con la aplicacin de las pruebas de rendimiento. Se
expresa como un valor tipificado en el que la media cero corresponde al promedio de los
pases participantes de la OCDE. Valores negativos del ndice para un pas sealan que el
entorno social, econmico y cultural de las familias en dicho pas es ms desfavorable que
el mencionado promedio de la OCDE. Niveles positivos del ndice que el entorno social,
econmico y cultural de las familias es ms favorable que en el conjunto de los pases de la
OCDE.
La Figura 2.6 muestra los valores medios del ESCS de los pases de la OCDE y de
las comunidades autnomas participantes en la evaluacin de resolucin de problemas (ver
Tabla 2.6).
En 16 pases el ESCS es superior al promedio del conjunto de pases de la OCDE
participantes en resolucin de problemas, siendo Noruega (0,46), Dinamarca (0,43) y
Canad (0,41) los pases cuyas familias presentan mayor nivel socioeconmico. En 11
pases el ndice socioeconmico y cultural es inferior al promedio, siendo Turqua (-1,46) el
pas en el que los estudiantes de 15 aos se encuentran en el entorno social, econmico y
cultural ms desfavorecido.
En Espaa, el ndice socioeconmico y cultural es de -0,18; inferior al del promedio
de la OCDE e igual al de Eslovaquia. En esta escala, el Pas Vasco (0,03) y la Comunidad
de Madrid (0,03) tienen un ndice ligeramente superior al promedio de la OCDE, mientras
que el de Catalua (-0,14) es inferior. Las tres comunidades autnomas presentan un ESCS
superior al de Espaa.
Los factores que influyen en el rendimiento de los estudiantes son numerosos y
variados. Entre ellos se menciona con frecuencia el factor socioeconmico y cultural de las
familias como un elemento importante en la explicacin de los resultados que, en las
distintas evaluaciones internaciones, obtienen los estudiantes.
Como era de esperar, el estatus socioeconmico, medido por ndice social
econmico y cultural (ESCS), se relaciona positivamente con el rendimiento de los
estudiantes en la resolucin de problemas, como ya sucede con los resultados de todos los
dominios evaluados en PISA.
59
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
2. Resolucin de problemas por ordenador
Figura 2.6 Valor medio del ndice social, econmico y cultural (ESCS) de los pases de la OCDE y
comunidades autnomas participantes en resolucin de problemas
Noruega 0.46
Dinamarca 0.43
Canad 0.41
Finlandia 0.36
Suecia 0.28
Australia 0.25
Alemania 0.19
Israel 0.17
Blgica 0.15
Irlanda 0.13
Estonia 0.11
Austria 0.08
Eslovenia 0.07
Madrid 0.03
Corea 0.01
Italia -0.03
Francia -0.04
Japn -0.07
Catalua -0.14
Espaa -0.18
Eslovaquia -0.18
Polonia -0.21
Hungra -0.25
Portugal -0.48
Chile -0.58
Turqua -1.46
-1.50 -1.25 -1.00 -0.75 -0.50 -0.25 0.00 0.25 0.50 0.75 1.00
60
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
2. Resolucin de problemas por ordenador
La Figura 2.7 muestra las puntuaciones medias en cada uno de los cuartos en los
que se ha dividido el ndice ESCS. En los pases en los que la diferencia entre la puntuacin
del primer cuarto y la del ltimo cuarto es grande, la influencia del nivel socio-econmico y
cultural tambin grande (los datos corresponden a la Tabla 2.7).
Figura 2.7. Puntuaciones medias en cada uno de los cuartos en que se ha dividido el ndice ESCS y
diferencia de puntuaciones medias entre el ltimo cuarto y el primer cuarto
Japn
Estonia
Canad
Corea
Italia
Noruega
Suecia
Finlandia
Catalua
Pas Vasco
Dinamarca
Reino Unido
Australia
Estados Unidos
Pases Bajos
Irlanda
Turqua
Espaa
Austria
Madrid
Polonia
Blgica
Alemania
Francia
Chile
Eslovenia
Portugal
Repblica Checa
Eslovaquia
Israel
Hungra
OCDE
61
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
2. Resolucin de problemas por ordenador
Canad 2.3
Italia 2.3
Catalua 2.4
Estonia 2.5
Japn 2.7
Turqua 2.8
Corea 2.8
Espaa 2.9
Suecia 2.9
Portugal 3
Estados Unidos 3
Chile 3
Finlandia 3.1
Dinamarca 3.1
Noruega 3.1
Madrid 3.1
Irlanda 3.5
Australia 3.6
Austria 3.6
Polonia 3.6
Alemania 3.7
Blgica 3.8
Eslovenia 4
Francia 4.3
Eslovaquia 4.9
Hungra 4.9
Israel 5.3
OCDE 3.5
0 1 2 3 4 5 6
62
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
2. Resolucin de problemas por ordenador
La Figura 2.9 muestra estas diferencias entre las puntuaciones obtenidas por
alumnos inmigrantes y alumnos nativos, junto con el porcentaje de alumnos inmigrantes y
nativos en cada pas y comunidad autnoma. Los datos se pueden ver en la Tabla 2.9
El pas en el que es mayor la diferencia de puntuacin entre nativos e inmigrantes
es Finlandia (85 puntos). En el extremo contrario, hay una serie de pases en los que la
media obtenida por los inmigrantes es superior a la obtenida por los nativos (Australia,
Eslovaquia, Hungra, Turqua, Israel y Chile), pero en todos estos casos las diferencias no
son estadsticamente significativas.
Si se analiza la diferencia en puntuacin entre alumnos inmigrantes y nativos por
dominios, se obtiene que, en la mayora de los pases, la observada en resolucin de
problemas es similar a la que se da en matemticas y comprensin lectora, pero es inferior,
por trmino general, a la observada en ciencias. En Espaa, sin embargo, la diferencia
observada en resolucin de problemas (39 puntos) es inferior a las observadas en
matemticas (57 puntos), comprensin lectora (53 puntos) y ciencias (52 puntos). Esto es
debido a que los alumnos inmigrantes en Espaa obtienen mejores resultados en resolucin
de problemas que los alumnos nativos con similares puntuaciones en matemticas,
comprensin lectora y ciencias. Lo que lleva a pensar que los alumnos inmigrantes en
Espaa, o bien son particularmente buenos en resolucin de problemas, o bien puntan
por debajo de su potencial en las materias curriculares.
63
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
2. Resolucin de problemas por ordenador
10 90 OCDE
0 20 40 60 80 100 380 400 420 440 460 480 500 520 540 560 580
% Inmigrante % Nativo
Nativo Inmigrante
64
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
2. Resolucin de problemas por ordenador
respecto a los alumnos con padres de nivel educativo alto es de 69 puntos para la OCDE,
43 puntos en el caso de Espaa, 45 puntos para la Comunidad de Madrid, 43 puntos para
el Pas Vasco, y 35 puntos para Catalua.
Figura 2.10. Rendimiento en resolucin de problemas segn nivel educativo de los padres
23 28 49 Espaa
10 37 52 OCDE
20 26 53 Catalua
17 27 55 Madrid
12 23 66 Pas Vasco
65
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
2. Resolucin de problemas por ordenador
9 24 67 Espaa
2 15 83 OCDE
2 18 80 Catalua
11 22 67 Madrid
5 17 78 Pas Vasco
0 20 40 60 80 100 350 375 400 425 450 475 500 525 550
CONCLUSIONES
66
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
2. Resolucin de problemas por ordenador
67
3. Matemticas y Lectura por ordenador
En su edicin de 2012, se aplican las pruebas PISA en formato digital (CBA, Computer-based
assessment) para la comparacin internacional de resultados en los dominios de lectura y
matemticas. En matemticas se aplica por primera vez, mientras que en lectura ya se
realiz en la edicin de 2009 (ERA, Electronic Reading Assessment) y los resultados
correspondientes fueron analizados tanto por la OCDE (OECD, 2011) como por el INEE
(Instituto Nacional de Evaluacin Educativa, 2011).
En las pruebas digitales de matemticas y lectura de 2012 han participado 32 pases
o economas. En este informe se analizarn los resultados obtenidos por los estudiantes de
15 aos de los 23 pases de la OCDE que eligieron realizar las prueba digitales, entre ellos
Espaa, ms los resultados de las comunidades autnomas de Catalua, Pas Vasco y
Madrid que tienen muestra representativa para su comparacin a nivel internacional.
Las pruebas digitales de lectura o matemticas incluyen para su evaluacin, adems
de las competencias tradicionales propias de cada dominio, otras habilidades adicionales
asociadas a la competencia digital. As, por ejemplo, la lectura en formato digital requiere
habilidades de navegacin entre diferentes tipos de texto para encontrar una determinada
informacin. En cuanto a la competencia matemtica digital se precisan destrezas de
interaccin con los datos presentados en nmeros, tablas, grficos, etc., junto con la
posibilidad de mens desplegables y bases de datos con herramientas de clculo asociadas.
De modo que es evidente que para la evaluacin de los dominios de lectura y matemticas
en este formato es necesario que los estudiantes tengan un cierto nivel de competencia
digital.
La aplicacin de las pruebas digitales ha ampliado, por tanto, los conceptos de las
competencias matemtica y lectora en PISA. La clave es investigar hasta qu punto las
68
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
3. Matemticas y Lectura por ordenador
En las Figura 3.1a y 3.1b se muestran las puntuaciones medias obtenidas en las pruebas
digitales en matemticas y en lectura por los estudiantes de 15 aos de los 23 pases de la
OCDE y las comunidades autnomas espaolas de Catalua, Madrid y Pas Vasco. Se
incluye el intervalo de confianza al 95% como estimacin de la media poblacional. La
amplitud del intervalo depende del error cometido en la estimacin de la puntuacin media,
de modo que dos pases cuyos intervalos de confianza tengan interseccin no vaca no
presentan diferencias estadsticamente significativas entre sus puntuaciones medias.
En el conjunto de pases de la OCDE participantes en las pruebas digitales la
puntuacin media estimada es de 497 puntos en ambos dominios. Corea del Sur (553 MA,
555 LE) y Japn (539 MA, 545 LE) son los pases analizados que obtienen los mejores
resultados en ambas competencias, mientras que Hungra (470 MA, 450 LE), Israel (447
MA, 461 LE) y Chile (432 MA, 452 LE) son los pases con las puntuaciones ms bajas.
Figura 3.1a. Puntuaciones medias en matemticas, prueba digital, por pases y comunidades
autnomas con intervalo de confianza al 95% para la media poblacional
Corea (553)
Japn (539)
Canad (523)
Estonia (516)
Blgica (512)
Alemania (509)
Francia (508)
Australia (508)
Austria (507)
Italia (499)
Estados Unidos (498)
Noruega (498)
Eslovaquia (497)
Dinamarca (496)
Irlanda (493)
Madrid (493)
Pas Vasco (490)
Suecia (490)
Polonia (489)
Portugal (489)
Eslovenia (487)
Catalua (483)
Espaa (475)
Hungra (470)
Israel (447)
Chile (432)
OCDE (497)
69
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
3. Matemticas y Lectura por ordenador
Los estudiantes espaoles de 15 aos (475 MA, 466 LE) obtienen 22 puntos menos
que el promedio de la OCDE en matemticas y 31 puntos menos en lectura, ambas
diferencias estadsticamente significativas. El resultado en matemticas de la prueba digital
es inferior, aunque no significativamente al de la prueba estndar (484 MA); en cambio el
resultado en la prueba de lectura digital s que es significativamente inferior al de las
pruebas en papel (488 LE. Las diferencia observadas entre los resultados de Espaa y los
de la OCDE son ms amplias en las pruebas digitales que en las estndar, tanto en
matemticas como en lectura.
En cuanto a las comunidades autnomas, Madrid (493 MA, LE), Pas Vasco (490
MA, 487 LE) y Catalua (483 MA, 479 LE) no presentan diferencias estadsticamente
significativas entre ellas. En ambos dominios, los estudiantes de Madrid y Catalua
obtienen resultados que no se diferencian significativamente de los de Espaa, mientras
que los del Pas Vasco obtienen unos resultados que s que son significativamente mejores
que los de Espaa.
Figura 3.1b. Puntuaciones medias en lectura, prueba digital, por pases y comunidades autnomas
con intervalo de confianza al 95% para la media poblacional
Corea (555)
Japn (545)
Canad (532)
Estonia (523)
Australia (521)
Irlanda (520)
Estados Unidos (511)
Francia (511)
Italia (504)
Blgica (502)
Noruega (500)
Suecia (498)
Dinamarca (495)
Alemania (494)
Pas Vasco (487)
Portugal (486)
Madrid (482)
Austria (480)
Catalua (479)
Polonia (477)
Eslovaquia (474)
Eslovenia (471)
Espaa (466)
Israel (461)
Chile (452)
Hungra (450)
OCDE (497)
380 400 420 440 460 480 500 520 540 560 580
70
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
3. Matemticas y Lectura por ordenador
200 250 300 350 400 450 500 550 600 650 700 750
Percentil 25 Percentil 75
71
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
3. Matemticas y Lectura por ordenador
Figura 3.2b. Puntuaciones medias en lectura, prueba digital, en los percentiles 5, 25, 50 y 75
200 250 300 350 400 450 500 550 600 650 700 750
Percentil 25 Percentil 75
Como puede observarse en los grficos de las Figuras 3.2a y 3.2b la variabilidad
observada tanto en los resultados de matemticas como de lectura es muy diferente de
unos pases a otros. En el conjunto de los pases participantes de la OCDE, la diferencia
entre las puntuaciones medias de matemticas alcanzadas en los extremos de la distribucin
(percentiles 5 y 95) es de 290,5 puntos y de 306,7 en lectura.
La distribucin de las puntuaciones, en funcin de la variabilidad, de los pases de la
OCDE participantes en la modalidad digital de matemticas y lectura y de las regiones de
Espaa analizadas en este informe, puede verse respectivamente en las Figuras 3.3a y 3.3b.
Ni en matemticas ni en lectura, se observa relacin entre la puntuacin media
obtenida en la prueba digital de matemticas y la dispersin de las puntuaciones. Pases con
puntuacin alta, media y baja presentan baja dispersin, mientras que pases con dispersin
alta obtienen alto, medio y bajo nivel de rendimiento.
En la prueba digital de matemticas, Corea del Sur y Japn alcanzan puntuaciones
altas con variabilidad similar a la del promedio de la OCDE. Israel obtiene una puntuacin
media baja con la dispersin ms alta observada (364,7), mientras que los estudiantes de
Irlanda (264,1), Chile (266), Espaa (268,6), Estonia (270), Italia (271,7) presentan los
resultados con las dispersiones ms bajas entre los pases participantes.
72
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
3. Matemticas y Lectura por ordenador
Figura 3.3a. Distribucin de los pases y regiones analizadas segn su puntuacin media y la
dispersin (perc. 95 perc. 5) de los resultados en la prueba digital de matemticas
Menor variabilidad
560
Corea
Japn
540
Canad
520 Estonia
Blgica
Alemania
Australia Austria
Mejores resultados
Francia
Media
480
Espaa
Hungra
460
Israel
440
Chile
73
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
3. Matemticas y Lectura por ordenador
Figura 3.3b. Distribucin de los pases y regiones analizadas segn su puntuacin media y la
dispersin (perc. 95 perc. 5) de los resultados en la prueba digital de lectura
Menor variabilidad
560
Corea
Japn
540
Canad
Estonia
Australia Irlanda
520
Italia
Mejores resultados
Media
Blgica
Suecia
500 Noruega
Dinamarca
Alemania
OCDE
Pas Vasco
Portugal
Catalua Austria
480 Polonia Madrid
Espaa
Israel
460
Chile
Hungra
440
Las Figuras 3.4a y 3.4b recogen respectivamente las distribuciones por niveles de
rendimiento en matemticas y lectura digitales. En el conjunto de pases participantes de la
OCDE, el porcentaje de estudiantes de 15 aos que no llegan al nivel 2 de competencia es
el 20% en la prueba digital de matemticas, inferior al de la prueba en papel (23%), y el
18% en lectura, ligeramente superior al de las pruebas estndar (17%).
En la prueba digital de matemticas, casi uno de cada cuatro estudiantes espaoles
de 15 aos (24%), igual al de las pruebas en papel, no llega al nivel 2 de competencia. Esa
proporcin alcanza en lectura al 26% de los estudiantes, 8 puntos porcentuales ms que en
las pruebas estndar, lo que supone que ms de uno de cada cuatro estudiantes no alcanza
el nivel bsico en esta competencia. En todo caso, la proporcin de estudiantes que no
llega al nivel 2 de competencia tanto en matemticas como en lectura es significativamente
ms alto que en el promedio de la OCDE.
En cuanto a las comunidades autnomas espaolas, Madrid (17% MA, LE), Pas
Vasco (19% MA, LE) y Catalua (20% MA, LE) presentan proporciones estimadas
74
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
3. Matemticas y Lectura por ordenador
Corea 2 5 14 24 27 19 9
Japn 2 7 16 26 27 15 7
Estonia 3 9 22 29 23 11 3
Canad 4 9 19 27 24 13 4
Francia 6 11 20 27 23 10 2
Australia 5 12 22 27 21 10 3
Madrid 4 13 26 31 20 5
Austria 5 12 20 26 23 10 2
Italia 5 13 24 29 20 8 2
Blgica 7 11 19 24 22 12 4
Irlanda 5 12 25 30 20 6 1
Alemania 6 11 20 25 22 12 4
Eslovaquia 6 12 23 29 21 8 2
Estados Unidos 6 12 25 27 19 8 2
Noruega 6 13 24 27 20 8 2
Pas Vasco 6 13 25 30 20 6 1
Dinamarca 6 13 23 28 21 8 2
Catalua 6 14 28 31 17 4
Polonia 7 14 26 27 18 7 2
Suecia 6 15 25 28 18 7 2
Portugal 6 15 25 27 18 6 2
Eslovenia 7 16 25 25 18 7 1
Espaa 8 16 27 28 16 4
Hungra 11 17 26 24 14 6 1
Israel 21 18 22 20 13 5 1
Chile 18 27 28 18 7 1
Promedio OCDE 7 13 23 26 20 9 3
75
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
3. Matemticas y Lectura por ordenador
Figura 3.4b. Puntuaciones medias en lectura, prueba digital, por pases y comunidades autnomas
con intervalo de confianza al 95% para la media poblacional
Corea 13 12 31 35 16 2
Japn 14 14 32 34 13 1
Canad 2 6 17 31 29 12 2
Irlanda 2 7 20 35 27 8 1
Estonia 2 9 20 30 26 11 2
Australia 13 9 20 29 25 11 2
Estados Unidos 3 9 22 32 25 8 1
Francia 23 9 20 31 26 9 1
Dinamarca 13 11 27 34 20 4
Italia 14 11 21 31 24 7 1
Noruega 2 4 11 22 30 23 8 1
Suecia 24 11 23 30 22 7 1
Blgica 2 4 11 20 29 24 8 1
Madrid 1 4 13 29 31 18 4
Pas Vasco 2 4 13 25 32 19 4
Alemania 2 5 12 22 30 22 7 1
Portugal 14 14 26 31 20 4
Austria 3 4 14 26 30 18 5
Catalua 3 6 13 25 29 19 5
Polonia 2 6 14 26 29 17 4
Eslovaquia 2 7 14 26 31 17 3
Eslovenia 3 7 16 26 27 18 4
Espaa 3 7 16 27 28 15 3
Chile 1 7 21 33 27 10 1
Israel 6 9 16 22 24 17 6 1
Hungra 6 9 17 25 25 14 4
Promedio OCDE 2 4 12 22 30 22 7 1
76
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
3. Matemticas y Lectura por ordenador
Figura 3.5. Puntuaciones medias en las pruebas digitales de matemticas y lectura, junto con el
intervalo de confianza al 95% para la media poblacional
OCDE
400 440 480 520 560 600 400 440 480 520 560 600
Chicos Chicas
77
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
3. Matemticas y Lectura por ordenador
Figura 3.6a- Distribucin por niveles de competencia de chicos y chicas en la prueba digital de
matemticas
Chicos Chicas
Alemania 6 11 20 25 21 12 5 7 12 20 26 22 11 3
Australia 5 11 21 26 21 11 4 5 12 23 28 20 9
Austria 5 11 18 24 24 13 4 5 13 23 28 22 8
Blgica 6 11 18 23 22 14 6 7 11 20 26 22 11 3
Canad 4 8 17 26 24 15 6 5 9 20 28 24 11 3
Catalua 6 14 24 30 20 6 7 14 31 32 13
Chile 16 25 28 21 9 21 29 28 16 5
Corea 5 13 22 27 20 11 6 16 26 26 17 6
Dinamarca 5 12 21 27 23 9 7 14 26 28 18 6
Eslovaquia 6 12 23 27 21 10 7 12 23 31 21 5
Eslovenia 8 15 25 25 18 8 7 16 26 26 18 6
Espaa 8 16 26 28 17 5 9 17 29 28 14 3
Estados Unidos 7 12 23 25 20 9 3 5 12 26 29 19 8
Estonia 3 10 21 28 23 12 4 3 9 23 30 23 9
Francia 6 10 18 26 24 13 4 5 12 22 28 23 8
Hungra 12 16 24 24 16 7 11 18 28 25 13 4
Irlanda 5 11 23 30 21 8 6 14 27 31 18 4
Israel 22 17 19 18 15 7 19 19 25 22 11 4
Italia 4 12 21 29 23 9 6 14 27 29 18 6
Japn 3 6 15 24 27 17 9 7 18 29 27 13 4
Madrid 4 12 24 32 21 6 5 14 28 30 19 3
Noruega 6 13 23 27 20 9 5 13 25 28 19 8
Pas Vasco 6 12 23 29 22 7 6 14 27 31 18 4
Polonia 7 13 24 26 19 9 6 15 28 28 17 5
Portugal 6 13 22 27 20 8 7 16 28 27 17 5
Suecia 6 14 24 28 18 9 7 15 27 28 17 5
OCDE 7 12 21 25 21 10 3 7 14 24 27 19 7
0 20 40 60 80 100 0 20 40 60 80 100
78
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
3. Matemticas y Lectura por ordenador
Las comunidades autnomas analizadas, Catalua (26,4% chicos y 16,1 chicas), Pas
Vasco (23,1% chicos y 14,0% chicas) y Madrid (22,9% chicos y 14,1%) presentan mejores
proporciones en estos niveles que Espaa, encontrndose ms prximas a las cifras de la
OCDE.
En los niveles altos (5 o 6) de la escala de lectura estn el 4,2% de las chicas
espaolas de 15 aos, solo un punto por encima de los chicos (3,2%), significativamente
por debajo de los porcentajes de la OCDE (9,3% chicas y 6,6% chicos) en la prueba digital
de lectura. En estos niveles, las proporciones de Catalua (5,1% chicas y 5,0% chicos), Pas
Vasco (5,6% chicas y 4,1% chicos) y Madrid (5,3% chicas y 3,1% chicos) no se observan
diferencias significativas en las proporciones de chicos y chicas y tampoco se diferencian
significativamente de las de Espaa, una vez tenidos en cuenta los errores de las
estimaciones (vase Tabla 3.6).
Figura 3.6b. Distribucin por niveles de competencia de chicos y chicas en la prueba de lectura
digital
Chicos Chicas
Alemania 7 14 24 29 18 5 4 10 19 31 26 8
Australia 4 12 22 29 22 9 6 18 29 28 14 3
Austria 3 6 16 28 27 16 3 11 25 33 21 6
Blgica 35 13 21 29 22 7 3 9 19 30 27 9
Canad 8 19 31 27 10 5 15 31 32 13
Catalua 4 7 15 26 28 15 5 4 10 25 32 22 5
Chile 8 22 33 25 9 6 21 33 29 10
Corea 4 12 30 34 16 3 11 31 37 16
Dinamarca 4 13 29 32 18 3 9 24 37 23 5
Eslovaquia 7 17 27 28 15 3 6 10 25 34 19 3
Eslovenia 4 9 19 27 24 14 3 4 12 25 30 21 5
Espaa 4 9 18 28 25 13 3 5 14 26 31 18 4
Estados Unidos 4 12 24 30 21 7 7 21 33 28 9
Estonia 3 12 23 30 22 8 6 17 30 29 14 3
Francia 3 4 10 22 30 23 7 3 7 17 31 29 10
Hungra 8 12 18 24 22 12 3 5 7 15 25 28 16 4
Irlanda 9 23 35 23 6 5 17 35 30 10
Israel 8 11 17 21 22 16 5 3 8 15 24 25 18 7
Italia 5 12 22 29 21 7 8 20 34 27 8
Japn 5 16 32 32 12 3 13 32 37 14
Madrid 5 16 30 29 15 3 4 10 27 33 21 5
Noruega 3 6 14 25 29 18 5 7 19 31 27 11
Pas Vasco 5 15 26 30 17 4 3 10 25 34 21 5
Polonia 3 8 17 27 27 14 3 4 12 26 31 21 5
Portugal 6 15 26 29 18 4 3 12 26 34 21 4
Suecia 5 14 25 28 18 6 8 21 33 25 9
OCDE 6 14 24 28 20 6 3 9 21 31 25 8
0 20 40 60 80 100 0 20 40 60 80 100
79
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
3. Matemticas y Lectura por ordenador
1
PISA define como alumno inmigrante aquel nacido en pas diferente al de la prueba y, adems, su padre o su madre han
nacido tambin en un pas distinto al de la prueba.
80
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
3. Matemticas y Lectura por ordenador
Figura 3.7. Puntuaciones medias en las pruebas digitales de matemticas y lectura, junto con el
intervalo de confianza para las medias de nativos e inmigrantes
OCDE
360 400 440 480 520 560 600 360 400 440 480 520 560 600
Nativo Inmigrante
Espaa (63,6 en MA y 57,3 en LE) es uno de los pases en los que las diferencias
observadas son ms grandes, muy por encima de las diferencias promedio de la OCDE
(27,1 en MA y 31,1 en LE). Tambin se observan diferencias significativas entre el
rendimiento de estudiantes nativos e inmigrantes en las comunidades autnomas de
Catalua (65,47 en MA y 84,7 en LE), Pas Vasco (77,7 en MA y 71,5 en LE) y Madrid (82
en MA y 74 en LE).
81
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
3. Matemticas y Lectura por ordenador
Espaa
OCDE
Catalua
Madrid
Pas Vasco
420 440 460 480 500 520 540 420 440 460 480 500 520 540
82
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
3. Matemticas y Lectura por ordenador
de la OCDE. Mientras que el rendimiento de los estudiantes cuyos padres tiene alto nivel
educativo es muy inferior a la de sus equivalentes de la OCDE,
En el Pas Vasco (44,3 puntos), la diferencia entre los niveles educativos alto y bajo
de los padres es ligeramente superior a la de Espaa (40,5), mientras que en Catalua y
Madrid es algo inferior, alrededor de los 31 puntos(vase Tabla 3.8).
Espaa
OCDE
Catalua
Madrid
Pas Vasco
350 375 400 425 450 475 500 525 550 350 375 400 425 450 475 500 525 550
83
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
3. Matemticas y Lectura por ordenador
En la prueba de lectura digital, las diferencias entre los que no han repetido y los
que han repetido dos cursos son ms grandes que las observadas en la prueba de
matemticas: 149 puntos en el conjunto de la OCDE, 140,4 en Espaa, 128,5 en Catalua,
136,8 en el Pas Vasco y 149,4 en Madrid. Las proporciones debidas a la primera repeticin
de curso son parecidas a las estimadas en matemticas.
La diferencia observada en la prueba digital de matemticas entre los estudiantes
que han repetido dos cursos y los que no han repetido (116 puntos) es menor que la
observada en las pruebas en papel (139 puntos). Ello se debe tanto a que los repetidores
han puntuado algo mejor en la prueba digital (387 puntos) que en la de papel (380 puntos),
como a que los que no han repetido curso obtienen menos puntuacin media en la prueba
digital (503 puntos) que en la prueba escrita (519).
CONCLUSIONES
Los resultados obtenidos por los estudiantes espaoles de 15 aos en las pruebas digitales
de matemticas (475 puntos) y lectura (466) son significativamente inferiores a las del
promedio de pases de la OCDE participantes en esta modalidad. En matemticas, Espaa
presenta resultados tan solo similares a los de Hungra, mientras que los resultados en
lectura no difieren significativamente de los de Austria, Polonia, Eslovaquia, Israel, Chile y
Hungra.
La variabilidad observada en los resultados es muy diferente de un pas a otro y no
se observa relacin entre sta y las puntuaciones medias estimadas en cada caso. As, pases
con puntuacin alta, media o baja presentan baja dispersin en sus resultados; mientras que
pases con alto nivel de dispersin obtienen puntuaciones altas, medias o bajas. Los
estudiantes espaoles tienen bajo nivel de rendimiento tanto en matemticas como en
lectura digitales, con baja dispersin en matemticas y alta variabilidad en lectura.
Aproximadamente, uno de cada cuatro estudiantes espaoles (25%) no llega al nivel
2 (nivel bsico) de rendimiento en las pruebas digitales de matemticas y lectura,
proporcin significativamente ms alta que en el conjunto de la OCDE, y tambin ms alta
que en las pruebas impresas de PISA. Las comunidades autnomas de Pas Vasco, Catalua
y Madrid tienen una proporcin de estudiantes menor que el conjunto de Espaa en los
niveles ms bajos de las escalas, tanto en matemticas como en lectura.
La proporcin de estudiantes espaoles en los niveles ms altos (5 6) de las
pruebas digitales de matemticas y lectura es aproximadamente la mitad que la que se
obtiene en las pruebas impresas, lo que parece indicar un dficit importante en el uso de las
tecnologas de la informacin por parte de los estudiantes de 15 aos en Espaa; sobre
todo, si se tiene en cuenta que en el conjunto de la OCDE el porcentaje de estudiantes en
estos niveles es el mismo en las pruebas digitales que en las impresas.
En los pases de OCDE, los chicos consiguen resultados significativamente mejores
en matemticas y peores en lectura que las chicas. Esta situacin se repite en Espaa y en
las comunidades autnomas analizadas, si bien en stas las diferencias encontradas entre
chicos y chicas no son estadsticamente significativas, excepto en el caso del Pas Vasco en
lectura digital, donde las chicas superan significativamente a los chicos.
El alumnado inmigrante tiene, en general, un rendimiento inferior al de los
estudiantes nativos. En el conjunto de los pases participantes de la OCDE los estudiantes
de origen inmigrante obtienen 27 puntos menos en la prueba digital de matemticas y 31
menos en la de lectura. Las diferencias observadas en las pruebas por ordenador en Espaa
84
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
3. Matemticas y Lectura por ordenador
85
4. Rendimiento en resolucin de
problemas y su relacin con otras reas
Los datos obtenidos de PISA 2012 muestran que la gran mayora de los estudiantes de 15
aos tienen la posibilidad de utilizar un ordenador en casa. En el promedio de los pases de
la OCDE participantes en la prueba de resolucin de problemas, el 94% de los estudiantes
tienen al menos un ordenador en casa que pueden utilizar para la realizacin de las tareas
86
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
4. Rendimiento en resolucin de problemas y su relacin con otras reas
escolares. Solamente en Turqua, Japn, Chile y Estonia esa proporcin es inferior al 90%,
como se puede ver en la Tabla 4.1.
Adems, puede considerarse que la utilizacin de los ordenadores en casa es
universal. En el promedio de los pases de la OCDE, que distribuyeron el cuestionario
opcional de TIC y que participaron en la evaluacin de resolucin de problemas, el 95% de
los estudiantes utilizan en casa un ordenador de sobremesa, un porttil o una tablet. Con la
excepcin de Turqua, Japn, Corea del Sur y Chile, ms del 90% de los estudiantes utilizan
alguno de estos medios tecnolgicos (vase Tabla 4.1).
La minora de estudiantes que no utilizan el ordenador en casa suelen proceder de
familias con desventajas socio-econmicas. No obstante, en algunos pases el uso del
ordenador entre los estudiantes procedentes de entornos socioeconmicos desfavorecidos
es tambin casi universal. Es el caso de Alemania, Dinamarca, Finlandia, Pases Bajos,
Noruega, Suecia y Austria, pases en los que ms del 98% de los estudiantes cuyos padres
trabajan en ocupaciones semi-cualificadas o bsicas tienen y utilizan ordenador en casa.
Como se ve en la Figura 4.1 (datos de la Tabla 4.1), en todos los pases que
administraron el cuestionario (opcional) de TIC y la prueba de resolucin de problemas, los
estudiantes que utilizan el ordenador en casa obtienen un rendimiento significativamente
superior al de los estudiantes que no lo usan. Esas diferencias disminuyen cuando se
descuenta el efecto de las caractersticas sociodemogrficas de los estudiantes (estatus
socioeconmico, sexo y condicin de inmigrante). Solo en Irlanda, Finlandia, Italia y
Alemania la diferencia no es significativa, tal vez debido a que las estimaciones de los que
no usan el ordenador en casa son muy imprecisas dado el tamao muestral tan pequeo de
este grupo.
Las diferencias encontradas pueden ser debidas no solo a un efecto causal directo
relacionado con la disponibilidad de ordenador, ni exclusivamente a efectos
socioeconmicos, como se ve en la Figura 4.1, sino a otros muchos factores que pueden
ser motivo de posteriores investigaciones.
87
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
4. Rendimiento en resolucin de problemas y su relacin con otras reas
Figura 4.1. Porcentaje de uso del ordenador en casa y diferencia de resultados entre los que lo
utilizan y los que no
Blgica (98,2) 85 60
Noruega (98,7) 87 58
Pases Bajos (98,9) 92 77
Israel (96,1) 94 47
Hungra (94,7) 99 40
Eslovaquia (94,3) 107 51
En la mayora de los pases, la utilizacin del ordenador por los estudiantes de 15 aos
forma parte de la experiencia en el centro educativo, si bien su uso no es tan comn como
1
En estas comunidades no se dispone de suficiente nmero de respuestas para estimar los parmetros.
88
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
4. Rendimiento en resolucin de problemas y su relacin con otras reas
El uso del ordenador en casa est fuertemente relacionado con los resultados
obtenidos en la resolucin de problemas cotidianos en la gran mayora de pases de la
OCDE participantes en esta prueba, teniendo en cuenta que en la mayor parte de los pases
solo una minora no utiliza el ordenador en casa. Sin embargo, la relacin entre el uso del
ordenador en el centro educativo y el rendimiento en la resolucin de problemas vara de
unos pases a otros.
En el promedio de los pases de la OCDE, el 72% de los estudiantes informa que
utiliza los ordenadores en el centro educativo. Esta proporcin vara considerablemente de
unos pases otros. As, en Pases Bajos, Australia y Noruega, ms del 90% de los
estudiantes utilizan el ordenador en el centro educativo; mientras que en Corea del Sur y
Turqua menos del 50% de los estudiantes declaran hacer uso del ordenador en el centro
educativo.
89
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
4. Rendimiento en resolucin de problemas y su relacin con otras reas
Los datos obtenidos en las pruebas PISA muestran que, en general, las diferencias en el
rendimiento de los estudiantes de 15 aos en las pruebas digitales no son mayores que las
diferencias observadas en las pruebas en papel cuando se comparan grupos de estudiantes
con nivel similar en el uso del ordenador.
En la Figura 4.3 se representan las diferencias estimadas, ajustando por
caractersticas socioeconmicas, entre las puntuaciones medias de los estudiantes que dicen
utilizar el ordenador en casa y los que, por el contrario, no lo usan, en las evaluaciones de
matemticas y de resolucin de problemas. (Datos en la Tabla 4.3).
En el conjunto de pases participantes de la OCDE, la diferencia entre los que s
usan el ordenador en casa y los que no es de 39 puntos en resolucin de problemas y de 35
en matemticas, ambas estadsticamente significativas. Las brechas ms grandes se dan en
Pases Bajos, cerca de 80 puntos de diferencia entre los dos grupos y las menores en
Irlanda, poco ms de 10 puntos en resolucin de problemas y apenas 5 puntos en
matemticas, ambas no significativas.
En Espaa, la diferencia de resultados entre los que dicen utilizar el ordenador en
casa y los que no son significativas: unos 37 puntos en resolucin de problemas y 30 en
matemticas, siempre a favor de los primeros.
En definitiva, los estudiantes que no estn habituados al uso del ordenador tienen
peor rendimiento no solo en las pruebas realizadas en ordenador, sino tambin en las que
se han llevado a cabo en papel (matemticas, lectura o ciencias), indicando que son
estudiantes cuya desventaja en educacin que no se debe solo a motivos sociodemogrficos
o al uso del ordenador.
90
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
4. Rendimiento en resolucin de problemas y su relacin con otras reas
80
70
60
50
40
30
20
10
0
bl l s
Es nia
Co ia
em a
J a ia
Ch a
Es ru a
aq a
Di Isr a
Hu rca
Po ra
E s a
rtu a
lov a
da
m l
l
DE
Ch ca
Au u ia
st a
Su lia
nla ia
Tu pn
Irl le
na ae
ga
p B ajo
Al re
i
Po ani
i
No ec
lov eg
Au stri
en
Fi Ita l
i
ec
nd
Es r qu
ra
ic a gi
ng
pa
an
lo
to
a
OC
B
es
s
Pa
Re
91
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
4. Rendimiento en resolucin de problemas y su relacin con otras reas
Figura 4.4. Rendimiento de las chicas en resolucin de problemas comparado con el de los chicos
con niveles similares en matemticas, lectura o ciencias
Inglaterra 6.8
Australia 6.7
Espaa 4.4
Irlanda 1.7
Suecia 1.6
Chile 0.7
Noruega -0.7
Dinamarca -2.4
Francia -3.4
Estados Unidos -5
Canad -5
Finlandia -5.9
Eslovenia -6.9
Israel -7
Japn -9.3
Corea -9.5
Hungra -10.1
Estonia -14.5
Portugal -17
Austria -19.5
Polonia -20.7
Italia -20.8
Turqua -24.2
Eslovaquia -29.5
OCDE -7.6
92
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
4. Rendimiento en resolucin de problemas y su relacin con otras reas
medio, en las pruebas digitales de matemticas los chicos han obtenido resultados mucho
mejores que las chicas; mientras que en lectura las chicas obtuvieron una pequea ventaja
sobre los chicos (vase captulo 3). Estos datos podran indicar que la evaluacin por
medios informticos de la prueba de resolucin de problemas ha influido en la ventaja
observada en el rendimiento de los chicos.
1.20
1.15
1.10
1.05
1.00
0.95
0.90
0.85
0.80
93
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
4. Rendimiento en resolucin de problemas y su relacin con otras reas
Se podra esperar alguna diferencia a favor de los chicos en tareas que requieran
mayor cantidad de procesamiento de informacin abstracta (Halpern and La May, 2000).
Los chicos suelen tener ventaja en tareas cognitivas que requieran capacidad para generar y
manipular informacin en representaciones mentales. En la evaluacin de resolucin de
problemas se requiere esta capacidad para tener xito, sobre todo en tareas relacionadas
con el proceso de representar y formular.
En muchos pases europeos, incluyendo los que han obtenido resultados por
encima de la media en resolucin de problemas, como es el caso de Francia, Pases Bajos,
Italia y Alemania los chicos y chicas presentan patrones de rendimientos similares en los
distintos procesos.
En el proceso de explorar y comprender, el rendimiento relativo de las chicas es
ligeramente inferior al de los chicos en el conjunto de pases de la OCDE y
significativamente inferior en el caso de Espaa. En contraste, las chicas espaolas rinden
por encima de lo observado en el conjunto de pases de la OCDE en las preguntas
relacionadas con el proceso de representar y formular, aunque ligeramente por debajo del
rendimiento de los chicos, como puede verse en la Figura 4.5.
En los procesos de planificar y ejecutar y controlar y reflexionar el rendimiento relativo de
las chicas en superior al de chicos, tanto en el conjunto de la OCDE como en Espaa y las
chicas espaolas tambin rinden por encima del promedio de las chicas en los pases de la
OCDE.
La naturaleza interactiva o esttica del problema planteado no se puede asociar a
diferencias de gnero, en el conjunto de pases de la OCDE, como puede verse en la Figura
4.5a (datos de la Tabla 4.5a): el rendimiento de las chicas en las preguntas interactivas es
similar a su rendimiento en problemas estticos como indica la tasa relativa de xito de las
chicas comparada con los chicos en las preguntas interactivas (0,92) es muy prxima a la de
las preguntas estticas (0,93). Solo en Hungra y Chile las chicas rinden ms de 1,2 veces
peor en las preguntas interactivas que en las estticas.
94
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
4. Rendimiento en resolucin de problemas y su relacin con otras reas
Figura 4.5a. Rendimiento relativo de las chicas segn la naturaleza esttica o interactiva de las
tareas en la prueba de resolucin de problemas
0.7 0.8 0.9 1.0 1.1 1.2 1.3 0.7 0.8 0.9 1.0 1.1 1.2 1.3
95
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
4. Rendimiento en resolucin de problemas y su relacin con otras reas
Es de esperar que exista una correlacin positiva entre los resultados obtenidos por los
estudiantes en la resolucin de problemas y el rendimiento en matemticas, lectura o
ciencias. Esta correlacin depende, sobre todo, de habilidades genricas y debera ser
aproximadamente del mismo orden que la existente entre dos materias cualesquiera de
matemticas, ciencias y lectura.
En la Cuadro 4.1 se muestra la correlacin entre los tres dominios que
habitualmente se evalan en PISA y el de resolucin de problemas. En el conjunto de
pases de la OCDE, el coeficiente de correlacin ms alto se observa entre matemticas y
resolucin de problemas (0,81) y el menor entre lectura y resolucin de problemas (0,75).
Cifras que son bastante altas, pero inferiores a las relativas a relaciones entre matemticas,
lectura y ciencias
Cuadro 4.1. Correlaciones entre matemticas, lectura, ciencias y resolucin de problemas.
PISA 2012
Res. Res.
0,81 0,75 0,78 0,75 0,67 0,71
Problemas Problemas
Espaa muestra una correlacin positiva algo ms baja que la obtenida para el
conjunto de pases de la OCDE. De manera que en Espaa, el 56,3% de la variabilidad
observada (el cuadrado del coeficiente de correlacin) en los resultados de resolucin de
problemas puede ser explicada por los resultados obtenidos en matemticas, mientras que
en conjunto de la OCDE (65,6%) son alrededor de 10 puntos porcentuales ms. Situacin
similar se produce respecto a las reas de ciencias y lectura.
Las destrezas medidas en la evaluacin de resolucin de problemas se utilizan en
una variedad muy amplia de contextos. Ello se puede constatar analizando la variacin
96
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
4. Rendimiento en resolucin de problemas y su relacin con otras reas
Repblica Checa 8 71 21
Israel 4 71 25
Pases Bajos 2 73 25
Estados Unidos 4 70 25
Inglaterra 5 70 26
Eslovaquia 6 68 26
Estonia 5 67 28
Finlandia 7 64 29
Alemania 4 67 29
Australia 5 67 29
Turqua 10 61 29
Hungra 3 68 29
Francia 5 66 30
Eslovenia 5 64 31
Blgica 3 64 33
Corea 4 63 34
Suecia 7 59 34
Chile 7 59 34
Austria 4 62 34
Irlanda 3 63 34
Portugal 7 59 35
Noruega 6 58 36
Polonia 2 61 38
Canad 4 57 39
Dinamarca 5 55 40
Italia 5 54 42
Japn 6 52 42
Espaa 4 53 43
OCDE 5 63 32
0 10 20 30 40 50 60 70 80 90 100
97
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
4. Rendimiento en resolucin de problemas y su relacin con otras reas
98
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
4. Rendimiento en resolucin de problemas y su relacin con otras reas
Corea (61,1)
Japn (57,7)
Estados Unidos (59,4)
Italia (56,8)
Inglaterra (57,0)
Australia (56,0)
Francia (56,5)
Noruega (51,0)
Chile (51,6)
Repblica Checa (51,8)
Canad (50,5)
Suecia (49,2)
Portugal (47,3)
Eslovaquia (45,7)
Austria (46,4)
Finlandia (43,8)
Blgica (43,0)
Dinamarca (41,7)
Alemania (41,0)
Turqua (37,1)
Estonia (38,2)
Pases Bajos (39,2)
Irlanda (36,2)
Espaa (39,7)
Israel (33,9)
Eslovenia (27,4)
Hungra (26,7)
Polonia (22,3)
OCDE (45,3)
-50 -40 -30 -20 -10 0 10 20 440 460 480 500 520 540 560 580
99
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
4. Rendimiento en resolucin de problemas y su relacin con otras reas
100
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
4. Rendimiento en resolucin de problemas y su relacin con otras reas
Figura 4.8a. Rendimiento actual y rendimiento esperado en resolucin de problemas. Todos los
pases participantes y Espaa
700 700
Percentil 95
600 600
Resolucin de problemas
Resolucin de problemas
500 500
400 400
Percentil 10
300 300
200 200
200 300 400 500 600 700 200 300 400 500 600 700
Matemticas Matemticas
101
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
4. Rendimiento en resolucin de problemas y su relacin con otras reas
Resolucin de problemas
Resolucin de problemas
Resolucin de problemas
600 600 600
Espaa, junto con otro grupo de pases, entre los que se encuentran Dinamarca,
Estonia, Alemania, Hungra, Irlanda, Israel y Eslovenia presenta un patrn en el que los
estudiantes tienen un rendimiento en resolucin de problemas ms bajo, en general, que el
esperado por sus resultados en matemticas. En este caso, se observa que las dificultades
en la resolucin de problemas son muy claras entre los estudiantes con peores resultados
en matemticas, mientras que los que tienen buenos resultados en matemticas rinden
aproximadamente igual que los de otros pases.
102
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
4. Rendimiento en resolucin de problemas y su relacin con otras reas
que las observadas en matemticas (52 puntos), lectura (51 puntos) y ciencias (51 puntos),
matemticas digitales (45 puntos) y lectura digital (49 puntos)
Figura 4.9. Diferencia en resolucin de problemas y matemticas segn la ocupacin de los padres
80
70
60
50
40
30
20
10
0
Su do s
C s
Fi nad r
ni a
se ra n a
Isr a
Es nd ia
nia
a
Tu terr a
Es D st a
Irl c ia
a
s B cia
Po enia
bli em ia
Es Ch nia
a a
lov a l
l
DE
nla
In rue a
Es rtug a
Hu qu ia
de n
do m ia
Au h ile
B stria
ae
Ca l Su
ajo
Pa F pa
s U arc
Po lgic
lov ec
a p
gla g
Es nd
i
p Al lon
No Ita l
ta in a ra l
r
Au r qu
ng
to
ca a
OC
re Ja
a
Co
103
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
4. Rendimiento en resolucin de problemas y su relacin con otras reas
Francia 10.2
Estonia 4.6
Inglaterra 4.3
Espaa 4.3
Canad 3.8
Estados Unidos 3.7
Blgica 3.4
Chile 2.8
Dinamarca 2.4
Suecia 2.2
Finlandia 2
Alemania 1
Japn 0.9
Australia 0.8
Pases Bajos 0.1
Corea 0
Austria -0.6
Turqua -1.1
Israel -2
Noruega -3.3
Eslovenia -3.6
Italia -3.7
Polonia -3.9
Irlanda -4.2
Hungra -5.7
Eslovaquia -6.8
OCDE 0.3
-10 -8 -6 -4 -2 0 2 4 6 8 10 12
Como se puede ver en la Figura 4.10, en Francia, Estonia y Canad los estudiantes
con padres en ocupaciones semicualificadas o bsicas tienden a rendir mejor en resolucin
de problemas que los estudiantes de su mismo nivel en matemticas, lectura y ciencias, pero
con al menos un padre en ocupacin cualificada. Esto puede interpretarse como que estos
estudiantes, procedentes de familias con desventaja social, no desarrollan todo su potencial
104
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
4. Rendimiento en resolucin de problemas y su relacin con otras reas
en las materias curriculares: rinden en matemticas lectura y ciencias por debajo de sus
posibilidades, y por debajo de su rendimiento en resolucin de problemas. En Espaa (4
puntos), la diferencia observada a favor de los estudiantes con padres en ocupaciones
bsicas o elementales no es estadsticamente significativa.
En el lado opuesto solo en Eslovaquia los estudiantes con desventaja social
obtienen una puntuacin media, en resolucin de problemas, significativamente menor que
los estudiantes con similar rendimiento en las tres materias centrales.
105
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
4. Rendimiento en resolucin de problemas y su relacin con otras reas
Figura 4.11. Proporcin de variabilidad total explicada, en cada pas, por el formato de realizacin
de la prueba
Japn 7.8
Dinamarca 5.8
Noruega 5.7
Francia 5.3
Polonia 5.2
Espaa 4.4
Suecia 3.2
Israel 3.2
Eslovenia 2.8
Portugal 2.2
Australia 2.1
Italia 2
Corea 1.8
Hungra 1.8
Alemania 1.7
Austria 1.7
Blgica 1.7
Canad 1.4
Estonia 1.2
Eslovaquia 1
Estados Unidos 1
Irlanda 0.3
Chile 0.2
OCDE 2.8
0 1 2 3 4 5 6 7 8 9 10
106
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
4. Rendimiento en resolucin de problemas y su relacin con otras reas
Figura 4.12. Diferencias promedio estimadas entre el rendimiento real y el rendimiento esperado
en resolucin de problemas
Promedio OCDE -9 -2
-50 -40 -30 -20 -10 0 10 20 -50 -40 -30 -20 -10 0 10 20
CONCLUSIONES
107
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
4. Rendimiento en resolucin de problemas y su relacin con otras reas
108
Informe espaol. PISA 2012 Resolucin de problemas de la vida real. Resultados de Matemticas y Lectura por ordenador.
4. Rendimiento en resolucin de problemas y su relacin con otras reas
109
Referencias
Lesh, R. & Zawojewski, J.S. (2007). Problem Solving and Modelling, in F. Lester, ed. The
Handbook of Research on Mathematics Teaching and Learning. Reston, Virginia: Information Age
Publishing, pp. 763-804.
OECD (2014). Skills for Life: Student Performance in Problem Solving. PISA 2012 Results, vol. VI.
Paris: OECD. http://www.oecd.org/pisa/keyfindings/pisa-2012-results.htm
OECD (2011). Students online. Digital Technologies and Performance. PISA 2009 vol. VI.
OECD (2010). PISA Computer-Based Assessment of Student Skills in Science. Paris: OECD.
http://www.oecd.org/denmark/pisacomputer-basedassessmentofscience.htm
OECD (2005). Problem Solving for Tomorrow's World: First Measures of Cross-Curricular
Competencies from PISA 2003. Paris: OECD.
110
El presente volumen ha sido posible gracias al trabajo en equipo de las personas que
componen el Instituto Nacional de Evaluacin Educativa (INEE):