Preguntas y respuestas sobre PISA

?Qu¨¦ es? Es una prueba, un examen, que intenta medir, no si los alumnos se saben los contenidos de las asignaturas o las ¨¢reas de estudio, sino lo que los alumnos saben hacer con lo que han aprendido. Hay tres pruebas con resultados independientes: la competencia lectora, la matem¨¢tica y la cient¨ªfica. Cada a?o, PISA se centra en una de ellas, que acaparan la mayor¨ªa de las preguntas, y las otras se quedan con una peque?a parte. En 2000, se centr¨® en lectura; en 2003, en matem¨¢ticas; en 2006, en ciencias; y en 2009, de nuevo, en lectura. La ¨²ltima, en 2012, se ha vuelto a centrar centrar en matem¨¢ticas.

?Qui¨¦n lo hace? La OCDE, en colaboraci¨®n con los pa¨ªses participantes, lleva a cabo la prueba a la que se somete una muestra representativa de los alumnos de 15 a?os de cada pa¨ªs (en la ¨²ltima prueba han sido 65). Da igual que hayan repetido o no. Por ejemplo, en Espa?a un tercio de los alumnos que la han hecho en ocasiones anteriores est¨¢n en 2? o 3? de ESO, en vez de 4?, el curso que les corresponder¨ªa por edad. La muestra debe ser representativa en funci¨®n del reparto de alumnos entre escuela p¨²blica y privada, la presencia de inmigrantes, etc¨¦tera. En cada pa¨ªs hacen la prueba entre 4.500 y 10.000 estudiantes. Si alguna regi¨®n o comunidad de un pa¨ªs quiere tener datos propios, independientes de los generales de su Estado, debe ampliar la muestra de estudiantes que se eval¨²an. En Espa?a, a?o a a?o se han ido sumando comunidades y han participado en 2012 m¨¢s de 25.000 alumnos, de tal manera que en el informe que ahora se presenta solo hay tres autonom¨ªas que no tendr¨¢n datos propios: Canarias, Castilla-La Mancha y Comunidad Valenciana. Cada pa¨ªs o comunidad debe sufragar el coste de las pruebas.

?C¨®mo se mide? Las preguntas a las que se enfrentan los alumnos no son las cl¨¢sicas de un examen en un instituto, precisamente porque intentan ver c¨®mo se maneja la informaci¨®n m¨¢s que cu¨¢nta informaci¨®n se tiene. Veamos alg¨²n ejemplo. Se entrega a los chavales una gr¨¢fica sobre el funcionamiento de una puerta giratoria con el siguiente texto: "Una puerta giratoria consta de tres hojas que giran dentro de un espacio circular. El di¨¢metro interior de dicho espacio es de 2 metros (200 cent¨ªmetros). Las tres hojas de la puerta dividen el espacio en tres sectores iguales. El siguiente plano muestra las hojas de la puerta en tres posiciones diferentes vistas desde arriba". A partir de ah¨ª, la pregunta es "?Cu¨¢nto mide (en grados) el ¨¢ngulo formado por dos hojas de la puerta?".?

Cada una de las preguntas se someten a pruebas de fiabilidad (es decir, si una pregunta que se considera f¨¢cil es respondida mal sistem¨¢ticamente por alumnos con buenos resultados en general, es que algo falla) y hay algunas preguntas "ancla", similares en cada examen, que permiten comparar de forma fiable con pruebas anteriores.

Las dificultades de cada pregunta son importantes porque el objetivo es colocar a cada alumno dentro de un nivel de competencia.

?Qu¨¦ son los niveles de competencia?Tomemos el ejemplo de la competencia matem¨¢tica. En ella, se dividen las destrezas en tres dimensiones: procesos (formulaci¨®n matem¨¢tica de situaciones; empleo de conceptos, datos, procedimientos y razonamientos matem¨¢ticos; e interpretaci¨®n, aplicaci¨®n y valoraci¨®n de los resultados matem¨¢ticos), contenidos (cambio y relaciones; espacio y forma; cantidad; e incertidumbre y datos), y contextos (personales, profesionales, cient¨ªficos y sociales), seg¨²n explica una entrada del blog del Instituto de Evaluaci¨®n. Los que tienen el nivel 1 de matem¨¢ticas saben "responder a preguntas relacionadas con contextos que les son conocidos" y "son capaces de identificar la informaci¨®n y llevar a cabo procedimientos rutinarios siguiendo unas instrucciones directas en situaciones expl¨ªcitas". En el otro extremo, los del nivel 6 "saben formar conceptos, generalizar y utilizar informaci¨®n basada en investigaciones y modelos de situaciones de problemas complejos, pueden relacionar diferentes fuentes de informaci¨®n y representaciones y traducirlas entre ellas de manera flexible y poseen un pensamiento y razonamiento matem¨¢tico avanzado". La pregunta de las puertas giratorias es de nivel 3.

De igual manera se dividen el resto de destrezas, la lectora y la cient¨ªfica.

?C¨®mo se leen los resultados? El catedr¨¢tico de Sociolog¨ªa Julio Caraba?a explicaba hace tres a?os de la siguiente manera la puntuaci¨®n de PISA: "La puntuaci¨®n media de los pa¨ªses de la OCDE en PISA se establece por definici¨®n en 500, y la desviaci¨®n t¨ªpica en 100. Con esa m¨¦trica, diferencias de 10 y hasta 20 puntos son diferencias peque?as". La puntuaci¨®n media m¨¢s alta de un pa¨ªs en lectura en 2009 fue de 556 (Shangh¨¢i), y la m¨¢s baja, 314 (Kirguist¨¢n). Espa?a obtuvo 481. Estados Unidos, 500, y Francia, 496.