Falta de inter¨¦s y cansancio en mitad de los ex¨¢menes finales: as¨ª explica la OCDE las ¡°anomal¨ªas¡± del informe Pisa en Espa?a

Ni fraudes ni fallos inform¨¢ticos, sino m¨¢s bien hartazgo y falta de inter¨¦s y motivaci¨®n. Esta vendr¨ªa a ser la explicaci¨®n que ha encontrado la OCDE a ese 5% de respuestas an¨®malas que detect¨® en el examen Pisa 2018 de los alumnos espa?oles y que llev¨® al organismo internacional a suspender la publicaci¨®n de resultados en comprensi¨®n lectora de todo el pa¨ªs en esta competencia (s¨ª difundi¨® los de matem¨¢ticas y ciencias). Este jueves, por fin los ha publicado, despu¨¦s de analizar durante meses las anomal¨ªas, pero con la advertencia de que su nota no es plenamente comparable con la de a?os anteriores: 476,5 puntos, 19 menos que en Pisa 2015, 10 puntos por debajo de la media de la OCDE y en el puesto 32 de los 79 pa¨ªses que se someten a esta prueba internacional que mide cada tres a?os las competencias de los alumnos de 15 a?os.

Tambi¨¦n ha publicado un anexo en el que explica c¨®mo ha llegado a la conclusi¨®n de que el c¨²mulo de ¡°comportamiento inveros¨ªmil¡±, con respuestas demasiado r¨¢pidas y con patrones r¨ªgidos (todas s¨ª o todas no), se debi¨® a ¡°una disposici¨®n negativa¡± y a una falta de esfuerzo; dicho en otras palabras, que seguramente contestaron al tunt¨²n porque no les importaba. Las respuestas an¨®malas se concentraron en una secci¨®n nueva de la prueba de lectura denominada ¡°fluidez lectora¡±, que muchos espa?oles contestaron en menos de 20 segundos cuando, en general, los alumnos necesitan entre 50 segundos y dos minutos.

M¨¢s informaci¨®n

Fernando M. Reimers: ¡°El fin de la educaci¨®n es producir una sociedad viable, no la evaluaci¨®n¡±

¡°Hay una buena explicaci¨®n¡±, dicen las conclusiones de ese anexo: las respuestas extra?as se concentran en escuelas en las que se aplicaron las pruebas de Pisa hacia el final (estas se extendieron durante un total de 10 semanas, del 2 de abril al 4 de junio de 2018) en cinco regiones que han adelantado todo el proceso de evaluaciones para poder celebrar en junio los cl¨¢sicos ex¨¢menes de recuperaci¨®n de septiembre: Madrid, Navarra, La Rioja, Cantabria y el Pa¨ªs Vasco. ¡°En 2018, algunas regiones de Espa?a aplicaron antes sus ex¨¢menes finales de d¨¦cimo grado [cuarto de la ESO], lo cual hizo que el periodo de evaluaci¨®n de estos ex¨¢menes coincidiera con el final de la aplicaci¨®n de las pruebas de Pisa¡±, dice la OCDE. En ese contexto, algunos alumnos se enfrentaron a las pruebas con ¡°una disposici¨®n negativa¡± y ¡°no hicieron todo lo posible para demostrar su competencia¡±.

El informe habla de cinco regiones espa?olas en las que los ex¨¢menes del tercer trimestre se celebraron en la segunda mitad de mayo, los finales del curso a primeros de junio y la recuperaci¨®n en la segunda mitad de junio. Pero no da sus nombres. Sin embargo, a responsable de an¨¢lisis de datos de PISA, Miyako IKed confirma que se trata de las comunidades de Madrid (que ha obtenido 46 puntos menos en lectura que en 2015), Navarra (42 menos), La Rioja (24 menos), Cantabria (18 menos) y el Pa¨ªs Vasco (16 menos). De las evaluaciones finales de cuarto de ESO depende la obtenci¨®n del t¨ªtulo de Educaci¨®n Secundaria Obligatoria; con la prueba de Pisa, acad¨¦micamente, el alumno no se juega nada. El Departamento de Educaci¨®n Navarra ofrece la misma explicaci¨®n que la OCDE en una nota difundida este mi¨¦rcoles, en la que adem¨¢s asegura haber detectado ¡°un cierto hast¨ªo en el sistema educativo, con una p¨¦rdida de inter¨¦s en las pruebas de evaluaci¨®n que lleg¨® a convertirse en un boicot a las pruebas de PISA 2018 en cuatro centros p¨²blicos¡±.

El an¨¢lisis publicado este jueves por la OCDE muestra c¨®mo las respuestas an¨®malas van aumentando a medida que pasan las semanas (a partir de la sexta y s¨¦ptima) y se?ala c¨®mo la tendencia general de descenso del esfuerzo seg¨²n se va acercando el final del curso (medido por el porcentaje de alumnos que punt¨²an su propio empe?o despu¨¦s de test con 1, 2, o 3 puntos sobre 10) es mucho m¨¢s pronunciado en esas cinco regiones, en las que se produjo la tormenta perfecta del desinter¨¦s. En estas pasaron de en torno al 3% a en torno al 2% en la sexta semana para dispararse a partir de entonces hasta casi el 10%; en el resto de comunidades, el porcentaje de desganados, aunque tambi¨¦n crece ligeramente al final, nunca supera el 3%.

M¨¢s informaci¨®n

¡°Cualquier colegio finland¨¦s es uno de los mejores del mundo. No hay diferencias¡±

¡°Los docentes deber¨¢n cambiar su forma de ense?ar en septiembre¡±

En cuanto a los resultados, se produce una ca¨ªda de 14 puntos en la parte de fluidez lectora en las ¨²ltimas semanas en las comunidades con evaluaciones solapadas, mientras que en resto no se aprecia un descenso significativo. En la parte general de la prueba de lectura, sin embargo, no se aprecia bajada, lo que indica que esa secci¨®n de fluidez lectora ¡°era particularmente sensible a la motivaci¨®n del alumno¡±. Aunque no parece que se trate de la dificultad de las preguntas en s¨ª, ya que tambi¨¦n han detectado una bajada de 11 puntos en los resultados de la prueba de matem¨¢ticas a lo largo del periodo de evaluaci¨®n de Pisa en las cinco comunidades en cuesti¨®n. As¨ª que lo achacan a esas ¡°razones m¨¢s generales¡± que afectaron tanto a los resultados de fluidez lectora como de matem¨¢ticas. En esta competencia, Navarra, aunque sigui¨® en primer lugar, obtuvo 15 puntos menos que en 2015, Madrid 17 menos y La Rioja baj¨® ocho. Pa¨ªs Vasco y Cantabria, sin embargo, mejoraron en este campo, siete y cuatro puntos, respectivamente.

Sin embargo, la Consejer¨ªa de Educaci¨®n de la Comunidad de Madrid rechaza de plano los argumentos del organismo internacional. ¡°Estamos convencidos de que la concentraci¨®n de ex¨¢menes no ha sido un factor determinante pues en este caso ese resultado tambi¨¦n se hubiera trasladado en igual magnitud o incluso mayor en ciencias y matem¨¢ticas, situaci¨®n que no ha ocurrido, y que supuestamente se ha concentrado en los resultados de lectura¡±, ha asegurado un portavoz. Adem¨¢s, niegan que los centros que hicieron m¨¢s tarde las pruebas tuvieran peores resultados y defienden que la verdadera raz¨®n de las incoherencias ¡°proviene de problemas en la aplicaci¨®n de las 20 preguntas relativas a la fluidez lectora que se incorporaban por primera vez a las pruebas ese a?o y que condicionaban los resultados¡±.

En todo caso, a ra¨ªz de estas anomal¨ªas ¡ªcuyo ¨²nico precedente m¨¢s o menos similar fue un boicoteo en 2009 en Austria por parte de los profesores, en pleno conflicto laboral con la Administraci¨®n¡ª, la OCDE est¨¢ estudiando la posibilidad de introducir cambios en la forma de aplicar y medir los resultados de esa secci¨®n de fluidez lectora y tambi¨¦n el periodo de aplicaci¨®n de las pruebas. ¡°Es demasiado pronto para decir algo definitivo, pero acortar el periodo de pruebas puede no ser una soluci¨®n realista, considerando la complejidad y alcance de la implementaci¨®n nacional de Pisa¡±. De momento, el Instituto Nacional de Evaluaci¨®n Educativa (el organismo dependiente del Ministerio de Educaci¨®n responsable de las pruebas en Espa?a), se ha comprometido con Navarra ¡°a intentar solventar esta situaci¨®n¡± de solapamiento de pruebas para el pr¨®ximo informe Pisa, ¡°proponiendo que se adelante el proceso de aplicaci¨®n a semanas anteriores a las habituales¡±, dice la nota del Departamento de Educaci¨®n de la comunidad foral.

Sesgo a la baja, ca¨ªda generalizada

La OCDE explica que, tras el an¨¢lisis de las anomal¨ªas, ha decidido publicar ¡°todos los valores plausibles para Espa?a, [...] incluidos los valores plausibles para la lectura y las subescalas de lectura¡±, pero acompa?ados siempre de una nota en la que advierten ¡°sobre un posible sesgo a la baja en los resultados de rendimiento¡±. Esa nota concluye as¨ª: ¡°Aunque los datos de solo una minor¨ªa de estudiantes muestran signos claros de falta de compromiso, la comparabilidad de los datos de PISA 2018 para Espa?a con los de anteriores evaluaciones de Pisa no pueden garantizarse por completo¡±.

Hechas estas advertencias, los datos muestran que todas las comunidades han empeorado sus resultados en comprensi¨®n lectora respecto a 2015, tambi¨¦n las que no se han visto afectadas por la acumulaci¨®n de respuestas an¨®malas y, por tanto, con las que ese sesgo a la baja deber¨ªa ser menor. Unas pocas han bajado m¨¢s o menos lo mismo que la media de la OCDE, que ha ca¨ªdo de 493 a 487: son Baleares (tambi¨¦n seis puntos, hasta quedarse en 479), Murcia (-5, 481) y Asturias (-3, 495). En el lado opuesto est¨¢n la Comunidad Valencia, con 26 puntos menos y una media de 473, y Castilla y Le¨®n, que a pesar de haber bajado 25 puntos (hasta 497), sigue teniendo la media m¨¢s alta de Espa?a, solo un punto por debajo de Alemania y cuatro por encima de Francia.

En el listado general, los pa¨ªses asi¨¢ticos, con China (555) y Singapur (549) a la cabeza, ocupan los puestos m¨¢s altos. Los primeros pa¨ªses de la OCDE son Estonia (523), Canad¨¢ (520) y Finlandia (520). Teniendo en cuenta que los especialistas en Pisa calculan que 40 puntos equivalen a un curso entero de conocimientos y habilidades, se puede hacer los c¨¢lculos entre los pa¨ªses y las comunidades que se desee (el gr¨¢fico que aparece al final del texto ofrece el resultado en lectura de todos los pa¨ªses participantes en Pisa 2018. Entre ellos, se ha colocado a las comunidades aut¨®nomas espa?olas seg¨²n su puntuaci¨®n).

Volviendo a Espa?a, si se compara la situaci¨®n, con 2009, la ¨²ltima prueba que se centr¨® en la competencia lectora de los alumnos de 15 a?os (el informe se centra cada vez en una de las destrezas principales), algunas comunidades muestran cierta mejor¨ªa; destacan sobre todo las islas. Canarias ha obtenido 24 puntos m¨¢s que en 2009, reduciendo un tercio su distancia con la media de la OCDE (que sigue siendo en cualquier caso de 15 puntos). Y Baleares tiene 22 puntos m¨¢s y se queda a ocho de la media internacional (en 2009 estaba a 36).

En todo caso, el comportamiento de Espa?a en la prueba de comprensi¨®n lectora de Pisa ha sido siempre muy err¨¢tico, con grandes oscilaciones en las siete ediciones del informe desde el a?o 2000: ha sido 493, 481, 461, 481, 488, 496 y 477.

En cuanto a los niveles de competencia, salvando las distancias, con todas las salvedades y con peores resultados tanto en Espa?a como a nivel internacional, la imagen que arroja Pisa 2018 es muy parecida a la de 2009, con m¨¢s o menos los mismos porcentajes de alumnos en los niveles m¨¢s bajos (23% Espa?a, 22% OCDE), unos pocos m¨¢s en los intermedios (72% frente a 69%) y la mitad en los niveles m¨¢s altos (4% frente a 8%).

Y, a pesar de la gris imagen que pueden dar muchos de estos resultados, el informe Pisa siempre ofrece algunos indicadores que colocan bien a Espa?a, en general, los que tienen que ver con el impacto acad¨¦mico de las diferencias socioecon¨®micas. La distancia de resultados entre inmigrantes y nativos est¨¢ en Espa?a por debajo de la media (32 puntos menos frente a 43), y el porcentaje de alumnos resilientes (los que viviendo en los entornos m¨¢s desfavorecidos son capaces de obtener los mejores resultados) tambi¨¦n: el 15% frente al 11,4%.

Siga EL PA?S EDUCACI?N en Twitter o Facebook

Ap¨²ntese a la Newsletter de Educaci¨®n de EL PA?S