Copiando en el examen

Esta anotación la hago con los retales proporcionados por varios comentaristas habituales de WonkaPistas. El otro día hablé de cómo los directores de colegios públicos en Madrid, entre otros insiders, se resisten a la publicación de los datos individuales de cada centro de la prueba de Sexto de Primaria que se celebrará en unos días. La conversación fue bastante animada, y resalta en ella un tema: el de la probabilidad de que unos centros no sean del todo honestos y "engañen" en sus resultados. Vean cómo.

Fabián dijo:

1) Hace falta garantía de igualdad de condiciones y seguridad al hacer las pruebas. Con el examen del año pasado me llegaron comentarios de colegios en que los profesores daban respuestas a los alumnos para subir la nota del centro. Me hablaron en particular de un colegio público en la ciudad en la que vivo.

Y Salvatierra, algunos días después apuntilló:

Datos, tiene que haber datos, todos los datos. Para empezar que la prueba la pasen evaluadores externos (uno por aula) y no uno por centro (como el año pasado); y disponer de los datos de alumnos matriculados en cada centro y alumnos que pasan la prueba. Hay comentarios en el sector (privado, sea concertado o no) de que en determinados centros van a evitar que ciertos alumnos hagan la prueba; hay centros preparando específicamente la prueba (que no es lo mismo que preparar a los chicos para conseguir los conocimientos que les permitan pasar la prueba).

Ambas cosas, me parece a mí, son bastante graves para la validez de la prueba. Aun así, yo seguiría siendo partidario de la publicación de las notas de cada centro--y esperaría de la discusión pública local el que se desvelasen algunas de esas irregularidades o trucos. Discusión pública local quiere decir: prensa local, conversaciones en las AMPAs (ya no se dice APAs), conversaciones informales entre los padres, tomas de postura de interesados, etc., etc. Y, si el problema fuera generalizado, sería una estupenda razón (una más) para que los políticos se la envainaran y diseñaran pruebas mejores [por cierto, los comentarios al respecto de Juan Ramón en la misma anotación son todos muy pertinentes; también algunos de Lipe].

Pero lo peor no es eso. Lo peor es lo siguiente. Teramenes puso un vínculo a una información de El País. Por lo que se cuenta en ella parece que algunas CCAA de las que participan en una de las pruebas internacionales más reconocidas, el PISA, preparan a los alumnos para que rindan mejor en estas pruebas. No sólo "copian" en los exámenes los alumnos o los centros, sino las administraciones públicas. Apañados vamos. Así lo sugiere este texto.

Cataluña y País Vasco ... facilitan a sus educadores material de años anteriores. Josu Sierra, director del Instituto Vasco de Evaluación e Investigación ve "normal" que un profesor utilice ejemplos de pruebas para trabajar con sus alumnos. "Están en su derecho de hacerlo [...] Es algo pedagógico. No creo que se pueda entrenar, porque las pruebas son cada año distintas. Y sólo con conocer el mecanismo de las pruebas y algunos ejemplos no se hace nada". De hecho, en la página web de su departamento (www.isei-ivei.net) pueden encontrarse modelos de pruebas.

Su homólogo catalán, Jordi Saura, asesor técnico del Consejo de Evaluación del Departamento de Educación de la Generalitat, está de acuerdo. "Informar no implica ninguna acción posterior sistemática. Pero está bien realizar algún ejercicio con anterioridad". Saura recuerda la complejidad de Pisa. "Este año habrá 13 modelos de exámenes distintos. Como máximo en cada clase sólo habrá tres alumnos con la misma prueba". La Consejería de Educación de Castilla y León sigue una política diametralmente distinta. Pilar González, jefa del Servicio de Calidad de Evaluación, destaca que en su comunidad sólo se remite una carta a los directores de los centros escogidos para el estudio para informarles de su nueva situación y pidiéndoles colaboración. "Para mejorar el sistema educativo, que es lo que pretendemos, necesitamos algo completamente objetivo y riguroso. Y para ello creemos que lo mejor es la mínima intromisión posible, para neutralizar cualquier sesgo que podamos introducir", afirma. La Junta castellanoleonesa no facilita material de las pruebas de Pisa, aunque reconoce que "otra cosa es que los profesores lo hagan por su cuenta".

Dentro de lo que cabe, los truquis del País Vasco y de Cataluña no parecen muy graves (si es que se aplican de manera general y no van destinados sólo a los centros que participarán en la prueba). Lo de la Junta de Castilla y León parece como de Pilatos: pero no le toca ser Pilatos, sino velar por que las pruebas se celebren con las mayores garantías. La que no parece que esté velando mucho por ellas, de todos modos, es la Junta de Andalucía. ¿A qué les suena lo siguiente? (mis negritas)

Para evitar la sorpresa de alumnos y docentes, la Junta organizó dos reuniones con los directores de los centros seleccionados para el informe, una en Córdoba (11 y 12 de enero) y otra en Granada (17 y 18 de enero). Su propósito era informarles sobre qué es Pisa y el papel que ellos debían jugar. También se invitó a los docentes a "informar" previamente a los alumnos sobre las características de la prueba. Esta petición generó un vivo debate en ambos encuentros. El eje de la discusión giraba en torno a un documento entregado por la Junta con el siguiente encabezamiento: "Pautas de actuación a desarrollar por los centros educativos". En su punto tres podía leerse que en las reuniones de trabajo de los equipos directivos de los principales departamentos involucrados (Ciencias, Lengua, Matemáticas y Orientación), se debería abordar, entre otras cuestiones, lo siguiente: "Una programación de actividades que faciliten el conocimiento y habilidades necesarias para realizar este tipo de pruebas". Ese debate, unido a que se les hiciese entrega a los directores de pruebas Pisa de años anteriores, hizo que algunos profesores se preguntaran "si se les estaba pidiendo que se entrenase a los chavales", como recuerdan directores consultados, presentes en ambas reuniones. "De ninguna manera se hablaba de entrenamiento", señala rotundo Antonio Benítez, "sólo que se diese orientación e información. Lo otro sería convertir el instrumento de medición en un objetivo por sí mismo". Benítez también aclara que ese epígrafe, como todo el documento, podía ser alterado, ya que era un borrador. En efecto, poco después de los encuentros, los mismos docentes recibieron un documento en el que el famoso punto tres había sido modificado. Así, los departamentos implicados adoptarían ahora "una serie de medidas para que el desarrollo de la prueba se realice con rigor, seriedad y motivación, y al mismo tiempo refleje la realidad objetiva del centro". Este cambio conformó a los directores consultados, y tras la reuniones, la encuesta de las jornadas reflejó una valoración del 80% por su parte, indica Antonio Benítez. Pero el hecho de facilitar documentación Pisa ya liberada a los docentes -una práctica legal que también se realiza en Cataluña y País Vasco- y que éstos puedan aplicarlo con sus alumnos, ha hecho temer a algunos docentes la posibilidad de que los resultados no refleje fielmente la realidad. Expertos en estadística consultados por este periódico también creen que cualquier intromisión en un estudio de estas características puede "enmascarar el modelo estadístico". Los mismos expertos señalan que lo mejor es no informar demasiado a los sujetos que van a ser estudiados. Antonio Benítez confía en que no se dé esta desvirtuación, en parte porque "los profesores saben que no se les está evaluando a ellos, ni a los alumnos, ni a los centros, ni al curriculum". Y en todo caso, no cree que, porque un profesor explique cómo es Pisa con pruebas anteriores, se desvirtúe la realidad de algo tan complejo como un sistema educativo.

Vaya, a mí me suena a que la Junta de Andalucía no quiere que sus datos sean malos (como, quizá, lo fueron en 2003) y está procurando que los alumnos de los centros que van a hacer las pruebas--no los alumnos de 4º de la ESO en general--sepan de qué van las pruebas, también lo sepan los profesores y "preparen" específicamente a sus alumnos para mejorar sus resultados. Suena a eso, no digo que mi sospecha sea verdad. Es verdad que la Junta ha retirado el párrafo más problemático de sus instrucciones para los centros, pero da la impresión de que el mensaje ha sido enviado y, ojo, el mensaje no lo envía un igual, sino un superior, esto es, una instancia que te puede facilitar o complicar la vida como director y como centro.

Sea o no cierto que la Junta quiere "copiar" en el examen, los expertos [ah, los expertos, esos innominados e innominables], en esta ocasión, tienen razón: cuanto menos sepa el sujeto que va a ser analizado de las características del análisis mejor. Sólo por el hecho de haber mantenido estas reuniones, y, encima, haberse tratado los temas como se han tratado, la muestra de centros andaluces, está, digamos, un poco tiznada. Eso sí, la sorpresa de directores, profesores y alumnos se ha evitado.