Evaluar de manera justa

En el MOOC #preguntasPISA nos plantean la siguiente cuestión: "Cuando corregimos, ¿nos consideramos justos, estrictos o con manga ancha?" Voy a dedicar esta entrada a este asunto, que ahora a final del primer trimestre del curso, en algunos casos se convierte en un asunto espinoso.

Aunque la cuestión parte de un contexto de Evaluaciones internacionales, voy a referirme a la evaluación en el contexto del día a día del aula.
La cuestión de como evaluar de manera justa empieza desde mucho antes del proceso de corrección. Existe una idea generalizada de que los exámenes con preguntas cerradas, cortas o de respuestas múltiples son más "objetivas" y por tanto garantizarían una corrección más justa que los exámenes con preguntas de respuesta larga, de desarrollo, análisis,... Bien, lo primero que hay que tener claro es que en la selección de las preguntas ya se puede estar introduciendo un sesgo importante, por tanto esa supuesta objetividad puede quedar anulada desde el inicio, con independencia del tipo de preguntas que se elija.
Y en cuanto al proceso de corrección, la clave para ser justo es tener claro para qué sirve la evaluación, esto es, como punto de partida para implementar mejoras en el proceso de enseñanza-aprendizaje, y nunca como una especia de "Juicio Final" en el que los buenos serán premiados y sobre los malos recaerá el castigo divino.
Si tenemos clara la finalidad de los exámenes nos será mucho más fácil corregir de manera justa.

Trabajando con estímulos de Evaluaciones Internacionales

Desde el MOOC #preguntasPISA se nos propone la siguiente actividad: trabajar con dos estímulos de Evaluaciones Internacionales sobre una misma competencia y adaptarlo a un curso de Primaria y otro de Secundaria para una asignatura. Planteado así en abstracto parece una actividad sencilla, las dificultades aparecerían en el momento en que nos fuésemos aproximando a una situación real de aplicación en el aula.
Desde el desconocimiento de los curricula de Enseñanza Primaria, vamos a intentar desarrollar la actividad:
La competencia elegida es Ciencias y los estímulos escogidos son "El efecto Invernadero" (PISA) para Secundaria y S032654 de TIMSS Ciencias 2011 para Primaria.

Y, teniendo en cuenta que una cosa son las Evaluaciones Internacionales y otra cosa es el día a día de un contexto concreto de aula, ahí va la propuesta de adaptación:

-Nivel: 3º ESO.
-Asignatura: Ciencias Sociales.

A partir de este estímulo, podríamos plantear las siguientes preguntas:
1) ¿Qué otros datos debería comprobar Andrés para corroborar su conclusión de que el aumento de la T media de la atmósfera se debe al aumento de la emisión de dióxido de carbono.
2) Dando por válida la conclusión de Andrés, ¿Qué factores humanos han propiciado el incremento de emisión de dióxido de carbono en las últimas décadas y, por tanto, de la T media de la atmósfera?

-------------------------------------------------------------------------------------------------------------------------

-Nivel: 6º de Primaria
-Asignatura: Conocimiento del Medio

El esquema de arriba muestra la dirección del viento dominante, las precipitaciones y las temperaturas del aire a distintas alturas en ambos lados de una montaña.
La pregunta original es:
1) ¿En qué ubicación es más probable que haya una selva? ¿Ubicación 1, 2, 3 o 4?

Podríamos complementar dicha pregunta con la siguiente:
2) ¿Cuáles son las condiciones ambientales óptimas para el desarrollo de la selva?

Y una tercera pregunta podría ser:
3) A partir de la información del esquema, señala cuál o cuáles de las siguientes frases son correctas:
a) A mayor altura las temperaturas descienden y las precipitaciones aumentan.
b) A mayor altura las temperaturas aumentan y las precipitaciones descienden.
c) A mayor altura las temperaturas y las precipitaciones aumentan.
d) A mayor altura las temperaturas y las precipitaciones descienden.

--------------------------------------------------------------------------------------------------------------------

Café con PISA (y sin PRISA)

En la tarde de ayer martes tuve el placer de sentarme a tomar un café con otros compañeros de profesión para charlar tranquilamente sobre PISA y las Evaluaciones Internacionales. Este tipo de cosas son las que caracterizan a esta profesión: 6 de la tarde, tras una toda una jornada de trabajo, cansados, no tenemos otra cosa mejor de la que charlar, de cuestiones educativas. Mi profundo agradecimiento a todos los que aceptaron mi invitación y acudieron a la cita.

Hablamos de muchas cosas, entre ellas de la variedad de las evaluaciones internacionales (PISA, TIMSS, PIRLS, TALIS,...), de su utilidad, de como nos han servido a los docentes para tomar conciencia de la necesidad de un cambio metodológico y del papel de las familias en el sistema educativo. Sin caer en el sensacionalismo con el que tratan los medios los resultados de PISA, que como dijo Carlos Orta la han convertido en la "Eurovisión de la Educación" al reducirla a un simple ranking, concluimos que las Evaluaciones Internacionales son de una gran utilidad para los docentes.

Con respecto al cambio metodológico, el enfoque competencial es una realidad que, por lo que parece, está por encima de las modas, o de los cambios legislativos. Las competencias han venido para quedarse. Cierto es que se está haciendo un esfuerzo que queda reflejado en diversos documentos (programaciones, documentos puente, UDIs,...) pero la clave será interiorizar el espíritu, la esencia, del aprendizaje competencial, que los aprendizajes trasciendan las cuatro paredes del aula.

Esto obliga a redimensionar no solo el rol del profesor, sino también el rol del alumno. Y, como no, en ese "ménage à trois" que es la educación, también incumbe a las familias. Es necesario y urgente explicar a las familias qué son las competencias y qué hacen sus hijos en la escuela. Iniciativas como las Escuelas de Padres son fundamentales en la escuela del siglo XXI. Y una comunicación cada vez más directa y más intensa entre escuela y familia será uno de los retos de esta.

Una cuestión de la que también hablamos fue hasta qué punto va a ser un factor condicionante el hecho de que PISA 2015 vaya a desarrollarse íntegramente en formato digital. Personalmente creo que el concepto de "nativos digitales" es erróneo. Como explica Enrique Dans, este concepto y el hecho de "dar las cosas por sabidas" están perjudicando notablemente las posibilidades de cara al futuro.

Una vez más, mil gracias a José Ángel, Gloria, Fátima, Manuel Ángel, Estrella, María Jesús, Begoña y Carlos por permitirme aprender de vosotros.

Tweets #preguntasPISA

He creado este post para seguir esta semana todos los tweets que se generen en cada uno de los #MOOCafe que se celebren:

Tweets sobre #preguntasPISA

Pruebas internacionales: TIMSS

Siguiente con el repaso a las Pruebas Internacionales, vamos a dedicar esta entrada al Estudio Internacional de Tendencias en Matemáticas y Ciencias, conocido como TIMSS (Trends in International Mathematics and Science Study).

Se trata de un estudio dirigido por el IEA, Asociación Internacional para la Evaluación del Rendimiento Educativo, y aunque se pasa de manera general a alumnos de 4º y 8º grado de cada país, en España se pasa a alumnos de 4º de Primaria. Se trata de un estudio pionero, que viene realizándose desde los Años 60, mucho antes de que aparecieran las Pruebas PISA.

Para cada país, TIMSS ofrece una visión general sobre la evolución del aprendizaje en las áreas de Matemáticas y Ciencias, tanto en dominios de contenidos como en dominios cognitivos. Los primeros hacen referencia al conocimiento de hechos y conceptos y los segundos a destrezas y procedimientos. En ambas materias, los dominios de contenido son pocos en número y se corresponden con las grandes áreas de contenido, por ejemplo, «Números», «Formas y mediciones geométricas», «Ciencias de la vida», «Ciencias físicas». Estos dominios de contenido se subdividen en áreas temáticas que se desglosan finalmente en capacidades evaluables. Estas últimas son el referente para las preguntas.

Por su parte, los dominios o procesos cognitivos, se refieren a las destrezas de pensamiento que los alumnos han de saber realizar en relación con los contenidos factuales o conceptuales.

Los dominios cognitivos de TIMSS agrupan esas destrezas en tres categorías que son comunes para matemáticas y ciencias: «conocer», «aplicar» y «razonar». Cada dominio se desglosa en un conjunto de habilidades o destrezas siguiendo la Taxonomía de Bloom. Tales destrezas se convierten en el referente inmediato de las preguntas. Cada ítem o pregunta tiene a la vez como referente un dominio de contenido y otro cognitivo.

Se realiza cada cuatro años, y la última edición fue en 2011. Por tanto, la próxima edición será en 2015.

Informe Español TIMSS/PIRLS 2011

Pruebas Liberadas TIMSS

PISA en los medios

Nos guste o no, el Informe PISA es conocido por la sociedad gracias a los medios. ¿Y cómo tratan los medios al Informe PISA? Pues de la misma forma que, en general, tratan los asuntos sobre educación. Por desgracia, el tratamiento de los medios de comunicación a los temas educativos en España no se caracteriza por el rigor informativo.

Si buscamos comparar como tratan a PISA medios de diferentes posiciones ideológicas nos damos cuenta de que, en este asunto, hay una coincidencia plena. En casi todos los casos asistimos a una banalización del asunto, que reduce los Informes a Rankings entre países y en los que se entresacan titulares que dan una visión distorsionada de la globalidad del informe. Se prefiere optar por el sensacionalismo de un titular llamativo que después es utilizado como munición para unos y otros en la arena política.

Otro de los elementos recurrentes en los medios es mostrar su fascinación por el modelo educativo finlandés. Tras los buenos resultados obtenidos por Finlandia desde que se iniciaran los Informes PISA en 2000, este país se ha convertido para los medios en el espejo en el que mirarse y al mismo tiempo en el mazo con el que dar cocotazos al sistema educativo español. Pero de nuevo aquí se ofrece una visión sesgada, trivial, cuando no inexacta del modelo finlandés. Y siendo importante recoger todo lo positivo que se pueda recoger de Finlandia (o de Corea del Sur o de cualquier otro país), no debemos olvidar que un sistema educativo es algo que está inmerso en un contexto concreto de sociedad. ¿Son los valores dominantes en la sociedad finlandesa los mismos que los de la sociedad española? 

Presentación del Informa PISA 2012 (INEE)

#MOOCafeSanFernando

Desde el MOOC #preguntasPISA nos proponen organizar encuentros presenciales, que bajo la denominación genérica de #MOOCafe sirvan para, pasando de lo virtual a lo presencial, podamos intercambiar experiencias, valoraciones, impresiones, ... sobre PISA y las Evaluaciones Internacionales.

Siguiendo esta propuesta, he organizado un café en mi localidad, en San Fernando. Concretamente en mi Centro de Trabajo, el Colegio Compañía de María ( www.sfciamaria.es ). Tendrá lugar el martes 25 de noviembre a las 6pm, en el Edificio de Bachillerato entrando por la Calle Colegio Naval Sacramento (para los que no conozcan este Colegio, tiene varias entradas).

 

¿Cuáles son mis expectativas? Un rato de charla distendido sin otro afán que escuchar a otras personas y aprender de ellas. Si estás en la zona, y te apetece tomar un café y charlar sobre educación, te espero!

 https://www.eventbrite.es/e/entradas-cafe-pisa-y-otras-evaluaciones-internacionales-14534604393

Las evaluaciones internacionales: PISA

En el contexto actual, son cada vez más frecuentes las alusiones a las evaluaciones internacionales, y entre ellas, la más popular es PISA. Cada cierto tiempo, aparece en los medio de comunicación alguna noticia en la que, ya sea para justificar la enésima reforma educativa, ya sea para demandar una reforma educativa, o simplemente para denostar al sistema educativo de nuestro país o para señalar con el dedo acusador la mala calidad de la educación en tal o cual comunidad autónoma, se acude como argumento de autoridad a los resultados en las pruebas PISA, presentándolos como una verdad incuestionable una serie de datos o conclusiones que el gran público no sabe exactamente a qué se refieren, pero que nadie se atreve a discutir ni los medios se encargan explicar con claridad.

En las siguientes entradas intentaré establecer una sencilla clasificación sobre las evaluaciones externas internacionales, con enlaces que permitan ampliar información a quien así lo desee. En esta primera empezaremos por la reina de las evaluaciones internacionales: PISA.

Lo primero que tenemos que tener claro es que toda evaluación es siempre un punto de partida y nunca un punto y final. Así, las evaluaciones internacionales tienen como finalidad obtener datos, comparar los resultados entre países (como no puede ser de otra forma en un contexto de globalización) y, sobre todo, introducir mejoras en el sistema educativo. Este aspecto, el de la mejora continua, el cambio constante, es uno de los rasgos que caracterizan a la educación del siglo XXI. En un contexto de cambios sociales a ritmo de vértigo, la escuela tiene que seguir ese ritmo para no quedar como una institución irrelevante, de otra época.

En España, el organismo encargado de coordinar la participación en las evaluaciones internacionales es el Instituto Nacional de Evaluación Educativa (INEE), integrado dentro de la estructura del Ministerio de Educación.

PISA es la más famosa, y no se llama así porque venga de la ciudad italiana, sino que son las iniciales de Programme for International Students Assessment. Es un estudio promovido por la OCDE y se realiza cada 3 años (la próxima vez será en 2015). Se realiza a alumnos de 15 años y evalúa las competencias de: comprensión lectora, matemáticas y ciencias. A partir de ahí, PISA ofrece multitud de recursos de interés para la comunidad educativa y la sociedad en general, como los Informes internacionales y nacionales, o las baterías de pruebas liberadas, que dan a conocer el tipo de pruebas por las que se evalúa a los jóvenes. Además, se amplía el rango de competencias evaluables: educación financiera, resolución de problemas, aprender a aprender,...

Volviendo a la cuestión de la que hablaba al principio, las evaluaciones internacionales, y entre ellas PISA principalmente, persiguen como finalidad introducir cambios en el sistema educativo. Esa capacidad de promover el cambio ha sido también objeto de crítica entre quienes ven en PISA un cambio en el sentido de las evaluaciones, es decir, no ya como un punto de partida sino como el punto final, el destino que todos los países quieren alcanzar, y mejorar en el ranking PISA se convierte en un objetivo en sí. 

En ello quizás tendrá mucho que ver la imagen que los medios transmiten sobre PISA, y la mejor vacuna para no convertir PISA en una tiranía de los sistemas educativos está en conocer su funcionamiento.

En próximas entradas seguiré desmenuzando PISA y presentando otras evaluaciones internacionales.

Presentación

Este blog nace con la vocación de ser una ventana abierta a humildes aportaciones, reflexiones, intuiciones... sobre el mundo de la educación. La escuela del siglo XXI empieza a configurarse con unas características muy diferentes a la escuela tradicional que se establece tras la revolución industrial, y nos obliga a los profesionales de la educación, incluso a todos los ciudadanos, a reflexionar sobre ella.

Las primeras entradas van a estar dedicadas a las Evaluaciones externas, y serán parte del trabajo realizado en el MOOC del Ministerio de Educación "Las preguntas de PISA y TIMSS: una práctica para el aula". Quiero establecer una clasificación de las diferentes Evaluaciones Internacionales, aportando enlaces interesantes sobre cada una de ellas.

Pero mi intención es ir más allá y subir posts acerca de temáticas diversas en las que iré mostrando mi visión sobre los cambios necesarios de la escuela, así como recoger otras reflexiones interesantes. Invito a todos los visitantes a discutir, rebatir, matizar y a hacer cuantas aportaciones consideren oportunas.

Mi nombre es Alfonso Álvarez y ejerzo la docencia en la especialidad de Ciencias Sociales, Geografía e Historia, en el Colegio Compañía de María de San Fernando (Cádiz).

Enseñarás a volar…pero no volarán tu vuelo.
Enseñarás a soñar…pero no soñarán tus sueños.
Enseñarás a vivir…pero no vivirán tu vida.
Enseñarás a cantar…pero no cantarán tu canción.
Enseñarás a pensar…pero no pensarán como tú.
Pero sabrás que cada vez que ellos vuelen, sueñen,vivan, canten y piensen…
¡Estará en ellos la semilladel camino enseñado y aprendido!

(Teresa de Calcuta)