Elaboramos nuestros propios ítems

¡Y seguimos dando pasos adelante! esta vez se trata de elaborar criterios de corrección sobre estímulos de creación propia. 

Puesto que soy docente de secundaria en el área de lenguas clásicas, he empezado por delimitar con facilidad la competencia: LECTORA y me he centrado lógicamente en PISA (por edad de mi alumnado, 4ºESO) y como en sus pruebas de competencia lectora quiere medir si las y los estudiantes que se encuentran al final del período de escolarización obligatoria son capaces de elaborar y ampliar el significado de lo que leen, así como de reflexionar sobre su lectura en una amplia gama de textos continuos y discontinuos me he puesto manos a la obra planeando combinarlos: un mapa (discontinuo) y un poema (continuo): el mapa refleja las aventuras de Ulises y el poema da voz a Penélope, mito occidental universal, y por lo tanto, de amplio uso en diferentes puntos geográficos y entornos culturales diversos.

Los he seleccionado así porque considero que son estimulantes y atractivos, además de ricos en información.

Sobre los dos textos he elaborado 3 ítems o preguntas: de elección múltiple y de respuesta construida abierta.

Tras los ítems propongo los  criterios de codificación correspondientes.

ACTIVIDAD: Adaptamos estímulos de dos ítems liberados

Competencia: lectora

Alumnado: 4º de ESO

Área curricular: latín

Unidad didáctica: MITOLOGÍA: ILIADA Y ODISEA

Puesto que soy docente de secundaria en el área de lenguas clásicas, he empezado por delimitar con facilidad la competencia: LECTORA.

Me he centrado después lógicamente en PISA (por edad de mi alumnado) y como en sus pruebas de competencia lectora[1] quiere medir si las y los estudiantes que se encuentran al final del período de escolarización obligatoria son capaces de elaborar y ampliar el significado de lo que leen, así como de reflexionar sobre su lectura en una amplia gama de textos continuos[2] y discontinuos[3] me he puesto manos a la obra planeando combinar dos de ellos (algunos estímulos de los que he mirado me han dado la idea): un mapa[4] (discontinuo) y un poema (continuo, lo que coincide con textos PIRLS[5] para compararlos):

El mapa refleja las aventuras de Ulises y el poema da voz a Penélope, mito occidental universal, y por lo tanto, de amplio uso en diferentes puntos geográficos y entornos culturales diversos.

Los he seleccionado así porque considero que son estimulantes y atractivos para alumnado de 15-16 años por su carácter visual (el mapa) y el tono intimista-amoroso (el poema) en el que Penélope se expresa.

Sobre los dos textos he elaborado preguntas tanto de elección múltiple como abiertas para determinar la competencia lectora del alumnado.

  

Las preguntas preparadas tienen en cuenta las diferentes miradas de ambos estudios (PISA Y PIRLS):

·         PISA mira a los procesos que deben realizarse para comprender plenamente un texto:

o   obtención de la información

o   comprensión general

o   elaboración de una interpretación

o   reflexión y valoración del contenido de un texto

o   reflexión y valoración de la forma de un texto

·         PIRLS mira a los procesos cognitivos o de comprensión que intervienen en la lectura:

o   Localización y obtención de información explícita.

o   Realización de inferencias directas.

o   Interpretación e integración de ideas e informaciones.

o   Análisis y evaluación del contenido, el lenguaje y los elementos textuales.

Tras las preguntas propongo:

·         La respuesta correcta

·     La comparación entre los PROCESOS y TAREAS que ambos estudios (PISA  y PIRLS) medirían tras una misma pregunta.

Espero que este fuera el objetivo de la actividad. La verdad es que me ha llevado a un nivel de profundización en los ítems liberados importante.

Para ver el documento completo: 

---

[1] Para PISA la competencia lectora es “la capacidad de comprender, utilizar y analizar textos escritos para alcanzar los objetivos del lector, desarrollar sus conocimientos y posibilidades y participar en la sociedad. Supera la idea tradicional de competencia lectora como proceso de descodificación y comprensión literal. ”

[2] Compuestos normalmente por una serie de oraciones que, a su vez, se organizan en párrafos.

[3]  Cuadros, gráficos, tablas, vales, etc.

[4] Los mapas son textos discontinuos que muestran las relaciones geográficas entre distintos lugares. Hay numerosas clases de mapas. Están los mapas de carretera, que indican las distancias y los recorridos entre unos lugares determinados, o los mapas temáticos, que indican la relación entre lugares, así como algunas de sus características sociales o físicas.

[5] Para PIRLS la competencia lectora es “la habilidad para comprender y utilizar las formas lingüísticas requeridas por la sociedad y/o valoradas por el individuo. Los lectores de corta edad son capaces de construir significado a partir de una variedad de textos. Leen para aprender, para participar en las comunidades de lectores del ámbito escolar y de la vida cotidiana, y para disfrute personal”.

Investigando sobre posibles usos de los ítems liberados

El hecho de poder acceder a items liberados nos da la opción de que cada docente desde las diferentes áreas vayamos construyendo modos de evaluación similares, de manera que el alumnado vaya capacitándose en preguntas-tipo basadas en competencias a las que dar respuesta. Yo, como docente de latín, entiendo que puedo utilizar las de comprensión lectora sobre todo y algo también los items liberados de resolución de problemas.  

Enlace de interés: 

Presentación: Estímulos liberados PISA y PIAAC  http://recursostic.educacion.es/inee/pisa/ 

¿Cómo construir items de Lengua?
https://www.youtube.com/watch?v=eRmJ6DQKxR0
Presentación http://www.slideshare.net/INEE_MECD/pisa-read-frameworkcomillasassent130904

TRATAMIENTO RESULTADOS DE PISA-EUSKADI EN 4 MEDIOS

Si hay algún informe al que los medios sacan jugo en sus publicaciones es PISA. 

He decidido centrarme en mi ámbito cercano y ver qué se publicó en Euskadi tras la presentación que hizo la consejera de educación en diciembre de 2013 de los resultados de 2012. Presento los titulares principales y una breve descripción de lo que trata cada noticia.

http://www.elcorreo.com/vizcaya/20131203/mas-actualidad/sociedad/euskadi-supera-media-ocde-201312031201.html 

Excepto el primer párrafo en que se refiere al alumnado vasco, prácticamente toda la noticia se referirá a los resultados a nivel de España "El rendimiento de los alumnos vascos de 15 años está por encima de la media de los 34 países de la OCDE en Matemáticas, Comprensión Lectora y Ciencias, según los resultados de la última Evaluación Internacional de Estudiantes (PISA 2012), publicados hoy. No obstante, el conjunto de España sigue por debajo de la media de los países de la OCDE. España, con 484 puntos en Matemáticas, ocupa el lugar 25 entre los 34 países de la OCDE." 

http://www.elmundo.es/pais-vasco/2013/12/03/529dda1a684341e0108b4588.html 

 Aporta más datos concretos y añade al anterior:

•  la mejora en Ciencias y en que por vez primera supera la media de la OCDE en las tres. "En un contexto en el que el conjunto de España mejora sus resultados pero sigue suspendiendo, los 4.739 alumnos vascos de 15 años que se sometieron a esta prueba el año pasado han elevado los resultados en Ciencias, que era la asignatura que más preocupaba a la comunidad autónoma, de forma que por primera vez ha conseguido superar la media de la OCDE en las tres competencias examinadas" pero...
• "La vasca es una escuela en la que predominan los niveles medios y son pocos los estudiantes que se encuentran por debajo; el problema es que también son pocos los alumnos excelentes"

http://ccaa.elpais.com/ccaa/2013/12/06/paisvasco/1386360036_225831.html 

 El enfoque se centra en destacar la comparativa entre alumnado autóctono e inmigrante: "es una de las comunidades autónomas que más recursos destina a atender la diversidad en sus aulas y también una de las que no ha sufrido recortes en los recursos humanos que dedica a ese fin. Pero los datos del informe PISA de 2012, conocidos el pasado martes, muestran cómo en las tres áreas analizadas —comprensión lectora, matemáticas y ciencias— Euskadi supera con creces la distancia en los resultados entre los que obtienen los estudiantes nativos vascos y los inmigrantes con respecto a la que existe en otras comunidades o en Europa."

También recoge que "son pocos los estudiantes que se encuentran por debajo; el problema es que también son pocos los alumnos excelentes, un campo en el que Euskadi tiene un claro margen de mejora."

Únicamente se interesa por las matemáticas y tras aportar datos destaca que "Los adolescentes con muy buenos resultados en matemáticas,  no abundan."

http://www.noticiasdealava.com/2013/12/18/sociedad/el-bilingismo-y-la-inmigracion-han-influido-en-los-datos-pisa-de-euskadi

Esta noticia hace la lectura de que bilingüismo y, sobre todo, la inmigración dificultan la obtención de mejores resultados en PISA. 

Nombra el origen de la noticia (comparecencia de la consejera ante los medios) y destaca continuamente sus palabras reslatando que si bien los resultados son buenos, no son tan buenos como cabría esperar: "Uriarte ha reconocido que, sin embargo, Comunidades Autónomas como Madrid, Asturias, Castilla y León y Navarra superan los resultados de los alumnos vascos a pesar de tener índices como el socioeconómico y el PIB más bajos."

Recoge que "La consejera ha analizado que, por ejemplo, "Madrid tiene un problema de inmigración" y adoptó por ello una serie de medidas educativas pero, ha indicado, que el hecho de que tenga solo una lengua oficial, puede haber sido uno de los factores que hayan determinado esos resultados más altos que los vascos junto a otros factores." 

Además (la única noticia que aporta este dato) no es exclusivo de Euskadi:  "El informe ha revelado que los alumnos con un nivel socioeconómico favorecido superaron a los de nivel más bajo, en todos los países analizados y, de la misma manera, según la consejera, los colegios concertados han logrado mejores resultados que los públicos."

Es, por último, el único de los cuatro medios que hace una análisis de datos teniendo en cuenta la variable sexo-género: "los chicos vascos (512 puntos) superaron a las chicas (498) en puntuación de matemáticas, pero ellas (513 frente a 483) presentan un valor muy superior en comprensión lectora, y ambos sexos se igualan en sus resultados de ciencias."

CONCLUSIONES: Como en todo, la prensa lee y difunde los resultados del alumnado de manera sesgada y en función de su posicionamiento ideológico para remarcar los éxitos y/o fracasos de las administraciones educativas de turno. Dentro de la subjetividad general, la más completa y ajustada de las cuatro sería esta última.

Para finalizar, desde mi cuenta de twitter (@MJIRPE) sigo a:

EDUCACIÓN INEE @educaINEE

ISEI-IVEI @isei_ivei

OECD Education @OECD_Edu

UN Education Report @EFAReport

Resumen principales evaluaciones internacionales

PISA: es un estudio de la OCDE cada 3 años que mide el rendimiento académico de las y los estudiantes de 15 años. en competencias: matemáticas, lectura, ciencias y ahora también resolución de problemas y competencia financiera. 

PIRLS es un estudio de la IEA cada 5 años que mide las tendencias en el rendimiento en comprensión lectora de los alumnos de 4º curso de Educación Primaria (9-10 años)

TIMSS es un estudio de la IEA cada 4 años que permite evaluar el progreso en matemáticas y ciencias del mismo alumnado desde 4º de Educación Primaria a 2º de ESO. (En España solo se realiza en 4º de Primaria)

TALIS es un estudio de la  OCDE cada 5 años cuyo objetivo principal es ofrecer información sobre los procesos educativos a través de encuestas al profesorado y a las y los directores de los centros.

EECL es un estudio de la UE cada 5 años que evalúa tres destrezas: comprensión lectora,  comprensión oral y expresión escrita en dos lenguas extranjeras. 

TIMSS Advanced es una variante de TIMSS que mide en alumnado de 2º de bachillerato matemáticas avanzadas y física. 

Aquí la presentación del INEE en la que me he basado, y donde se puede profundizar en más aspectos relativos a estas evaluaciones:

Evaluaciones Internacionales del Sistema Educativo. Jornadas evaluaciones internacionales. La Rioja from Instituto Nacional de Evaluación Educativa

¿Sabías que....?

Como una de las actividades iniciales, se nos ha pedido que destaquemos algún aspecto que nos haya parecido interesante de la presentación inicial y que lo tuiteemos: 

Cuando Lis Circadillo comenta que además de las competencias lingüística, matemática y científicas PISA "se está extendiendo a  medir otro tipo de competencias como son la resolución de problemas, competencias meta-cognitivas como aprender a aprender, y competencias nuevas y, desde luego muy de actualidad, como la competencia financiera" me he tomado unos minutos para reflexionar y me ha parecido un tema de un calado inmenso a la hora de revisar nuestra metodología...  ¿Qué hacemos a diario para promover dichas competencias? ¿Cómo se pueden medir? 

Y sobre todo que se hable de competencia financiera, algo que me ha resultado completamente novedoso, así que he decidido empezar por ahí. En la web de INEE he encontrado la referencia al congreso PISA "Finanzas para la vida" celebrado este verano en la que se han presentado los resultados de las pruebas de medición de 2012. 

Del informe extracto (p.8-9):

"Es esencial que los alumnos empiecen a desarrollar habilidades financieras desde edades tempranas. Se trata de prepararles para vivir el día de mañana de manera independiente, que comprendan el complejo contexto económico que les rodea y que participen activamente en él sabiendo desenvolverse y tomando decisiones inteligentes. Esto les permitirá adoptar una actitud crítica y una mayor capacidad de análisis ante ofertas financieras, planificar y ahorrar para el largo plazo, y gestionar de forma efectiva sus gastos o las deudas a corto plazo, logrando así sus objetivos personales.

Los centros escolares están en una posición ventajosa para lograr que la competencia financiera llegue a todos los grupos demográficos, sin discriminación alguna y alcance a jóvenes procedentes de todos los sectores o grupos sociales, incluidos los más vulnerables, tratando de romper el ciclo de desconocimiento financiero generacional y promoviendo así la igualdad de oportunidades."

Del informe resumen elaborado rescato los siguientes aspectos:

¿Qué mide la competencia financiera?

• El conocimiento y comprensión de conceptos y riesgos financieros

• Las habilidades, motivación y autoconfianza para aplicar dichos conocimientos a la toma de decisiones eficaces en un amplio conjunto de contextos monetarios

• La capacitación para participar activamente en la vida económica y mejorar así el bienestar de los individuos y de la sociedad 

¿Cómo se evalúa la competencia financiera en PISA?

Situando al estudiante en diferentes contextos económicos y valorando cómo se desenvuelve en ellos. En particular, se trata de evaluar sus conocimientos y habilidades en relación con:

• Tratamiento del dinero

• Realización de transacciones económicas

• Utilización de instrumentos financieros (tarjetas bancarias, cheques, cuentas bancarias y divisas)

• Planificación y gestión del presupuesto

• Capacidad de identificar y manejar riesgos

• Conocimiento de los derechos y responsabilidades de los consumidores, de las consecuencias de determinadas actividades económicas y de la necesidad de informarse antes de adoptar determinadas decisiones financieras.

Es una primera aproximación al tema, y como conclusión personal, puedo decir que me queda mucho que repensar e investigar.

Para profundizar:

EducaINEE nº 35: Los resultados españoles enla competencia financiera en PISA (I)  

Informe español. PISA 2012. Competencia Financiera

Mes nuevo, reto nuevo: MOOC #preguntasPISA: Las preguntas de PISA y TIMSS: una práctica para el aula

Las preguntas de PISA y TIMSS: una práctica para el aula fue desde el momento en que lo vi, una propuesta MOOC muy atractiva y como me ha llegado en momento interesante también (estoy disfrutando de un curso sabático), rápidamente me matriculé. 

Soy docente de secundaria en el ámbito de lenguas clásicas (latín y griego) y creo que profundizar y mejorar en evaluación es, por lo general, uno de los temas pendientes para la mejora de nuestra práctica educativa y optimización de resultados como comunidad educativa en los centros. 

Para empezar empezamos a presentarnos y ubicarnos