sábado, 13 de diciembre de 2014

Aplicando una prueba


Como último ejercicio del curso sobre Evaluaciones Externas realizado a través de Educalab, toca realizar una aplicación de una prueba externa.

Lamentablemente no tengo alumnado a quien aplicar esta prueba y aunque en casa hay tres miembros que están en edad de escolarización y precisamente dos se encuentran en edades / cursos correspondientes a dos pruebas (PISA y PIRLS) no tengo una muestra suficiente a la solicitada así que he decidido buscar dentro del mundo de los adultos... Y he aplicado la prueba PIAAC, aunque durante el curso no se ha hecho referencia a ella.

Cabe destacar que los ítems que dispongo de la prueba no tienen todas las tipologias de respuesta (alternativa múltiple / respuesta elaborada / respuesta corta...  y tampoco hay una guia de codificación específica. No obstante, si que se indican los niveles de dificultad, que he utilizado como guía para la valoración.

Por otro lado no puedo especificar una asignatura, puesto que es una valoración de competencias a nivel de edad adulta.


Con todos los ítems que existen liberados, no se puede llegar a completar la hora de aplicación y además de la última pregunta no existe la página web que se menciona, por lo que no se puede aplicar directamente. La prueba en cuestión que elaboro queda presentada de la siguiente manera:




Para conocer los criterios de corrección he elaborado el siguiente documento:





El número total de personas a las que he aplicado la prueba ha sido de 10, en diferentes rangos de edad. Los resultados de la aplicación y los rangos de edad de las personas a quien se ha aplicado, se especifican en el siguiente documento:





De los resultados obtenidos, he realizado algunas conclusiones, aunque considero que no se pueden extrapolar a nivel de toda la población adulta por falta de significatividad estadística.

Aún así cabe valorar que, efectivamente, aquellos ítems considerados como fáciles, han sido los que mejores resultados han obtenido.

Observo que los ítems con mayor dificultad han sido el Ítem 4 que requería un trabajo matemático específico y la el ítem 9, que realizaba valoración de contextos informatizados, donde la población de mayor edad no ha sabido superar la resolución del ejercicio.










lunes, 8 de diciembre de 2014

Charla #preguntasPISA - Procesos de evaluación. Más allá de las preguntas.


Aunque tarde, ahora he conseguido poder escuchar la más que interesante charla que el pasado 3 de diciembre se realizó como parte del curso Mooc Las preguntas de PISA y TIMSS.

Primero, agradecer al equipo de INEE esta iniciativa y dar la opción de poder aclarar tantas dudas y eliminar tantas "leyendas urbanas" existentes alrededor de estas pruebas externas.

Personalmente me quedo con dos aspectos que más me han llamado la atención: las aclaraciones sobre los cuestionarios de contexto y sobretodo los indicadores de nivel socio-económico, puesto que la población educativa con la que trabajo es de un nivel sociocultural bastante deprimido y considero que es un valor muy importante a tener en cuenta. Ciertamente, como se ha comentado en la charla, aquel país que consigue los mismos resultados independientemente del nivel socio-económico de la población escolar es un país que demuestra tener un sistema educativo equitativo. Me han entrado ganas de buscar esos resultados a nivel de España, aunque no se si seré capaz de encontrarlos... No obstante, mucho me temo mucho que por mi experiencia, puedo avanzar que los resultados no son excesivamente equitativos.

Otro aspecto que me ha llamado la atención es el relacionado con las pruebas de Educación Infantil... También me pongo como objetivo buscar el informe de los resultados del piloto que se realizó Infantil.