EVALUACIÓN DE DIAGNÓSTICO. 4º Primaria

Transcripción

1 CONSEJERÍA DE EDUCACIÓN, CULTURA Y DEPORTE EVALUACIÓN DE DIAGNÓSTICO 4º Primaria 2013/2014 PARÁMETROS DE CORRECCIÓN DE CADA ÍTEM COMPETENCIA MATEMÁTICA

2 Introducción Son varios los posibles modelos que se pueden utilizar para cuantificar los resultados obtenidos por los alumnos en las evaluaciones educativas. En la bibliografía al respecto se pueden encontrar amplios estudios sobre las bondades y deficiencias de cada uno de ellos. Desde el modelo clásico, que contabiliza el número de respuestas correctas obtenidas por los alumnos, hasta los modelos de la Teoría de Respuesta al Ítem (TRI). En nuestro caso nos hemos decidido por el modelo TRI de un solo parámetro (modelo de Rasch) porque presenta ventajas significativas con relación al modelo clásico. Seguidamente puntualizamos las bondades y deficiencias de cada uno. a) Puntuación proporcional al porcentaje de respuestas correctas. La gran ventaja del modelo clásico es que todo el mundo puede entender los resultados. Cualquiera puede imaginar una prueba de matemáticas y visualizar qué representa un 54% de respuestas correctas. Sin embargo, existen algunas debilidades en este enfoque, ya que el porcentaje de respuestas correctas depende de la dificultad de la prueba. Esto implica que es prácticamente imposible comparar con precisión dos pruebas diferentes, por ejemplo, las realizadas en años anteriores. Además, sería imposible calcular índices de dispersión tan sólo con datos basados en el porcentaje de respuestas correctas. Especialmente si tenemos que desagregarlos por zonas, centros y subpoblación de alumnos. Un problema importante lo representan las respuestas aleatorias de los alumnos a los ítems de opción múltiple. b) Modelo de Rasch para ítems dicotómicos. El modelo de Rasch crea un continuo en el que se localiza tanto el rendimiento del alumno como la dificultad del ítem. Una función probabilística relaciona estos dos componentes. La capacidad del alumno y la dificultad de ítem se miden en la misma escala (logic), que asigna a un alumno de capacidad media un logic de cero y a los ítems de dificultad media, también, un logic de cero. Los estudiantes con bajo rendimiento y los ítems fáciles estarán situados a la izquierda de la escala, mientras que los estudiantes con alto rendimiento y los ítems difíciles se situarán a la derecha. Valores negativos ( 2, 3) para ítems y alumnos por debajo de la media, y positivos para alumnos e ítems por encima de la media. El siguiente gráfico representa la probabilidad de éxito (curva punteada) y la probabilidad de fracaso (curva continua) para un ítem de dificultad cero. Probabilidad de éxito o fracaso para un ítem de dificultad cero según el modelo de Rasch. Este planteamiento permite medir con precisión el nivel de competencia de los alumnos con dos pruebas diferentes, con la 1 Como se muestra en la gráfica, un alumno con capacidad cero tiene una probabilidad de 0,5 de éxito en un ítem de dificultad cero y una probabilidad de 0,5 de fracaso. En el mismo ítem de dificultad cero, un alumno con capacidad 2 tiene una probabilidad de éxito de algo más de 0,1 y una probabilidad de fracaso de algo menos de 0,9. Pero este estudiante tendrá una probabilidad de 0,5 de éxito en un ítem de dificultad 2. Desde un punto de vista matemático, la probabilidad de que un estudiante i, con una capacidad β, conteste correctamente a un ítem j de dificultad δ es igual a:

3 única condición de mantener algunos ítems de anclaje entre ambas. Como permite ubicar con precisión a cada alumno en una escala continua, podemos realizar análisis de dispersión y relacionar las variables de contexto con los niveles de competencia de los alumnos. La precisión de todo el proceso radica en la correcta calibración de los ítems. Calibrar los ítems estimando su dificultad (logic). Rechazar los ítems que no se ajusten al modelo de Rasch (nivel de discriminación). Curva de ajuste de un ítem real al modelo de Rasch. En la gráfica podemos ver el análisis de un ítem real mediante el modelo de Rasch de un parámetro. Se trata de un ítem de dificultad media alta 1,98 y un nivel de ajuste 0,94. Contenido del presente documento Con el fin de facilitar la información referente a la prueba de la Evaluación de Diagnóstico de competencia matemática para 4º de curso de Educación Primaria, sobre cada uno de los ítems se incluyen en este documento sus criterios de corrección, así como su porcentaje de acierto, obtenido sobre la población sujeta a puntuación en la prueba. Además, también se recogen el discriminante, ajuste y dificultad de cada ítem, de acuerdo al modelo TRI de Rasch, utilizado para cuantificar los resultados de los alumnos y explicado en la introducción. Esta información se complementa con la curva de ajuste de cada ítem, según el citado modelo de Rasch. Cuando alguno de los ítems de la prueba se aleja del modelo ideal de Rasch se excluye del cálculo de puntuaciones. Los motivos de eliminación pueden deberse a un porcentaje de acierto inferior al 5%, a un ajuste que no esté incluido en el intervalo (0.85, 1.15) ó a una discriminación inferior a 0.2. En el caso de la prueba de competencia matemática para 4º curso de Educación Primaria, en el curso 2013/14, los ítems rechazados han sido el 11 y el 14, fundamentalmente por su falta de ajuste. 2

4 PM01 Opción C Porcentaje de aciertos 81.16% Discriminante 0.43 Ajuste 0.94 Dificultad del ítem

5 PM02 Opción A Porcentaje de aciertos 69.89% Discriminante 0.52 Ajuste 0.90 Dificultad del ítem 0.73 PM03 Opción B Porcentaje de aciertos 69.95% Discriminante 0.41 Ajuste 1.03 Dificultad del ítem

6 PM04 Si las cuatro respuestas son correctas Si alguna respuesta no es correcta Porcentaje de aciertos 82.60% Discriminante 0.42 Ajuste 0.96 Dificultad del ítem 1.58 PM05 5

7 Si la gráfica es correcta (las barras no tienen por qué estar con relleno y se admite que vayan pegadas) Porcentaje de aciertos 85.46% Discriminante 0.33 Ajuste 1.00 Dificultad del ítem 1.82 PM06 Opción D Porcentaje de aciertos 52.23% Discriminante 0.41 Ajuste 1.06 Dificultad del ítem

8 PM07 Opción B Porcentaje de aciertos 79.80% Discriminante 0.38 Ajuste 1.01 Dificultad del ítem

9 PM08 Opción B Porcentaje de aciertos 31.71% Discriminante 0.41 Ajuste 1.01 Dificultad del ítem 1.23 PM09 Si las dos respuestas son correctas pentágono no tiene otra opción Como respuesta de cómo medir su perímetro, vale cualquier opción correcta Si alguna de las dos respuestas no es correctas Porcentaje de aciertos 28.81% Discriminante 0.45 Ajuste 0.98 Dificultad del ítem

10 PM10 Opción C Porcentaje de aciertos 58.81% Discriminante 0.40 Ajuste 1.07 Dificultad del ítem 0.14 PM12 Las dos respuestas deben ser correctas (Es válida cualquier explicación correcta para cada uno de los dos razonamientos) Si alguna de las dos respuestas no es correcta Porcentaje de aciertos 16.53% Discriminante 0.41 Ajuste 0.96 Dificultad del ítem

11 PM13 Opción D Porcentaje de aciertos 47.68% Discriminante 0.40 Ajuste 1.06 Dificultad del ítem

12 PM15 Si todas las respuestas son correctas (2 y 4 pueden cambiar el orden entre sí) Si alguna de las respuestas no es correcta Porcentaje de aciertos 62.64% Discriminante 0.45 Ajuste 1.01 Dificultad del ítem 0.34 PM16 Las dos respuestas deben ser correctas (Es válida cualquier explicación correcta para cada uno de los dos razonamientos) Si alguna de las respuestas no es correcta Porcentaje de aciertos 13.95% Discriminante 0.39 Ajuste 0.96 Dificultad del ítem

13 PM17 Si la respuesta es correcta (Es válida cualquier expresión correcta de la hora) Porcentaje de aciertos 33.43% Discriminante 0.48 Ajuste 0.97 Dificultad del ítem 1.14 PM18 Opción C Porcentaje de aciertos 60.74% Discriminante 0.46 Ajuste 1.00 Dificultad del ítem

14 PM19 Opción D Porcentaje de aciertos 71.96% Discriminante 0.45 Ajuste 0.98 Dificultad del ítem

15 PM20 Si la respuesta es correcta Porcentaje de aciertos 52.63% Discriminante 0.51 Ajuste 0.94 Dificultad del ítem 0.17 PM21 Opción C Porcentaje de aciertos 83.05% Discriminante 0.37 Ajuste 1.01 Dificultad del ítem

16 PM22 Si la respuesta es correcta (no es necesario indicar años) Porcentaje de aciertos 50.42% Discriminante 0.56 Ajuste 0.91 Dificultad del ítem 0.28 PM23 Si la respuesta es correcta Porcentaje de aciertos 29.47% Discriminante 0.46 Ajuste 0.98 Dificultad del ítem

17 PM24 Opción B Porcentaje de aciertos 37.01% Discriminante 0.41 Ajuste 1.03 Dificultad del ítem

18 PM25 Si la respuesta es correcta (El orden de los municipios debe ser correcto, de menor a mayor. Pueden usar abreviaturas para los municipios). Se admite también como respuesta correcta si, en vez de municipios, ordenan correctamente los habitantes: < < < < < < Porcentaje de aciertos 73.43% Discriminante 0.32 Ajuste 1.09 Dificultad del ítem

19 PM26 Opción B Porcentaje de aciertos 85.29% Discriminante 0.35 Ajuste 0.99 Dificultad del ítem 1.80 PM27 Si la respuesta es correcta Porcentaje de aciertos 66.59% Discriminante 0.36 Ajuste 1.09 Dificultad del ítem

20 PM28 Opción C Porcentaje de aciertos 72.02% Discriminante 0.53 Ajuste 0.90 Dificultad del ítem 0.86 PM29 Si la respuesta es correcta Porcentaje de aciertos 69.30% Discriminante 0.52 Ajuste 0.92 Dificultad del ítem

21 PM30 Opción B Porcentaje de aciertos 47.31% Discriminante 0.40 Ajuste 1.06 Dificultad del ítem

22 PM31 Si toda la clasificación de objetos es correcta (Los contenedores pueden considerarse como prismas o no. Mientras no haya incorrecciones, el ejercicio se considera correcto aunque la casilla de "NINGUNO DE LOS ANTERIORES" no esté completa) Si la clasificación, de acuerdo a las consideraciones anteriores, no es completamente correcta Porcentaje de aciertos 37.78% Discriminante 0.45 Ajuste 1.01 Dificultad del ítem

23 PM32 Opción C Porcentaje de aciertos 49.07% Discriminante 0.43 Ajuste 1.04 Dificultad del ítem 0.34 PM33 Si la respuesta es correcta (aunque no indique la unidad de dinero) Porcentaje de aciertos 33.00% Discriminante 0.40 Ajuste 1.05 Dificultad del ítem

24 PM34 Opción C Porcentaje de aciertos 79.09% Discriminante 0.34 Ajuste 1.06 Dificultad del ítem 1.31 PM35 Opción B Porcentaje de aciertos 55.07% Discriminante 0.40 Ajuste 1.08 Dificultad del ítem

25 PM36 Si la respuesta es correcta Porcentaje de aciertos 16.91% Discriminante 0.46 Ajuste 0.91 Dificultad del ítem

26 ITEMS EXCLUIDOS PM11 Si se han marcado tres líneas paralelas entre sí, que coincidan con las aristas de la caja o con los bordes de la etiqueta TOSÍN Porcentaje de aciertos % Discriminante Ajuste 1.19 Dificultad del ítem 0.13 PM14 Opción B Porcentaje de aciertos % Discriminante Ajuste 1.16 Dificultad del ítem