PISA 2012. EL ÍNDICE DE DESARROLLO EDUCATIVO PUNTUACIONES Y NIVELES DE COMPETENCIA EN PISA ÍNDICE DE DESARROLLO EDUCATIVO EN PISA 2012 El Programa para la Evaluación Internacional de Alumnos de la OCDE (PISA, por sus siglas en inglés), tiene por objeto evaluar hasta qué punto el alumnado que se acerca al final de la educación obligatoria ha adquirido algunos de los conocimientos y habilidades necesarios para la participación plena en la sociedad del conocimiento. Las pruebas PISA se aplican cada tres años. Además de examinar el rendimiento del alumnado de 15 años en lectura, en matemáticas y en ciencias, PISA estudia también una gama amplia de factores asociados al rendimiento. Entre ellos se pueden citar factores sociodemográficos, como el sexo o la edad, factores socioeconómicos y culturales, como el nivel educativo o el nivel de ocupación profesional de las madres y los padres, o factores actitudinales y de disposición hacia el aprendizaje, como la motivación del alumnado por aprender, la concepción que tienen sobre sí mismos o sus estrategias de aprendizaje. El Informe Español PISA 2012, publicado por el Instituto Nacional de Evaluación Educativa, ofrece como novedad una comparación de los resultados de los sistemas educativos mediante el denominado Índice de Desarrollo Educativo (propuesto por el Doctor en Economía y Catedrático de la Universidad Pablo de Olavide, don Antonio Villar). Se trata de un indicador que se calcula para lectura, matemáticas y ciencias, y que integra los tres aspectos fundamentales para la evaluación de los resultados de un sistema educativo: rendimiento, equidad y calidad. Consejería de Educación, Cultura y Deporte 1
Puntuaciones y niveles de competencia en PISA La prueba PISA se aplica a una muestra representativa del alumnado de cada país, no a la totalidad del mismo. Cada alumna o alumno evaluado representa pues a un conjunto del alumnado del país. Para calcular los resultados, el de cada alumna o alumno cuenta tantas veces como el número de estudiantes a los que representa. PISA ofrece la posibilidad de ampliar muestra a las regiones o comunidades autónomas de un país para obtener datos propios. En PISA 2012, han ampliado muestra todas las comunidades autónomas españolas excepto Canarias, Castilla- La Mancha y Valencia. Los datos que ofrece PISA parten de estimar, para cada estudiante seleccionado de los países participantes, por una parte, las puntuaciones globales en comprensión lectora y en las competencias matemática y científica y, por otra, el nivel de competencia alcanzado por el estudiante en cada área evaluada. Las puntuaciones globales se presentan en una escala con media 500 y desviación típica 100, lo que significa que dos terceras partes del alumnado de los países de la OCDE obtienen una puntuación entre 400 y 600. La escala de puntuaciones globales tanto en matemáticas como en ciencias se divide en seis niveles de competencia. El nivel 1 representa el nivel de competencia más bajo, mientras que el nivel 6 corresponde a la competencia más alta. En lectura también podemos encontrar los niveles 1 al 6, pero el nivel 1 se encuentra dividido en dos niveles, el 1a y el 1b, indicando este último el nivel de competencia más bajo. 2 Agencia Andaluza de Evaluación Educativa
En el Índice de Desarrollo Educativo intervienen tres variables: rendimiento, equidad y calidad. El rendimiento de un país viene dado por la puntuación media obtenida en cada área (lectura, matemáticas y ciencias). La equidad trata de expresar el grado de igualdad de oportunidades que muestra el sistema educativo de un país. A partir de las variables que miden los factores sociales, económicos y culturales, PISA construye el índice socioeconómico y cultural (ESCS, por sus siglas en inglés) que puede considerarse como un resumen de la situación social, económica y cultural del país. La equidad mide la influencia que el índice socioeconómico y cultural tiene sobre el rendimiento del alumnado. Se expresa mediante un número comprendido entre 0 y 1, siendo 0 cuando los resultados dependen totalmente del ESCS y 1 cuando no existe dependencia. Un sistema educativo se considera más equitativo cuanto menos dependen los resultados de los factores sociales, económicos y culturales. Para que un país obtenga un buen resultado en una evaluación, no es suficiente con que su puntuación media sea elevada. Es necesario también que haya un porcentaje alto de alumnado en los niveles superiores de la competencia y, al mismo tiempo, que el porcentaje de alumnado en los niveles inferiores sea pequeño. La calidad viene dada por la proporción de alumnado que está en el nivel 5 o superior a la que, en cierta manera, se le descuenta la del alumnado que no alcanza el nivel 2, que es el que se considera como el nivel mínimo necesario para poder hacer frente con garantías de éxito al futuro laboral y social. Se expresa mediante un número comprendido entre 0 y 1, siendo 0 cuando en el país no hay ningún estudiante con nivel competencial alto (5 o 6) y 1 cuando todo el alumnado está en dichos niveles. El índice de Desarrollo Educativo (IDE), como se ha dicho anteriormente, integra el rendimiento, la equidad y la calidad. Una vez obtenido el IDE para lectura, matemáticas y ciencias, para resumir la información se calcula un Índice de Desarrollo Educativo global, que viene dado por la media geométrica de los tres índices de las áreas evaluadas. Consejería de Educación, Cultura y Deporte 3
Evolución del Índice de Desarrollo Educativo Los cambios en educación no se ven reflejados en los resultados de manera inmediata. Un análisis correcto de los resultados exige analizarlos con perspectiva temporal. En este sentido, el profesor Villar ha llevado a cabo un interesante estudio sobre cómo evoluciona el Índice de Desarrollo Educativo en las dos últimas ediciones de PISA. Todas las comunidades autónomas excepto y, han mejorado su IDE global con respecto a la edición de PISA 2009. Teniendo en cuenta la variación en porcentaje del IDE global entre 2009 y 2012, la mejora de es la mayor de todas las comunidades autónomas participantes, siendo de más de un 26%. PORCENTAJE DE VARIACIÓN DEL IDE GLOBAL ENTRE 2009 Y 2012-1 -3 1 2 1 3 3 12 10 9 12 16 23 26 De los tres componentes del IDE, el que mayor influencia ha tenido en estas variaciones entre comunidades autónomas es la calidad. Hay grandes diferencias de comportamiento en la variable que mide la calidad, tanto entre comunidades autónomas como entre áreas. 4 Agencia Andaluza de Evaluación Educativa
En matemáticas, en la mitad de las comunidades autónomas españolas se produce una mejora de la calidad con respecto a 2009. es la comunidad autónoma en la que se produce una variación mayor pues la mejora en calidad es de un 42%: PORCENTAJE DE VARIACIÓN EN LA CALIDAD ENTRE 2009 Y 2012 EN MATEMÁTICAS -23-11 -22-18 12 13-10 10-19 1 0 31 24 42 En lectura, todas las comunidades autónomas excepto mejoran su calidad. es donde se produce el mayor aumento de la calidad, siendo de más del 172% con respecto a 2009: PORCENTAJE DE VARIACIÓN EN LA CALIDAD ENTRE 2009 Y 2012 EN LECTURA -3 11 15 13 10 33 44 59 71 91 101 68 172 163 Consejería de Educación, Cultura y Deporte 5
En ciencias, entre las once comunidades autónomas que mejoran la calidad con respecto a 2009, vuelve a ser en donde se produce el mayor aumento. PORCENTAJE DE VARIACIÓN EN LA CALIDAD ENTRE 2009 Y 2012 EN CIENCIAS -27-13 2 25 23 19 31 49 2 25 41 5868 99 Considerando el promedio en las tres áreas, el aumento en calidad que tiene lugar en entre 2009 y 2012 llega a ser del 104%. es la comunidad autónoma que le sigue, con un aumento del 85%. Para la evaluación de un sistema educativo, además del rendimiento, es importante considerar la equidad y la calidad. El Índice de Desarrollo Educativo combina estos tres aspectos. El resultado de la evaluación debe reflejar, además de la situación actual, la evolución a lo largo del tiempo. En PISA 2012, es la comunidad autónoma en la que la mejora del Índice de Desarrollo Educativo es mayor, con más de un 26% de aumento. Además, es la comunidad autónoma que más aumenta la calidad, y esto ocurre en las tres áreas evaluadas. 6 Agencia Andaluza de Evaluación Educativa