ANEP - CODICEN DIRECCIÓN SECTORIAL DE PLANIFICACIÓN EDUCATIVA DIVISIÓN DE INVESTIGACIÓN, EVALUACIÓN Y ESTADÍSTICA Lecciones Aprendidas de la participación Uruguaya en PISA Andrés Peri II reunión técnica de Abave: PISA em Debate Brasilia, Agosto 2014 1
Tendencias: Posibilidad de análisis de Largo Plazo
Puntaje promedio de Uruguay en Matemática Ciencias y Lectura en los ciclos PISA 2003, 2006, 2009, 2012 550 530 510 490 470 450 430 410 390 370 350 Urugusy 2003 2006 2009 2012 Matemática 422 427 427 409 Lectura 434 413 426 411 Ciencias - 428 427 416 434 428427 427 427 416 422 426 411 413 409 PISA 2003 PISA 2006 PISA 2009 PISA 2012 Matemática URY Lectura URY Ciencias URY 3
Contexto: Mundial e Regional 4
Puntaje promedio en Matemática e intervalo de confianza para los países participantes en PISA 2012. Nivel bajo 1 Nivel 5 Nivel 4 Nivel 3 Nivel 2 Nivel 1
450 Puntaje promedio en Matemática de los países latinoamericanos - PISA 2003, 2006, 2009 y 2012 400 356 422 385 427 427 421 423 381 411 406 370 370 419 413 409 409 407 365 388 386 391 388 381 376 368 CH MX URY CR BR ARG COL PR 350 PISA 2003 PISA 2006 PISA 2009 PISA 2012 Chile Argentina Perú Costa Rica 6
Diferencia 2012-2003 en el puntaje promedio en Matemática para todos los países participantes en PISA 2012. 40 30 20 10 0-10 -20-30 -40 Sweden Finland New Zealand Iceland Australia Czech Republic Slovak Republic France Netherlands Belgium Canada Denmark Hungary Uruguay Norway Luxembourg United States Ireland Liechtenstein Spain Austria Japan Switzerland Latvia Greece Thailand Germany Hong Kong-China Macao-China Korea Russian Federation Indonesia Italy Portugal Turkey Poland Mexico Tunisia Brazil
700 600 500 400 Puntaje promedio en Matemática para una selección de países en PISA 2012 613 573 560 538 531 519 514 504 495 485 481 423 409 391 376 368 300 200 100 0 Shanghai Singapur Hong Kong Taipei Corea Macao - China Japón Suiza Holanda Finlandia Canadá Alemania Vietnam Australia Nueva Zelanda Francia Reino Unido Italia España Estados Unidos Suecia Chile México Uruguay Costa Rica Brasil Argentina Colombia Perú 8
1 Lección Aprendida: los programas de reinserción educativa muestran avances. Aumento de la población escolarizada a los 15 años. 9
Porcentaje de estudiantes de 15 años que asisten a centros educativos post primaria Población de 15 años Asisten a educación media No asisten a Educación Media Total jóvenes de 15 años 2003 2006 2009 2012 casos % casos % casos % casos % 40.141 74,6 42.471 79,6 43.281 80,4 46.442 84,6 13.653 25,4 10.917 20,4 10.520 19,6 8.475 15,4 53.794 100 53.388 100 53.801 100 54.917 100 10
2. Lección Aprendida: la Educación debe ser oportuna. Uruguay es el 5 de los 65 países con más estudiantes con experiencias de repetición a los 15 años
Porcentaje de estudiantes según trayectoria escolar y grado CICLO 2003 2006 2009 2012 Dif 12 - `03 Repetición en Primaria (1 año o más) Porcentajes 20,7 21,2 21,3 21,6 1 en Ciclo Básico (1 año o más) GRADO 22,2 22,7 25,8 27,1 5 Porcentajes 7 (1º) 5,7 7,5 7,1 6,9 1 8 (2º) 9,7 9,8 10,6 12,2 2 9 (3º) 18,2 17,3 21,5 22,4 4 10 (4º) 59,4 58,9 56,2 57,3-2 11 (5º) 7,1 6,6 4,6 1,3-6 12
Porcentaje de estudiantes según trayectoria escolar y grado CICLO 2003 2006 2009 2012 Dif 12 - `03 Repetición en Primaria (1 año o más) Porcentajes 20,7 21,2 21,3 21,6 1 en Ciclo Básico (1 año o más) GRADO 22,2 22,7 25,8 27,1 5 Porcentajes 7 (1º) 5,7 7,5 7,1 6,9 1 8 (2º) 9,7 9,8 10,6 12,2 2 9 (3º) 18,2 17,3 21,5 22,4 4 10 (4º) 59,4 58,9 56,2 57,3-2 11 (5º) 7,1 6,6 4,6 1,3-6 13
Puntaje promedio en Matemática por grado. PISA 2012 GRADO Diferencia 2003 2006 2009 2012 12 03 Puntaje promedio 7 (1º) 298 333 321 301 3 8 (2º) 328 332 347 334 6 9 (3º) 369 374 381 378 9 10 (4º) 458 464 467 449-9* 11 (5º) 489 485 497 501 12 14
3 Lección Aprendida: Problema de Adecuación de la Prueba 5 en 65 países con mayor nivel de omisión de repuestas. (25% de las actividades no son abordadas). 15
Una prueba es una combinación de Habilidad+Esfuerzo 60% OMISIÓN A NIVEL DE LA OCDE O INFERIOR 25% 40 % DE ITEMES OMITIDOS 15% 60 % DE ITEMES OMITIDOS Estudiantes 16
60 50 40 30 46 Opinión de los estudiantes uruguayos sobre la prueba PISA 2012. (Suma de % que respondió estar De acuerdo o Muy de acuerdo con la afirmación) 29 39 34 41 47 50 44 20 10 0 "No pude demostrar todo lo que sabía porque la forma de preguntar es distinta a la habitual para mí" "Mis nervios influyeron negativamente en mi desempeño" "Lo que me preguntaron en la prueba es muy diferente de lo que aprendí en clase" "En varias preguntas de múltiple opción no sabía que contestar y marqué una opción cualquiera" "En varias preguntas de múltiple opción no sabía que contestar y dejé la pregunta en blanco" "En varias preguntas abiertas no sabía que contestar y dejé la pregunta en blanco" "Cuando hacía la prueba dejé algunas preguntas para el final y luego no pude responderlas" "El tiemp para conte la prueba resultó escaso"
Conclusiones Los sistemas educativos se tienen que desafiar, pero sobre todo deben aprender de los ciclos de evaluación y convertir el debate en políticas. 1. Pisa sigue siendo un buen ejemplo en la batalla contra el conocimiento repetitivo (poner en acción lo aprendido). 2. Los marcos de evaluación, y el rigor de los análisis contribuyen a la mejora del campo de evaluación de nuestro país. 3. Necesitamos rescatar la experiencia del GIP (grupo Iberoamericano de PISA) para avanzar como región. 4. Contextualizar lo que se puede y no se puede hacer con PISA (evitar la tentación de hacer política educativa con una prueba).