Evaluación PISA Primeros resultados

Transcripción

1 Evaluación PISA 2015 Primeros resultados

2 PISA 2015 El Programa para la Evaluación Internacional de Estudiantes (PISA), tiene por objeto evaluar la capacidad de los estudiantes para utilizar sus conocimientos y habilidades frente a los desafíos de la vida en un mundo globalizado. PISA representa: años en millones de estudiantes de 72 países. Por primera vez, en PISA 2015, Perú evaluó usando COMPUTADORAS En Perú, se evaluaron: 281 Instituciones educativas Estudiantes Perú ha participado voluntariamente en 2000, 2009, 2012 y % colegios públicos 29% colegios privados Representatividad nacional y por estratos (sexo, gestión y área)

3 Países participantes en PISA 2015 Países OCDE Países asociados Regiones Alemania Irlanda Albania Líbano* Australia Islandia Argelia* Lituania Hong Kong (China) Austria Israel Argentina** ARY de Macedonia Macao (China) Bélgica Italia Brasil Malasia** Canadá Japón Bulgaria Malta República Checa Letonia China Taipéi Moldavia Chile Luxemburgo Chipre Montenegro Pekín* / Shanghái / Jiangsu* / Cantón* (China) República de Corea México Colombia Perú Dinamarca Noruega Costa Rica Qatar Eslovaquia Nueva Zelanda Croacia Rusia En 2015 participaron 72 territorios y 65 en 2012 Eslovenia Países Bajos República Dominicana* Rumanía España Polonia Emiratos Árabes Unidos Singapur Estados Unidos Portugal Georgia Tailandia Estonia Reino Unido Indonesia Trinidad y Tobago Finlandia Suecia Jordania Túnez Francia Suiza Kazajistán** Uruguay Grecia Turquía Kosovo* Vietnam Hungría * Países que participan por primera vez en PISA. ** Si bien estos países participaron en Pisa 2015, la OCDE indica que sus resultados no se presentan por distintas razones técnicas.

4 PISA 2015: instrumentos aplicados Pruebas aplicadas en PISA 2015 Otros instrumentos aplicados Competencia priorizada Ciencia Instrumentos Dirigido a Matemática Lectura Resultados en 2016 Cuestionario de la institución educativa Cuestionario del docente de Ciencia Cuestionario del docente general Director Docente de Ciencia Docente de otras áreas Resolución Colaborativa de Problemas Educación financiera Resultados en 2017 Cuestionario del estudiante Cuestionario de trayectoria educativa Cuestionario sobre Tecnologías de Información y Comunicación (TIC) Estudiante Estudiante Estudiante

5 PISA 2015: forma de reportar resultados Medida promedio Es una medida continua que representa las habilidades logradas por los estudiantes de un determinado grupo o estrato. Niveles de desempeño Son las descripciones de los conocimientos y habilidades alcanzadas por los estudiantes. En cada área evaluada, se definen seis o siete niveles de desempeño, los cuales tienen una dificultad creciente. En todas las áreas evaluadas, PISA señala que el nivel 2 se considera como la línea de base o el punto de partida del dominio del área que es requerido para participar en la sociedad actual (OECD, 2016).

6 Características de la población y la muestra peruana en PISA 2015 PISA 2015 Población total de 15 años de edad Población de 15 años de edad matriculada en secundaria Porcentaje de población de 15 años de edad matriculada en secundaria 82,4 Tamaño de la muestra final Población representada por la muestra (expansión) Porcentaje de la población representada por la muestra 74,4 Fuente: OCDE (2016).

7 Cobertura en países latinoamericanos: porcentaje de la población de 15 años representada por la muestra seleccionada PISA 2015 Brasil 63,8 Chile 79,8 Colombia 74,6 Costa Rica 63,5 México 61,7 Perú 74,4 Uruguay 71,5 Fuente: OCDE (2016).

8 Aplicación PISA 2015 por computadora La aplicación de pruebas y cuestionarios en PISA 2015 fue a través de computadoras. Razones para la aplicación de PISA por computadora Permite evaluar mayor cantidad de contextos y situaciones relacionadas al uso de habilidades en lectura, matemática y ciencia (ejemplo: simular experimentos científicos). Simplificar el recojo de información para tener respuestas más confiables. Entre las herramientas incluidas en la plataforma se incluyeron preguntas con opciones desplegables, simulaciones, entre otros. Cada pregunta contenía instrucciones que indicaban al estudiante cómo responderla. Las modalidades de aplicación (computadora y lápiz y papel) son comparables, de acuerdo a los resultados de la piloto 2014.

9 PISA 2015: percepciones del estudiante al desarrollar las pruebas por computadora Muy en desacuerdo En desacuerdo De acuerdo Muy de acuerdo 53% 65% 55% 59% 42% 29% 2% 4% 3% 12% 20% 6% 11% 21% 17% 3% Fui capaz de manejar la computadora para desarrollar la prueba en el sistema. En Ciencia, las simulaciones del sistema contribuyeron a que pueda resolver la prueba. En Matemática, pude utilizar el editor de ecuaciones del sistema sin ningún problema Me habría ido mejor si la prueba hubiera sido impresa (lápiz y papel). Fuente: Cuestionario TIC al estudiante aplicado por UMC en PISA 2015.

10 Advertencias para la lectura de los resultados Evaluación no curricular: las competencias que se evalúan en PISA han sido seleccionadas por un grupo de expertos tomando como referencia los estudios y tendencias mundiales sobre el tipo de habilidades que se esperan sean requeridas en las siguientes décadas. En tal sentido, esta evaluación no está diseñada para estimar en qué medida se están cumpliendo planes curriculares específicos. Cobertura: debido a que PISA evalúa una cohorte de edad, cada país presenta un comportamiento diferente respecto de variables clave como la cobertura total y el atraso escolar de la población evaluada. Resultados similares en desempeño pueden en realidad explicarse por diversos grados de exclusión y no necesariamente por similares niveles de efectividad en la enseñanza.

11 Advertencias para la lectura de los resultados Trayectoria 15 años: el desempeño mostrado por los estudiantes en PISA es el resultado de una trayectoria de vida de 15 años (dada la edad en que son evaluados), que incluye una experiencia educativa de aproximadamente 10 años. Países participantes: si bien la evaluación PISA ha logrado una importante presencia en el mundo, no es un estudio que se pueda considerar representativo de la diversidad de situaciones que existen en el planeta y tampoco en la región latinoamericana. PISA es un estudio conducido fundamentalmente en el mundo desarrollado y en países de ingreso medio, pero no en los países más pobres del mundo. Por ejemplo, el promedio simple de la riqueza anual por habitante de los países de la OCDE es de USD PPA, mientras que en los países no miembros de la OCDE que participan de PISA esa cifra es de USD PPA.

12 Resultados en Ciencia

13 PISA 2015: competencia científica Definición La capacidad para interactuar con cuestiones relacionadas con la ciencia y con las ideas de la ciencia, como un ciudadano reflexivo, dispuesto(a) a participar en un discurso razonado sobre ciencia y tecnología. El modelo de evaluación de PISA para la competencia científica incluye los siguientes dominios: Procesos Explicar fenómenos científicamente. Evaluar y diseñar investigaciones científicas. Interpretar datos y evidencias científicamente. Conocimientos De los contenidos: comprensión de las principales ideas y teorías de la ciencia (sistemas físicos, sistemas vivos, sistemas de la Tierra y el espacio). Procedimental: conocimiento de procedimientos científicos usados para obtener datos fiables y válidos. Epistémico: comprensión de los rasgos definitorios de la ciencia y la justificación de su uso. Contextos y área de aplicación Contexto: personal, local o nacional y global. Áreas de aplicación: salud y enfermedad, recursos naturales, calidad del medio ambiente, peligros, fronteras de la ciencia y la tecnología. Actitudinal Interés en la ciencia y la tecnología. Valoración de los enfoques científicos a la investigación. Conciencia ambiental.

14 Ciencia 2015: resultados por medida promedio Singapur 556 Estados Unidos 496 Rumanía 435 Japón Estonia China Taipéi Finlandia Macao (China) Canadá Vietnam Hong Kong (China) *Pekín / Shanghái República de Corea Nueva Zelandia Eslovenia Australia Reino Unido Alemania Países Bajos Suiza Irlanda Bélgica Dinamarca Polonia Austria Francia Suecia República Checa España OCDE Letonia Rusia Luxemburgo Italia Hungría Lituania Croacia Islandia Israel Malta Eslovaquia Grecia Chile Chile Bulgaria Chipre Moldavia Albania Turquía Trinidad y Tobago Tailandia Costa Rica Costa Rica Qatar Colombia Colombia México México Montenegro Georgia Jordania Indonesia Brasil Brasil Perú Perú Líbano Túnez ARY de Macedonia Kosovo Portugal Noruega Emiratos Árabes Unidos Uruguay Uruguay Argelia R. Dominicana República Dominicana * Pekín / Shanghái / Jiangsu / Cantón Perú no se diferencia significativamente de Indonesia y Brasil (α=0,05)

15 Ciencia 2015: resultados por niveles de desempeño y cobertura de Perú, Latinoamérica y OCDE Niveles de desempeño Población de 15 años matriculada en secundaria o nivel equivalente (%) 96,3 81,9 81,4 88,6 62,1 75,0 82,4 68,5-0,0 0,1 0,0 0,0 1,2 1,2 0,0 9,1 0,1 0,3 0,1 7,4 2,7 4,1 2,3 23,8 20,3 15,2 15,1 15,9 31,0 30,3 35,5 30,6 34,7 0,0 0,0 0,1 0,6 2,0 4,2 13,1 11,5 25,4 27,9 0,0 0,0 0,3 2,6 11,3 1,1 6,7 19,0 27,2 24,8 25,0 28,4 35,6 32,8 35,0 32,4 36,7 8,9 11,2 1,0 10,1 14,5 11,7 19,9 19,0 1,2 0,7 1,7 1,1 30,4 39,6 15,7 4,9 0,6 4,4 2,8 15,8 Chile Uruguay Costa Rica Colombia México Brasil Perú República Dominicana OCDE

16 Niveles de desempeño Medida promedio ,0 0,0 0,2 0,2 2,5 2,7 0,0 0,1 2,3 12,5 12,1 11,1 0,0 0,0 0,0 0,0 0,2 0,3 0,1 0,1 2,3 3,1 2,0 2,3 12,1 11,5 13,3 11,5 0,0 0,1 1,8 10,3 28,2 27,8 26,6 28,1 26,7 27,1 27,7 26,5 34,6 35,1 35,4 36,0 35,1 34,9 33,8 35,8 22,1 22,3 24,5 21,4 24,6 21,4 24,5 25,5 Evalúa y diseña investigaciones científicas Interpreta datos y evidencias científicamente Explica fenómenos científicamente Conocimiento procedimental y epistémico Conocimiento de contenido Sistemas vivos Sistemas de la Tierra y el espacio Sistemas físicos Procesos Conocimientos Tipos Tipos de de conocimientos de contenido de contenido

17 Ciencia 2015: variación de los resultados en Latinoamérica por medida promedio PISA 2009 PISA 2012 PISA 2015 Variación Variación Tendencia promedio** Perú * +14* Colombia * +8* Brasil Chile México Uruguay * +20* +1 Costa Rica Fuente: OCDE (2016). * Diferencias estadísticamente significativas al 5%. ** La OECD (2016) estima la tendencia promedio como una ponderación de las variaciones en el tiempo de cada país. Ésta depende de los ciclos en los que haya participado cada uno de ellos.

18 Ciencia : resultados por niveles de desempeño y medida promedio PISA 2009 PISA 2012 PISA 2015 Niveles de desempeño % Niveles de desempeño % Niveles de desempeño % 6 0,0 6 0,0 6 0,0 5 0,2 5 0,0 5 0,1 4 1,8 4 1,0 4 2,0 3 8,0 3 7,0 3 11,5 2 21,7 2 23,5 2 27,9 1 33,0 1 37,0 1a 36,7 <1 35,3 <1 31,5 1b 19,0 <1b 2,8 21,8 Medida promedio

19 Ciencia 2015: resultados por medida promedio, según características del estudiante Nivel Nivel Nivel 4 Nivel Nivel Nivel 1a 300 Nivel 1b 200 Nacional Mujeres (49,3%) Sexo Hombres (50,7%) *Castellano (93,8%) Originaria (6,2%) Lengua materna Asistió (95,4%) No asistió (4,6%) Educación inicial Matrícula oportuna (75,0%) Atrasados (25,0%) Matrícula oportuna < Nivel 1b * Los resultados de Castellano incluye un pequeño porcentaje de estudiantes con lengua materna extranjera.

20 Ciencia 2015: resultados por medida promedio, según características de la institución educativa Nivel Nivel Nivel 4 Nivel Nivel Nivel 1a 300 Nivel 1b 200 Nacional Estatal (74,1%) No estatal (25,9%) Urbana (89,9%) Rural (10,1%) Pequeña (15,1%) Mediana (34,4%) Grande (50,6%) < Nivel 1b Gestión Área Tamaño IE* * El tamaño de la IE se determinó en función al número total de estudiantes matriculados. IE grande (mayor igual a 575 estudiantes), mediana (entre 150 y 574 estudiantes) y pequeña (menor a 150 estudiantes).

21 Ciencia 2015: variabilidad del desempeño según gestión, controlando y sin controlar por el índice socioeconómico Estatales No estatales 2 53* Los estudiantes de las instituciones educativas no estatales obtienen, en promedio, 53 puntos más que sus pares de estatales. Sin embargo, cuando se considera las características socioeconómicas de los estudiantes, esta diferencia prácticamente desaparece. Sin considerar características socioeconómicas de las instituciones educativas Considerando características socioeconómicas de las instituciones educativas * Existen diferencias estadísticamente significativas al 5%.

22 Ciencia : resultados por estratos según medida promedio 500 Nivel 3 o más Nivel Nivel 1a Nivel 1b 250 < Nivel 1b * 2012* 2015* 2012* 2015* 2012* 2015* 2012* 2015* Hombre / Mujer Asistencia a inicial / No asistencia a inicial Matrícula oportuna / Atraso No estatal / Estatal IE Urbana / IE Rural * Diferencias estadísticamente significativas al 5% entre los estratos dentro en el mismo año (α=0,05).

23 Ciencia 2015: distribución del desempeño de los estudiantes, según nivel socioeconómico Densidad NSE muy bajo NSE bajo NSE medio NSE alto Desempeño en Ciencia Niveles socioeconómicos elaborados por la UMC a partir de los cuestionarios de PISA 2015.

24 Ciencia 2015: composición socioeconómica de los estudiantes, según niveles de desempeño 7% 5% 10% 15% 9% 19% 12% 21% 19% 25% 21% 34% 28% 25% 33% 38% 51% 65% 61% 27% 39% 35% 42% 21% Distribución de la población 20% 8% 8% 1% Debajo de nivel 1b Nivel 1b Nivel 1a Nivel 2 Nivel 3 Nivel 4 a más NSE muy bajo NSE bajo NSE medio NSE alto Niveles socioeconómicos elaborados por la UMC a partir de los cuestionarios de PISA 2015.

25 Ciencia : resultados de NSE por medida promedio Nivel Nivel Nivel 4 Nivel Nivel Nivel 1a 300 Nivel 1b * 2015* 2012* 2015* 2012* 2015* 2012* 2015* Nacional NSE muy bajo NSE bajo NSE medio NSE alto < Nivel 1b *Diferencias estadísticamente significativas al 5% entre 2012 y Niveles socioeconómicos elaborados por la UMC a partir de los cuestionarios de PISA 2015.

26 Ciencia 2015: variación del desempeño en Latinoamérica entre instituciones educativas y entre estudiantes Brasil 59,3 40,7 Chile República Dominicana Perú 58,8 56,8 56,6 41,2 43,2 43,4 Existen mayores diferencias en el desempeño en Ciencia entre estudiantes que entre instituciones educativas. Uruguay Colombia 55,8 52,4 44,2 47,6 Mientras más pequeñas sean las diferencias en el desempeño entre instituciones educativas más equitativo es el sistema educativo. México 49,3 50,7 Costa Rica 47,6 52,4 Variación entre estudiantes Variación entre instituciones educativas

27 Resultados en Matemática

28 PISA 2015: competencia matemática Definición La capacidad para formular, emplear e interpretar las matemáticas en distintos contextos, mediante el razonamiento matemático y la utilización de conceptos, procedimientos, datos y herramientas matemáticas para describir, explicar y predecir fenómenos. El modelo de evaluación de PISA para la competencia matemática incluye los siguientes dominios: Contenidos Cambio y relaciones. Espacio y forma. Cantidad. Incertidumbre y datos. Procesos Formular situaciones matemáticamente. Emplear conceptos, hechos, procedimientos y razonamiento matemáticos. Interpretar, aplicar y evaluar los resultados matemáticos. Contextos Personal Profesional Social Científico

29 Matemática 2015: resultados por medida promedio Singapur 564 Australia 494 Turquía 420 Hong Kong (China) Macao (China) China Taipéi Japón *Pekín / Shanghái / República de Corea Suiza Estonia Canadá Países Bajos Dinamarca Finlandia Eslovenia Bélgica Alemania Polonia Irlanda Noruega Austria Nueva Zelanda Vietnam Rusia Suecia Francia Reino Unido República Checa Portugal Italia OCDE Islandia España Luxemburgo Letonia Malta Lituania Hungría Eslovaquia Israel Estados Unidos Croacia Grecia Rumanía Bulgaria Chipre Emiratos Árabes Unidos Chile Moldavia Uruguay Montenegro Trinidad y Tobago Tailandia Albania México Georgia Qatar Costa Costa Rica Líbano Colombia Perú Perú Indonesia Jordania Brasil ARY de Macedonia Túnez Kosovo Argelia R. República Dominicana * Pekín / Shanghái / Jiangsu / Cantón Perú no se diferencia significativamente de Colombia, Indonesia y Jordania (α=0,05)

30 Matemática 2015: resultados por niveles de desempeño y cobertura de Perú, Latinoamérica y OCDE Niveles de desempeño Población de 15 años matriculada en secundaria o nivel equivalente (%) 96,3 81,9 62,1 81,4 88,6 82,4 75,0 68,5-0,1 0,2 1,3 0,0 0,0 1,5 0,0 6,4 0,3 0,3 0,0 0,3 0,1 6,2 3,2 2,0 0,4 17,4 2,4 0,8 0,0 15,3 12,9 9,4 2,7 9,5 3,1 0,0 9,8 8,6 0,2 25,5 24,4 26,9 25,8 21,5 21,0 17,2 1,5 7,7 26,3 27,0 31,1 35,1 30,9 28,4 26,5 22,2 2,3 8,4 18,6 24,8 22,5 14,9 8,5 23,0 25,4 25,5 27,4 35,4 37,7 43,7 68,3 Chile Uruguay México Costa Rica Colombia Perú Brasil República Dominicana OCDE

31 Matemática 2015: variación de los resultados en Latinoamérica por medida promedio Fuente: OCDE (2016). PISA 2009 PISA 2012 PISA 2015 Variación Variación Tendencia promedio** Perú * +10* Brasil * +6* Colombia * +5* México Chile Uruguay * +9-3 Costa Rica * Diferencias estadísticamente significativas al 5%. ** La OECD (2016) estima la tendencia promedio como una ponderación de las variaciones en el tiempo de cada país. Ésta depende de los ciclos en los que haya participado cada uno de ellos.

32 Matemática : resultados por niveles de desempeño y medida promedio PISA 2009 PISA 2012 PISA 2015 Niveles de desempeño % Niveles de desempeño % Niveles de desempeño % Medida 6 0,1 6 0,1 6 0,0 5 0,5 5 0,5 5 0,4 4 2,1 4 2,1 4 2,7 3 6,8 3 6,7 3 9,8 2 16,9 2 16,1 2 21,0 1 25,9 1 27,6 1 28,4 <1 47,6 <1 47,0 <1 37,7 promedio

33 Matemática 2015: resultados por medida promedio, según características del estudiante 700 Nivel 6 Nivel Nivel Nivel 3 Nivel Nivel < Nivel Nacional Mujeres (49,3%) Sexo Hombres (50,7%) *Castellano (93,8%) Originaria (6,2%) Lengua materna Asistió (95,4%) No asistió (4,6%) Educación inicial Matrícula oportuna (75,0%) Atrasados (25,0%) Matrícula oportuna * Los resultados de Castellano incluye un pequeño porcentaje de estudiantes con lengua materna extranjera.

34 Matemática 2015: resultados por medida promedio, según características de la institución educativa 700 Nivel 6 Nivel Nivel Nivel 3 Nivel Nivel < Nivel Nacional Estatal (74,1%) No estatal (25,9%) Urbana (89,9%) Rural (10,1%) Pequeña (15,1%) Mediana (34,4%) Grande (50,6%) Gestión Área Tamaño IE* * El tamaño de la IE se determinó en función al número total de estudiantes matriculados. IE grande (mayor igual a 575 estudiantes), mediana (entre 150 y 574 estudiantes) y pequeña (menor a 150 estudiantes).

35 Matemática 2015: variabilidad del desempeño según gestión, controlando y sin controlar por el índice socioeconómico Estatales No estatales 0 50* Los estudiantes de las instituciones educativas no estatales obtienen, en promedio, 50 puntos más que sus pares de estatales. Sin embargo, cuando se considera las características socioeconómicas de los estudiantes, esta diferencia desaparece. Sin considerar características socioeconómicas de las instituciones educativas Considerando características socioeconómicas de las instituciones educativas * Existen diferencias estadísticamente significativas al 5%.

36 Matemática : resultados por estratos según medida promedio 500 Nivel 3 o más Nivel Nivel < Nivel * 2015* 2012* 2015* 2012* 2015* 2012* 2015* 2012* 2015* Hombre / Mujer Asistencia a inicial / No asistencia a inicial Matrícula oportuna / Atraso No estatal / Estatal IE Urbana / IE Rural * Diferencias estadísticamente significativas entre los estratos dentro en el mismo año (α=0,05).

37 Resultados en Lectura

38 PISA 2015: competencia lectora Definición La capacidad para comprender, utilizar, reflexionar e interesarse por los textos escritos, para alcanzar los propios objetivos, desarrollar el conocimiento y potencial personales, y participar en la sociedad. El modelo de evaluación de PISA para la competencia lectora incluye los siguientes dominios: Contenidos Tipos textuales: referidos al propósito predominante del texto (descriptivo, narrativo, expositivo, argumentativo, instructivo y transaccional). Formatos textuales: referidos a la organización de la información (continuo, discontinuo, múltiple y mixto). Procesos Obtener información. Desarrollar una comprensión global. Elaborar una interpretación. Reflexionar y valorar el contenido del texto. Reflexionar y valorar la forma del texto. Contextos Personal. Público. Educativo. Profesional.

39 Lectura 2015: resultados por medida promedio Singapur Hong Kong (China) Canadá Finlandia Irlanda Estonia República de Corea Japón Noruega Nueva Zelandia Alemania Macao (China) Polonia Eslovenia Países Bajos Australia Suecia España Rusia *Pekín / Shanghái / OCDE Suiza Letonia República Checa Croacia Vietnam Austria Italia Islandia Luxemburgo Israel Lituania Hungría Grecia Chile Chile Turquía Costa Costa Rica Trinidad y Tobago Montenegro Colombia México México Moldavia Tailandia Jordania Brasil Albania Qatar Georgia Perú Indonesia Dinamarca Francia Bélgica Portugal Reino Unido China Taipéi Estados Unidos Eslovaquia Chipre Malta Uruguay Rumanía Emiratos Árabes Unidos Bulgaria Túnez R. República Dominicana ARY de Macedonia Argelia Kosovo Líbano * Pekín / Shanghái / Jiangsu / Cantón Perú no se diferencia significativamente de Albania, Qatar, Georgia e Indonesia (α=0,05)

40 Lectura 2015: resultados por niveles de desempeño y cobertura de Perú, Latinoamérica y OCDE Niveles de desempeño Población de 15 años matriculada en secundaria o nivel equivalente (%) 96,3 81,9 81,4 88,6 62,1 75,0 82,4 68,5-0,1 2,2 12,4 27,0 0,2 0,0 0,0 0,0 2,3 0,6 0,9 0,3 9,3 5,2 4,2 7,0 19,2 19,5 21,3 19,9 0,1 0,0 1,3 0,3 6,4 3,5 16,2 15,0 0,0 0,1 1,3 1,1 7,2 20,5 27,9 29,9 27,8 34,6 29,2 34,2 25,0 27,3 7,0 19,5 23,2 19,8 23,5 28,3 26,1 28,4 26,5 28,3 30,8 7,4 1,3 12,5 10,3 13,6 11,4 17,4 19,2 3,0 1,7 3,2 2,0 28,2 7,1 6,4 13,1 13,6 5,2 1,3 Chile Uruguay Costa Rica Colombia México Brasil Perú República Dominicana OCDE

41 Lectura : variación de los resultados en Latinoamérica por medida promedio Fuente: OCDE (2016). PISA 2000 PISA 2009 PISA 2012 PISA 2015 Variación Variación Tendencia promedio** Perú * * Colombia * +6 Uruguay * +25* +5* Chile * +5 México Brasil Costa Rica * * Diferencias estadísticamente significativas al 5%. ** La OECD (2016) estima la tendencia promedio como una ponderación de las variaciones en el tiempo de cada país. Ésta depende de los ciclos en los que haya participado cada uno de ellos.

42 Lectura : resultados por niveles de desempeño y medida promedio PISA 2000 PISA 2009 PISA 2012 PISA 2015 Niveles de desempeño % Niveles de desempeño % Niveles de desempeño % Niveles de desempeño % 5 0,1 6 0,0 6 0,0 6 0,0 5 0,4 5 0,5 5 0,3 4 1,0 4 2,6 4 3,3 4 3,5 3 4,9 3 10,1 3 11,4 3 15,0 2 14,5 2 22,1 2 24,9 2 27,3 1 25,5 1a 28,7 1a 29,5 1a 28,3 <1 54,1 1b 22,0 1b 20,6 1b 19,2 1b 14,1 1b 9,8 1b 6,4 Medida promedio ,6

43 Lectura 2015: resultados por medida promedio, según características del estudiante Nivel Nivel Nivel 4 Nivel Nivel Nivel 1a 300 Nivel 1b 200 Nacional Mujeres (49,3%) Sexo Hombres (50,7%) *Castellano (93,8%) Originaria (6,2%) Lengua materna Asistió (95,4%) No asistió (4,6%) Educación inicial Matrícula oportuna (75,0%) Atrasados (25,0%) Matrícula oportuna < Nivel 1b * Los resultados de Castellano incluye un pequeño porcentaje de estudiantes con lengua materna extranjera.

44 Lectura 2015: resultados por medida promedio, según características de la institución educativa Nivel Nivel Nivel 4 Nivel Nivel Nivel 1a 300 Nivel 1b 200 Nacional Estatal (74,1%) No estatal (25,9%) Urbana (89,9%) Rural (10,1%) Pequeña (15,1%) Mediana (34,4%) Grande (50,6%) < Nivel 1b Gestión Área Tamaño IE* * El tamaño de la IE se determinó en función al número total de estudiantes matriculados. IE grande (mayor igual a 575 estudiantes), mediana (entre 150 y 574 estudiantes) y pequeña (menor a 150 estudiantes).

45 Lectura 2015: variabilidad del desempeño según gestión, controlando y sin controlar por el índice socioeconómico Estatales No estatales 1 61* Los estudiantes de las instituciones educativas no estatales obtienen, en promedio, 61 puntos más que sus pares de estatales. Sin embargo, cuando se considera las características socioeconómicas de los estudiantes, esta diferencia prácticamente desaparece. Sin considerar características socioeconómicas de las instituciones educativas Considerando características socioeconómicas de las instituciones educativas * Existen diferencias estadísticamente significativas al 5%.

46 Lectura : resultados por estratos según medida promedio 500 Nivel 3 o más Nivel Nivel 1a Nivel 1b 250 < Nivel 1b * 2015* 2012* 2015* 2012* 2015* 2012* 2015* 2012* 2015* Mujer / Hombre Asistencia a inicial / No asistencia a inicial Matrícula oportuna / Atraso No estatal / Estatal IE Urbana / IE Rural * Diferencias estadísticamente significativas entre los estratos dentro en el mismo año (α=0,05).

47

48 Cambios metodológicos en PISA 2015 Antes de PISA 2015 PISA 2015 Aplicación de las pruebas solo en formato de lápiz y papel. Aplicación de pruebas computarizadas y en formato de papel y lápiz. Modelo de 1 parámetro para ítems dicotómicos y politómicos. Los ítems no alcanzados se consideran errados (reciben cero puntos) para la estimación de la habilidad de las personas pero no para la estimación de la dificultad de los ítems. Solo se calibran los ítems con una sub-muestra por país (500 casos). El DIF no es considerado para la estimación de las habilidades en el país donde se presenta. Calibración año a año: Cada ciclo se hacen nuevas estimaciones considerando en la equiparación solo aquellos ítems sin DIF. Modelo de 2 parámetros híbrido para ítems dicotómicos y politómicos. Los ítems no alcanzados se consideran no aplicados para la estimación de la dificultad de los ítems y de la habilidad de las personas. Se calibran los ítems con todas las muestras nacionales. El DIF se considera específico por país para la estimación de las habilidades. Se considera una interacción entre país y dificultad. Calibración concurrente: Se han colocado los datos de todos los países y todos los ciclos en una única matriz para estimar los parámetros de los ítems, asumiendo que no hay DIF.

49 Tipos de conocimientos Las células El concepto de organismo Epistémico Sistemas vivos Los seres humanos, (salud, nutrición, etc.) Poblaciones (especies, evolución, biodiversidad, etc.) Procedimental Los ecosistemas Biósfera De contenido Sistemas físicos Estructura, propiedades y cambios de la materia Movimiento y fuerzas Energía y sus transformaciones Interacciones entre la energía y la materia Sistemas de la tierra y el espacio Estructuras, energía y cambios de los sistemas de la Tierra Historia de la Tierra La Tierra en el espacio La escala del universo y su historia

50 Ciencia 2015: muestra de ítems Ítem Ficha técnica del ítem Proceso Conocimiento Contexto - área de aplicación Clave de respuesta Evaluar y diseñar investigaciones científicas Procedimental Personal - Salud y enfermedad La respuesta correcta es 35 C. El estudiante debe seleccionar las siguientes filas: 35 C temperatura del aire - 40% humedad y 40 C temperatura del aire - 40% humedad. También debe escribir su respuesta explicando que a una humedad de 40%, si se sube la temperatura a 40ºC, puede ocurrir el golpe de calor. Ejemplo de Ítem Correr en días de calor :

51 Ciencia 2015: muestra de ítems Ítem Ficha técnica del ítem Proceso Conocimiento Contexto- área de aplicación Clave de respuesta Interpreta datos y evidencia científicamente Procedimental Local/Nacional - Calidad ambiental Primera alternativa (Las colmenas expuestas a una concentración más alta de imidacloprid tienden a despoblarse antes) Ejemplo de Ítem Correr en días de calor :

52 Matemática 2015: muestra de ítems Ítem Ficha técnica del ítem Contenido Proceso Contexto Clave de respuesta Cantidad Formular situaciones matemáticamente Científico D

53 Matemática 2015: muestra de ítems Ítem Ficha técnica del ítem Contenido Proceso Contexto Clave de respuesta Cambio y relaciones Emplear conceptos, hechos, procedimientos y razonamiento matemáticos Personal B

54 Lectura 2015: muestra de ítems Ítem Ficha técnica del ítem Tipo textual Formato de texto Proceso Contexto Clave de respuesta Descriptivo Continuo Reflexionar y valorar la forma del texto Personal A

55 Lectura 2015: muestra de ítems Ítem Ficha técnica del ítem Tipo textual Formato de texto Proceso Contexto Clave de respuesta Expositivo Continuo Elaborar una interpretación Personal El estudiante debe identificar en su respuesta que debe haber transcurrido el tiempo suficiente desde la última donación de sangre.