Cómo medir la calidad de la educación?

Transcripción

1 Cómo medir la calidad de la educación? Domingo 13 de Noviembre 2016 Ancell Scheker Mendoza Dirección de Evaluación de la Calidad

2 AGENDA I. CONTEXTUALIZACIÓN II. MEDICIÓN DE LA CALIDAD EN EL SISTEMA EDUCATIVO DOMINICANO a) PRUEBAS NACIONALES b) PRUEBAS INTERNACIONALES i. TERCE- UNESCO ii. PISA-OCDE III. CONCLUSIONES

3 CONTEXTUALIZACIÓN

4 IMPORTANCIA DE LA CALIDAD EDUCATIVA Meta de la reforma educativa Foco de políticas educativas Eje de debate educativo mundial

5 CONTEXTO INTERNACIONAL DE LA CALIDAD

6 CONTEXTO NACIONAL DE LA CALIDAD Desarrollar en los estudiantes, las competencias para el dominio de la lengua y otras habilidades comunicativas; el pensamiento lógico-matemático, crítico y creativo; la capacidad para resolver problemas y tomar decisiones;..consciencia ética y ciudadana y una actitud para aprender durante toda la vida

7 CÓMO SE MIDE LA CALIDAD DE LA EDUCACIÓN? La calidad es un concepto amplio y complejo, de múltiples significados y dimensiones. Los objetivos de calidad plantean la necesidad e importancia de desarrollar sistemas de evaluación de los procesos y resultados de aprendizaje que generen información y evidencias para la formulación de políticas y para la gestión del sistema educativo Relevancia Eficacia Pertinencia Calidad Equidad Eficiencia

8 PARA QUÉ MEDIR LA CALIDAD? Identificar las dificultades en la enseñanza Determinar la calidad de los aprendizajes logrados por los estudiantes. Rendir cuentas a la sociedad sobre la labor educativa y sus resultados Medir el impacto de algunas políticas Tomar decisiones de política educativa fundamentadas en evidencias

9 QUÉ Y CÓMO SE DEBE EVALUAR? La evaluaciones deben medir aprendizajes relevantes y considerar las oportunidades de aprendizaje. Relación con el Currículo Las evaluaciones deben ser sistemáticas, estandarizadas y comparables en el tiempo para medir progreso Las evaluaciones deben ser técnicamente sólidas, robustas y rigurosas, válidas y transparentes Deben proveer información confiable y pertinente y considerar el contexto Los resultados de las evaluaciones deben utilizarse para la mejora

10 MEDICIÓN DE LA CALIDAD EN EL SISTEMA DOMINICANO

11 CÓMO SE ESTÁ EVALUANDO LA CALIDAD DEL SISTEMA EDUCATIVO DOMINICANO? Logros de aprendizajes como indicador de calidad. Acuerdo 6 del Pacto. Desarrollar una cultura de evaluación. La calidad del sistema educativo será medida por los resultados de los aprendizajes, a partir de instrumentos nacionales, regionales e internacionales.

12 PRUEBAS NACIONALES

13 PRUEBAS NACIONALES Informes de Pruebas Nacionales Tipos Informe General Informe Curricular Informe de Centro Educativo Interpreta los resultados generales estadísticamente Informa sobre el desempeño según el currículo, por áreas de conocimiento Informa sobre los resultados del centro en particular, estableciendo comparaciones y relaciones

14 PRUEBAS NACIONALES

15 PRUEBAS NACIONALES

16 PRUEBAS NACIONALES Número estudiantes en las pruebas nacionales de 8vo grado, por año

17 PRUEBAS NACIONALES Puntaje promedio en las pruebas nacionales de 8vo grado, por año 17,6 18,2 18,1 17,9 17,8 16,8 15,4 15,8 15,6 15,7 14,7 15,2 15,0 15,3 Lengua Española Matemática ,9 Ciencias Sociales ,2 15,4 15,3 15,6 16,8 Ciencias de la Naturaleza

18 PRUEBAS NACIONALES Ejemplo de ítem 8vo grado En un colmado ofertan la libra de salami a $53.95 y la de queso crema a $ Si tienes $100.00, cuánto te faltan para poder comprar una libra de cada artículo? A) $43.90 Contenido: Números racionales Respuesta correcta: A Nivel de complejidad: (3) Resolución de problemas B) $42.90 C) $ D) $ Porcentajes de respuestas por opción A 27.74% Correcta. Para contestar correctamente tienen que sumar el precio de la libra de salami y queso y luego restarle 100. B 27.21% Incorrecta. Esta opción y es el resultado de sumar incorrectamente los precios y luego restar 100. C 31.02% Incorrecta. Es el resultado de sumar los precios del salami y queso. D 13.04% Incorrecta. Es el resultado de sumar los precios y sumar también 100, en vez de restarlo.

19 PRUEBAS NACIONALES Ejemplo de ítem 8vo grado El siguiente gráfico registra la cantidad de "platos del día" que despachó durante una semana un negocio de comida económica. Cuántos "platos del día" se vendieron en la semana? A) 820 B) 160 C) 140 D) 41 Contenido: Estadística Nivel de complejidad: (3) Resolución de problemas A Porcentajes de respuestas por opción B C D 66.16

20 CAMBIOS EN EL SISTEMA DE EVALUACIÓN Ordenanza 6 La evaluación se asume como una herramienta cuyo uso contribuye a mejorar la calidad de la educación, en la medida en que informa sobre los aprendizajes logrados por los estudiantes y los factores asociados a esos logros con el fin de que se desarrollen planes, programas y políticas que permitan atender los desafíos identificados.

21 EVALUACIONES DIAGNÓSTICAS Evalúan los logros de aprendizaje de acuerdo al nuevo currículo, sin tener consecuencias en la promoción de los estudiantes. 3er grado de primaria: evaluación de lectura y matemática. Cuestionarios de docentes, directores y familia to grado de primaria: pruebas de lengua española, matemática, ciencias sociales y ciencias naturales. Cuestionarios de estudiante, docentes, directores y familia er grado de secundaria: pruebas de lengua española, matemática, ciencias sociales y ciencias naturales. Cuestionarios de estudiante, docentes, directores. 2019

22 PRUEBAS INTERNACIONALES

23 POR QUÉ PARTICIPAR EN EVALUACIONES INTERNACIONALES? Permite tener referentes más allá del contexto nacional Amplía nuestra mirada a una visión global, y posibilita monitorear los cambios en los logros del sistema educativo desde una perspectiva internacional Provee con regularidad indicadores comparables que describen un perfil de los conocimientos y habilidades de los estudiantes y sus niveles de desempeño. Provee indicadores de la relación del aprendizaje con otras variables demográficas, socioeconómicas y educativas. Aporta evidencias para orientar la política educativa. Identifica brechas y desigualdades. Posibilita el intercambio de experiencias y capacidades entre países. Oportunidad de aprender de otros

24 ESTUDIOS INTERNACIONALES EN QUE EL PAÍS PARTICIPA Estudio Organizado por Año de Aplicación Áreas evaluadas Población PERCE UNESCO 1997 Lectura Matemáticas 3º y 4º 3º y 4º SERCE UNESCO 2006 Lectura y escritura Matemáticas Ciencias Naturales 3º y 6º 3º y 6º 6º CIVICA (ICCS) IEA Conocimientos y actitudes cívicas 8º TERCE ERCE UNESCO 2013 Lectura y escritura Matemáticas Ciencias Naturales 3º y 6º 3º y 6º 6º PISA OECD 2015 Ciencias (principal) Lengua y Matemática 15 años

25 QUÉ ES EL TERCE? Dar cuenta del logro de aprendizaje en los países de la región, desde una perspectiva comparativa pero con referencia a los currículos locales e informar sobre las variables asociadas al logro. Participaron 15 países latinoamericanos y un estado subnacional.

26 QUÉ ES EL TERCE? En mayo 2013 se evaluaron a un total de 8,254 estudiantes de primaria; 4,324 fueron de tercer grado y 3,930 de sexto grado, inscritos en 208 escuelas primarias. Mide los logros de aprendizaje de estudiantes de 3º y 6º del Nivel Primario en las áreas de Lenguaje (Escritura y Comprensión Lectora), Matemática y Ciencias así como los factores asociados a este logro.

27 TERCE-UNESCO Puntaje promedio de República Dominicana en TERCE y comparación con la región y con los propios resultados de SERCE. Grado Tercer grado Sexto grado Área curricular Puntaje promedio en Comparación con promedio la prueba TERCE de países en TERCE Comparación con resultados en SERCE Lectura 614 Matemática 602 Lectura 633 Matemática 622 Ciencias Naturales 632

28 TERCE-UNESCO Porcentaje de estudiantes por nivel de desempeño en TERCE, comparación con la región NIVELES DE DESEMPEÑO Nivel I Nivel II Nivel III Nivel IV Lectura 3ro RD Total países L Lectura 6to RD Total países L Matemática 3ro RD Total países M Matemática 6to RD Total países M Ciencias naturales 6to RD Total países CN

29 TERCE-UNESCO TERCE Ejemplo de Nivel I en Matemática 3er Grado Ejemplo 1: identificar figuras geométricas conocidas o presentadas en formatos convencionales. En este caso, a través de las opciones, el alumno debe identificar figuras geométricas básicas. Correcta: C Promedio Países: 75% RD: 49%

30 TERCE-UNESCO TERCE Ejemplo de Nivel IV en Matemática 3er Grado Ejemplo 2: realizar operaciones combinadas entre números naturales en más de un paso. En este caso, a través de las opciones, el alumno debe resolver problemas más complejos en el ámbito de los números naturales. Correcta: A Promedio Países: 24% RD: 13%

31 FACTORES ASOCIADOS EN RD Características estudiantes y familias Docentes, prácticas pedagógicas y recursos Escuelas Nivel socioeconómico Repitencia Trabajo infantil Género: niñas mejor en 3ero. Niños mejor en ciencia y matemática de 6to. Asistencia a educación inicial Prácticas en el hogar: altas expectativas, tiempo de estudio Recursos en el aula Clima escolar Nivel socioeconómico del centro Infraestructura Tipo de escuelas: urbanas mejor puntaje en 6to grado. Privadas en 3er grado

32 DESAFÍOS GENERALES QUE SURGEN DEL TERCE El TERCE reafirma que nuestra región está marcada por importantes brechas de logro tanto al interior de los países, como entre los países. Hubo una mejora significativa entre los resultados del SERCE y TERCE. El promedio de puntaje del país es por debajo del promedio de la región en todas las áreas. La mayoría de los estudiantes están en el nivel I de desempeño con excepción de lectura de 6to. La información de logros junto con la de factores asociados constituye un importante insumo para orientar decisiones de política educativa para los países participantes en este estudio regional.

33 QUÉ ES PISA? Evalúa hasta qué punto los alumnos de 15 años, cercanos al final de la educación obligatoria, han adquirido conocimientos y habilidades claves necesarios para la participación plena en la sociedad moderna. PISA intenta responder la pregunta: qué es importante que los ciudadanos sepan y sepan hacer? 33

34 QUÉ ES PISA? Cada tres años se evalúan competencias en Lectura, Matemática y Ciencias con énfasis en un área 2015 el foco es Ciencias. La competencia científica se entiende como la capacidad de explicar fenómenos científicos, evaluar y diseñar investigación científica, e interpretar datos y evidencia científicamente en contextos personales, locales y globales. 34

35 INSTRUMENTOS APLICADOS EN PISA Prueba de ciencias, lectura y matemática. Cuestionario a estudiantes general y de TICs. Cuestionario a director de centro educativo Cuestionario a padres Cuestionario de profesores

36 PISA 2015 EN REPÚBLICA DOMINICANA PRIMERA PARTICIPACION DEL PAIS EN PISA Se aplicó del 23 de marzo al 30 de abril 2015 en 196 centros educativos y 4,935 estudiantes de 15 años. Los resultados se presentarán el 6 de diciembre del Un informe nacional se presentará en 2017

37 CÓMO LEER LOS RESULTADOS? Cuáles son los resultados en cuanto a logro y niveles de desempeño de los estudiantes? Cuáles son las características de los estudiantes, actitudes, motivaciones? Cuáles son las características de centros educativos, docentes y familias? Cómo se relacionan los resultados con otras variables? Qué hipótesis o posibles explicaciones existen para entender los resultados?

38 REFLEXIONES SOBRE LOS RESULTADOS Cuál es el contexto del país, situación económica, social y política? Cómo es el sistema educativo: cobertura, inclusión, gestión? Qué políticas educativas se han desarrollado? Por cuanto tiempo? Cuáles se han priorizado? Tienen tiempo suficiente de implementación para producir un cambio (mínimo 5 años)? Qué lecciones podemos aprender? Qué se hará con los resultados de la evaluación?

39 CONCLUSIÓN La calidad es el objetivo principal del sistema educativo y por tanto debe definirse y evaluarse de manera regular para monitorear cómo avanzamos. Reconocer que hay áreas y aspectos más fáciles de medir que otros. Las evaluaciones nacionales e internacionales nos proveen información valiosa como indicadores del desempeño del sistema.

40 CONCLUSIÓN Proporcionan un punto de partida y una métrica para dar seguimiento en el tiempo. Disponer de datos (aunque nos duelan) es muy importante pues nos dan información para generar diálogos, mejorar y garantizar el derecho de aprender. Los resultados de la evaluación deben guiar las decisiones con respecto a planes y políticas de mejora. Pero es necesario considerar que los cambios en educación son a largo plazo.