Evaluación y Equidad: la experiencia colombiana

Transcripción

1 Evaluación y Equidad: la experiencia colombiana Instituto Colombiano para la Evaluación de la Educación - ICFES Septiembre 21, 2011

2 Evaluación y Equidad: la experiencia colombiana 1 Desarrollo de las evaluaciones 2 Resultados sobre equidad Género Nivel Socioeconómico 3 Algunas lecciones

3 Antecedentes del sistema de evaluación en Colombia Creación del Servicio Nacional de Pruebas en ICFES se ha aplicado desde 1968; desde los 80 produce información sobre calidad de la educación Creciente número de evaluaciones bajo su responsabilidad: Educación básica (SABER), desde 1992 Evaluaciones internacionales, desde 1995 Educación superior (ECAES), desde 2003 Examen de ingreso a la carrera docente, desde 2005 Expedición de Ley 1324 de 2009 y decretos reglamentarios

4 Ley 1324 de 2009 Establece parámetros y criterios para las evaluaciones externas: comparabilidad, independencia, periodicidad, igualdad y reserva (los resultados individuales son confidenciales y los resultados agregados -incluyendo colegios- son públicos). El propósito de los exámenes es brindar información que sirva como base para programas de mejoramiento y para la inspección y vigilancia del servicio educativo. Autoriza al ICFES para adelantar otras evaluaciones y para obtener de ellas ingresos. Profundiza en la autonomía del ICFES

5 Participación del ICFES en el sistema de evaluación de la calidad de la educación

6 El sistema de evaluación externa colombiano Exámenes de Estado: establecidos por la ley 1324 de 2009, con efectos individuales específicos: Examen de Estado de educación media SABER 11 o, para ingreso a la educación superior Validación, para obtención del título de bachiller académico Examen de Estado de educación superior SABER PRO, como requisito para obtención del título de pregrado SABER 11 o y SABER PRO proporcionan además indicadores sobre la calidad de la educación media y superior.

7 El sistema de evaluación externa colombiano Evaluación de la educación básica SABER 5 o y 9 o : evaluación diagnóstica de los establecimientos educativos oficiales y privados Evaluaciones internacionales PISA: Programa Internacional de Evaluación de Estudiantes TIMSS: Tendencias Internacionales en Matemáticas y Ciencias ICCS: Estudio Internacional de Cívica y Ciudadanía PIRLS: Programa Internacional de Evaluación de Lectura TERCE: Tercer Estudio Regional Comparativo y Explicativo Prueba de ingreso a la carrera docente estatal (Leyes 115 de 1994 y 715 de 2001, y Decretos 1278 de 2002 y 3892 de 2006)

8 Evaluaciones internacionales

9 Alianzas para acompañamiento técnico Educational Testing Service, ETS (SABER 5 o y 9 o ). Australian Council for Educational Research, ACER (SABER PRO). Cambridge University (Inglés). LLECE - UNESCO. Grupo Iberoamericano de PISA. International Asociation for the Evaluation of Educational Achivement - IEA. Organización para la Cooperación y el Desarrollo Económico - OECD.

10 Evaluación y Equidad: la experiencia colombiana 1 Desarrollo de las evaluaciones 2 Resultados sobre equidad Género Nivel Socioeconómico 3 Algunas lecciones

11 SABER 5 y 9 Lenguaje Las diferencias son estadísticamente significativas.

12 SABER 5 y 9 Matemáticas En ambos grados las diferencias son estadísticamente significativas, aunque son mayores en noveno.

13 SABER Diferencia de promedios Hombres Mujeres Prueba Lenguaje Matemáticas Año Para lenguaje y matemáticas la diferencia más amplia se presentó en el año 2006.

14 Pruebas Internacionales - PISA Lectura Colombia tiene la diferencia a favor de las niñas más baja: 9 puntos. En todos los países las niñas tienen un desempeño superior al de los niños.

15 Pruebas Internacionales - PISA Matemáticas Colombia es el país con la brecha más amplia (32 puntos) a favor de los hombres. El promedio de los varones es de 398 y el de las mujeres de 366.

16 Pruebas Internacionales - TIMSS Cuarto grado Las diferencias entre niños y niñas son significativas, favoreciendo a los primeros.

17 Pruebas Internacionales - TIMSS Octavo grado Las diferencias entre niños y niñas son significativas, favoreciendo a los primeros.

18 Pruebas Internacionales - ICCS Conocimiento Cívico No hay diferencias significativas entre niños y niñas en conocimiento cívico.

19 SABER 5 y 9 Lenguaje Estos resultados muestran brechas importantes en los desempeños de los estudiantes, por ejemplo, para quinto grado entre los de los NSE 3 y 4 se aprecia una diferencia de 53 puntos a favor de los del NSE 4. Igual sucede entre estos dos niveles para noveno grado, donde la diferencia es de 50 puntos.

20 SABER 5 y 9 Matemáticas Al igual que en lenguaje, estos resultados muestran diferencias significativas importantes entre los diferentes estratos socioeconómicos, por ejemplo, para quinto grado entre los de los NSE 3 y 4 se aprecia una diferencia de 49 puntos a favor de los del NSE 4. Lo mismo sucede en noveno, aunque con una diferencia mayor (55 puntos).

21 Pruebas Internacionales - PISA Gradiente socioeconómico en Lectura El porcentaje en el que las condiciones socioeconómicas explican los puntajes en lectura sitúa al país en una posición intermedia con respecto a los demás. Esto indica que las condiciones socioeconómicas de los estudiantes colombianos medidas por el índice ESCS (índice de nivel social, económico y cultural) no determinan fundamentalmente la variación en sus puntajes en lectura.

22 Pruebas Internacionales - ICCS Conocimiento Cívico Los estudiantes de mayor nivel socioeconómico, NSE3, obtuvieron un puntaje promedio estadísticamente superior al nacional y al de los de niveles socioeconómicos más bajos, aunque esa diferencia es pequeña en términos de desvaiciones estándar.

23 Evaluación y Equidad: la experiencia colombiana 1 Desarrollo de las evaluaciones 2 Resultados sobre equidad Género Nivel Socioeconómico 3 Algunas lecciones

24 Algunas lecciones La evaluación externa estandarizada es un instrumento valioso cuando se entienden sus limitaciones. No estamos en el dominio de las ciencias naturales. Medir usando un modelo es medir algo distinto de lo que se quiere; distinto de lo que el público entiende que se mide. Los errores de medición según el modelo no corresponden a los errores de medición de lo que se quiere medir. Se requieren diseños y estudios sofisticados para lograr confiabilidad, reducir los errores, en las medidas. Los resultados en bruto pueden ser más nocivos que positivos. Es preciso hacer grandes esfuerzos tanto para interpretar como para comunicar los resultados.

25 Algunas lecciones La calidad de la educación es compleja No existe una medida que pueda, por si sola, dar razón de ella. Las mediciones de resultados del aprendizaje deben estudiarse junto con otros factores (condiciones de los estudiantes, deserción, ambiente escolar, estimulación). En las ciencias sociales, los sistemas de medición, en la medida en que al numerizar, simplifican fenómenos complejos, son muy fácilmente sobrevalorados (en particular en los medios tecnocráticos). Esa sobrevaloración reposa normalmente en una idealización, en preconcepciones que los identifican con las mediciones propias de las ciencias naturales y exactas. Los organismos internacionales tienen un papel muy importante que jugar para ayudar a clarificar estas confusiones.