Gabriela Villamizar Martínez Instituto Colombiano para la Evaluación de la Educación (ICFES) Primer Congreso Latinoamericano de Medición y Evaluación Educacional (COLMEE) Santiago de Chile, 5 de octubre de 2012
Problema a resolver Cómo diseñar y divulgar los resultados de las evaluaciones estandarizadas para que sean utilizados por la comunidad educativa?
Propósito Compartir la experiencia del ICFES en la etapa de evaluación estandarizada, de tal manera que se retroalimente el proceso con las recomendaciones de la comunidad académica y de profesionales del área, del mismo modo que mostrarla como referente para las instituciones homólogas.
Antecedentes Organización del sistema de evaluación de los resultados de la calidad de la educación: Ley 1324 de 2009.
Funciones Uso de la información Divulgación
SABER 3o., 5o. y 9o. Propósito: contribuir al mejoramiento de la calidad de la educación colombiana mediante la realización de evaluaciones periódicas. Qué evalúa: las competencias de los estudiantes en las áreas de lenguaje, matemáticas, ciencias naturales y competencias ciudadanas (estas dos últimas solo en quinto y noveno grados) Quiénes participan: todos los estudiantes de tercero, quinto y noveno grados de todos los establecimientos educativos del país (oficiales y privados, urbanos y rurales).
Estrategias de divulgación Difusión de las características de las pruebas; Conferencias, charlas y talleres sobre lectura e interpretación de resultados; Reuniones técnicas con decisores de política pública; y, Atención a medios de comunicación.
Para el diseño, publicación y divulgación de reportes de resultados de las evaluaciones, el ICFES sigue un procedimiento que comprende una serie de etapas.
Definición del requerimiento Se establece qué información se reportará, con qué propósitos y los usos esperados, a partir del marco de referencia de la evaluación.
Definición del requerimiento Niveles de desempeño
Definición del requerimiento Puntajes promedio y desviaciones estándar
Definición del requerimiento Fortalezas y debilidades
Tabla 1. Tipos de resultados entregados por SABER 3o., 5o. y 9o. Reporte / informe Tipos de resultados Grupos de referencia Establecimiento educativo Sede / jornada Municipio / departamento Porcentaje de estudiantes ubicados en cada nivel de desempeño Puntajes promedio y desviaciones estándar Fortalezas y debilidades en competencias y componentes Número de estudiantes ubicados en cada nivel de desempeño Porcentaje de estudiantes ubicados en cada nivel de desempeño Puntajes promedio y desviaciones estándar Entidad territorial País Sector (oficial privado) Zona (urbana rural) Nivel socioeconómico No aplica País Sector (oficial privado) Zona (urbana rural) Género Nivel socioeconómico Colombia Fuente: Subdirección de Análisis y Divulgación, ICFES. Porcentaje de estudiantes ubicados en cada nivel de desempeño Puntajes promedio y desviaciones estándar Análisis de diferencias de los resultados por grupos de referencia Sector (oficial privado) Zona (urbana rural) Género Nivel socioeconómico
Diseño de prototipos Elaboración de propuestas para el esquema de reportes Opciones de búsqueda y acceso a la información Representación gráfica Herramientas de ayuda para interpretación y uso
Validación de los prototipos Interna Presentación de los esquemas de reportes a distintos grupos de trabajo del ICFES Externa Trabajo con grupos focales de los públicos objetivos
Formulación de requerimientos técnicos Se definen los lineamientos para la producción de los reportes y su recuperación vía web, siendo el medio digital el de principal uso para las estrategias de divulgación de resultados de las pruebas. Se consideran tanto los lineamientos definidos por Gobierno en Línea como los resultados obtenidos con la entrega física de material sobre las evaluaciones externas.
Publicación y monitoreo Consiste en cargar en la web el módulo de consulta y revisar la generación de reportes. Además de constatar la exactitud del diseño aprobado, se realiza el cotejo entre la información de algunas unidades de reporte escogidas al azar y los datos correspondientes suministrados por la Subdirección de Estadística, para garantizar que la información esté reportada correctamente.
Divulgación La utilización de los reportes por parte de la comunidad educativa, particularmente para la formulación de políticas guiadas hacia el mejoramiento de la calidad de la educación colombiana, han sido promovidos mediante la realización de presentaciones, talleres y conferencias. A partir de estas experiencias, se proyecta retroalimentar estos procedimientos mediante el monitoreo de la consulta y el uso de los productos de las evaluaciones estandarizadas, para ajustar las estrategias de divulgación del Instituto.
GRACIAS POR SU ATENCIÓN! www.icfes.gov.co