Los retos de la puesta en marcha de la evaluación de la política nacional educativa Dra. Arcelia Martínez Bordón Ciudad de México, 11 de febrero de 2015
Contenido 1. La evaluación como factor para la mejora educativa 2. Atribuciones del INEE 3. Evaluación de componentes procesos y resultados del SEN: Qué se ha hecho? 4. Emisión de directrices: factor que contribuye a la mejora de la educación i. Qué son las directrices? ii. iii. Por qué son importantes? Vinculación con actores clave: factor fundamental 4. Retos para la elaboración de directrices
1. La evaluación como factor para la mejora educativa En febrero de 2013 se publicó el decreto por el que se reformó el artículo tercero de la Constitución Política de los Estados Unidos Mexicanos (CPEUM) En la reforma de este artículo, se señalan tres factores que pueden influir en los resultados educativos: el desempeño docente, la autonomía de las escuelas y la evaluación de la calidad de la educación. De esta forma, se plantean: Los fundamentos del Servicio Profesional Docente (SPD) El establecimiento del Sistema Nacional de Evaluación Educativa (SNEE) La autonomía del Instituto Nacional de Evaluación de la Educación (INEE) La reforma señala que la evaluación es un elemento importante en la mejora de la calidad de los servicios educativos de la educación básica y media superior. Con ello, el INEE adquiere una nueva dimensión de actuación y de responsabilidad.
2. Atribuciones del INEE Coordinar del Sistema Nacional de Evaluación Educativa. Diseñar y realizar mediciones y evaluaciones de componentes, procesos y resultados del SEN respecto a los atributos de alumnos, docentes, escuelas, políticas y programas. Expedir los lineamientos a los que se sujetarán las autoridades educativas federal y locales para llevar a cabo las funciones de evaluación que les corresponden. Generar y difundir información, y con base en esta: Emitir directrices que sean relevantes para contribuir a las decisiones tendientes a mejorar la calidad de la educación y su equidad
3. Evaluaciones de componentes, procesos y resultados del SEN: Qué se ha hecho? 3.1 Evaluación de la oferta educativa (recursos y procesos escolares, contenidos y métodos educativos, y evaluación y diversidad). Se realizó la Evaluación de Condiciones Básicas para la Enseñanza y el Aprendizaje en Educación Primaria (ECEA-Primaria), y en Educación Media Superior (ECEA-EMS). Asimismo, se preparará el piloto de ECEA-Preescolar. Se planearon algunos aspectos del Censo de Escuelas, Maestros y Alumnos de media superior (CEMES). Se encargó un estudio documental sobre los distintos cambios curriculares en México de los niveles de educación básica y media superior de los últimos 40 años (de 1970 a 2011). Se trabajó en la implementación y sistematización de una consulta realizada a 49 comunidades indígenas de alrededor de 30 lenguas en 19 estados del país sobre la evaluación educativa. Se integró un catálogo de grupos a quienes, por sus características, el sistema educativo debe atender de manera diferenciada para garantizar su derecho a la educación y sus derechos humanos en la educación, con el fin de diseñar acciones de evaluación de la atención a la diversidad en el Sistema Educativo Nacional. Se integró un Consejo Técnico Especializado Ad-Hoc para la elaboración de criterios técnicos de validez cultural para el desarrollo de instrumentos de evaluación educativa.
3.2 Evaluación de docentes y directivos Elaboración del Marco Conceptual de la Evaluación del Desempeño docente y directivo (incluye una consulta mediante una encuesta en línea y grupos focales para identificar percepciones de los profesores respecto a qué evaluar, cómo evaluarlo y qué aspectos del contexto en el que trabajan los profesores afectan su práctica). Participación en la regulación de las evaluaciones en el marco del Servicio Profesional Docente. Participación en proyectos internacionales y vinculación con otras instancias: adaptación de los instrumentos de la prueba Firstmath, análisis de resultados de TALIS 2013. 3.3 Evaluación de resultados educativos (alumnos) Cierre del ciclo de aplicaciones de la prueba EXCALE. Participación en la conceptualización y diseño de las nuevas pruebas nacionales (Plan Nacional para las Evaluaciones de los Aprendizajes Planea-). Aplicación piloto de la prueba PISA 2015. Revisión y consolidación de las bases de datos del Tercer Estudio Regional Comparativo y Explicativo (TERCE).
3.4 Evaluación de políticas y programas educativos Definición del Modelo para la Evaluación de Políticas y Programas Educativos (aún en construcción), el cual contempla lo siguiente: - Evaluación de políticas o conjuntos de programas, en vez de programas individuales. - Evaluaciones basadas en teoría y orientadas a valores diferentes a la eficacia. - Evaluaciones de programas individuales para valorar la implementación a nivel local y escolar, e identificación de resultados no esperados. - Evaluaciones prospectivas, no sólo retrospectivas - Evaluaciones enfocadas en el valor de uso de sus resultados para los fines de mejora. - La agenda de evaluación de políticas y programas educativos del INEE será congruente con la agenda temática de emisión de directrices del Instituto. - Promover el desarrollo de evaluaciones que tomen en cuenta la participación de los evaluados o primeros involucrados. - Proponer evaluaciones significativas para los evaluados y tomadores de decisiones.
4. Emisión de directrices: factor que contribuye a la mejora de la educación El INEE emitirá directrices relevantes, tendientes a mejorar la calidad de la educación y su equidad (Artículo 47 de la Ley del INEE). Las directrices serán hechas del conocimiento de las Autoridades Educativas (Artículo 50 de la Ley del INEE). Las directrices generadas por el Instituto deberán ser respondidas por la autoridad en un plazo no mayor a 60 días naturales (Artículo 51 de la Ley del INEE). La autoridad educativa tendrá que atender a las directrices que emita el Instituto para realizar la planeación y programación globales del Sistema Educativo Nacional (LGE, Artículo 12, Fracción XII). Promover la congruencia de los planes, programas y acciones que emprendan las Autoridades Educativas con las directrices que, con base en los resultados de la evaluación, emita el Instituto.
i. Qué son las directrices? 1. Definición Genérica Norma o principio que provee orientación sobre las conductas adecuadas. Se elaboran con base en evidencia que apoya la toma de decisiones informada acerca de una intervención apropiada. 2. Definición Específica Normas técnicas, por cuanto las acciones y/o las maneras establecidas para su ejecución se consideran causalmente idóneas y eficaces para realizar los fines deseados o exigidos. Su validez se fundamenta en las conclusiones de las evaluaciones, en el conocimiento probado disponible sobre el tema en cuestión y en la historia de las decisiones del pasado que han mostrado su pertinencia y efectividad. 9
ii. Por qué son importantes? Las directrices plantean metas de mejora educativa, así como orientaciones o cursos de acción para lograrlas. Definen o determinan qué hacer para resolver o enfrentar un problema específico, llenar un vacío o solventar un déficit educativo particular, así como las formas o modos concretos en que las acciones requieren ser ejecutadas para conseguirlo.
iii. Elemento indispensable: construir vínculos con los actores clave El vínculo entre resultados de investigaciones, evaluaciones y la toma de deciones de política, no es directo. Para que la investigación y la evaluación educativa incidan en la toma de decisiones, se requiere un proceso de comunicación/socialización de las recomendaciones de política (directrices), así como el involucramiento de los actores clave desde la definición de los alcances de la directriz, la definición del problema, la identificación de los estándares y metas deseables, y las actividades que será necesario desarrollar para alcanzarlos.
5. Retos para la elaboración de directrices 1. Lograr transversalidad al interior del Instituto. La elaboración de directrices requiere de un trabajo transversal y continuo con todo el Instituto. La Dirección General de Directrices no puede trabajar sola. Las evaluaciones y estudios que realizan todas las áreas son el insumo fundamental para el trabajo del área. Por lo tanto, se requieren sesiones continuas de trabajo para establecer la agenda de trabajo del Instituto. Es decir, definir conjuntamente, las distintas áreas y la propia Junta de Gobierno, en qué problemas educativos y con qué orden de prelación vamos a buscar incidir (a partir de la alineación de la evaluación, estudios y directrices). 12
... Retos para la elaboración de directrices 2. Tipo de evidencia con que cuenta el Instituto actualmente para emitir directrices: Tenemos información suficiente todas las piezas del rompecabezas? Se ha identificado que las evaluaciones realizadas en los últimos años nos dan pocas pistas sobre las relaciones causales y/o factores que afectan, en particular, el logro escolar. Si bien existen cuestionarios de contexto que han acompañado las evaluaciones de resultados educativos, estos han variado en el tiempo y no permiten la comparación entre años. Se requiere por tanto reunir más información respecto a los factores de contexto que acompañan los procesos de enseñanza-aprendizaje, para intentar orientar la emisión de directrices que impacten en el logro educativo, el desempeño docente, en que la escuela provea el mejor ambiente para los aprendizajes, etc. Es decir, es importante trabajar en la «contextualización» de las evaluaciones y en evaluaciones que permitan la emisión de directrices. 13
Retos para la elaboración de directrices 3. Tiempo para su elaboración, validación y emisión Si bien somos un organismo autónomo, trabajamos con los tiempos presupuestales, lo cual conlleva también un ejercicio de rendición de cuentas anual. Además, existe una gran expectativa de que el INEE emita directrices y de que lo haga a la brevedad. Otros retos están relacionados con la viabilidad y factibilidad de las directrices (que se puedan ejecutar en el corto plazo y que se pueden sostener en el tiempo). 14