Subsecretaría de Planeación y Evaluación de Políticas Educativas. Dirección General de Evaluación de Políticas

Transcripción

1 Subsecretaría de Planeación y Evaluación de Políticas Educativas Dirección General de Evaluación de Políticas

2 CONTENIDO I. Pará qué una evaluación censal? II. III. IV. Qué mide y qué no mide ENLACE? ENLACE y otras evaluaciones nacionales e internacionales Puede un examen de aplicación a casi 16 millones de alumnos ofrecer resultados confiables? V. Qué resultados se difunden? VI. VII. Qué se hace con los resultados en las escuelas y aulas? Debe desaparecer ENLACE?

3 ENLACE es el instrumento censal de diagnóstico más importante del país, que aporta información confiable... ENLACE Básica, para valorar el rendimiento académico de las asignaturas evaluadas español y matemáticas y una tercer materia rotativa hasta cubrir todo el currículum-, de todos y cada uno de los estudiantes, de los grupos y las escuelas ENLACE Media Superior, para valorar en qué medida los jóvenes egresados de este nivel educativo son capaces de aplicar a situaciones del mundo real conocimientos y habilidades básicas adquiridas a lo largo de la trayectoria escolar que les permitan hacer un uso apropiado de la lengua habilidad lectora y la habilidad matemática- Proporciona información a la sociedad acerca del grado de preparación que han alcanzado los estudiantes de educación básica así como del último grado de Educación Media Superior, promoviendo la transparencia y la rendición de cuentas.

4 I.- PARA QUÉ UNA EVALUACIÓN CENSAL? Los resultados de las pruebas muestrales proveen información útil a las autoridades, investigadores, tomadores de decisiones de política pública, pero... para los docentes, alumnos y padres de familia, estos resultados sólo tienen un valor estadístico. 12,806 36% 43.2% 3,769

5 Con ENLACE. las estadísticas tienen nombre y rostro

6 I.- PARA QUÉ UNA EVALUACIÓN CENSAL?

7 PROPÓSITOS DE ENLACE Estimular la participación de los padres de familia así como de los jóvenes, en la tarea educativa. Proporcionar elementos para facilitar la planeación de la enseñanza en el aula. Atender requerimientos específicos de capacitación a docentes y directivos. Sustentar procesos efectivos y pertinentes de planeación educativa y políticas públicas. Atender criterios de transparencia y rendición de cuentas.

8 ENLACE Básica: Mide el nivel dominio en español, matemáticas y una tercera asignatura o materia académica que se rota cada año, de acuerdo a los planes y programas de estudio oficiales. No mide los conocimientos y habilidades para la vida como PISA. Evalúa el aprovechamiento escolar con énfasis en los contenidos que deberá conocer el estudiante de manera que pueda comprender mejor temas que se abordarán en el siguiente ciclo escolar. Para ello, se reticularon todos los contenidos de la Reforma Integral de la Educación Básica, desde 1º de primaria hasta 3º de secundaria, ligando los temas que tienen conexiones. Por ejemplo, para que alumno aprenda la división, deberá tener conocimiento de la suma, la resta y la multiplicación. De esta manera, los resultados que se publican al inicio del ciclo escolar, permiten orientar al docente del siguiente año escolar, a reforzar los temas que representaron un reto para el grupo como un propedéutico- lo cual coadyuvará a una mejor comprensión y aprovechamiento del curso escolar ENLACE Media Superior: Mide el dominio y habilidades para la vida en español y matemáticas. A partir de 2011 evalúa las competencias establecidas en la Reforma de la Educación Media Superior ENLACE Básica y Media Superior Son exámenes diagnósticos, no de acreditación No evalúan actitudes, valores, ni se enfocan a los procesos meta-cognitivos del alumno.

9

10

11 Habilidad Lectora (50 reactivos) Se evalúa en relación con: a) Cuatro tipos de texto Apelativo. Carta Argumentativo. Artículo de opinión Expositivo. Artículo de divulgación + tabla + glosario Narrativo. Cuento o microrrelato b) Tres grupos de procesos cognitivos Extracción de información Interpretación Reflexión y evaluación

12 Habilidad Matemática (90 reactivos) Se evalúa en relación con: a) Cuatro contenidos matemáticos Cantidad Espacio y Forma Cambios y relaciones Matemáticas Básicas b) Tres grupos de procesos cognitivos Reproducción Conexión Reflexión

13

14

15 PISA. Prueba internacional diseñada y aplicada por la OCDE, de aplicación trianual, a una muestra de jóvenes de 15 años, que mide las habilidades para la vida (matemáticas, lectura y ciencias) independientemente de si fueron adquiridas o no en el trayecto escolar. EXCALE. Prueba nacional, diseñada y aplicada por el Instituto Nacional de la Evaluación Educación INEE- Mide el logro educativo del sistema en su conjunto. Se aplica a una muestra de alumnos rotando cada año grados (3º a 6º de primaria y 1º a 3º de secundaria) y asignaturas (español, matemáticas y ciencias). ENLACE Prueba nacional de aplicación universal anual, diseñada y aplicada por la SEP. En Educación Básica, mide el resultado del logro educativo de cada alumno en las materias instrumentales básicas: español y matemáticas y de manera rotativa, una tercera asignatura, hasta cubrir todo el currículum. En Media Superior, evalúa las competencias consignadas en el Mapa Curricular Común de la Reforma de la Educación Media Superior en Lectura y Matemáticas

16

17 IV. Puede un examen de aplicación a casi 16 millones de alumnos en Básica ofrecer resultados confiables? Junio 26, Junio, 2007

18 1. Los exámenes se diseñan con rigurosos estándares de calidad técnica, asegurando su validez, confiabilidad y comparabilidad. Asimismo se diseñan cuestionarios de contexto para ser respondidos por los directores, los docentes y los padres de familia. 2. Cada año, se imprimen más de 160 millones de hojas, que se empacan en más un millón de cajas para entregar a más de 785 mil grupos de más de 147 mil escuelas de básica y media superior, bajo estrictos niveles de seguridad. 3. Tanto para ENLACE Básica como para Media Superior, las hojas de respuesta contienen los datos generales de cada alumno y de su escuela (para ENLACE Básica, además identifican el grupo del alumno). 4. La SEP contrata y capacita a alrededor de 182,780 aplicadores (uno por cada escuela en el caso de Básica -142,380- y uno por cada 30 alumnos en caso de Media Superior -40,400-) quienes llevan el material a las escuelas y son responsables de coordinar la aplicación con la vigilancia de padres de familia y la sociedad civil a través de diversas organizaciones sociales, en el caso de Educación Básica

19 5.- Cada año, para garantizar la comparabilidad de los resultados, además de la aplicación censal, se selecciona una muestra de escuelas en las cuales se administra una prueba pretest con reactivos que se aplicará el siguiente año. En educación básica, la SEP contrata personal externo por cada aula. Ello permite, en cao de que la prueba se difunda antes de tiempo como ha sucedido en los dos últimos años por grupos disidentes-, medir el posible sesgo de copia o dictado, comparando los resultados obtenidos en el pre-test (con preguntas diferentes), con los de la prueba censal. 6.- Una vez terminado el período de aplicación, los cuadernillos del examen se dejan en la escuela, para que el docente realice su resolución grupal y refuercen los contenidos que representen alto grado de dificultad, antes de finalizar el ciclo escolar 7.- Las hojas de respuesta son devueltas por los aplicadores a las autoridades educativas estatales, para su trasladado a la SEP por CONALITEG. 8.- La información se integra en una base de datos, agrupándose para su análisis. 9.- Se eliminan de los resultados los reactivos que presentan errores de impresión, o aquellos por encima o por debajo de los valor psicométrico aceptables.

20 10.- Para la detección de posible copia entre alumnos o dictado de respuesta, se utilizan dos diferente tipos de métodos -K-index y Scrutiny-, basados en el análisis de respuestas incorrectas, estimando la probabilidad de que los patrones coincidentes de cada par de sujetos en un grupo se deba al azar. En el caso de los docentes participantes en el Programa Nacional de Carrera Magisterial, si es detectado el factor de copia en su grupo, se aplica la sanción correspondiente con afectación directa a su puntaje en este factor La prueba no se califica con la suma simple de aciertos; se utiliza la Teoría de Respuesta al reactivo, que considera tres niveles de dificultad (alta, media y baja) de acuerdo a tres categorías de procesos cognitivos. Español: Extracción, Interpretación y Reflexión. Matemáticas: Reproducción, Conexión y Reflexión Los resultados se presentan en cuatro niveles de logro y se publican reportes a nivel de estudiante, grupo y escuela. Se elaboran guías para los docentes con el análisis de los reactivos así como de los distractores para coadyuvar al diagnóstico de su grupo Los cuestionarios de contexto, aplicados a padres de familia, docentes y directores se analizan por expertos a efecto de publicar los Factores de contexto en la enseñanzaaprendizaje.

21 ENLACE BÁSICA DEFINICIONES DE LOS NIVELES DE LOGRO Para todas las asignaturas evaluadas Insuficiente Elemental Necesita adquirir los conocimientos y desarrollar las habilidades de la asignatura evaluada. Requiere fortalecer la mayoría de los conocimientos y desarrollar las habilidades de la asignatura evaluada. Bueno Excelente Muestra un nivel de dominio adecuado de los conocimientos y posee las habilidades de la asignatura evaluada. Posee un alto nivel de dominio de los conocimientos y las habilidades de la asignatura evaluada.

22

23 Para su realización participan: 1. Las autoridades educativas de todas las entidades federativas. 2. Planteles educativas públicos federales y estatales así como particulares con Reconocimiento y Validez Oficial de Estudios. En media superior, inclusive los planteles públicos incorporados a Universidades Públicas 3. Toda la estructura educativa (jefes de sector, supervisores, apoyos técnicos pedagógicos, directores escolares y docentes.) 4. Padres de familia a través de los Consejos de Participación Social. 5. Organizaciones de la Sociedad Civil (ENLACE Básica) 6. Aplicadores externos con más de 5 años de experiencia.

24 1. Los exámenes se elaboran bajo especificaciones técnicas del más alto nivel (Comités técnicos y académicos integrados por expertos en la materia). 2. Revisión y análisis estadísticos de experto internacional en psicometría Dr. José Luis Gaviria de la Universidad Complutense de Madrid (Educación Básica y Media Superior) y de ETS para Educación Media Superior. 3. Se contratan y capacitan aplicadores externos. 4. Se utilizan lectores ópticos y equipo de alta tecnología para su procesamiento. 5. Las bases de datos son proporcionadas por las entidades federativas de escuelas y alumnos registrado en el Sistema Educativo. En la aplicación, se verifica la información detectándose planteles educativos que ya no están operando por falta de alumnos o que están operando pero no están registrados en la estadística, lo cual permite retroalimentar los Sistemas de Información de la SEP

25 V. Qué resultados se difunden?

26 Difusión de Resultados ENLACE La SEP está consciente de que el impacto más importante ocurre una vez que los resultados de ENLACE son entregados a sus destinatarios. Por ello, resulta fundamental que la información que aportan sea comprendida y entendida por los distintos públicos usuarios de los resultados, y atender sus necesidades de información de la mejor manera posible.

27 RESULTADOS DE LA PRUEBA ENLACE Concepto Insuficiente Elemental Bueno Excelente Primaria Español Matemáticas Asignatura anual 1/ n.a. n.a n.a. n.a n.a. n.a n.a. n.a Secundaria 2/ Español Matemáticas Asignatura anual 1/ n.a. n.a n.a. n.a n.a. n.a n.a. n.a Educación Media Superior Comprensión Lectora n.a. n.a n.a. n.a n.a. n.a n.a. n.a Matemáticas n.a. n.a n.a. n.a n.a. n.a n.a. n.a / Para lograr una evaluación integral, ENLACE a partir de 2008 incluye una tercera asignatura que se va rotando cada año. 2/ La prueba ENLACE se aplica desde 2009 en primero, segundo y tercero de secundaria y los contenidos de cada grado se evalúan con exámenes diferentes. Estos resultados no son comparables con 2006, 2007 y 2008 porque el examen cambió de perfil, antes evaluaba los contenidos de todos los grados de este nivel escolar en la prueba aplicada exclusivamente a los alumnos del tercer grado. Los resultados 2013 e históricos están disponibles en la página principal

28 México es uno de los países más ambiciosos en términos de difusión. Pocos Países realizan esfuerzos censales periódicos y hacen públicos los resultados de cada alumno y de cada escuela

29 Fuente: Eurydice, School Autonomy in Europe: Policies and Measures, Comisión Europea, 2007 pp. 41

30 Qué información aporta ENLACE y a quién? Diagnóstico Por alumno ALUMNO Diagnóstico de grupo MAESTRO Diagnóstico de la escuela ESCUELA Diagnóstico del Sistema Educativo en las asignaturas evaluadas

31 LA PÁGINA ENLACE BÁSICA

32 Sistema Nacional de Consulta de Resultados de ENLACE Algunas de las características de la Consulta de Resultados son: - Información personalizada: Por alumno, grado, grupo, escuela, zona, entidad y asignaturas. - Confidencialidad: Se mantiene el anonimato de los alumnos y usuarios del sistema. -Interpretación ágil de resultados: Presentación de tablas, matrices y porcentajes que facilitan el análisis de información. - Información comparativa: Los resultados pueden ser cotejados según el puntaje, nivel de logro y otros indicadores, y comparados con los resultados obtenidos en otros años - Cobertura masiva: A través del internet, la información está disponible para todos los involucrados en cualquier parte del país.

33 Sistema Nacional de Consulta de Resultados ENLACE Información para el público

34 istema Nacional de Consulta de Resultados ENLACE Información para el público El Portal incluye, además, la siguiente información: Los instrumentos aplicados, para ser resueltos en línea Las características de la prueba. La normatividad que regula su aplicación. Documento Técnico de todos los procesos de ENLACE Información de los resultados de años anteriores. Sugerencia sobre el uso de los resultados

35 Reportes que permite Imprimir El Sistema de Consulta a).- Resultados del alumno, para padres de familia, docentes y directivos Nivel de logro de cada estudiante, su grupo y su escuela, en el contexto estatal y nacional (media estatal y nacional) Fortalezas académicas, para ser estimuladas y reconocidas por los padres de familia y las autoridades educativas. Debilidades académicas y ejercicios de reforzamiento con acceso a programas b).- Resultados del grupo, para los docentes y directivos (ENLACE Básica) Nivel de logro de sus estudiantes. Reactivos por grados de dificultad (bajo, medio y alto). c).- Resultados de la escuela, Porcentaje de alumnos por cada nivel de logro en los grupos y las escuelas Media estatal y nacional de escuelas de la misma modalidad. Indicadores de rendimiento académico para la autoevaluación de la escuela.

36

37 VI. Qué hacer con los resultados en las escuelas?

38 Independientemente del uso de los resultados para orientar decisiones de planeación estratégica, se pone énfasis en el uso de la información en las aulas y centros escolares, para los padres de familia o tutores, y por la comunidad educativa, a través de los Consejos de Participación Social, para el establecimiento de metas para la mejora de la calidad educativa del plantel, recomendando: 1. Poner énfasis en los niveles de logro, más que en los puntajes 2. Identificar a qué escuelas y alumnos debemos apoyar más, y cómo podemos hacerlo. 3. Para evaluar los esfuerzos de una escuela, es necesario contextualizar sus resultados. 4. Las mejores escuelas no necesariamente son las que obtienen mejores resultados, sino aquellas que aportan más a sus estudiantes, por lo que se sugiere considerar el resultado histórico de cada plantel educativo. 5. ENLACE es un elemento importante de diagnóstico académico, pero de ninguna manera es el único.

39

40

41

42

43 VII. Debe desaparecer ENLACE?

44

45 Subsecretaría de Planeación y Evaluación de Políticas Educativas Dirección General de Evaluación de Políticas