Evaluación del programa de Educación Bilingüe (castellano-inglés) de Madrid: su impacto en el aprendizaje de materias distintas al Inglés

Transcripción

1 Evaluación del programa de Educación Bilingüe (castellano-inglés) de Madrid: su impacto en el aprendizaje de materias distintas al Inglés Jesús M. Carro Universidad Carlos III de Madrid International Conference Multilingualism Paradigm Palma de Mallorca, Abril 2014 Presentación basada en: Evaluating a Bilingual Education Program in Spain: the Impact Beyond Foreign Language Learning, de Brindusa Anghel (FEDEA), Antonio Cabrales (University College of London), y Jesús M. Carro (Univ. Carlos III de Madrid)

2 Introducción Programa de Bilingüe de la Comunidad de Madrid, que analizamos, a grandes rasgos: Algunos Colegios Públicos de Educación Primaria. Practicamente todos los niños tienen como única lengua (materna, y en su entorno) el castellano. Algunas asignaturas se enseñan en inglés (cerca del 40% de las clases). Matemáticas y Lengua sólo en castellano. Objetivo principal de esta política: Que aprendan inglés! (nivel B1 al terminar la primaria ).

3 Introducción Beneficios potenciales de esta política: Beneficio económico en España de saber inglés; salario esperado un 40% mayor. Beneficios educativos (además de saber inglés) potenciales: Mejora general de las capacidades cognitivas por aprender otra lengua. Concentración, trabajo con nuevas estructuras y reglas, etc. Mejora en resolución de problemas matemáticos. Entrenamiento de la memoria. Otros efectos positivos a nivel psicológico. El bilingüismo parece estar correlacionado con mayor capacidad para aprender otras materias y adquirir otras habilidades.

4 Introducción Costes potenciales de esta política: Coste económico del programa: nuevos profesores, formación de los profesores existentes, complementos salariales, nuevos materiales, etc. Costes educativos: Aprender otro idioma requiere esfuerzo por parte del alumno y del profesor, y tiempo de aprendizaje. Que se está quitando a otras materias y/o actividades alternativas. Eso podría llevar a un menor aprendizaje de otras materias.

5 Introducción Pero, no he señalado antes importantes beneficios de la educación bilingüe sobre el aprendizaje de otras materias?

6 Introducción Razones por las que esos estudios podrían no ser válidos para nuestro caso: 1. Algunos son estudios psicológicos usando un reducido número de personas con características muy particulares (como individuos verdaderamente bilingües). 2. Otros se centran en programas educativos bilingües destinados a población inmigrante (educación en español e inglés para inmigrantes hispanos en EE.UU).

7 Introducción Razones por las que esos estudios podrían no ser válidos en nuestro caso: 3. Otros son comparaciones simples y directas de escuelas bilingües con escuelas no bilingües que no distinguen si los mejores resultados de las bilingües se deben al programa bilingüe o si esos centros son un grupo muy seleccionado de estudiantes y/o profesores que lo haría igual de bien sin el programa bilingüe.

8 Introducción Por lo tanto, con los estudios existentes no podemos estar seguros de si un programa bilingüe como el implementado en Madrid en Primaria va a tener un beneficio o un perjuicio sobre el aprendizaje de otras materias. Dar respuesta a esta pregunta es el objetivo principal de nuestro estudio.

9 Descripción del programa: Contexto En el sistema educativo español: - Segundo ciclo de Educación Infantil (E.I.) desde los 3 a los 5 años de edad es provisión gratuita de manera universal. - 6 años de Educación Primaria obligatoria (E.P.). -Los colegios públicos de E. P. lo son también de E.I. (C.E.I.P.) - 4 años de Educación Secundaria Obligatoria, ESO. La elección de colegio y la escolarización se hace en prácticamente todos los casos (97%) a los 3 años de edad.

10 Descripción del programa El programa bilingüe castellano-inglés de la Comunidad de Madrid fue anunciado con la publicación de la ORDEN 796/2004, de 5 de marzo que contenía la convocatoria para seleccionar 25 CEIPs. Comenzó a implementarse en el curso 2004/05 en 1º de primaria en los CEIPs seleccionados. Por lo tanto, los alumnos con los que eventualmente iba a empezar el programa ya estaban en las escuelas seleccionadas antes del anuncio del programa.

11 Descripción del programa En el 2005/06, programa bilingüe implementado en: 1º y 2º de primaria de los 25 centros seleccionados en 2004, y en 1º de Primaria en los 54 CEIPs seleccionados en En el curso 2009/10: los 25 centros seleccionados en 2004 completan la implantación en los 6 cursos de Primaria. Se gradúa la primera promoción de estos centros que ha seguido el programa. Este curso ya suman 316 CEIPs, de los 780 que hay en Madrid.

12 Descripción del programa Criterios usados para seleccionar los colegios, de entre los que solicitan participar: 1. Grado de aceptación de la comunidad educativa. 2. Viabilidad de la solicitud (experiencia educativa del centro, plantilla de profesorado, recurso del centro, número de clases y estudiantes). 3. Distribución equilibrada por áreas territoriales. 4. Añadido en 2005 (y siguientes): Nivel y capacitación en lengua inglesa del profesorado.

13 Descripción del programa Colegio Bilingüe: Imparte en inglés al menos 1/3 del horario lectivo semanal. Se aumentan las horas de la asignatura Inglés a 5 horas a la semana, a costa de otras asignaturas no instrumentales. El 1/3 se completa enseñando en inglés Conocimiento del Medio. También pueden darse en inglés: Educación Artística, Educación Física o Religión.

14 Descripción del programa Colegio Bilingüe: Lengua Castellana y Matemáticas tienen que enseñarse en castellano y no se reduce el nº de horas. Recibe recursos extras: formación linguistica de los maestros, apoyo de ayudantes de conversación nativos, presupuesto extra. Los maestros que enseñan en inglés reciben un complemento salarial.

15 Datos Prueba CDI que todos los estudiantes de 6º de Primaria de la Comunidad de Madrid tiene que realizar. Partes: Dictado, Lectura, Cultura General (Conocimiento del Medio) y Matemáticas. Nuestra medida para evaluar el efecto será el resultado de los estudiantes en Cultura General, en Lectura, y en Matemáticas.

16 Datos Todos realizan el mismo examen, y este es todo en Castellano. No se mide el conocimiento de inglés en esta prueba. Contienen además un cuestionario en el que se recoge información sobre varias características: sexo, edad, país de nacimiento, nivel educativo de los padres, ocupación de los padres, y otras.

17 Datos Datos para analizar el efecto del programa en la primera promoción de estudiantes en las primeras 25 escuelas bilingües (las seleccionadas en 2004). Esos estudiantes hicieron la prueba CDI en 2010:

18 Datos Datos para analizar el efecto del programa en la primera promoción de estudiantes en las primeras 25 escuelas bilingües (las seleccionadas en 2004). Esos estudiantes hicieron la prueba CDI en 2010: Grupo tratado Grupo de control Antes del tratamiento: estudiantes de 6º en escuelas bilingües en CDI 2009 Después del trata.: estudiantes de 6º en escuelas bilingües en CDI 2010 Antes del tratamiento: estudiantes de 6º del resto de escuelas en CDI 2009 Después del trata.: estudiantes de 6º del resto de escuelas en CDI 2010

19 Datos CDI 2009 y 2010, escuelas seleccionadas en 2004 Año Prueba CDI Antes 2009 Bilingües (Grupo tratado) Después 2010 Resto de escuelas (Grupo control) Antes Después Doble Diferen cia Variable Media Media Media Media Materias Mathemáticas 8,94 10,55 9,54 10,88 0,26 Lengua 10,44 14,60 10,87 14,84 0,18 Lectura 2,87 3,53 2,93 3,59 0,01 Cultura General 2,28 3,17 2,35 3,37-0,13 Nº de Colegios Nº de estudiantes

22 Datos CDI 2009 y 2010, escuelas seleccionadas en 2004 Bilingües 2004 (Grupo tratado) Después Resto de escuelas (Grupo de control) Doble Diferen cia Año Prueba CDI Antes Antes Después Variable Algunas Características Individuales: Nacidos España 81% 87% 81% 81% 6pp Nacidos Hispano America Educación Padres: Superiores Educación Padres: Secundaria Obligatoria o menos 10% 6% 11% 10% -3pp 33% 39% 48% 47% 7pp 26% 22% 17% 17% -4pp

23 Problemas En los datos hay un doble problema de autoselección que nos puede llevar a conclusiones incorrectas: 1. Los colegios deciden si solicitan participar en el programa o no. Los que deciden solicitar pueden ser muy distintas de las que no. Solución con la doble diferencia: son los mismos colegios antes y después.

24 Problemas 2. Los estudiantes son distintos. Para solucionarlo: La doble diferencia, puesto que la mayoría de los estudiantes estaban ya en la escuela antes del programa. Y, comparamos grupos de estudiantes tratados con controles (y antes con después), que tengan las mismas características individuales.

25 Datos Disponemos también de datos para analizar el efecto: de la segunda promoción de estudiantes en las primeras 25 escuelas bilingues (las seleccionadas en 2004). CDI en 2011 y en Y de primera promoción de estudiantes en las 54 escuelas que se seleccionaron en el CDI en 2011 frente a Los problemas y la estrategia econométrica empleada para solucionarlos son los mismos.

26 Principales Resultados Los efectos del programa bilingüe son estadísticamente igual a cero en Matemáticas y Lectura para todas las promociones y grupos analizados.

27 Principales Resultados Los efectos del programa bilingüe son estadísticamente igual a cero en Matemáticas y Lectura para todas las promociones y grupos analizados. Para la primera promoción de los primeros colegios, en una escala puntuación del 0 al 10 en Cultura General, encontramos los siguientes efectos del programa bilingüe: Efecto negativo (y significativo) de 0.9 puntos para estudiantes cuyos padres han completado como máximo la educación secundaria obligatoria.

28 Principales Resultados Los efectos del programa bilingüe son estadísticamente igual a cero en Matemáticas y Lectura para todas las promociones y grupos analizados. Para la primera promoción de los primeros colegios, en una escala puntuación del 0 al 10 en Cultura General, encontramos los siguientes efectos del programa bilingüe: Efecto negativo (y significativo) de 0.9 puntos para estudiantes cuyos padres han completado como máximo la educación secundaria obligatoria. Efecto negativo (y significativo) de 0.6 puntos para estudiantes cuyos padres han completado educación secundaria post-obligatoria.

29 Principales Resultados Los efectos del programa bilingüe son estadísticamente igual a cero en Matemáticas y Lectura para todas las promociones y grupos analizados. Para la primera promoción de los primeros colegios, en una escala puntuación del 0 al 10 en Cultura General, encontramos los siguientes efectos del programa bilingüe: Efecto negativo (y significativo) de 0.9 puntos para estudiantes cuyos padres han completado como máximo la educación secundaria obligatoria. Efecto negativo (y significativo) de 0.6 puntos para estudiantes cuyos padres han completado educación secundaria post-obligatoria. No hay efecto estadísticamente distinto de cero para estudiantes cuyos padres tienen estudios superiores.

30 Principales Resultados Para la segunda promoción de los primeros colegios, encontramos efectos similares.

31 Principales Resultados Para la segunda promoción de los primeros colegios, encontramos efectos similares. Para la primera promoción del segundo grupo de colegios seleccionados (en 2005) los efectos negativos son mucho menores: Solo hay un efecto negativo (y significativo) para aquellos cuyos padres tienen menor nivel de educación, y es menor en magnitud: 0.5 (frente a 0.9. de los primeros centros seleccionados). No hay efecto estadísticamente distinto de cero ni en media ni para el resto de estudiantes.

32 Principales Resultados Las mismas conclusiones se obtinen con otras formas de controlar por la diferencias entre centros y estudiantes que hemos usado. jcarro@eco.uc3m.es

33 Conclusiones En el programa bilingüe analizado, no se han encontrado los beneficios sobre el aprendizaje de otras materias mencionado en la introducción, y sí se ha encontrado un perjuicio sobre el aprendizaje de la materia enseñada en la lengua extranjera. Parece, pues, que el importante aprendizaje de Inglés que se obtiene con este programa requiere que los alumnos desvíen esfuerzos y tiempo de otros aprendizajes. Dos aspectos importantes de nuestras conclusiones: (i) El efecto negativo es heterogeneo y se concentra en los que tienen padres con menor educación. (ii) El efecto negativo se reduce mucho en el segundo grupo de escuelas seleccionadas.

34 Cuestiones Pendientes Dados nuestros resultados, sería interesante poder disponer de datos para responder a: 1) A que se debe la mejora en el segundo grupo de colegios seleccionados? Nuestra hipótesis (no contrastada): maestros con mejor nivel inicial de inglés. Necesario caracterizar el efecto del nivel de inglés de los maestros sobre el resultado. 2) Es recuperable en cursos siguientes el efecto negativo encontrado (dado que no es en una materia instrumental) o tendrá consecuencias negativas a futuro para esos alumnos?

35 Cuestiones Pendientes Dados nuestros resultados, sería interesante poder disponer de datos para responder a: 3) Qué está pasando con estos alumnos en el programa bilingüe en Secundaria? Aparecerán ahí los efectos positivos, dado que ya tienen un buen nivel de inglés? 4) Está generando segregación de alumnos en colegios bilingües y no bilingües cuando las solicitudes de colegio ya se han hecho sabiendo qué colegios eran bilingües?

36 Cuestiones Pendientes Dados nuestros resultados, sería interesante poder disponer de datos para responder a: 5) Dado que el objetivo declarado de la política era el aprendizaje del inglés: Would not be sufficient to change the methodology of learning the English language?

37 Y una petición Exijamos que las políticas públicas se evaluen con rigor científico, y que los datos se pongan a disposición.

38