Criterios y especificaciones para una evaluación certificativa de lengua española por tareas: el Diploma LETRA

Transcripción

1 ALTE 44th Meeting and Conference, Barcelona Criterios y especificaciones para una evaluación certificativa de lengua española por tareas: el Diploma LETRA Marta Baralo (Universidad Nebrija) Copyright ALTE 2013

2 Producto final: Diploma LETRA Certificación lingüística de nivel A2-n de español. Evalúa la competencia comunicativa de inmigrantes adultos, en los ámbitos administrativo y laboral. 2 Copyright ALTE 2013

3 (Marco ), el usuario básico de nivel A2-n: Es capaz de comprender frases y expresiones de uso frecuente relacionadas con áreas de experiencia que le son especialmente relevantes (información básica sobre sí mismo y su familia, compras, lugares de interés, ocupaciones, etc.) Sabe comunicarse a la hora de llevar a cabo tareas simples y cotidianas que no requieran más que intercambios sencillos y directos de información sobre cuestiones que le son conocidas o habituales. Sabe describir en términos sencillos aspectos de su pasado y su entorno así como cuestiones relacionadas con sus necesidades inmediatas. 3 Copyright ALTE 2013

4 Estructura del examen: Tareas 4 Copyright ALTE 2013

5 Etapas del Proyecto LETRA Etapa 1: detectar las necesidades lingüísticas comunicativas en español de los trabajadores inmigrantes hablantes de otras lenguas, en contextos laborales y administrativos. Etapa 2: definir las tareas comunicativas y los contenidos que se deben incluir en un currículo específico, partiendo de los descriptores de los niveles de referencia A1 y A2 del MCER y de los contenidos referidos en el PCIC para ambos niveles. Etapa 3: diseñar un examen para certificar el nivel de dominio comunicativo en tareas de comprensión lectora, comprensión audiovisual, expresión e interacción escrita y oral, siguiendo los estándares de calidad de ALTE y EALTE; describir las competencias que evalúa cada tarea y redactar las especificaciones de las escalas de evaluación de cada competencia Etapa 4: proponer un sistema para la implantación del examen de certificación a cargo de la Consejería de Inmigración de la CM. 5 Copyright ALTE 2013

6 Entidades colaboradoras 6 Copyright ALTE 2013

7 7 Copyright ALTE 2013

8 Entidades colaboradoras 8 Copyright ALTE 2013

9 1. Principios básicos del constructo (1/4) Desde una perspectiva social, partimos de la certeza de que la competencia lingüística comunicativa en la lengua de la comunidad de acogida constituye un requisito imprescindible para facilitar la integración y el arraigo de las personas migrantes y su incorporación al mercado de trabajo. 9 Copyright ALTE 2013

10 1. Principios básicos del constructo (2/4) Asumimos todos los principios del MCER, tanto en las decisiones teóricas, de tipo psicolingüistico y didáctico, como en las decisiones lingüísticas. Asumimos todos los principios del enfoque por Tareas, ya que se trata de un tipo de programa de aprendizaje y de evaluación de la lengua organizado por unidades que se basan en las actividades de uso real de la lengua; esto es, los procesos de aprendizaje de la lengua incluyen necesariamente procesos de comunicación (Estaire, 2009). 10 Copyright ALTE 2013

11 1. Principios básicos del constructo (3/4) El currículo basado en un enfoque por tareas contiene un inventario de tareas de comunicación que determinan los contenidos lingüísticos. Por ello, las pruebas del examen están compuestas por tareas semejantes a las que un trabajador inmigrante tiene que llevar a cabo en la vida cotidiana, cuando se desenvuelve en ámbitos laborales y administrativos. 11 Copyright ALTE 2013

12 1. Principios básicos del constructo (4/4) Variables atendidas en el diseño de las tareas: los ámbitos en los que los usuarios y las personas que aprenden una lengua tienen tareas que llevar a cabo al actuar "como agentes sociales; las actividades comunicativas de la lengua que se realizan para llevar a cabo tareas comunicativas; los tipos de texto aportados o generados en las situaciones de comunicación; las competencias comunicativas de la lengua que posibilitan a una persona actuar utilizando medios lingüísticos; las escalas ilustrativas para las actividades comunicativas, que proporcionan especificaciones escalonadas de criterios respecto al continuum del dominio de la lengua extranjera (del nivel A1 al C2) que pueden ser utilizadas para el desarrollo de los sistemas de evaluación. 12 Copyright ALTE 2013

13 Especificaciones del constructo del examen LETRA la certificación del nivel de dominio de la lengua nueva constituye un instrumento útil para el trabajador extranjero; el contexto específico, enfocado hacia lo laboral, puede requerir peculiaridades: adaptaciones de los descriptores de los niveles generales, asimetría del dominio de las actividades de la lengua (oral, escrita, interpretativa, expresiva, de interacción comunicativa), asimetría en el dominio de las subcompetencias lingüísticas (por ejemplo, mayor dominio léxico en ciertos ámbitos de nociones específicas y menor dominio de la gramática idiosincrásica). 13 Copyright ALTE 2013

14 Principios: Medición de la competencia lingüística comunicativa de manera asimétrica: Ponderación de las calificaciones obtenidas en cada una de las pruebas, sobre el total del examen (dando mayor puntuación a las actividades orales que a las escritas): comprensión lectora: 24%; comprensión audiovisual (comprensión sin interacción del interlocutor): 18%; expresión e interacción escrita: 18%; expresión e interacción oral: 40% (aproximadamente un 12% de este porcentaje correspondería a la comprensión en interacción y un 28% a la producción) 14 Copyright ALTE 2013

15 Descriptores y escalas de evaluación que se utilizan en la corrección del Examen LETRA: escalas de evaluación para las pruebas de comprensión lectora y audiovisual, que se procesan de forma ponderada para cada una de las tareas que constituyen cada prueba y que se recogen, mediante la corrección por plantilla, por número de aciertos alcanzados. descriptores para las pruebas de expresión e interacción escritas y orales escalas de evaluación holística para las pruebas de expresión e interacción escritas y orales escalas de evaluación analítica para las pruebas de expresión e interacción escritas y orales 15 Copyright ALTE 2013

16 2. Currículo del Diploma LETRA Acciones: tareas Actividades comunicativas Géneros Ámbitos 16 Copyright ALTE 2013

17 ACTIVIDADES COMUNICATIVAS DE LA LENGUA Actividades de interacción y expresión oral (incluyendo comprensión oral en interacción) En monólogo sostenido breve Actividades de comprensión lectora Actividades de comprensión audiovisual (comprensión como oyente) Actividades de expresión e interacción Escrita 17 Copyright ALTE 2013

18 GÉNEROS TEXTUALES Comprensión lectora Comprensión audiovisual Expresión e interacción escrita Interacción y expresión oral Anuncios, letreros, carteles, hojas informativas Texto biográfico, descriptivo o informativo. Correo electrónico, nota o carta breve y muy sencillo. Formulario o documento con datos personales Anuncio ofertando o solicitando algo Correo electrónico, nota o carta breve Conversación cara a cara sobre datos personales y experiencia e intereses Conversación informal cara a cara Conversación transaccional cara a cara y muy sencillo 18 Copyright ALTE laborales 2013

19 Ámbitos Ámbito Administrativo Ámbito Laboral - Instituciones y documentos - Gestiones -Letreros, carteles, anuncios - Vivienda -Medios de comunicación -Información general - - Entorno - Servicios públicos - Letreros, carteles, anuncios -Relaciones de dependencia -Materiales -Horarios - Riesgos laborales 19 Copyright ALTE 2013

20 2. Capacidades evaluadas en el examen (a) Ámbito laboral: Comprender preguntas relativas a la identificación e Identificarse: Rellenar formularios sencillos con datos personales Relacionarse socialmente de forma sencilla: convenciones sociales, fórmulas de tratamiento, saludos, despedidas, normas de cortesía (agradecimiento, petición, disculpa) Dar y comprender información sobre su oficio / profesión, lugar de trabajo, herramientas y ropa de trabajo, posibles riesgos laborales, horarios, derechos y obligaciones laborales, etc.; la de otras personas. Desenvolverse para buscar trabajo. Comprender carteles u hojas informativas (ej. prevención de riesgos laborales) Dar, pedir y comprender instrucciones sobre funcionamiento de una herramienta, un aparato, o sobre cómo realizar una tarea, etc. 20 Copyright ALTE 2013

21 Ámbito administrativo: datos personales, formulario 21 Copyright ALTE 2013

22 2. Capacidades evaluadas en el examen (b) Ámbito administrativo: Identificar oficinas, centros de apoyo al inmigrante, otras instituciones relevantes. Pedir, dar y comprender información sobre oficinas, centros de apoyo al inmigrante, otras instituciones relevantes y sobre las gestiones que se realizan en ellos. Identificar documentos necesarios para gestiones relevantes; pedir, dar y comprender información sobre su obtención, uso, etc. Desenvolverse de forma sencilla en instituciones del ámbito administrativo 22 Copyright ALTE 2013

23 2. Ámbitos: laboral y administrativo 23 Copyright ALTE 2013

25 ÁMBITO LABORAL A. Administrativo/laboral: lugares e instituciones Asociaciones diversas (ONGs, CEPIs, Cruz Roja, sindicatos, instituciones religiosas, etc) Asesorías sociales, jurídicas y laborales Oficinas de atención al inmigrante Oficinas de servicios de extranjería ETTs INEM Las especificaciones del Ámbito laboral han sido realizadas por Dª Sheila Estaire, investigadora del grupo LAEELE (Universidad Nebrija) 25 Copyright ALTE 2013

26 ÁMBITO LABORAL B. Profesional: Lugares e instituciones Almacenes Talleres Fábricas Establecimientos de hostelería Granjas Servicios de mantenimiento Tiendas Oficinas Servicio doméstico/ de limpieza Vigilancia de obras, edificios, supermercados, etc. 26 Copyright ALTE 2013

27 ÁMBITO LABORAL A. Administrativo/laboral y B. Profesional: acontecimientos Acontecimientos, tales como: -Gestiones diversas relacionadas con la atención al inmigrante y con el empleo -Búsqueda de empleo -Entrevistas de trabajo -Familiarización con las condiciones de trabajo, la seguridad laboral, etc. -El día a día en el trabajo 27 Copyright ALTE 2013

28 ÁMBITO LABORAL A. Administrativo/laboral y B. Profesional: Personas Asistentes sociales Asesores sociales, jurídicos y laborales Empleados y funcionarios de instituciones relacionadas con el empleo y con los inmigrantes Empresarios, empleadores, personal de recursos humanos Capataces/jefes Compañeros de trabajo Clientes 28 Copyright ALTE 2013

29 ÁMBITO LABORAL A. Administrativo/laboral y B. Profesional: acciones Acciones tales como: -Solicitar tarjeta de residencia/permiso de trabajo/ tarjeta de desempleo/cursos de formación laboral -Solicitar asesoría laboral/judicial -Comprender/escribir una demanda/oferta de empleo -Comprender descripción de un trabajo y requisitos para el mismo -Rellenar ficha solicitud de empleo -Elaborar un currículo -Realizar una entrevista de trabajo -Negociar condiciones laborales -Comprender información para prevenir siniestralidad en el trabajo -Comprender instrucciones para realizar un trabajo 29 Copyright ALTE 2013

30 Especificaciones de las pruebas del examen LETRA Comprensión lectora Comprensión audiovisual LETRA Expresión e interacción escritas Expresión e interacción orales 30 Copyright ALTE 2013

31 Pasos para elaborar las pruebas de comprensión Detección de necesidades de comprensión lectora y oral para desenvolverse en los ámbitos administrativo y laboral. Determinación de las microhabilidades de comprensión implicadas en las situaciones comunicativas conocimientos, procesos y estrategias. Diseño de la prueba de evaluación tareas comunicativas a partir de material de lectura y audiovisual. 31 Copyright ALTE 2013

32 Enfoque teórico adoptado Enfoque orientado a los procesos que pone en marcha el hablante no nativo, teniendo en cuenta los tipos de conocimiento que requiere la tarea de comprensión y atendiendo a las estrategias que utiliza el aprendiz. (Martín Leralta, 2007, 2009) 32 Copyright ALTE 2013

33 Especificaciones de la Prueba de Comprensión Lectora TAREA 1 Leer anuncios y letreros y relacionarlos con el tema, el tipo de información ofrecida, lugar en el que pueden aparecer o contexto en el que puedan ser de interés 7 ítems ESTÍMULO INICIAL 10 anuncios y letreros con textos escritos muy breves y sencillos que pueden encontrarse en las situaciones más corrientes (En total max palabras) FORMATO DE LA PRUEBA 10 anuncios y letreros, 2 de los cuales son distractores y 1 se usa para el ejemplo. Y 1 lista con 8 palabras o frases muy básicas con las que se relacionarán los anuncios y letreros (uno de los componentes de la lista se usa como ejemplo) CAPACIDADES EVALUADAS El examinando PUEDE: Comprender textos muy breves y sencillos en anuncios y letreros que se pueden encontrar en las situaciones más corrientes, reconociendo palabras clave y frases muy básicas. 33 Copyright ALTE 2013

35 Especificaciones de la Prueba de Comprensión Lectora TAREA 4 ESTÍMULO INICIAL FORMATO DE LA PRUEBA Leer un correo electrónico, SMS, nota o carta breve y marcar la respuesta correcta al mismo. 1 ítem 1 mensaje de correo electrónico, SMS, nota o carta muy breve y sencillo (ámbito público, personal, laboral o administrativo) (Max palabras) 2 ítems de elección múltiple, con 4 opciones de respuesta para cada ítem: -El 1er ítem va dirigido a la identificación de la respuesta correcta al mensaje En el 2º ítem el examinando deberá inferir algún dato que no está presente en el enunciado. CAPACIDADES EVALUADAS El examinando PUEDE: -Comprender un mensaje breve y sencillo, transmitido a través de correo electrónico, SMS, nota o carta, que alude al ámbito público, personal, laboral o administrativo -Identificar la respuesta correcta al mismo -Inferir algún dato que no está presente en el enunciado. 35 Copyright ALTE 2013

37 Especificaciones de la Prueba de Comprensión Audiovisual (Tiempo 25 Minutos) TAREA 2 Ver un video con una conversación transaccional cara a cara y contestar a 4 preguntas 4 ítems ESTÍMULO INICIAL Una secuencia de 3 conversaciones grabadas en vídeo 1 conversación transaccional cara a cara relacionada con el ámbito administrativo-laboral (que se desarrolla en oficinas/ instituciones a las que acuden los trabajadores inmigrantes con frecuencia), grabada en vídeo, entre -el mismo interlocutor extranjero -y una o más personas nativas. FORMATO DE LA PRUEBA 4 ítems de elección múltiple, con 4 opciones de respuesta (escritas o iconográficas) para cada ítem. -El 1er ítem va dirigido a la identificación de la idea principal/información general de la escena -El 2º y 3er ítem van dirigidos a la identificación de datos concretos, uno de los cuales se centrará en el deletreo de un nombre, calle, etc. (ver nota abajo) -En el 4º ítem el examinando deberá inferir algún dato que no está presente en el enunciado. 37 Copyright ALTE 2013

38 Capacidades evaluadas Comprensión general del mensaje. Comprensión de detalles concretos. instrucciones para llegar a un sitio deletreo de un nombre propio un número de teléfono documentación mencionada para realizar una gestión un dato presente en el enunciado (que variará dependiendo de la información transmitida en el mensaje) Comprensión inferencial a partir del contexto y el comportamiento de los hablantes. 38 Copyright ALTE 2013

39 Ventajas del uso del vídeo Comprender el lenguaje VIENDO cómo transcurre la acción Evaluación de contenidos pragmáticos y del componente no verbal asociado a la interacción oral Coherencia en la evaluación de destrezas integradas interacción oral mediante simulación 39 Copyright ALTE 2013

40 Guión del vídeo Permitir y facilitar inferencias a partir de las imágenes Input ajustado a las características de la lengua en la situación que representa Favorecer los procesos naturales de escucha idea principal, datos concretos, inferencias 40 Copyright ALTE 2013

41 Compresión Audiovisual Haz clic encima para ver el vídeo 41 Copyright ALTE 2013

43 Evaluación de las Tareas de expresión e interacción oral y escrita Expresión e interacción global Organización y cohesión/coherencia discursiva Competencia sociopragmática Alcance y control de vocabulario Alcance y control gramatical Control ortográfico / articulatorio 43 Copyright ALTE 2013

44 Especificaciones de la Prueba de Expresión e Interacción Escritas TAREA 1 Rellenar un formulario o documento con datos personales incluidos en un cuadro (ámbito administrativo o laboral) ESTÍMULO INICIAL -Formulario o documento en el que se solicitan datos personales y/o laborales. -Datos personales y/o laborales de una persona, con los que se deberá rellenar el formulario o documento. FORMATO DE LA PRUEBA El examinando deberá rellenar un formulario en el que se solicita información personal básica, utilizando datos incluidos en un cuadro. CAPACIDADES EVALUADAS El examinando PUEDE: Rellenar por escrito un formulario sencillo del ámbito administrativo, con los datos personales incluidos en un cuadro (nombre, apellidos, lugar y fecha de nacimiento, dirección, NIE, etc.). 44 Copyright ALTE 2013

45 Expresión e interacción escritas Ámbito administrativo: datos personales, formulario 45 Copyright ALTE 2013

46 Especificaciones de la Prueba de Expresión e Interacción Escritas TAREA 2 ESTÍMULO INICIAL FORMATO DE LA PRUEBA CAPACIDADES EVALUADAS Escribir un anuncio ofertando o solicitando algo (ámbito laboral, público o personal) -Finalidad / contexto -Lista de puntos que se deben incluir en el anuncio -Espacio en blanco en un tablón de anuncios para escribir el anuncio El examinando deberá redactar un anuncio breve para colocar en un tablón de anuncios -acorde con la finalidad / contexto indicado e -incluyendo la información solicitada El examinando PUEDE: Redactar un anuncio muy sencillo, relacionado con el ámbito laboral, público o personal, -ofreciendo la información solicitada -cumpliendo los fines funcionales -manifestando adecuación al género textual. -utilizando frases y oraciones breves y sencillas, enlazadas con conectores muy básicos 46 Copyright ALTE 2013

48 Especificaciones de la Prueba de Interacción y Expresión Orales (Tiempo 8-10 minutos) TAREA 2 TAREA ESTÍMULO INICIAL FORMATO DE LA PRUEBA -Mantener un monólogo sostenido en el que el examinando describe una lámina representativa del ámbito laboral. -Participar en una conversación cara a cara con el examinador acerca de ciertos aspectos relacionados con la misma. 1 lámina representativa del ámbito laboral/de empleo y trabajo seleccionada previamente por el examinando + algunas preguntas del examinador Un período inicial de monólogo sostenido muy breve y sencillo, previamente preparado, en el que el examinando describe la escena representada en la lámina que ha seleccionado previamente. -Le sigue un período breve de conversación cara a cara en el que el examinando contesta a algunas preguntas del examinador referentes a herramientas de trabajo, horarios laborales, riesgos laborales, etc. (aspectos para los cuales aparecen una serie de estímulos en un margen de la lámina) 48 Copyright ALTE 2013

49 Especificaciones de la Prueba de Interacció y Expresión Orales (Tiempo 8-10 minutos) CAPACIDADES EVALUADAS Condiciones: el examinador será un interlocutor cooperativo que hablará despacio y con claridad, sin modismos ni frases hechas. El examinando PUEDE: -Participar en las fases iniciales de una entrevista de trabajo muy sencilla utilizar enunciados breves, sencillos, aislados que hacen uso de un repertorio de vocabulario y estructuras gramaticales básico y que producen un discurso adecuadamente organizado, con suficiente cohesión y coherencia con una pronunciación y entonación que no impiden la comprensión proporcionar los datos personales y laborales requeridos por el entrevistador, cumpliendo así los fines funcionales, deletrear algún nombre propio requerido por el entrevistador, - Utilizar fórmulas de cortesías sencillas y cotidianas para establecer contactos sociales básicos. - Utilizar un registro formal adecuado al género textual (una entrevista en un contexto formal). - Hacer uso de estrategias compensatorias para la comprensión y para la producción. 49 Copyright ALTE 2013

50 Tabla 4. Especificaciones de la Prueba de Interacción y Expresión Orales (Tiempo 8-10 minutos) CAPACIDADES EVALUADAS Condiciones: el examinador será un interlocutor cooperativo que hablará despacio y con claridad, sin modismos ni frases hechas. El examinando PUEDE: En monólogo sostenido: -Describir brevemente una escena relacionada con el ámbito laboral/de empleo y trabajo. En conversación cara a cara: -Identificar ciertos aspectos relacionados con la profesión representada en la lámina, herramientas de trabajo utilizadas, posibles riesgos laborales, buenas prácticas en el trabajo; horarios laborales, etc. - Referirse a su experiencia personal en relación con algunos de los puntos anteriores. En el monólogo sostenido y en la conversación cara a cara: -Utilizar enunciados breves, sencillos, aislados, con una pronunciación y entonación que no impiden la comprensión, que hacen uso de un repertorio de vocabulario y estructuras gramaticales básico y que producen un discurso adecuadamente organizado, con suficiente cohesión y coherencia. -Proporcionar los datos laborales y personales requeridos por la tarea, cumpliendo así los fines funcionales. - Hacer uso de estrategias compensatorias para la comprensión y para la producción. 50 Copyright ALTE 2013

55 Transferencia de resultados de la investigación a la sociedad Principales beneficiarios: ONGs de acogida y enseñanza CEPI: centros de participación e integración Profesores voluntarios Alumnos inmigrantes trabajadores 55 Copyright ALTE 2013

56 Guía didáctica para la preparación del Examen 56 Copyright ALTE 2013

57 Resultados de la primera convocatoria del Examen LETRA Fecha: Noviembre 2010 Colaboración de 22 Centros Inscritos totales: 317 candidatos - Anulados por errores en las inscripciones: 22 candidatos - Inscritos definitivos: 295 candidatos - Presentados al Examen: 281 candidatos - Procedencia de los candidatos:45 países - África, 19 - América, 1 - Asia, 11 - Europa, Copyright ALTE 2013

58 Países de procedencia de los candidatos del Diploma LETRA (1ª convocatoria: noviembre de 2010) 58 Copyright ALTE 2013

59 Resultados de la 1ª convocatoria del Diploma LETRA: 85,33% de éxito Nota final 6,33% 8,33% 13,33% 54,33% 17,67% NO APTO SATISFACTORIO BIEN MUY BIEN NP 59 Copyright ALTE 2013

60 A modo de conclusión La investigación nos ha permitido: transferir nuestra experiencia docente e investigadora en el ámbito de la lingüística aplicada a numerosas personas, de muy diferentes profesiones, que entregan voluntariamente parte de su tiempo a la enseñanza del español a trabajadores inmigrantes sin tener ninguna formación especializada. abrir las puertas de la investigación universitaria a una realidad social necesitada de expertos en desarrollos didácticos eficaces que faciliten y aceleren la adquisición del español como lengua nueva en esta población meta. satisfacer a tres colectivos implicados: los centros, los evaluadores y los candidatos, tal como lo han mostrado las encuestas realizadas. 60 Copyright ALTE 2013

61 GRACIAS! Grupo de investigación LAELE Universidad Nebrija Baralo, M. y S. Estaire Revista Lengua y migración, nº Copyright ALTE 2013