Palabras clave: examen, evaluación, suficiencia en inglés.

Transcripción

1 Resumen REFORMULACIÓN DE LA PRUEBA DE SUFICIENCIA DE INGLÉS EN LA FI-UNLP Scaramutti, José Carlos; Young, Christopher; Cabo, Enrique Facultad de Ingeniería Universidad Nacional de La Plata Este trabajo tiene por objeto presentar la experiencia de un cambio metodológico en la forma de verificar la capacidad de los alumnos de la FI-UNLP para la comprensión de un texto en inglés, mediante un examen que deben rendir promediando el tercer año de la carrera; ya que se espera que tengan esta competencia para poder consultar bibliografía escrita en inglés mientras cursan las asignaturas de los años superiores. La prueba, que consistía en la traducción de un texto de carácter técnico del inglés al castellano, se fue desvirtuando: i) se evidenció un sesgo de la corrección que ponía el énfasis en la traducción y no en si se había comprendido la idea transmitida en el texto, ii) lo que derivó en bajas tasas de aprobación y reticencia de los alumnos a rendirla (muchos alumnos lo hacían próximos a graduarse). Se la reformuló entonces para otra basada en un entorno web que busca que el alumno comprenda un texto y conteste preguntas sobre él en forma interactiva, en un tiempo especificado, al final del cual se muestra en la pantalla de la PC la nota obtenida. El sistema se desarrolló como una aplicación web, multiplataforma, programada en PHP, AJAX (por medio de jquery) y JavaScript. Diseñado y programado con software open source y librerías con licencia GPL/MIT ejecutado en un servidor Apache con PHP/MYSQL, de modo tal de permitir una amplia flexibilidad para el docente, mayor que la que implicaría utilizar un sistema basado, por ejemplo, en la plataforma Moodle. Las primeras experiencias se realizaron a finales de 2010 y el sistema se ha ido mejorando (incluyendo cuestiones de seguridad de ingreso al mismo) y ha demostrado una óptima performance y aceptabilidad entre los cerca de 200 alumnos que rindieron en cada una de las diez fechas que estuvieron disponibles. Palabras clave: examen, evaluación, suficiencia en inglés.

2 Introducción Aprobar una prueba de suficiencia de inglés al promediar la carrera es un requisito para obtener el título de grado en la Facultad de Ingeniería de la UNLP, ya que el alumno debe tener un conocimiento mínimo de inglés que le permita entender textos escritos en esa lengua, a medida que cursa las asignaturas tecnológicas aplicadas (4º y 5º año). Históricamente este requisito se ha evaluado mediante una prueba escrita consistente en traducir un texto del inglés al español. Problemas instigadores del cambio Mientras la metodología apuntada arriba sirvió a los objetivos enunciados antes, el sistema funcionó aceptablemente. Sin embargo, una serie de circunstancias se fueron sumando a lo largo de los años para conspirar contra este funcionamiento, destacándose: Flexibilización en el control del cumplimiento de la prueba como prerrequisito para avanzar en la carrera (como consecuencia de cambios de planes de estudio). Asimetrías en la forma de evaluar los exámenes entre los docentes, enfatizándose la evaluación de la traducción sobre la comprensión del texto, con un incremento de fracasos en la prueba, que sumado a lo indicado en el punto anterior predispuso a muchos alumnos a dilatar el cumplimiento de este requisito, dejándolo para el final de la carrera. Resultados publicados entre 7 y 15 días posteriores a la evaluación, y en ocasiones transcurrían 20 o 30 días para que el alumno pudiera acceder a su examen corregido. Esto contribuyó para que, muchos de los alumnos que adeudaban este requisito como único obstáculo para su graduación, no consiguieran aprobarlo en sucesivas presentaciones. Claramente en estas instancias la prueba de suficiencia estaba completamente fuera del objetivo trazado originalmente y que le daba significación. Premisas para encontrar una solución Planteado el problema, se decidió buscar una solución que apuntara a cumplimentar las siguientes premisas: Resignificar la prueba obedeciendo al objetivo inicial: ser un indicador de la capacidad de un alumno para comprender un texto en inglés,

3 Uniformizar la corrección de cada evaluación, evitando asimetrías originadas en las subjetividades de los distintos docentes. Capacidad de evaluar una gran cantidad de alumnos en cada fecha. El alumno debe conocer el resultado de su examen en el mismo día de la prueba. Implementación de la solución La necesidad del auxilio de una herramienta informática se hizo evidente para cumplir con algunas de las premisas enunciadas en el apartado anterior. La disyuntiva que se planteó entonces fue utilizar un producto enlatado o desarrollar uno ad-hoc. Se evaluó la posibilidad de utilizar Moodle (Lara Fuillerat 2009), pero los exámenes vía internet con corrección on-line constituye solo una de las múltiples opciones con que cuenta la aplicación, (que está más orientada a la implementación de cursos completos), por lo que no pareció ser la opción más adecuada ni la más flexible (especialmente si hay que agregar o quitar alumnos de las listas de evaluación segundos antes de iniciar el examen). Se prefirió entonces desarrollar una herramienta simple y flexible orientada exclusivamente a este tipo de pruebas. En primer lugar se cambió el enfoque, reemplazándose la traducción de un texto por una serie de preguntas sobre él, con el objetivo de determinar qué cosas el alumno puede comprender a partir de la lectura del mismo, más allá del dominio que tenga del idioma, (si bien, claro está, ambas cosas no están disociadas). Por otro lado, se optó por la metodología de preguntas con respuestas bajo la modalidad de opciones múltiples (verdadero, falso, NoSabe/NoContesta); para posibilitar la corrección inmediata en el ordenador así funciona el sistema actualmente, pero con el propósito ir buscando otras variantes en el futuro. Con estas especificaciones se desarrolló una aplicación web, multiplataforma, programada en PHP, AJAX (por medio de jquery) y JavaScript. El diseño y la programación se hizo con software open source y librerías con licencia GPL/MIT ejecutado en un servidor Apache con PHP/MYSQL (véase en Bibliografía los repositorios). Las ventajas de este tipo de diseño pueden resumirse: - Ahorra tiempo: no es necesario descargar ni instalar ningún programa. - No hay problemas de compatibilidad: basta tener un navegador actualizado para poder utilizarlo. - Actualizaciones inmediatas.

4 - Bajo consumo de recursos. - Multiplataforma: se puede usar desde cualquier sistema operativo porque sólo es necesario tener un navegador. - Portable: es independiente del ordenador porque se accede a través de una página web. - Inmune a virus, porque éstos están guardados en el servidor de la aplicación (aplicación remota). - Los navegadores ofrecen cada vez más y mejores funcionalidades. El resultado de esta implementación es una interfaz en entorno web, a la que puede accederse utilizando cualquiera de los navegadores más difundidos (Explorer, Mozilla, Google Crome, Opera, Safari, etc.) y que tiene una puerta común de ingreso: tanto para el administrador docente, como para el alumno que se presenta a rendir el examen. La contraseña introducida en el campo correspondiente que se muestra en la Figura 1, determinará el carácter de ingreso al sistema y la interfaz que será visualizada a posteriori. El entorno web permite por otro lado, poner a disposición del alumno herramientas digitales on-line que le ayudarán a comprender el texto sobre el que habrá de ser consultado (diccionarios, etc.); simulando la situación que experimenta cuando estudia un texto en inglés. Figura 1 Ingreso al sistema de evaluación Si se asume que la contraseña introducida corresponde a la del docente encargado de administrar la prueba, la interfaz corresponde a la Figura 2, (por defecto será la que permita generar un nuevo examen).

5 Figura 2 Gestor de exámenes Como se ha marcado en la figura, pueden distinguirse herramientas para: i) definir el contenido de un examen (uno nuevo, o visualizar uno ya definido almacenado en la base de datos, para proceder a su edición con fines de modificación), En la Figura 3 se ejemplifica el uso de la herramienta para el proceso de armado de un examen nuevo, que como se ve es intuitivo y simple.

6

7 Figura 3 Proceso de armado de un examen

8 En la Figura 4 se hace lo propio con la herramienta que permite la edición de uno almacenado en la base de datos. Se advierte que es posible convertir ese examen en un demo (para que sirva de práctica cuando se acceda en cualquier momento a la página de la Facultad). Figura 4 Edición de un examen guardado en la base de datos.

9 ii) para realizar la gestión administrativa del examen: permite habilitar el examen que será tomado a los estudiantes a partir del listado de los que se encuentran guardados en la base de datos. La Figura 5 muestra (última columna bajo el título tipo), que las pruebas guardadas se clasifican en examen y demo. La única diferencia radica en que solamente se guardarán en la base de datos las calificaciones que los alumnos obtengan cuando la habilitación se haga sobre una prueba de tipo examen. Inhabilitar un examen tipo demo significa que no estará disponible para que los alumnos puedan usarlo como elemento de ejercitación. Figura 5 Habilitación de un examen Mediante flechas se muestra también la secuencia para habilitar uno o varios temas de examen y para emitir la orden de inicio de la prueba. Cabe acotar que la cantidad de alumnos que pueden rendir simultáneamente, está limitada solamente por la cantidad de computadoras disponibles y, además, pueden rendir temas distintos en forma simultánea. Mediante la opción inscriptos es posible definir quienes estarán habilitados para rendir. Esta lista (que puede ser insertada desde otro archivo usando copiar y

10 pegar ) se confecciona antes de que se lleve a cabo cada examen, y puede modificarse antes del inicio del mismo, para borrar alumnos ausentes o, incluso durante la ejecución de la prueba, para agregar a algún rezagado. Los datos contenidos en la lista son corroborados con los solicitados al alumno en el momento de iniciar la prueba. Finalmente la opción Configurar permite realizar ajustes propios de la prueba (tiempo límite para la misma, restricciones de acceso externo (por seguridad) y cambio de contraseña del administrador (Figura 6). Figura 6 Opciones de configuración iii) visualización de las calificaciones, tanto a nivel histórico cuanto en tiempo real. Permite visualizar las calificaciones en tiempo real (a medida que los alumnos terminan la prueba), imprimir comprobantes, visualizar las notas almacenadas en la base de datos de exámenes anteriores, y además permite un monitoreo de quiénes están rindiendo, qué notas o registros fueron eliminados y exportar las calificaciones a una planilla de cálculo (Figura 7). Una vez finalizada la prueba es posible habilitar al sistema para que muestre cuáles son las respuestas correctas, de modo tal que el alumno tenga un retorno inmediato de sus aciertos y errores.

11 Figura 7 Gestión de calificaciones Ingresando al sitio introduciendo como contraseña demo1 o demo2, se puede ver una interfaz similar a la que ven los alumnos durante la prueba y se pueden apreciar las características de los textos con los que son evaluados. Conclusiones Se han presentado las causas que promovieron un cambio metodológico en la forma en que los alumnos de la Facultad de Ingeniería de la UNLP son evaluados para conseguir superar el requisito para demostrar que pueden comprender un texto en inglés. Dicho cambio consistió en reemplazar una prueba escrita de traducción de un texto del inglés al castellano, por preguntas en formuladas en inglés, orientadas a que el alumno identifique detalles, comprenda conceptos específicos y globales de un texto en inglés desarrollado particularmente para ellas. El texto y las preguntas se presentan en un entorno web en una computadora. El examen tiene un tiempo límite que es controlado por el ordenador, pero puede ser finalizado también por la acción del alumno que puede solicitar la evaluación de la prueba antes de que venza el tiempo límite. En cualquier caso la nota aparece en la pantalla. Iniciando las experiencias a partir del segundo semestre de 2010, el sistema demostró una óptima performance en las diez fechas que estuvieron disponibles (rindieron aproximadamente 2000 alumnos).

12 Referencias bibliográficas Lara Fuillerat, J. M. (2009): Moodle. Manual de referencia para el profesorado. Córdoba, España. Libro de circulación gratuita en formato digital. No tiene sello editor. En: pdf Repositorios de herramientas informáticas y licencias: