UNIVERSIDAD DE JAÉN Vicerrectorado de Docencia y Profesorado Secretariado de Innovación Docente y Formación del Profesorado

Transcripción

1 MEMORIA FINAL DE PROYECTOS DE INNOVACIÓN DOCENTE CONVOCATORIA CURSO 2010/2012 DATOS DEL/DE LA SOLICITANTE Nombre Manuel Apellidos Montejo Gámez D.N.I L Centro Facultad de CCEE Teléfono Departamento Química Física y Analítica Categoría Profesor Contratado Doctor DATOS DEL PROYECTO Título Estrategias de evaluación de competencias actitudinales y procedimentales: uso de wikis y de matrices de valoración. Línea de actuación Proyectos para asignaturas Departamento/s implicados I.T.I. Especialidades Electricidad, Electrónica Industrial y Mecánica Asignatura/s implicada/s Química Física y Analítica Titulación/Grado implicado/s Electroquímica Curso/s implicado/s 3º Nº de alumnos afectados Más de 50 MEMORIA DEL PROYECTO Justificación Entre los múltiples cambios en la metodología docente a los que nos estamos viendo abocados en el marco del proceso de adaptación al Espacio Europeo de Educación Superior en que nos encontramos inmersos, cabe destacar la dificultad que puede entrañar para el docente llevar a cabo un proceso de evaluación centrado en las competencias.

2 A la ya complicada tarea de evaluar el nivel de comprensión y aprendizaje de conceptos teóricos (evaluación de competencias específicas, principalmente las cognitivas) hay que sumar el significativo esfuerzo necesario para llevar a cabo una evaluación objetiva de las llamadas competencias procedimentales y actitudinales (algunas de carácter transversal) en las diversas titulaciones. En el caso concreto de la asignatura Electroquímica (que se ha impartido como optativa en el tercer curso de la I.T.I. Especialidad Electricidad y como libre configuración en las I.T.I. Especialidades de Mecánica y Electrónica Industrial), la guía docente (elaborada según las directrices del EEES, debido a su integración en el Plan Piloto de Implantación del Crédito Europeo en las titulaciones en que ha sido impartida) contempla el trabajo en algunas competencias que pueden resultar, al menos a priori, difíciles de evaluar de un modo objetivo: la capacidad de trabajar en equipo, la capacidad de emplear adecuadamente diversas fuentes bibliográficas, la capacidad de expresión hablada en lengua nativa o la capacidad de análisis y/o síntesis. Como quiera que el desarrollo de la asignatura contempla, además, la realización, por parte de los estudiantes, de trabajos en grupo (relacionados con las aplicaciones tecnológicas y medioambientales de la electroquímica) que han de ser expuestos en clase para su evaluación (suponiendo un 15% de la nota final), el marco se antoja ideal para experimentar con distintas herramientas y metodologías existentes que puedan ayudar al proceso de evaluación. Concretamente, durante el desarrollo de este proyecto vamos a centrarnos en dos: el uso de wikis como herramientas para el trabajo en grupo y la creación y empleo de rúbricas o matrices de valoración para la evaluación de la expresión oral y escrita. Una wiki es una aplicación web de segunda generación ( Web 2.0 ) que posibilita la colaboración on-line de una manera rápida y efectiva. La principal diferencia existente entre las wikis y las páginas web tradicionales es la redacción abierta. Esto significa que, en principio, cualquier usuario de una wiki puede, además de visitar el sitio y leer el material disponible, editar las contribuciones existentes o aportar otras nuevas. En nuestra opinión, el uso de esta herramienta para la realización de trabajos en grupo presenta una serie de ventajas.

3 En primer lugar, el uso de nuevas tecnologías puede suponer una motivación adicional para el alumnado y animarle a participar de forma más activa en la realización de trabajos y más dinámica, puesto que le ofrece completa libertad espacio-temporal para desarrollar su labor. En segundo lugar, el uso de herramientas de aprendizaje colaborativo convierte a todos los individuos del grupo en partes activas del proceso de enseñanza-aprendizaje, apartando al estudiante del rol pasivo que tiende a desempeñar durante las clases de teoría. Finalmente, haciendo uso de esta herramienta, el docente puede, de un modo sencillo, monitorizar (evaluar) el grado de participación individual de cada uno de los integrantes en el trabajo del grupo completo. Por otra parte, el uso de rúbricas es muy adecuado para evaluar, de una manera formal, el desempeño del alumnado al realizar una tarea específica, en la cual se combinan aprendizajes no sólo conceptuales, sino procedimentales y actitudinales que, en muchas ocasiones, presentan un alto grado de subjetividad para quien evalúa. A grandes rasgos, una rúbrica (o matriz de valoración) consta de una dimensión donde se sitúan los atributos a valorar y otra en que se dispone una escala descriptiva que, de acuerdo con los estándares que especifica, permite valorar el nivel de cumplimiento de cada atributo. La suma de las puntuaciones obtenidas para cada atributo, proporcionaría la calificación. Así, durante el desarrollo de este proyecto nos proponemos poner en práctica dos metodologías que permitan una valoración objetiva de competencias procedimentales y actitudinales, cuya evaluación puede resultar, como se ha dicho, cuando menos, compleja. Para ello, nos situamos en el contexto de una asignatura que por su cariz, se puede prestar a la puesta en práctica de las estrategias propuestas: se trata de una asignatura optativa, lo que garantiza un número adecuado de alumnos y que requiere de la realización de un trabajo en grupo, por lo que competencias como la expresión oral o la capacidad de síntesis han de ser evaluadas.

4 Objetivos conseguidos Se han conseguido desarrollar tres tipos de matrices de valoración: para evaluación de trabajos escritos, para evaluación de trabajos expuestos oralmente y para evaluación del contenido de wikis. Se ha testado la utilidad de dichas matrices empleándolas en la evaluación del trabajo contemplado en la guía docente de la asignatura Electroquímica, como de obligada realización por parte de los alumnos para superar dicha asignatura. Contenidos desarrollados Durante el primer año de desarrollo del proyecto, se elaboraron matrices de valoración, que posteriormente fueron empleadas para la evaluación del trabajo a realizar por parte de los alumnos/as de la asignatura Electroquímica, que en el primer curso consistió en un trabajo escrito a presentar por grupos de alumnos/as que posteriormente habría de ser defendido oralmente en clase. De este modo se pusieron a prueba las rúbricas diseñadas para la evaluación de trabajos escritos y orales. Durante el segundo año, el mencionado trabajo de la asignatura fue preparado por los alumnos/as como una wiki, alojada en la plataforma de docencia virtual de la UJA (ILIAS). Finalmente, se diseñó una rúbrica enfocada exclusivamente a la evaluación de los contenidos de las wikis, cuya utilidad fue, asimismo, testada. Descripción global de la experiencia La teoría de la asignatura Electroquímica ha sido dividida en dos bloques: el primero de contenidos teóricos fundamentales y el segundo de contenido más aplicado. Para la evaluación de los conocimientos adquiridos en el primer bloque de la asignatura (principalmente conceptuales) se ha empleado un examen tradicional (preguntas de tipo test, respuesta corta y problemas numéricos). Por su parte, los contenidos de la segunda mitad de la asignatura han sido abordados por los alumnos/as siguiendo dos estrategias distintas: Durante el primer curso en que estuvo vigente el proyecto ( ) se planteó la realización de trabajos escritos en grupos de un máximo de cuatro integrantes y su exposición al resto de la clase. Para este fin, el profesor de la asignatura propuso tres trabajos distintos de entre los que los estudiantes han elegido cual realizar (para favorecer un tratamiento más amplio de cada tema, cada trabajo ha sido realizado por hasta tres grupos distintos).

5 También el profesor, proveyó a los integrantes de cada equipo de material: un breve esquema con los aspectos a tratar de cada tema, un dossier con bibliografía susceptible de ser utilizada y unas someras instrucciones para ajustar el trabajo escrito y a la exposición oral, a una serie de normas formales (tipografía a emplear, organización de la información, extensión, duración de la exposición oral, etc.). De esta forma, las últimas tres semanas de clases se dedicaron a la exposición de los trabajos por parte de los alumnos/as, en presencia de sus compañeros y de los profesores integrantes del equipo del proyecto. Los criterios de evaluación de los trabajos (tanto orales como escritos) fueron publicados en la plataforma de docencia ILIAS con antelación suficiente y comentados en clase. La fecha de exposición del trabajo también fue publicada con antelación suficiente (más de un mes) y este día fue fijado como límite para la entrega del trabajo escrito. Cabe mencionar que adjunto a dicho trabajo se ha exigido la presentación de un documento donde describan brevemente las tareas realizadas por cada integrante del grupo (como un intento por evaluar la capacidad de trabajo en equipo). Por su parte, durante el segundo curso académico ( ), el trabajo de la asignatura fue abordado por los alumnos/as mediante la elaboración de una wiki. Así, el profesor de la asignatura propuso dos trabajos distintos, relacionados con aspectos aplicados de la asignatura, a realizar por los estudiantes en grupos de entre 6 y 7. Para este fin, se habilitaron tres wikis (una por cada uno de los grupos de estudiantes) en la plataforma de docencia virtual de la asignatura (en ILIAS), y el profesor se encargó de dar una estructura general al trabajo (dividiéndolo en distintos apartados). Asimismo, también proporcionó fuentes bibliográficas y dedicó una sesión de clases a explicar, a aquellos alumnos/as menos familiarizados con la herramienta, algunos aspectos prácticos del uso de la plataforma de docencia virtual para este fin, así como el método de evaluación a seguir. Se acordó un tiempo máximo para la cumplimentación de la wiki de dos semanas, aclarándose que cualquier añadido posterior a la fecha de finalización, no sería tenido en cuenta.

6 Metodología empleada (sesiones de trabajo, actividades, recursos didácticos, cronograma, etc) Paralelamente al avance de la asignatura, los profesores/as integrantes del equipo hemos trabajado en el desarrollo de las matrices de valoración para lo cual hemos mantenido una serie de reuniones periódicamente a lo largo de los dos cursos. Es sabido que una rúbrica no ha de constar de muchos aspectos a evaluar (para focalizar la atención sobre lo verdaderamente relevante) y ha de tener una escala de valoración perfectamente definida, que reduzca al mínimo las ambigüedades a la hora de aplicarse. Con estas dos premisas llegamos a consensuar tres matrices de valoración, una para trabajos escritos, otra para orales y otra para la evaluación del contenido de wikis (se presentarán más adelante). Asimismo, hemos dedicado tiempo a familiarizarnos con la herramienta para wikis de la plataforma de docencia virtual de la UJA. A este respecto cabe destacar la colaboración del servicio de asistencia técnica para solucionar los problemas que surgieron durante el nuestro proceso de aprendizaje. Como se ha mencionado, posteriormente, el profesor de la asignatura se encargó de transmitir estos conocimientos al alumnado. La segunda parte de nuestro trabajo ha consistido en poner a prueba la conveniencia del uso de dichas herramientas. Para este fin, nos hemos dividido: dos de los integrantes del grupo hemos empleado las matrices para evaluar. Por su parte, los otros dos miembros del grupo han llevado a cabo siempre evaluaciones tradicionales emitiendo para cada trabajo o wiki una nota numérica basada en sus impresiones. Hay que mencionar que aquellos que han llevado a cabo la corrección tradicional, partían del conocimiento de las normas que se habían dado para la realización de los trabajos y del esquema global que debía seguirse. De este modo, hemos pretendido: (i) comparar los resultados de la evaluación entre dos individuos distintos que emplean la misma matriz de valoración; (ii) comparar los resultados de la evaluación de trabajos orales, escritos y wikis usando y no usando las rúbricas y (iii) poner a prueba la utilidad de las wikis, en primer lugar como herramienta para el aprendizaje colaborativo y, en segundo, para evaluar competencias procedimentales, como la capacidad del trabajar en grupo.

7 Resultados obtenidos (los materiales o documentos que se hayan producido en la experiencia deben presentarse en forma de anexo) USO DE RÚBRICAS PARA LA EVALUACIÓN DE TRABAJOS ESCRITOS Y EXPUESTOS ORALMENTE (curso ): Las matrices de valoración elaboradas para la evaluación de trabajos escritos y orales están disponibles en caso de que quieran ser revisadas. En ellas, algunos de los aspectos a valorar (uso del idioma, expresión oral) se corresponden con competencias transversales en esta y en otras muchas asignaturas. Se evaluaron, de la forma descrita anteriormente, seis trabajos. Cabe destacar que los profesores que emplearon las matrices de valoración otorgan una puntuación muy parecida (máxima desviación 0,2 puntos) a los trabajos evaluados independientemente (tanto la exposición oral como la escrita). En cuanto a los resultados obtenidos mediante la corrección tradicional, las calificaciones no están muy alejadas de las propuestas con el uso de matrices (lo cual entra dentro de la lógica), pero sí que se observan desviaciones de hasta 1 punto (en positivo o en negativo) en la calificación del trabajo oral y escrito, respecto a las propuestas por los que emplearon las matrices. Estos resultados apuntan a que el uso de rúbricas pueden ayudar a una evaluación más objetiva, además de simplificar el proceso de evaluación, en cuestiones que sin ellas están más sujetas a la subjetividad y a variabilidad, como pueden ser las mencionadas competencias transversales. USO DE WIKIS PARA LA EVALUACIÓN DE LA CAPACIDAD PARA TRABAJAR EN GRUPO Y USO DE RÚBRICAS PARA EVALUAR SU CONTENIDO (curso ): La matriz de valoración elaborada para la evaluación de la wiki en este caso es un tanto más compleja porque se ha de evaluar por un lado el trabajo en su conjunto, y por otro ponderar la aportación de cada alumno a la wiki presentada por el grupo. Así se distinguieron entre contribuciones relevantes y no relevantes, y dentro de las primeras entre significativas y no significativas, siendo las significativas las que aportan texto nuevo al trabajo, y las no significativas las correcciones menores a lo ya aportado por el alumno u otros. Es de destacar que las herramientas de control y edición de wikis dentro de la plataforma ILIAS permiten de modo rápido saber el número de contribuciones totales de cada alumno, pero distinguir la contribución exacta en cada caso y así ponderar entre contribuciones significativas y no

8 significativas es harto complicado. La comparativa en cuanto a calificaciones por el trabajo en su conjunto en este caso arroja unas mayores desviaciones, tanto en la corrección tradicional como usando rúbricas. El hecho de que las desviaciones se incrementen para ambos tipos de corrección deja abierta la cuestión de si hay que prolongar el análisis a más wikis y/o replantearse la matriz de valoración. Proyección e Impacto (transferencia de los resultados y mejoras en el aprendizaje demostrables) Los resultados de este proyecto fueron hechos públicos parcialmente en el IX FECIES (IX Foro sobre Evaluación de la Calidad de la Investigación y de la Educación Superior), que tuvo lugar en Junio de 2012 en Santiago de Compostela, donde se presentó la comunicación titulada Estrategias de evaluación de competencias actitudinales y procedimentales en la asignatura Electroquímica (ver documentación justificativa anexa). Adicionalmente, se está preparando otra comunicación en la que se dé cuenta de los resultados obtenidos durante el curso , que al ir ligados a la evaluación de la asignatura Electroquímica (2º cuatrimestre) no han estado disponibles hasta hace breves fechas. Evaluación del proceso y Autoevaluación (instrumentos y recursos empleados) No se ha llevado a cabo ningún tipo de encuesta entre los alumnos/as de la asignatura, aunque informalmente, durante el desarrollo de las clases y preguntados por el profesor de la asignatura, han valorado positivamente la publicación de las rúbricas, ya que conocer los criterios con los que van a ser evaluados les orienta en su enfoque del trabajo y su exposición. Desde el punto de vista de los profesores, valoramos positivamente el uso de las rúbricas, porque facilita y enfoca el proceso de evaluación de los trabajos, haciéndolo además más objetivo. Por otra parte, queda claro que la competencia de trabajo en equipo no puede ser correctamente evaluada puesto que la herramienta de que disponíamos (el informe realizado por cada integrante del grupo) se ha revelado como insuficiente, ya que los alumnos/as tienden a afirmar siempre que el trabajo ha sido realizado en partes iguales por todos.

9 El uso de wikis es valorado positivamente por los estudiantes, porque les dota de una gran flexibilidad y evita tener que coordinar reuniones entre ellos, que pueden resultar hasta cierto punto incómodas, para preparar los contenidos del trabajo. No obstante, los profesores implicados en el proyecto consideramos que el uso de wikis tampoco facilita la evaluación de la calidad del trabajo en equipo suficientemente (ver sección anterior). Otras consideraciones - Fungibles Gastos generados en el segundo año 322,08 euros Inventariables - Viajes/Actividades 381,51 euros Otros - Justificación Se incluyen los gastos totales generados por el proyecto durante los dos años de vigencia. Los gastos en fungible se deben a la compra de material de papelería diverso así como a consumibles de informática (memorias usb, cartuchos de tinta/tóner, etc.) y a la impresión de un póster para la asistencia a unas jornadas. En cuanto a los gastos para viajes/actividades se incluye el coste de la asistencia de uno de los miembros del equipo al IX FECIES (Junio de 2012, Santiago de Compostela) donde se presentaron algunos de los resultados del proyecto.

10 DATOS DE LOS MIEMBROS DEL GRUPO Nombre Manuel Apellidos Montejo Gámez D.N.I L Centro Facultad de CCEE Teléfono Departamento Química Física y Analítica Asignatura impartida Electroquímica (EPS Jaén) Curso 3º Categoría Contratado Doctor Firma Nombre José Manuel Apellidos Granadino Roldán D.N.I Z jmroldan@ujaen.es Centro Facultad de CCEE Teléfono Departamento Química Física y Analítica Asignatura impartida Electroquímica (EPS Jaén) Curso 3º Categoría P.T.U. Firma Nombre Ana África Apellidos Márquez García D.N.I L amarquez@ujaen.es Centro Facultad de CC. Experimentales Teléfono Departamento Química Física y Analítica Asignatura impartida Fund. Químicos de la Ingeniería (EPS Jaén) Curso 1º Categoría P.T.U. Firma

11 Nombre María del Pilar Gema Apellidos Rodríguez Ortega D.N.I Z Centro Facultad de CC. Experimentales Teléfono Departamento Química Física y Analítica Asignatura impartida Fund. Químicos de la Ingeniería (EPS Jaén) Curso 1º Categoría Becaria FPU Firma VºBº de Coordinador/a Fdo.: Manuel Montejo Gámez Jaén, a 20 de julio de 2012 VICERRECTOR DE DOCENCIA Y PROFESORADO DE LA UNIVERSIDAD DE JAÉN