La Evaluación De Los Materiales Didácticos De La UNED Como Proceso De Mejora De La Calidad: Resultados Y Conclusiones.

Transcripción

1 La Evaluación De Los Materiales Didácticos De La UNED Como Proceso De Mejora De La Calidad: Resultados Y Conclusiones. San Martín Redondo, Ester; Requejo García, Eduardo; Cerrada Somolinos, Carlos; Donado Vara, Flavia, UNED La Unidad Técnica de Material Didáctico de la UNED lleva a cabo la revisión de los materiales didácticos obligatorios dentro del EEES. Para ello, ha creado unos protocolos de evaluación con el fin de valorarlos en un plazo de cinco años de manera eficaz. Sin bien no está terminada la implantación de todos los Grados, sí se tiene ya una perspectiva de cuatro años que nos muestra que cada año estos materiales se acercan más a la excelencia. Esto nos lleva a la conclusión de que someterlos a un revisión metodológica aumenta la calidad de los materiales en un sistema de Enseñanza a Distancia, además de constituir un pilar fundamental a partir del cual mejorar los procesos y herramientas de evaluación. 1. Objetivos o propósitos: Los objetivos que se pretenden con esta comunicación son, por un lado, difundir el proceso de evaluación llevado a cabo por la Unidad Técnica de Material Didáctico del IUED (Instituto Universitario de Educación a Distancia), y, por otro lado, compartir con otras universidades e instituciones la experiencia para que puedan incorporarla a sus planes de mejora de la calidad. 2. Marco teórico: Hasta hace unos años, la Educación a Distancia era entendida como aquella modalidad educativa donde la comunicación entre educador y educando quedaba diferida en el tiempo y/o en el espacio. Sin embargo, el empleo progresivo de las nuevas tecnologías de la comunicación está permitiendo la comunicación en tiempo eral al crear entornos virtuales de aprendizaje que rompen la distancia física indicada (Sarramona, 2001). El desarrollo en los últimos años de las TIC (tecnologías de la información y a la comunicación), su aplicación en el ámbito educativo y el importante avance metodológico que ha tenido el diseño instruccional aplicado al uso de las TIC en

2 educación son factores que han influido en que el número de propuestas formativas basadas en materiales didácticos autosuficientes hayan aumentado considerablemente (Badia, Barberà, Coll, y Rochera, 2005). Dentro de un sistema de Educación a Distancia se tiene en cuenta que el estudiante debe adquirir autonomía para así lograr unos aprendizajes. Estos aprendizajes se apoyan en múltiples recursos, destacando entre ellos el estudio autónomo eficaz desde los libros de texto. El énfasis se encuentra en la producción de materiales didácticos tan completos y autosuficientes que el contacto del alumno con el profesor o tutor sea mínimo o inexistente. En este tipo de enseñanza, el texto debe sustituir a la figura del profesor que da una clase magistral y asumir las funciones de éste, tales como motivar, aclarar dudas, orientar durante el estudio de los contenidos, evaluar aprendizajes, etc. El aprendizaje es una actividad individual y el tutor es simplemente un corrector o un último recurso en caso de que el material deje de ser autoexplicativo (Bautista, Martínez y Sainz, 2001). Los alumnos que cursan sus estudios en centros a distancia presentan unas características personales, laborales y sociales que los diferencian de los estudiantes de la enseñanza presencial, y se requieren pera ello de unas necesidades formativas singulares y condicionadas por un estilo y forma de aprender adulto. Esto hace que se demanden ciertos elementos que faciliten el aprendizaje, medios didácticos pertinentes que son las herramientas indispensables al propio sistema de enseñanza a distancia. (García Aretio, 1997). 3. Metodología: En toda universidad debe prestarse especial atención a los materiales didácticos, pero es en el caso de las universidades a distancia, como la UNED, donde esto cobra mayor importancia ya que la ausencia de las tradicionales clases presenciales debe verse suplida por un buen material en manos de los estudiantes. Desde la implantación del EEES en la UNED, es tarea del IUED la evaluación de los materiales didácticos empleados en cada titulación. De este modo, cada Grado ofertado, tiene la obligación de presentar al IUED una serie de materiales didácticos que serán objeto de evaluación:

3 - Parte I: guía que aparece en la página Web de la UNED y cuyo objetivo es proporcionar información sobre la asignatura a futuros estudiantes. Contiene información relativa a evaluación, metodología, resultados de aprendizaje, contenidos, etc. Se trata de una información requerida a todas las universidades del EEES. - Parte II: dirigida a aquellos estudiantes que ya se han matriculado de la asignatura y que está disponible en el curso virtual. Su objetivo es presentar el plan de trabajo de la asignatura: qué se espera de los estudiantes y orientar sobre el estudio de los contenidos y la realización de las actividades, además de ofrecer un cronograma. Asimismo, cumple la función de complementar al libro de texto. - Libros de texto: cada texto básico debe proporcionar los conocimientos fundamentales de la asignatura, y debe estar especialmente diseñado para promover el aprendizaje. Los textos que se empleen en los estudios de Grado pueden ser elaborados por el mismo equipo docente (con el beneficio de adecuarlo explícitamente para sus estudiantes) o bien elegir uno del mercado que se adecuará mediante la Parte II de la guía de estudio. Es a la Unidad Técnica de Evaluación Didáctico a quien corresponde la tarea de evaluar los materiales didácticos. El informe que se emite es necesario para que pueda aprobarse dicho material en la Comisión de cada Grado. No obstante, no se trata de un informe vinculante. Las recomendaciones que aporta son meramente informativas. Hasta que se emiten los informes de evaluación definitivos, se pasa por distintas etapas. - Cada titulación cuenta con la figura de Coordinador de Grado. Esta persona es la encargada de recopilar, según las fechas establecidas, todos los materiales que en ese momento van a ser objeto de evaluación. Dentro del proceso de evaluación, puede decirse que tiene una función de intermediario entre el IUED y los equipos docentes. Una vez que el Coordinador ha recopilado todos los materiales, los envía a la Unidad Técnica de Material Didáctico.

4 - Una vez que el material llega a la Unidad, es registrado meticulosamente en la base de datos para que quede constancia de su llegada y así poder hacer un seguimiento del proceso (en qué fase de la evaluación se encuentra en cada momento). - Las evaluaciones son realizadas casi en su totalidad por miembros de la Unidad, pero en ocasiones cuenta con evaluadores externos, que no son otros que profesores de la UNED que desean colaborar en este proceso. Este es un aspecto muy positivo dentro de la evaluación de materiales didácticos, porque los profesores se ven implicados en esta delicada tarea, de manera activa y viviendo desde dentro todo el proceso. Como detallaremos más adelante, cuando describamos los protocolos de evaluación, siempre se aconseja que aquellos profesores que quieran colaborar en la evaluación de alguna guía o texto, no lo hagan de ninguna asignatura de su especialidad para no «contaminar» la evaluación. Esto es porque el IUED se centra únicamente en la forma, y no en el contenido del material. - Una vez evaluado cada material, emitimos un informe (más adelante se detalla cada protocolo utilizado) con la valoración y las recomendaciones oportunas. Este informe es enviado, en primer lugar, al Coordinador del Grado en cuestión y almacenado al mismo tiempo en la base de datos. - Finalmente, cada Coordinador distribuye los informes al equipo docente correspondiente y presenta las evaluaciones a la Comisión de Grado. - Una vez finalizada cada evaluación, se procede a la devolución de cada material al Coordinador del Grado y éste, a su vez, lo entrega a su destinatario, el equipo docente. - Todas las evaluaciones quedan almacenadas en la base de datos para su posterior consulta y para que consten en cada memoria anual del IUED.

5 4. Resultados y/o conclusiones En la Unidad Técnica de Material Didáctico del IUED de la UNED se han evaluado un total de 27 Grados adaptados al EEES durante los cursos de 2008 a 2013, generando un total de 3645 informes (Tabla 1), de los cuales 1186 han sido Guías de estudio «Primera parte», 1048 Guías de estudio «Segunda parte» y 1411 libros de texto o monografías. Es decir, en los cinco cursos académicos se han evaluado una media de unos 729 informes al año. Grados Guías de Guías de Estudio 1 Estudio 2 Textos Total Evaluaciones curso Evaluaciones curso Evaluaciones curso Evaluaciones curso Evaluaciones curso TOTAL Tabla 1: número de evaluaciones entre los Cursos 2008 al 2013 Como observamos en la Tabla 2, hay diferentes resultados en relación con las Guías «Primera Parte» presentadas: las que obtuvieron una calificación de «excelente», las que fueron calificadas como «adecuadas sin modificaciones», las que se valoraron recomendando «propuestas de mejora», aquellas a las que se recomiendan «modificaciones necesarias». Desglosando estas evaluaciones, destacamos que las Guías con un resultado «excelente» y «adecuado y sin modificaciones» han ido en aumento (28,58% y 51,35% respectivamente). Por su parte, los informes con un resultado de «propuestas de mejora«y «con modificaciones necesarias» han ido decreciendo conforme han ido pasando los cursos, constituyendo un porcentaje mínimo (0,63% y 11,63% respectivamente). 1-Con 2-Con 3-Adecuada y Guías 1 modificaciones propuestas sin 4-Excelente Total necesarias de mejora modificaciones Curso (4,35%) 53 (38,41%) 36 (26,09%) 43 (31,16%) 138

6 Curso (4,32%) 66 (23,74%) 149 (53,60%) 51 (18,35%) 278 Curso (2,02%) 37 (12,46%) 166 (55,89%) 88 (29,63%) Curso (0,63%) 55 (11,63%) 258 (54,55%) (33,19%) 473 Curso TOTAL 27 (2,28%) (17,79%) 609 (51,35%) (28,58%) 1186 Tabla 2: Evaluaciones de Guías «Primera Parte» de Grado entre los Cursos 2008 y 2013 Gráfica 1: Evaluaciones totales Guías «Primera Parte» En relación con las Guías «Segunda Parte», durante estos cinco cursos académicos, se han evaluado un total de 1048 informes de los 27 Grados. En la Tabla 3 podemos comprobar que el número se Guías «Segunda Parte» con un resultado de «Adecuada y sin modificaciones» fue del 58,59%, seguido de las guías «Excelentes» con un porcentaje del 23,18%. Por su parte, las Guías calificadas como «con propuestas de mejora» supusieron un 16,60%, y las que obtuvieron la calificación de «con modificaciones necesarias», un 1,53%. Guías 2 1-Con modificaciones 2-Con propuestas 3-Adecuada y sin 4-Excelente Total

7 necesarias de mejora modificaciones Curso (2,91%) 41 (39,81%) 44 (42,72%) 15 (14,56%) 103 Curso (4,49%) 38 (24,36%) 84 (53,85%) 27 (17,31%) 156 Curso (0,37%) 40 (14,76%) 156 (57,56%) 74 (27,31%) 271 Curso (1,34%) 33 (11,07%) 186 (62,42%) 75 (25,17%) 298 Curso (0,45%) 22 (10%) 144 (65,45%) 53 (24,09%) TOTAL 16 (1,53%) (16,60%) 614 (58,59%) (23,28%) 1048 Tabla 3: Evaluaciones de Guías «Segunda Parte» de Grado entre los Cursos 2008 y 2013 Gráfica 2: Evaluaciones totales Guías Segunda parte Si se observa la Tabla 4, referida a los libros de texto, el número total de evaluaciones ha sido de El hecho de que haya más evaluaciones de libros de texto que guías es debido a que en algunas asignaturas hay más de un libro de texto recomendado para el estudio. Viendo las cifras de estas evaluaciones, hay que decir que los informes con un resultado de «excelente» han supuesto el 24,31%. Por su parte, los informes con un resultado de «adecuado y sin modificaciones» representaron el 33,73%, mientras que los informes que recomendaban «complementar con la Guía de Estudio» han sido el 38,20%, el porcentaje más alto de todas las evaluaciones. Esto es debido a que hay asignaturas que ofrecen libros que no están dirigidos específicamente a estudiantes de un sistema a distancia (fundamentalmente, editoriales externas). En estos

8 casos se aconseja que la Guía «Segunda Parte» recoja los elementos didácticos necesarios (resultados de aprendizaje, orientaciones de estudio, actividades de aprendizaje, glosarios de términos o elementos de autoevaluación, etc.). Los informes cuya calificación es «con propuestas de mejora» han supuesto un total de un 3,40%, y los informes «con modificaciones necesarias», un 0,35%. 3-Adecuado. 1-Con 2-Con Requiere 4-Adecuado y Textos modificaciones propuestas complementar sin 5- Excelente Total necesarias de mejora con guía de estudio modificaciones Curso (1%) 15 (15%) 54 (54%) 16 (16%) 14 (14%) 100 Curso (1,06%) (6,33%) 147 (38,79%) 116 (30,61%) 88 (23,22%) 379 Curso (0,00%) 6 (1,65%) 136 (37,47%) 112 (30,85%) (30,03%) 363 Curso (0,00%) 3 (0,59%) 184 (36,36%) 200 (39,53%) 119 (23,52%) 506 Curso (0,00%) 0 (0,00%) 18 (28,57%) 32 (50,79%) 13 (20,63%) TOTAL 5 (0,35%) (3,40%) 539 (38,20%) 476 (33,73%) 343(24,31%) 1411 Tabla 4: Evaluaciones de libros de texto de Grado entre los Cursos 2008 y 2013

9 Gráfica 3: Evaluaciones totales de Libros de Texto 5. Contribuciones y significación científica de este trabajo: La evaluación de los materiales didácticos obligatorios de la UNED, junto con las tareas de formación y asesoramiento a los equipos docentes para llevar a cabo su elaboración, ha garantizado a los estudiantes la adecuación de dichos materiales a sus necesidades en tanto que estudiantes a distancia. Dada la gran cantidad de informes que se han tenido que realizar en un período de tiempo breve, se ha optado por aplicar protocolos de evaluación que, con carácter general para todas las asignaturas, valorasen los diferentes elementos didácticos de los materiales. Una vez pasada esta etapa, de cara al futuro sería conveniente la adaptación de dichos protocolos a las particularidades de las diferentes materias, de manera que se puedan valorar las especificidades de cada una de ellas. Asimismo, dado que los materiales didácticos no son elementos independientes, sino que están relacionados entre sí (la guía segunda parte, por ejemplo, como se ha visto anteriormente, complementa el libro de texto reforzando los aspectos didácticos que en éste pudieran ser más débiles), sería conveniente ampliar la evaluación al conjunto de la asignatura en general, incluyendo también en dicha evaluación el curso virtual, herramienta cada vez más importante, si no imprescindible, en el modelo de enseñanza a distancia de la UNED, el cual ofrece a los estudiantes cada vez más

10 utilidades y recursos didácticos que se alejan de los materiales convencionales (foros de discusión, salas de chat, videoconferencias, materiales multimedia, etc.) pero que forman parte del conjunto de materiales a través del cual los estudiantes preparan la asignatura y que convendría que estuviesen orientados por unos estándares de calidad.