A Method of Assessing Academic Learning Experiences in Virtual Learning Environments

Transcripción

1 A Method of Assessing Acamic Learning Experiences in Virtual Learning Environments A. Hervás, F. B. García and F. J. G. Peñalvo Abstract Adapting curricula to the European space for higher education has been an opportunity for Spanish universities to perform a new approach to the structure of their grees. In this process takes a special importance incorporate new technologies to the university system, a task that had been initiated in an isolated way in the last years of XX century, but now became in a strategic action for universities. In institutions of higher education, there is a growing movement towards the use of e-learning platforms to support access to educational or acamic activities, also known as "Virtual Learning Environments, VLE" or "Learning Management Systems LMS, to support access to educational resources, the acamic activities or the incorporation of new methodologies, however, without an assurance of quality, this effort and investment would not be productive. In this paper a method of assessing a virtual university experience is proposed, which allows the use of a quality mol, incorporating a web tool to effectively manage both the sign process, and the implementation and presentation of results. In addition, there are two case studies with different scopes and purposes, obtaining comparable results that support the efficiency of the proposed method. Keywords Career velopment, computer aid instruction, distance learning, educational activities, educational institutions, quality management, teaching/learning strategies. I. INTRODUCCION A ADAPTACIÓN al Espacio Europeo Educación L Superior y el consiguiente cambio la estructura las titulaciones, con la creación los nuevos títulos grado y máster en España [23], ha supuesto una oportunidad para las universidas españolas no solamente realizar un cambio estructural en su oferta formativa, sino ofrecer un nuevo enfoque las mismas. En este proceso, la incorporación las nuevas tecnologías plantea nuevos escenarios, en los que los papeles los distintos actores se ven modificados: en los A. Hervás, Universitat Politécnica Valencia, Valencia, Spain, ahervas@mat.upv.es. F. B. García, Universitat Politécnica Valencia, Valencia, Spain, fbuendia@disca.upv.es. F. G. Peñalvo, University of Salamanca, Salamanca, Spain, fgarcia@usal.es aspectos formativos, aparece una nueva concepción la relación profesor/alumno, la relación alumno/alumno, y, con la aplicación nuevas metodologías educativas, la relación alumnos/sistema y l profesor/sistema, incluso aparecen nuevos papeles para el profesor y el alumno. En las instituciones educación superior hay un movimiento tennte a utilizar plataformas e-learning (también conocidos como entornos aprendizaje virtuales Virtual Learning Environments-VLE o "Learning Management Systems LMS ) con el fin apoyar el diseño común grados, la finición las competencias y mejorar resultados aprendizaje, el acceso a los recursos educativos o la realización actividas académicas. Como ejemplos estas iniciativas pomos citar PoliformaT la Universidad Politécnica Valencia, [20], el Campus Virtual la Universidad Complutense Madrid, [19] o Studium la Universidad Salamanca, [18] y en un marco más amplio y colaborativo, Universia OCW, [21]. El proceso implantación nuevos métodos enseñanza y aprendizaje apoyados en tecnologías e-learning ha seguido caminos muy distintos pendiendo l punto partida cada Universidad, don pomos encontrar molos muy distintos, s el campus virtual nacido a partir la agregación iniciativas individuales dispersas, hasta otros fruto una iniciativa institucional centralizada, y que han dado lugar a proyectos tanto estrictamente no presenciales, (elearning), como a proyectos semipresenciales, (blend learning o b-learning). Resulta difícil a veces diferenciar entre estas dos opciones, algunos autores exigen para por aceptar el término e-learning o curso online, que el contacto personal no alcance en ningún caso el 20% l sarrollo l curso, [3], otros optan por una finición más generalista en función l uso tecnologías basadas en internet [16].Los conceptos e-learning, formación online, formación virtual, teleformación, se superponen, se complementan y en cualquier caso, se asocian al proceso enseñanzaaprendizaje utilizando medios tecnológicos digitales y suponen una realidad palpable en nuestros días. Más aún, el potencial que supone la generación materiales en soporte electrónico, la utilización Internet como elemento difusión l conocimiento y los avances tecnológicos hacen previsibles cambios importantes que puen dar un vuelco a la educación superior [17], iniciativas como OCW, Universia OCW y más recientemente el proyecto edx, lirado por la Universidad Harvard y el M.I.T., plantean ciertamente un cambio paradigma.

2 Estos cambios no puen entenrse si no se produce un aseguramiento la calidad que justifique las expectativas spertadas, [2], [3], [4], [5], [13], [15], [24]. Existen diversas tenncias para evaluar el e-learning y la formación online, pendiendo l enfoque y la profundidad con que se see realizar, Rubio scribe dos grans tenncias, en primer lugar las que proponen un enfoque parcial, centrado en algunos aspectos concretos: la acción formativa, los materiales, la plataforma utilizada, etc., entre estos pomos stacar el Molo sistémico Vann Slyke, o el molo los cuatro niveles Kirkpatrick, ambos para la actividad formativa, [7,10,16], en cuanto a las plataformas, existen diversas propuestas dirigidas a la evaluación su integración en el contexto la educación superior, [12], [9], [8], y se han sarrollado herramientas en línea para ello, EADTU [8], HEODAR [14]. La segunda tenncia plantea un enfoque global, ya sea centrado en molos o normas estándar, o bien en sistemas basados en la práctica benchmarking. Mac Donald [13], propone un molo global, DDLM, que asegure la calidad en todos los elementos que intervienen en el proceso. Dyckman y Davis, [3] y [4], sarrollan una scripción rigurosa los aspectos que berían tenerse en cuenta en el sarrollo un curso formación online, precedidos una interesante scripción las dificultas que se encuentran al sarrollar un proyecto formación online. Así pues, se hace necesario analizar los procesos formativos e-learning o b-learnig s un punto vista cualitativo, analizando, tanto los materiales formativos, como la plataforma soporte y finalmente la experiencia formativa en su conjunto. Se trata evaluar todo el proceso una experiencia formativa con una especial atención a la metodología enseñanza-aprendizaje utilizada. En este trabajo proponemos un método evaluación basado en el ciclo vida un curso, que nos permite evaluar experiencias formativas integradas en un campus virtual, ya sean total o parcialmente presenciales. Tomando como eje el ciclo vida, el método sarrollado permite estudiar aquellas etapas que sean especial interés en cada momento y procer a su análisis forma separada. También permite la elaboración mecanismos evaluación adaptados al contexto específico y acuerdo con la experiencia formativa. En [6] y [7] se propone un método basado en este último enfoque. Con el método propuesto se preten evaluar el impacto que supone la integración l campus virtual en un entorno universitario a partir la valoración los diferentes actores l proceso. El artículo se organiza como sigue: en la Sección 2 se explica con talle las bases l método evaluación propuesto, diferenciando el escenario, forma congruente con la especificación IMS Learning Design [11], las etapas y los indicadores; en la Sección 3 se talla la forma en que el método general propuesto se ha aplicado a los casos estudio, que se recogen en la Sección 4, llevados a cabo en dos universidas diferentes, la Universidad Politécnica Valencia y la Universidad Salamanca, ambas en España; por último, la Sección 5 cierra el trabajo con las conclusiones l mismo. II. MÉTODO DE EVALUACIÓN El análisis cualitativo un proyecto b-learning es básicamente similar a un proyecto e-learning, por ello a partir este momento nos referiremos a un proyecto e-learning genérico y jaremos la calificación final para el momento su implantación. La calidad un curso e-learning pomos analizarla tomando tres enfoques distintos: s un punto vista metodológico, s un punto vista tecnológico o s un punto vista global que contemple todo el proceso. Se trataría analizar por una parte los materiales, las actividas y, en general los recursos formativos, por otra parte la plataforma e-learning, o bien la experiencia formativa completa, es cir, todo el proceso, s el inicio, planificación, objetivos, sarrollo, y finalmente la adquisición conocimientos y la evaluación los alumnos. A. Definición l escenario Cada experiencia e-learning se sarrolla en un contexto o escenario aprendizaje específico. El método que proponemos permite adaptar la evaluación al escenario cada experiencia. Por ello es necesario realizar previamente una scripción tallada y precisa las características l escenario. Para realizar esta scripción se ha utilizado el estándar diseño procesos aprendizaje IMS Learning Design [11]. Se ha elegido este estándar porque proporciona un marco capaz scribir manera formal cualquier diseño proceso aprendizaje. Para ello hemos empezar finiendo el escenario sobre el que vamos a actuar. En la Tabla 1 se establecen los elementos l escenario propuesto en IMS que permiten scribir forma suficientemente completa el proceso aprendizaje. Nuestro objetivo es abarcar la evaluación todo el proceso educativo, s su planificación estratégica hasta la validación o evaluación l proceso garantía calidad. Por esta razón, a la hora finir un objeto evaluación, amás tallarse el escenario aprendizaje a evaluar, se hace necesario finir la fase o etapa l ciclo vida l e- learning en la que se ubica este escenario. Elemento TABLA I. ESCENARIO Descripción Objetivos Objetivos, propósitos o finalidas l proceso aprendizaje Contexto Conjunto circunstancias (scripción l entorno) en que se produce el aprendizaje Condiciones Características, necesidas o habilidas necesarias para llevar a cabo el proceso aprendizaje Perfiles Características los distintos tipos participantes en el proceso aprendizaje Contenidos y materiales utilizados durante el proceso aprendizaje Metodología Mecanismos y técnicas pedagógicas utilizadas en el proceso aprendizaje Actividas Tareas y trabajos que se sarrollarán durante el proceso aprendizaje

3 B. Etapas y criterios evaluación Se fine fase l ciclo vida como la secuencia acciones dirigidas a sarrollar las tareas cada paso la experiencia basada en e-learning. Las etapas propuestas se recogen en la Tabla 2. Etapa estratégica Programa Diseño l curso Desarrollo l curso Apoyo al estudiante Apoyo al profesor TABLA II. ETAPAS Descripción o Análisis requerimientos tales como necesidas aprendizaje, preferencias los estudiantes o posibles competidores o Toma cisiones sobre el target o público objetivo, los objetivos aprendizaje o la propuesta garantía calidad o los recursos humanos y materiales y costes y financiación o l programa con los contenidos curriculares o las actividas o Definición métodos enseñanza y aprendizaje o Sistema evaluación y documentación o Selección plataforma e-learning que se utilizará para el sarrollo l curso (paquete comercial, integración/implantación en los sistemas información internos, sarrollo propio) o Elaboración los materiales l curso (contenidos, estructura, disponibilidad, accesibilidad) o Diseño las actividas (presentación, navegación, interacciones, feedback, funcionalidas adicionales) o Información y documentación a participantes o Métodos enseñanza (guiada, basada en tareas, colaborativa) o Didáctica (motivación, dinamización, feedback, implicación, participación, interés real, aprovechamiento) o Comunicación, colaboración, interacción o (estructura, contenido, relación con objetivos aprendizaje, método) o Soporte técnico continuo, guías uso la plataforma y otros recursos o Mejora la motivación o Monitorización l rendimiento o Atención a la diversidad o Formación técnica o Formación pedagógica, métodos enseñanza on-line, técnicas motivación o Provisión recursos acuados (software, hardware, personal especializado) o Soporte continuo o Toma en consiración opiniones los profesores Todo criterio calidad be ser evaluable o medible mediante, al menos, un tipo herramienta o indicador. La Tabla 3 muestra tres tipos indicadores o herramientas captura datos y algunos los datos que puen recogerse mediante cada tipo. El primer indicador se refiere a la opinión o valoración los interesados. Esta información se recogerá mediante cuestionarios o entrevistas. El segundo tipo indicadores, logs l sistema, se refiere a la captura información relevante los sistemas como los tiempos acceso los usuarios a cada recurso la plataforma o el número errores cometidos en cada unidad contenidos. Esta información se recogerá en distintos formatos pendiendo l sistema o las herramientas utilizadas. Normalmente se hace necesaria la ayuda los administradores l sistema información y herramientas que facilitan el tratamiento estos datos. TABLA III. INDICADORES. Valoración / Opinión Logs Sistema Estudiantes Nº Profesores accesos Administradore Tiempo s Gestores acceso Empleadores Cuestionario s Entrevistas Tiempo respuest a Nº errores Uso soporte técnico Resultados académicos Notas teoría Notas actividas Tasa abandonos Grado participació n C. Aplicación l método El método está estructurado en dos etapas básicas tal como se muestra en la Fig. 1: en primer lugar la fase diseño la evaluación y en segundo lugar la fase implementación la evaluación. En la primera etapa la evaluación se finen los diferentes elementos l proceso evaluación: El escenario aprendizaje, que nos finirá el contexto educativo. Las fases l ciclo vida don seleccionaremos aquellos que ban ser evaluados, acuerdo con el objetivo la evaluación. La finición los criterios calidad se ajustará a las fases l ciclo vida elegidas para su evaluación. La fase implementación la evaluación, controla el diseño los procedimientos para capturar la información necesaria sobre la experiencia, la aplicación estos procedimientos y el análisis y validación los resultados

4 obtenidos. Diseño Implementación Figura 1- Etapas l método. Inicio Método Configuración Escenario Selección Etapa Ciclo Vida Definición Criterios Calidad Definidos todos los parámetros? Definición Características Específicas Elaboración Procedimientos Experiencia Análisis Resultados acabada? Fin Método Contexto educativo: - Carrera - Asignatura - Curso - Tema estratégica Programa Diseño l curso Desarrollo l curso Apoyo Estudiante Apoyo Profesor Definición objetivos Condiciones l curso Infraestructura técnica Actividas Formación Objeto evaluación Número participantes Objetivo la evaluación Entrevistas Cuestionarios Datos Sistema Uso Herramientas Plazos Efectividad Eficiencia Satisfacción III. CASOS DE ESTUDIO Para este trabajo se han consirado dos casos estudio, que abarcan asignaturas marcado carácter tecnológico. Ambas se imparten en títulos Ingeniería Informática, pero se ha impartido cada una en una Universidad distinta, amás se utilizan plataformas e-learning diferentes, una utiliza Moodle, y la otra un entorno Sakai. El objetivo es doble, por una parte analizar la aplicación l método ntro un entorno tecnológico. En uno los casos el método es conocido, se había utilizado para otro tipo materias, concretamente en el ámbito aprendizaje lenguas, y en el otro caso se habían utilizado otros métodos. Por otra parte se sea comparar los resultados obtenidos con los análisis cualitativos efectuados por los responsables l curso, consirando en casa caso aquellos aspectos que se tenía intención e interés evaluar. A. Caso 1: Universidad Politécnica Valencia La asignatura elegida ha sido Sistemas Operativos, segundo curso l título Ingeniería Técnica Informática, que se imparte en la Universidad Politécnica Valencia utilizando el campus virtual PoliformaT, que funciona sobre un entorno Sakai. La aplicación l método se ha hecho centrando la evaluación en la etapa sarrollo l curso, eligiendo el método preguntas cerradas para la obtención los datos en un cuestionario dirigido a los alumnos. TABLA IV. CRITERIOS DE CALIDAD PARA LA EVALUACIÓN DEL CASO 1 DE ESTUDIO Asunto Evaluaci ón Expectati - vas los estudiant es Objetivos l curso Guía l curso Personal docente actividad es Criterios Calidad Cumplimiento expectativas Definición prerrequisitos Claridad y precisión objetivos Fomento aprendizaje activo Fomento análisis e investigación l alumno Precisión en la información Acuación l plan Precisión en la información Coherencia l programa estudio Acuación l perfil l profesor Disponibilida d y atención Fluiz en la comunicación Claridad en las instrucciones Acuación l nivel Flexibilidad en actividas nopresenciales Asunto Método enseñanza teóricos prácticos Criterios Calidad continua formativa / autoevaluación Coherencia con los objetivos Enseñanza guiada Trabajo autónomo Responsabili dad Selección acuada al contexto Seguimiento progreso Motivación Guía trabajo Asistencia técnica Acceso a recursos Claridad en la exposición Formato Conforme a estándares Revisión y actualización Material bibliográfico Característic as interactivas Multimedia Fiabilidad y formalidad con los recursos l laboratorio

5 Realizaci ón actividad es Requisitos tecnológicos Facilidad o soporte para entregas Conexión entre actividas Cumplimient o plazos disponibles Feedback constructivo La Escuela Informática la UPV lanzó una experiencia piloto que permitía a los estudiantes cursar a distancia varias asignaturas [1]. Para ello se utilizó la plataforma PoliformaT, [20] como soporte l curso online Sistemas Operativos (SO2-TEL) y ha sido seguida por 51 alumnos ( un total 685 alumnos la asignatura). Los estudiantes se matricularon voluntariamente en el curso online conociendo las condiciones generales (por ejemplo, que el sistema evaluación la asignatura sería el mismo para todos los estudiantes, sean clases presenciales u online). La evaluación se realizó al finalizar el segundo semestre y se ha centrado en la etapa Desarrollo l curso incluyendo todos los asuntos evaluación esta etapa. Una vez elegidos los asuntos evaluación, el evaluador seleccionó los criterios calidad básicos para la evaluación la experiencia. La Tabla 4 presenta los criterios calidad elegidos en el presente caso estudio, y la Fig. 2 muestra los resultados clasificados según dichos criterios, obtenidos a partir las respuestas proporcionadas por los alumnos. La valoración global se hace en una escala 0 a 10, y se pue consirar positiva con valores superiores a 6 en los criterios evaluados. El criterio con una valoración más baja (6,21) consiste en la evaluación las Expectativas que tenían a priori los alumnos sobre el sarrollo l curso mientras que la mejor valoración se centro en aspectos y atención l Personal Docente (7). 10,00 8,00 6,00 4,00 2,00 0,00 SO2-TEL EXPECTATIVAS OBJETIVOS PLANIFICACIÓN GUÍA PERSONAL DOCENTE MÉTODO PLANIFICACIÓN ACT. REALIZACIÓN ACT. EVALUACIÓN RECURSOS TEÓRICOS RECURSOS PRÁCTICOS Figura 2. Resultados l caso estudio SO2-TEL. Valoración 0 a 10. B. Caso 2: Universidad Salamanca La segunda asignatura elegida ha sido Ingeniería l Software que se imparte en el tercer curso l título Ingeniero Técnico en Informática Sistemas la Universidad Salamanca utilizando su campus virtual Studium que funciona sobre un entorno Moodle, [18]. La asignatura se imparte forma presencial con apoyo b- learning a un total 175 alumnos organizados en dos grupos. Han participado en el proceso evaluación un grupo 26 alumnos y los tres profesores implicados. El ámbito l proceso evaluación se extendió a todas las etapas, y se amplió al conjunto profesores, elaborando para ellos un cuestionario. En este caso, se cidió analizar todos los aspectos posibles los mismos asuntos evaluación, tratando obtener una visión amplia y general l sarrollo l proyecto e-learning. Para ello se elaboró un cuestionario para los alumnos con 53 preguntas adaptado a partir l elaborado en el caso la UPV, y otro cuestionario para los profesores con un total 30, aunque en este caso las respuestas no se ajustaban a un valor numérico como en el caso anterior, sino que se utilizaba una escala Likert cualitativa. Los resultados obtenidos en la encuesta a los estudiantes se encuentran agrupados por asuntos evaluación en la Fig. 3. La valoración global se hace en una escala 0 a 10, y pue consirarse positiva, con valores alredor l 6, el criterio con una valoración más baja, 5,25, correspon a la planificación actividas influenciada por los aspectos externos al proceso e-learning y que contrasta con la más alta, 7,33, realización actividas, que si son específicas l proceso e-learning. Con esto se muestra un alto grado satisfacción por el uso docente l campus virtual en la asignatura, lo que permite asumir por parte los docentes que en el caso la asignatura Ingeniería l Software en la Universidad Salamanca este medio está completamente asentado y su exclusión no sería percibida como algo posible por parte l alumnado. 10,00 8,00 6,00 4,00 2,00 0,00 USAL EXPECTATIVAS OBJETIVOS PLANIFICACIÓN GUÍA PERSONAL DOCENTE MÉTODO PLANIFICACIÓN ACT. REALIZACIÓN ACT. EVALUACIÓN RECURSOS TEÓRICOS RECURSOS PRÁCTICOS Figura 3. Resultados l caso estudio USAL. Valoración 0 a 10. IV. REVISIÓN DE LOS CASOS En primer lugar se confirma que el método evaluación ha permitido al evaluador seleccionar los asuntos evaluación, terminando aquellos criterios calidad que ha

6 consirado importantes para la experiencia sarrollada, en un caso se trataba valorar la opinión los alumnos acerca l sarrollo un curso en línea, en el segundo caso se trataba valorar el sarrollo la experiencia forma global, tanto por parte los alumnos como por parte l profesorado que impartía el curso. En el primer caso existía una experiencia previa y eran menos los aspectos que se seaba evaluar, en el segundo caso se trataba la primera edición un curso, por lo que se seaba evaluar el máximo los aspectos posibles. Los resultados agrupados por asuntos evaluación se recogen en la Fig. 2. Los resultados se han podido expresar en función las características que requería cada evaluador, en un caso numéricamente y en otro con una escala Likert cualitativa. En el primer caso los resultados han sido altamente satisfactorios, en el segundo caso ha suministrado amplia información en todos los aspectos, especialmente en el caso los profesores que permitirá la mejora l curso en futuras ediciones. Amás en este caso quedó manifiesto la necesidad elaborar baterías preguntas a los alumnos con un número menor preguntas, ya que se ha tectado que algunos encuestados no llegaban a finalizar el cuestionario. Por otro lado también pomos comparar los resultados las dos experiencias agrupando los resultados por asuntos evaluación, lo que permite a los responsables la posibilidad realizar análisis comparativos aquellos aspectos que consiren convenientes. En la Fig. 4 se muestra un gráfico barras don pue compararse la valoración realizada por los alumnos que participaron en los casos analizados. Del resultado las dos experiencias pomos observar que no existen grans diferencias entre la valoración los mismos asuntos evaluación, pese a tratarse experiencias con una cierta diferencia. En cualquier caso las mayores diferencias se establecen en los asuntos planificación actividas, guía y evaluación, que berán ser analizados para mejorar los resultados en posteriores ediciones. 10,00 8,00 6,00 4,00 2,00 0,00 EXPECTATIVAS OBJETIVOS PLANIFICACIÓN GUÍA PERSONAL DOCENTE MÉTODO PLANIFICACIÓN ACT. REALIZACIÓN ACT. EVALUACIÓN RECURSOS TEÓRICOS RECURSOS PRÁCTICOS Figura 4. Resultados comparados. Valoración 0 a 10. SO2-TEL USAL V. CONCLUSIONES Resumiendo, pomos afirmar que se ha presentado un método evaluación que permite evaluar experiencias aprendizaje e-learning mediante un proceso sistemático y estructurado, ha resultado acuado para evaluar experiencias sarrolladas en entornos universitarios, especialmente cuando se utilizan plataformas o campus virtuales servicios e-learning o b-learning. La propia estructura l método sarrollado en dos fases, una primera diseño, don se configuran los parámetros evaluación en función los objetivos buscados, y una segunda implementación, don se sarrollan los procedimientos recogida información y la valoración los resultados, ha permitido su implementación en una herramienta web [22] que facilita la generación cuestionarios, el tratamiento las encuesta, la generación resultados en formatos fácilmente manejables, lo que permite a su vez facilitar el entendimiento los resultados y su impacto en el funcionamiento l sistema. Amás, estos resultados se duce que es necesario llevar a cabo encuestas este tipo para mejorar el diseño y sarrollo cursos, y amás, para una evaluación completa, incluir el análisis logs l sistema y l los resultados la evaluación. El uso esta herramienta cualitativa mejorará el análisis los datos recogidos a partir experiencias como las scritas anteriormente, suministrando mejores mecanismos actuación y la posibilidad comparación datos relevantes. En próximos trabajos se preten estudiar la aplicación l método presentado en otros ámbitos no solo en titulaciones universitarias sino consirar también su uso en otros contextos como pue ser la formación en empresas o instituciones administraciones públicas. Con ello se preten llegar a ámbitos don el fenómeno e-learning se ha extendido forma generalizada y a la vez, se hace necesaria una revisión tallada la calidad en el uso estas tecnologías formativas.. Asunto evaluación Expectativas Objetivos Guía Personal Apéndice A: Cuestionario evaluación Cuestión 1. El planteamiento la asignatura está acor con sus expectativas 2. Debería haberse establecido algún tipo prerrequisito para accer al grupo 3. Se han indicado forma clara y precisa los objetivos la asignatura 4. Los objetivos l curso persiguen fomentar el aprendizaje la asignatura 5. La información sobre la planificación l curso es accesible forma sencilla 6. Consira que la planificación l curso se ha presentado forma clara y precisa 7. Cree que se ha cumplido la planificación la asignatura 8. Se ha distribuido forma acuada la carga trabajo a lo largo l curso 9. Le ha parecido completa y útil la información sobre el sarrollo la asignatura, actividas, calendarios y exámenes 10. El programa estudio la asignatura le ha parecido coherente 11. Cree que el perfil l profesor es acuado para impartir la asignatura siguiendo este método

7 docente Método enseñanza actividas Realización actividas 12. La comunicación con el profesor ha resultado fluida y efectiva 13. Consira acuada la atención prestada por el profesor-tutor 14. Consira acuada la metodología empleada en la impartición la asignatura 15. El profesor ha realizado un seguimiento acuado l progreso los alumnos 16. Consira acuadas las formas publicación información importante l profesor (correo, tablón anuncios) 17. Cree que la enseñanza esta asignatura bería ser más dirigida 18. Los manuales o guías trabajo son suficientemente claros y completos para el seguimiento la asignatura 19. Consira acuadas las instrucciones para la realización las actividas 20. Los plazos tiempo establecidos para la entrega actividas han sido suficientes 21. Se han planteado las actividas esperadas durante la asignatura 22. Consira acuado el nivel exigencia las actividas 23. Crees que el nivel dificultad las actividas está en consonancia con el nivel los contenidos teóricos 24. Ha existido una acuada conexión entre los contenidos teóricos y las actividas prácticas 25. El manejo l campus virtual ha resultado sencillo 26. El funcionamiento l campus virtual ha sido el esperado 27. Los requisitos tecnológicos para realizar las actividas han sido acuados 28. Los tiempos respuesta l campus virtual se consiran correctos 29. No se han tectado problemas serios en el funcionamiento l campus virtual 30. Las herramientas comunicación (correo electrónico o las propias la plataforma) han funcionado manera apropiada 31. El soporte las actividas la asignatura a través l campus virtual (seguimiento, entrega) ha sido satisfactorio 32. El soporte l campus virtual para realización exámenes y pruebas evaluación ha sido el acuado 33. Consira acuado el material entregado para la realización las actividas 34. Consira suficientes los recursos disponibles para la realización las actividas (laboratorios, horarios uso) 35. Consira acuado el sistema teóricos prácticos Información recibida Tiempo respuesta. evaluación empleado en las actividas 36. Consira justa la evaluación las actividas 37. Consira que los exámenes son coherentes con los objetivos que persigue la asignatura 38. Consira que bería haberse realizado otro tipo evaluación 39. Consira acuado el material didáctico entregado para el seguimiento la asignatura 40. Consira que el acceso a los materiales es sencillo 41. La distribución los materiales se realiza forma anticipada 42. Cree que el formato los materiales didácticos es el acuado 43. Consira que los módulos contenidos didácticos están estructurados forma coherente 44. Consira suficiente el material bibliográfico o enlaces web aportados para el seguimiento la asignatura 45. Cree que los materiales están revisados y actualizados. 46. Cree que los recursos l laboratorio para la realización las prácticas son fiables y suficientes 47. Cree que la asistencia técnica en el laboratorio es acuada 48. Consira que ha sido informado acuadamente acerca l programa, objetivos, requisitos y planificación l curso 49. Conoce suficientemente la forma acceso a los materiales didácticos, bibliotecas online, noticias 50. Consira acuada la asistencia técnica para resolver problemas con la plataforma 51. Consira que el profesor proporciona un feedback constructivo para mejorar el rendimiento académico 52. Cree que el tiempo respuesta l profesor ante dudas es acuado 53. Consira que el tiempo respuesta l personal apoyo técnico es acuado AGRADECIMIENTOS Este trabajo ha sido parcialmente financiado por el Ministerio Educación y Ciencia, Spain, TIN C04-02 Proyecto AEEVA, y el Proyecto excelencia GR47 la Junta Castilla y León. Spain. REFERENCIAS [1] F. Buendía and J.C. Cano. WebgeneOS: A Generative and Web-Based Learning Architecture to Teach Operating Systems in Unrgraduate

8 Courses, IEEE Trans on Education, Vol. 49, Issue 4, pp [2] CEN, Comitè Europèen Normalisation. Providing good practice for E-Learning quality approaches, Brussels, Available: [3] C.A. Dykman, and C.K. Davis, Online Education Forum. Part One Teachiong Online Versus Teaching Conventionally J. of Information Systems Education. Vol 19.N1. pp [4] C.A. Dykman, and C.K. Davis, Online Education Forum. Part Two The Shift Toward Online Education. J. of Information Systems Education. Vol 19.N2. pp. 157/ [5] C.A. Dykman, and C.K. Davis, Online Education Forum. Part Three A Quality Online Educational Experience. J. of Information Systems Education. Vol 19.N3. pp [6] E. Ejarque, F. Buendía, A. Hervás. Using a quality framework to evaluate e-learning based experiences. ECEL th European Conference on e-learning. Pp October, 2007 [7] E Ejarque, F. Buendía, A. Hervás. Aplicación un molo calidad para evaluar experiencias e-learning en el espacio europeo. Revista EDUCAR UA Barcelona. N. 41. Pp [8] EADTU, E-xcellence: benchmarking tool for quality assessment, European association of distance teaching universities, 2006, Available: [9] FERL, Further Education Resources for Learning Evaluating Virtual/Managed Learning Environments (V/MLEs). Ferl ILT Champion Manager s Handbook. Available: MLEs.pdf. [10] J.R Grandzol,. and C.J Grandzol. Best practices for online Business Education. International. Review of Research in Open and Distance learning. Vol 7. N. 1. June 2006 [11] IMS IMS Learning Design Specification Available: [12] JISC, Joint Information Systems Committee, Study of environments to support e-learning in UK further and higher education: A supporting study for the Joint Information Systems Committee. Bristol 2005, Available: Learning_survey_2005.pdf. [13] C. J. MacDonald, & Thompson, T. L. Structure, Content, Delivery, Service, and Outcomes: Quality e-learning in higher education. International Review of Research in Open and Distance Learning 6,(2). (2005). Available: [14] C. Muñoz, M.A. Con, and F.J.García-Peñalvo Learning Objects Quality: Moodle HEODAR Implementation. In Visioning and Engineering the Knowledge Society. A Web Science Perspective. Lecture Notes in Computer Science, 2009, Volume 5736/2009, [15] U-D. Ehlers;L. Goertz;B. Hilbrandt, J.M. Pawlowski. Quality in e- learning: use and dissemination of quality approaches in European e- learning: a study by the European Quality Observatory, Office for Official Publications of the European Communities, Luxembourg [16] Al-Smadi, Mohammad, Margit Hoefler, and Christian Guetl. "An integrated mol for e-assessment of learning experiences enriched with complex learning resources." Intelligent Networking and Collaborative Systems (INCoS), 2011 Third International Conference on. IEEE, [17] T. Tewin, Havard and MIT Team Up to Offer Free Online Courses. The New York Times, Education. May [18] [19] [20] [21] [22] AEEVA Evaluation Tool php?option=com_weblinks&catid=73&itemid=71 [23] Real creto 1393/2007, 29 octubre. BOE 30 octubre Regulación los estudios Grado y Posgrado en el Estado español. [24] H. M. Selim. "Critical success factors for e-learning acceptance: Confirmatory factor mols." Computers & Education 49.2: Antonio Hervás received the M.S. gree in mathematics from the Universidad Valencia, Spain, in 1985, and the Ph.D. gree in mathematics from the Universidad Politécnica Valencia, Spain, in His current research interests inclu Riccati matrix differential equations and applications, image reconstruction, and aspects related with e-learning and technology applications to higher education. He has led and participated in more than ten research and innovation projects. He was Vice-Rector for nine years at Universitat Politecnica Valencia. Dr. Hervás is Professor with the Department of Applied Mathematics, and velop his research in the Instituto Universitario Matemática Multidisciplinar (IUMM), both at Universitat Politécnica Valencia. Félix Buendía-García received the Master s Degree in computer engineering from the Polytechnic University of Valencia (UPV), Valencia, Spain, in 1992 and the Ph. D. gree from the Polytechnic University of Valencia in He is currently an assistant teacher in the Department of Computer Systems at the Universitat Politécnica Valencia., teaching Operating Systems, Web Design and Project Management courses, and supervising final projects about Web applications. His research interests are Web environments, e-learning and other related topics and he has participated in more than 25 articles and papers in the area of e-learning. Francisco J. García-Peñalvo. Associate Professor- Informatics and Automatic Department of the University of Salamanca, Spain. He got BS. and MS. Degrees on Software Engineering by the University of Salamanca and University of Valladolid (1992 and 1994) and a Ph. D. Degree on Computer Science by University of Salamanca (2000). Dr. García is the GRIAL (research GRoup in InterAction and elearning) head. His main research interests are elearning, Computer & Education, Adaptive Systems, Web Engineering, Semantic Web, and Software Reuse. He has led and participated in more than fifty research and innovation projects. He was Technology Innovation Vice-Rector of the University of Salamanca from March 2007 to December He has more than 100 published papers in international journals and conferences. In addition, he serves regularly as a PC member in several international conferences and as a reviewer of several international journals.