MANUAL SISTEVAL. Equipo de Redacción. Víctor Álvarez Rojo (Coord.) María Soledad Ibarra Sáiz Gregorio Rodríguez Gómez

Transcripción

1

2

3

4

5 Proyecto SISTEVAL: Recursos para el establecimiento de un sistema de evaluación del aprendizaje universitario basado en criterios, normas y procedimientos públicos y coherentes Programa de Estudios y Análisis de la Secretaría de Estado de Universidades e Investigación (Resolución de 22 de marzo de 2006, BOE de 11 de abril de 2006). Referencia EA MANUAL SISTEVAL Equipo de Redacción Víctor Álvarez Rojo (Coord.) María Soledad Ibarra Sáiz Gregorio Rodríguez Gómez Cádiz, 2006

6 Madrid, Noviembre de 2006 Ibarra Sáiz, M.S. (Dir); Álvarez Rojo, V. (Coord); Ibarra Sáiz, M.S.; Rodríguez Gómez, G. Diseño de portada Mónica Padilla Daza Proyecto SISTEVAL: Recursos para el establecimiento de un sistema de evaluación del aprendizaje universitario basado en criterios, normas y procedimientos públicos y coherentes. EA Programa de Estudios y análisis. Secretaría de Estado de Universidades e Investigación. Dirección General de Universidades (Resolución de 22 de marzo de 2006, BOE de 11 de abril de 2006). Ministerio de Educación y Ciencia. Edición I.S.B.N.: Depósito Legal: Imprime: Dirección:

7 ÍNDICE PRESENTACIÓN...5 Capítulo 1: Alcance del Sistema de Gestión de la Calidad del Sistema de Evaluación del Aprendizaje (SEA) Objeto y ámbito de aplicación El Sistema de Evaluación del Aprendizaje (SEA) de la Universidad de...9 Capítulo 2: Política de calidad respecto a la evaluación del aprendizaje Directrices generales Objetivos de la calidad...12 Capítulo 3: Procesos y procedimientos del Sistema de Evaluación del Aprendizaje Mapa de procesos Procesos de Planificación Proceso de seguimiento y control de documentos y registros Proceso de Análisis y Mejora Procedimiento de Auditoría Interna PC-AI Procedimiento de Control de los Producto No Conformes PC-CPNC Procedimiento de Revisión por la Dirección PC-RPD Procedimiento de Acciones Preventivas y/o Correctivas (PC-AP-AC) Capítulo 4: Recursos para la evaluación del aprendizaje Recursos organizacionales y humanos Organigrama y responsabilidades Infraestructura...47 ANEXOS...49 Anexo 1: Listado de indicadores...51 Anexo 2: Listado de documentos...53

8

9 PRESENTACIÓN Una de las principales actividades que se abordan en las Universidades es la evaluación del aprendizaje del alumnado que, habida cuenta de las interacciones que en la misma se produce, tanto entre diferentes niveles organizativos (Vicerrectorados, Facultades, Departamentos ) como entre personas implicadas (profesorado, alumnado ) hace que podamos entenderla como un Sistema de Evaluación del Aprendizaje (SEA). El Manual SISTEVAL es una propuesta de Manual de la Calidad del Sistema de Evaluación del Aprendizaje que pretende ser una herramienta sistemática y útil que oriente a los responsables universitarios en el proceso de sistematizar la evaluación del aprendizaje del alumnado en todos sus niveles, desde la normativa y reglamentación de la Universidad hasta la planificación de la evaluación en los programas de las asignaturas/materias por el profesorado. El Manual SISTEVAL se ha realizado sobre la base de su adecuación a la Norma UNE-EN- ISO 9001:2000, por lo tanto su seguimiento y cumplimentación facilitaría la certificación del Sistema de Evaluación del Aprendizaje puesto en práctica por parte de las Universidades. Este Manual SISTEVAL, fundamentalmente práctico, se estructura en cuatro capítulos. El primero de ellos está centrado en su objeto y ámbito de aplicación, y se presentan sus elementos integrantes: estrategia de planificación, normativa anual, planes de evaluación, programas de las asignaturas, recursos y el Sistema de Gestión de la Calidad. En el segundo capítulo se abordan las directrices generales y objetivos de calidad, componentes de la política de calidad. Los procesos y procedimientos del Sistema de Evaluación del Aprendizaje conforman el capítulo 3. Partiendo del mapa de procesos del SEA, se detallan los mismos y los procedimientos de planificación, en sus cuatros niveles; de seguimiento y control de documentos y registros; y de análisis y mejora. El último capítulo se refiere a los recursos, organizacionales y humanos; responsabilidades; e infraestructura necesaria para la implantación y seguimiento del sistema de gestión de la calidad del Sistema de Evaluación del Aprendizaje del alumnado universitario. Finalmente, se ofrece un listado de los indicadores que se proponen y los posibles documentos que deberían registrarse.

10

11 MANUAL SISTEVAL MANUAL DE LA CALIDAD DEL SISTEMA DE EVALUACIÓN DEL APRENDIZAJE (SEA) UNIVERSIDAD DE CURSO ACADÉMICO Elaborado por el Vicerrector de. Dirección postal del Vicerrectorado: Teléfono: Fax: Correo electrónico: Web de la Universidad donde está ubicado este manual: Fecha y firma del Vicerrector: Revisado y aprobado por (órgano de gobierno: Equipo, Junta, Comisión de Gobierno, ) Fecha y firma del Rector: Publicado en Boletín Oficial de la Universidad de Documento de referencia (actas, boletín )

12

13 Capítulo 1: Alcance del Sistema de Gestión de la Calidad del Sistema de Evaluación del Aprendizaje (SEA) 1. Objeto y ámbito de aplicación La presente versión es la PRIMERA VERSIÓN del MANUAL DE LA CALIDAD DEL SISTEMA DE EVALUACIÓN DEL APRENDIZAJE (MANUAL SISTEVAL) de la UNIVERSIDAD DE La elaboración y redacción del MANUAL SISTEVAL se ha desarrollado en conformidad con la Norma UNE-EN-ISO 9001:2000 con el objeto de que la UNIVERSIDAD DE se certifique para la evaluación del aprendizaje de sus estudiantes según la citada Norma. Igualmente, este Manual se ajusta a la siguiente normativa: 1- LOU 2- RD 55/2005 (Estudios de Grado) 3- RD 56/2005 (Estudios de Posgrado) 4- (Ley de Universidades de la CCAA) 5- Documentos programáticos del EEES (La Sorbona, 1998; Bolonia, 1999; Praga, 2001; MEC, 2003) 6- Estatutos de la Universidad de 7-. (Otras normas, si las hubiese) El presente Manual tiene por objeto fijar la política de calidad de la Universidad de, respecto a la evaluación del aprendizaje de sus estudiantes, así como describir el Sistema de Gestión de la Calidad (SGC) del mismo. El MANUAL SISTEVAL es de aplicación en todos los centros y titulaciones de la Universidad de ; y sus directrices afectan a todo el personal de ésta. 2. El Sistema de Evaluación del Aprendizaje (SEA) de la Universidad de El SEA de la Universidad de está integrado por:

14 Manual SISTEVAL 10 a) La estrategia de planificación del propio SEA en la que están implicadas las unidades docentes y administrativas y los colectivos que a continuación se relacionan: Nivel I: Vicerrectorado de y (órgano de gobierno) Nivel II: Centros universitarios y titulaciones Nivel III: Departamentos Nivel IV: Profesorado y estudiantes Mediante esta estrategia la Universidad de pretende asegurar la participación de todas las partes implicadas en la evaluación de los aprendizajes de forma que tanto el contenido como los procedimientos y recursos para la evaluación resulten coherentes con la oferta de formación de cada titulación, estén altamente tipificados, sean públicos y trazables. b) La Normativa Anual de Evaluación del Aprendizaje, que regula la actuación de todas las partes implicadas y garantiza el ejercicio de los deberes y derechos de docentes y estudiantes respecto a la certificación de las competencias aprendidas y el tratamiento de las no conformidades. c) Los Planes de Evaluación del Aprendizaje de Centros, Titulaciones y Departamentos en los que se concreta y contextualiza de forma específica la actuación de las partes implicadas. d) Las Programaciones de las asignaturas/materias realizadas por el profesorado: apartado referido a la evaluación. e) Los recursos organizativos, materiales y humanos necesarios para su implementación y seguimiento en los momentos y escenarios de la evaluación. f) El Sistema de Gestión de la Calidad del Sistema de Evaluación del Aprendizaje, concretado en este Manual de la Calidad que, de acuerdo a las Normas ISO, describe los diferentes procesos y concreta los procedimientos del SEA, a la vez que define los indicadores que permitirán el control y la mejora continua del propio SEA.

15 Capítulo 2: Política de calidad respecto a la evaluación del aprendizaje 1. Directrices generales La política de calidad que la Universidad de se propone mantener para su Sistema de Evaluación del Aprendizaje (SEA) se basa en los criterios generales de la calidad internacionalmente aceptados: 1- La evaluación se entiende como un proceso en el que están implicados los siguientes actores, cuyas tareas y responsabilidades se describirán más adelante en este Manual: - La universidad, como organización que establece la política de calidad de la evaluación del aprendizaje (Nivel I) - Los centros universitarios, que organizan y gestionan la evaluación en sus diferentes momentos; y elaboran los Planes de Evaluación de las Titulaciones (PEAT) que imparten (Nivel II) - Los departamentos universitarios, que proponen criterios y procedimientos de evaluación comunes o específicos para titulaciones y niveles de docencia (Nivel III) - El profesorado de las materias y asignaturas que prescriben los criterios, el contenido y las metodologías de evaluación. Y los estudiantes, que aportan resultados de aprendizaje e información sobre la calidad del proceso de evaluación (Nivel IV) 2- La calidad del proceso de evaluación está enfocada a que todos los grupos afectados por la evaluación del aprendizaje que realiza la universidad sean considerados como usuarios de su sistema de evaluación; y como tales vean satisfechas sus expectativas y necesidades. La Universidad de contempla los siguientes clientes de su sistema de evaluación: - Directos: alumnado y profesorado - Indirectos: universidad como organización, centros y departamentos universitarios, empleadores y sociedad en general

16 Manual SISTEVAL La evaluación como sistema, que trasciende las actuaciones individuales de los docentes y de los centros. Es por ello que en este manual se han diseñado los procesos que le son propios, son asignadas las funciones para su funcionamiento y están especificados los recursos necesarios para alcanzar los fines y los niveles de calidad del propio sistema. 4- Todo esto requiere el ejercicio del liderazgo de (órgano de gobierno), que se propone ejercerlo mediante el desarrollo de estrategias encaminadas a: - Lograr la participación de todas las partes interesadas en la evaluación y en el proceso de mejora continua del SEA de la Universidad de - Revisar sistemáticamente (anualmente) el sistema y tomar decisiones de mejora basadas en la información suministrada por todos y en especial por el profesorado y por los estudiantes como proveedores primarios de información sobre el sistema de evaluación. 2. Objetivos de la calidad Los objetivos de la calidad del SEA de la Universidad se han establecido considerando la información extraída por (órgano de gobierno) de la normativa especificada anteriormente para este MANUAL SISTEVAL y de las fuentes internas de información de la universidad (vg. las evaluaciones institucionales anuales de la docencia 1 ). Los objetivos de la calidad para el SEA de la Universidad son los siguientes: Implicar institucionalmente en la mejora sistemática del SEA a todas las partes interesadas en la evaluación: órganos de gobierno de la universidad, centros y departamentos universitarios, profesorado, alumnado y egresados Diseñar, documentar y difundir el SEA de la Universidad de forma que sus normas reguladoras y los criterios y procedimientos con los que se realiza la evaluación de los aprendizajes sean públicos y accesibles a cualquier colectivo interesado dentro y fuera de la universidad 1 Especificar las propias de la universidad de que se trate.

17 13 Capítulo 2. Política de calidad respecto a la evaluación del aprendizaje Diseñar, documentar y difundir los Planes de Evaluación del Aprendizaje específicos y consensuados de cada una de las titulaciones ofertadas por la Universidad de, Elaborar e implementar un servicio de apoyo a la evaluación del aprendizaje (formación e innovación) destinado al profesorado Elaborar y aprobar anualmente la partida presupuestaria específica para la consecución de los objetivos de calidad del SEA de la Universidad de Mejorar el grado de satisfacción de las partes interesadas con el SEA

18

19 Capítulo 3: Procesos y procedimientos del Sistema de Evaluación del Aprendizaje 1. Mapa de procesos En el gráfico 1 se presentan los principales procesos implicados en el Sistema de Evaluación del Aprendizaje de la Universidad de., cuya descripción y concreción en procedimientos se especifica en los siguientes epígrafes. Grafico 1: Mapa de Procesos del Sistema de Evaluación del Aprendizaje

20 2. Procesos de Planificación UNIVERSIDAD DE CÓDIGO PROCESO: RESPONSABLE PROCESO: Planificación de la Evaluación del Aprendizaje en la Universidad (Nivel I) Vicerrector de (denominación propia: Organización Docente ) MISIÓN Elaborar y dar a conocer el Sistema de Evaluación del Aprendizaje (SEA) de la Universidad: criterios, normas, procedimientos y recursos para la evaluación del aprendizaje universitario ALCANCE Empieza: Inicio de la planificación académica del curso académico siguiente Incluye: Manual de Calidad del SEA, Sistema de Evaluación del Aprendizaje de la Universidad, Normativa Anual para la Evaluación del Aprendizaje, Plan de Difusión, Plan de Seguimiento y Evaluación Termina: Revisión anual del SEA PROVEEDORES ENTRADAS DESCRIPCIÓN DE TAREAS SALIDAS CLIENTES Legislación aplicable Orientaciones del Espacio Europeo de Educación Superior Estatutos de la Universidad Normativa y reglamentación propia de la Universidad Unidad de Calidad Comité Asesor Artículos normativos Previsiones sobre enseñanza y evaluación acordadas en reuniones transnacionales Artículos normativos Artículos normativos Resultados encuestas de satisfacción sobre el proceso de evaluación Información comparada Propuestas técnicas Concretar requisitos, procesos, plazos y responsabilidades Recoger información documental Analizar buenas prácticas sobre evaluación del aprendizaje universitario en otras universidades y países Concretar exigencias de innovación en evaluación Analizar opinión de la comunidad universitaria sobre evaluación Redactar borrador de la normativa Revisar y aprobar normativa anual Diseñar el SEA de la universidad Presentar propuesta a los órganos colegiados correspondientes Difundir el SEA de la universidad Diseñar y revisar el SGC del SEA INSTRUCCIONES El Comité Asesor será el encargado de elaborar el borrador de la normativa anual, que deberá incluir: -Justificación de la propuesta -Concreción de funciones y responsabilidades de Centros y Departamentos -Especificación de procesos y tareas de evaluación a realizar por los profesores -Plan de apoyo a la calidad de la evaluación de los aprendizajes Borrador de normativa Documento 01-Manual de Calidad del SEA de la Universidad de Normativa Anual para la Evaluación de los Aprendizajes (Documento 03) Documento 02-SEA de la Universidad de Plan de Difusión del SEA (Documento 06) Plan de Seguimiento y Evaluación del SEA (Documento 04) Vicerrectorado (órgano de gobierno) Claustro Comité Asesor Profesorado Alumnado Centros Departamentos Partes interesadas El Vicerrector elabora el SEA de la universidad, que debe especificar: -Normativa Anual -Proceso de elaboración -Recursos organizacionales y humanos de apoyo -Infraestructuras -Presupuesto

21 DOCUMENTACIÓN - Legislación aplicable - Estatutos - Documentos reuniones transnacionales - Proyecto Tunning -Informes técnicos de Unidad Calidad -Documentos de buenas prácticas - Propuesta Manual SISTEVAL - Estudios e investigaciones INDICADORES: - Nº de sesiones de trabajo realizadas - Nº de cambios normativos justificados - Número y tipo de acciones para difundir el SEA - Porcentaje de visitas a página web sobre total comunidad universitaria - Grado de conocimiento del SEA - Grado de utilidad del SEA para el alumnado - Grado de utilidad del SEA para el profesorado - Grado de satisfacción global con el SEA PUNTOS CRÍTICOS - No adecuación de la propuesta a la situación de algún área científica - Cambios normativos que necesitan justificación y aprobación por órganos colegiados. REGISTROS - Actas de reuniones de Comité Asesor - Contador página web - Resultados de encuestas de evaluación y satisfacción OBSERVACIONES Y COMENTARIOS

22

23 UNIVERSIDAD DE CODIGO PROCESO RESPONSABLE PROCESO: Planificación de la Evaluación del Aprendizaje en los Centros (Nivel II ) Vicedecano de (denominación propia: Ordenación Académica) MISION: Elaborar y dar a conocer el Plan de Evaluación del Aprendizaje del Centro (PEAC): criterios, normas, procedimientos y recursos para la evaluación del aprendizaje universitario en las titulaciones impartidas en el centro ALCANCE: Empieza: Inicio de la planificación académica del curso académico siguiente Incluye: PEAT, PEAC, Instrucciones, Plan de difusión, Plan de Seguimiento Termina: Revisión anual del PEAC y PEAT PROVEEDORES ENTRADAS DESCRIPCIÓN DE TAREAS SALIDAS CLIENTES Vicerrectorado Coordinadores de Titulaciones Departamentos Profesorado Alumnado Unidad de Calidad (denominación propia: UTC ) Normativa Anual de Evaluación Planes estratégicos de las titulaciones Necesidades de tiempos y recursos Necesidades específicas Sugerencias No conformidades Resultados encuestas de satisfacción de profesores y alumnos del Centro Analizar criterios, normas y procedimientos normativos Analizar características y requisitos de los procesos de evaluación de cada titulación Analizar indicadores de satisfacción, sugerencias y quejas del curso anterior Cuantificar tiempos y recursos demandados Elaborar calendarios y horarios provisionales Asignar recursos Difundir la planificación de las evaluaciones Recepcionar y analizar la no conformidades Publicar el PEAC Establecer el Plan de Seguimiento de la aplicación e impacto del PEAC Monitorizar las actividades de evaluación INSTRUCCIONES El vicedecano es el encargado de: a) Convocar a los coordinadores de las titulaciones de todos los departamentos implicados para elaborar el PEAT de cada titulación, lo que implica: -Definir criterios, procedimientos y técnicas de evaluación preferentes para la titulación -Consensuar el PEAT de cada titulación b) elaborar y difundir el PEAC, que comprenderá: -Instrucciones generales para el desarrollo de las actividades de evaluación -Planning de calendarios, horarios y recursos -Protocolo para la formulación de no conformidadesreclamaciones (08) -Protocolo de incidencias durante el desarrollo de las actividades de evaluación (09) -Responsables y acciones de seguimiento PEAC (Documento 09) Plan de Seguimiento y Evaluación del PEAC (Documento 10) Plan de Mejora del PEAC (Documento 11) Plan de Difusión del PEAC (Documento 12) PEAT de cada titulación (Documento 13) Planes de Seguimiento y Evaluación de los PEATs (Documento 14) Planes de Mejora de los PEATs (Documento 15) Planes de Difusión de los PEATs (Documento 16) Sugerencias, quejas y reclamaciones (Documento 22) Página Web del Centro Departamentos Profesorado Alumnado Vicedecano de Partes Interesadas Coordinador del PAS

24 DOCUMENTACIÓN -Normativa Anual -Informes de las Titulaciones -Informes de los departamentos -Resultados de las encuestas de satisfacción - Documentación técnica sobre evaluación -Protocolos de sugerencias y quejas registradas INDICADORES - Nº de sesiones de trabajo - Nº de no conformidades - Nº y tipo de acciones de difusión del PEAC - Porcentaje de visitas a página web del PEAC sobre total de alumnos del centro - Grado de conocimiento del PEAC - Grado de utilidad del PEAC para el profesorado - Grado de utilidad del PEAC para el alumnado - Grado de satisfacción global con el PEAC PUNTOS CRÍTICOS -Inadecuaciones a necesidades individuales -Solapamientos de calendario -Inadecuación en monitorización de recursos (PAS) OBSERVACIONES Y COMENTARIOS El PEAT de cada titulación se propone inicialmente como propuesta a asumir voluntariamente por el profesorado; la conveniencia de establecer su obligado cumplimiento en etapas posteriores deberá ser valorada en el Nivel I (vicerrector y órgano de gobierno) en tanto pueda colisionar con derechos legales de profesor (libertad de cátedra, etc.). En cualquier caso, aparecerá este extremo explícitamente contemplado en la Normativa Anual para la Evaluación del Aprendizaje.

25

26 UNIVERSIDAD DE CÓDIGO PROCESO RESPONSABLE PROCESO: Planificación de la Evaluación del Aprendizaje en los Departamentos (Nivel III ) Comisión de (denominación propia: Docencia del Departamento ) MISIÓN Elaborar y dar a conocer el Plan de Evaluación del Aprendizaje del Departamento (PEAD): criterios, normas, procedimientos y recursos comunes y consensuados para la evaluación del aprendizaje universitario en las materias impartidas por el Departamento ALCANCE: Empieza: Inicio de la planificación académica del curso académico siguiente Incluye: SEA, PEAC, Instrucciones, Plan de difusión, Plan de Seguimiento Termina: Revisión anual del PEAD PROVEEDORES ENTRADAS DESCRIPCIÓN DE TAREAS SALIDAS CLIENTES - Vicerrectorado - Comisión Académica del Centro - Coordinadores de Titulaciones - Comisión de (denominación propia Docencia del Dpto) - Profesorado -Normativa Anual de Evaluación - SEA - PEAT de las Titulaciones - Propuestas para áreas y subáreas de conocimiento Analizar criterios, normas y procedimientos normativos Analizar las características de cada titulación y área de conocimiento Diseñar propuesta del PEAD, incluyendo criterios, normas, procedimientos y recursos Difundir y debatir la propuesta del PEAD Presentar y aprobación el PEAD Determinar los recursos de apoyo a la evaluación del aprendizaje en el Dpto Establecer el Plan de Seguimiento de la aplicación e impacto del PEAD Difundir el PEAD INSTRUCCIONES La Dirección del Departamento será la encargada de: a) convocar a la Comisión de para que elabore el PEAD b) convocar al Consejo del Dpto. para obtener los siguientes resultados: PEAD (Documento 17) Plan de Seguimiento y Evaluación del PEAD (documento 18) Plan de Mejora del PEAD (Documento 19) Plan de Difusión del PEAD (Documento 20) Protocolo de recursos de apoyo (Documento 21) Acuerdo de Dpto. para aplicación del PEAD Vicerrectorado Centro Titulación Consejo de Departamento Profesorado Alumnado -Acuerdos sobre política general del Dpto. respecto a la evaluación de los aprendizajes -Acuerdos sobre criterios, normas, procedimientos y técnicas de evaluación en ámbitos específicos (competencias generales, materias comunes, cursos, practicum, prácticas, etc.) -Acuerdos sobre elaboración de recursos de apoyo a la evaluación (modelos de exámenes, pruebas específicas, medios de difusión on-line, etc.) -Acuerdo sobre presupuesto para recursos de apoyo a la evaluación -Acuerdos sobre plan de seguimiento

27 DOCUMENTACIÓN -Normativa Anual -Informes de las Titulaciones -Resultados de encuestas de satisfacción -Documentación técnica sobre evaluación -Protocolo de sugerencias o no conformidades INDICADORES - Nº de sesiones de trabajo realizadas por la Comisión de. - Porcentaje de miembros del consejo de Dpto. presentes en la discusión y debate del PEAD - Nº de no conformidades - Nº y tipo de acciones de difusión del PEAD - Porcentaje de visita a página web del PEAD sobre total de alumnado y profesorado - Grado de conocimiento del PEAD - Grado de utilidad del PEAD para el profesorado - Grado de utilidad del PEAD para el alumnado - Grado de satisfacción global con el PEAD PUNTOS CRÍTICOS -Escasa participación del profesorado - Grado de vinculación de los acuerdos -Seguimiento del plan REGISTROS - Actas de reuniones de Comisión - Actas de Consejo de Departamento - Contador página web - Resultados de encuesta de evaluación y satisfacción OBSERVACIONES Y COMENTARIOS

28

29 UNIVERSIDAD DE CÓDIGO PROCESO PROCESO: Planificación de la Evaluación del Aprendizaje en las Materias y Asignaturas impartidas por el Profesorado RESPONSABLE (Nivel IV) Profesorado responsable que imparte materias o asignaturas MISIÓN Elaborar y dar a conocer el contenido, proceso, criterios, normas, procedimientos y técnicas e instrumentos para la evaluación del aprendizaje en las materias/asignaturas impartidas por el profesorado PROVEEDORES ENTRADAS DESCRIPCIÓN DE TAREAS SALIDAS CLIENTES Vicerrectorado Comisión de Docencia del Dpto. Vicedecano de O.A. Alumnado Normativa Anual de Evaluación Documento de criterios consensuados SEA PEAT PEAD Resultados del aprendizaje Analizar especificaciones institucionales (normativa, plan, etc.) Especificar el contenido de la evaluación (qué) Determinar procedimientos y momentos de la evaluación (cómo, dónde y cuándo) Concretar los criterios de evaluación Establecer mecanismos de calificación Analizar el impacto de la evaluación INSTRUCCIONES Programas de las asignaturas (Documento 24) Conformidades con los objetivos de aprendizaje Alumnado Profesorado de la materia/asignatura Partes interesadas El profesorado deberá consignar en el programa de la asignatura, al menos, los siguientes extremos: Objeto de evaluación (Competencias generales y/o técnico-específicas que se evaluarán) Criterios de evaluación Momentos de la evaluación Instrumentos de Evaluación Sistema de calificación Evidencias que deberá presentar el alumnado Criterios que se seguirán en la evaluación de la evidencias presentadas Sistema de calificación DOCUMENTOS INDICADORES PUNTOS CRÍTICOS Normativa Anual Resultados de las encuestas de satisfacción Documentación del Dpto. Documentación del Centro Grado de utilidad de la programación para el alumnado Porcentaje de reclamaciones/no conformidades sobre total alumnos matriculados en las materias impartidas por el profesor Claridad/concreción de criterios de evaluación Obtención y conservación de las evidencias Correspondencia evidenciascalificación OBSERVACIONES Y COMENTARIOS El estudio de impacto del sistema de evaluación de las asignaturas que imparte un docente no le es exigible institucionalmente al profesor individualmente considerado.

30

31 27 Capítulo 3. Procesos y procedimientos del Sistema de Evaluación del Aprendizaje 3. Proceso de seguimiento y control de documentos y registros La política de calidad de la Universidad de está asociada con la mejora continua de su oferta de formación y servicios a la comunidad universitaria y a la sociedad en su conjunto. Este principio de actuación exige que el soporte documental del SEA esté sometido a un seguimiento para asegurar que da respuesta a las necesidades de las partes interesadas; de aquí que se haya previsto llevar a cabo un seguimiento y control del mismo según el proceso que a continuación se presenta y los procedimientos detallados posteriormente.

32 UNIVERSIDAD DE CÓDIGO PROCESO: RESPONSABLE PROCESO: Seguimiento y control del Sistema de Evaluación del Aprendizaje de la Universidad Vicerrector de (denominación propia: Organización Docente ) MISIÓN Asegurar que los documentos y registros que integran el Sistema de Evaluación del Aprendizaje en la Universidad son identificados, revisados y actualizados. ALCANCE Empieza: Necesidad de mantener un control sobre la documentación y los registros del sistema de evaluación del aprendizaje Incluye: Inventario de documentos. Inventario de registros. Elaboración de nuevos documentos, revisión, aprobación y distribución de la documentación. Termina: Actualización de la lista de documentación y de registros del sistema de evaluación del aprendizaje en vigor. PROVEEDORES ENTRADAS DESCRIPCIÓN DE TAREAS SALIDAS CLIENTES Servicio de apoyo al SEA Comité Asesor Profesorado Estudiantes Departamentos, Centros y titulaciones Egresados y empleadores Unidad de Calidad (denominación propia: UTC ) Lista de los documentos cubiertos por el Sistema de gestión de la Calidad del Sistema de Evaluación del Aprendizaje Instrucciones y formatos necesarios para la revisión, aprobación y distribución de la documentación. Analizar resultados de los indicadores del SEA Analizar resultados de auditorías internas Analizar valoraciones, sugerencias, quejas y no conformidades de las partes interesadas Determinar áreas de mejora documentales del SEA Seguimiento y control de la documentación del SEA Proponer modificaciones documentales INSTRUCCIONES El Comité Asesor deberá: -Analizar todos los resultados y valorar la necesidad de realizar modificaciones documentales El Vicerrector de tomará decisiones sobre: - Documentación a revisar Documentos controlados, revisados y actualizados. - Alumnos - Profesores - Departamentos - Centros - Titulaciones - Resto de las partes interesadas DOCUMENTACIÓN INDICADORES: PUNTOS CRÍTICOS -Normativa Anual -Manual SISTEVAL -Resultados de las encuestas de satisfacción -Informes de las auditorías internas -Informes Anuales sobre PEAC y PEAD -Sugerencias, quejas y no conformidades individuales - Porcentaje de no conformidades identificadas en el control de documentación con respecto al total de documentos analizados - Porcentaje de documentos revisados anualmente sobre los recogidos en la lista documentación - Vigencia de la documentación REGISTROS - Actas de reuniones del Comité Asesor - Actas de reuniones del Servicio de Apoyo al SEA - Lista de control de documentación externa - Lista de distribución de la documentació - Lista de documentación en vigor OBSERVACIONES Y COMENTARIOS

33 29 Capítulo 3. Procesos y procedimientos del Sistema de Evaluación del Aprendizaje

34 Manual SISTEVAL 30

35 31 Capítulo 3. Procesos y procedimientos del Sistema de Evaluación del Aprendizaje 4. Proceso de Análisis y Mejora La política de calidad de la Universidad de está asociada con la mejora continua de su oferta de formación y servicios a la comunidad universitaria y a la sociedad en su conjunto. Este principio de actuación exige que el SEA esté sometido a una adaptación periódica a las necesidades de las partes interesadas en cada uno de los contextos de enseñanza de la universidad; de aquí que se haya previsto llevar a cabo una revisión anual para la mejora del mismo según el proceso que a continuación se presenta.

36 UNIVERSIDAD DE CÓDIGO PROCESO: RESPONSABLE PROCESO: Análisis y mejora del SEA de la Universidad de Vicerrector de (denominación propia: Organización Docente ) MISIÓN Incrementar los niveles de satisfacción de las partes interesadas (proveedores y clientes) con el SEA de la universidad ALCANCE Empieza: Análisis de los resultados de los indicadores del SEA del curso anterior Incluye: El análisis de los resultados de los procesos (de planificación, de auditoría interna, de productos no conformes, de acciones preventivas y correctivas y de los obtenidos por la revisión efectuada por la dirección -Comité Asesor-) y la elaboración, aplicación y evaluación de acciones de mejora Termina: Modificación de la Normativa Anual de Evaluación PROVEEDORES ENTRADAS DESCRIPCIÓN DE TAREAS SALIDAS CLIENTES -Servicio de apoyo al SEA -Comité Asesor -Profesores -Estudiantes Resultados auditorías internas Resultados de seguimiento del SEA Resultados de las acciones de mejora del curso anterior Sugerencias y/o quejas Reclamaciones Análisis de los resultados de los indicadores del SEA Análisis de los resultados de las auditoría internas Análisis de las valoraciones, sugerencias, quejas y no conformidades de las partes interesadas Determinación de áreas de mejora del SEA Elaboración del plan de mejora Aplicación, seguimiento y evaluación de las acciones preventivas y correctivas Modificación del Manual SISTEVAL para del curso siguiente Plan de Mejora de SEA (preventivas y correctivas) (documento 05) Alumnos Profesores Departamentos Centros Titulaciones Resto de las partes interesadas -Departamentos, Centros y titulaciones -Egresados y empleadores -Unidad de Calidad (denominación propia: UTC ) Informe anual sobre SEA de la universidad Valoraciones y sugerencias Resultados encuestas institucionales INSTRUCCIONES El Comité Asesor deberá: -Analizar todos los resultados y valorar el impacto del SAE de la universidad en las partes interesadas - Identificar áreas de mejora - Diseñar las acciones de mejora (preventivas y correctivas) El Vicerrector de tomará decisiones sobre: -Acciones de mejora a acometer en el curso siguiente -Propuestas ( de calidad y presupuestarias) que se someterán a aprobación en el (órgano de gobierno) y en el Claustro

37 DOCUMENTACIÓN -Normativa Anual -Manual SISTEVAL -Resultados de las encuestas de satisfacción -Informes de las auditorías internas -Informes Anuales sobre el SEA, de departamentos y centros -Sugerencias, quejas y no conformidades individuales INDICADORES: - Porcentaje de auditorías internas realizadas anualmente respecto a las previstas - Porcentaje de documentos de valoración y seguimiento recepcionados por el Comité Asesor en las fechas señaladas - Grado de cumplimiento de las fechas de presentación del plan y de las acciones de mejora para su aprobación - Nº de acciones de mejora iniciadas efectivamente - Porcentaje de aplicación de cada una de las acciones de mejora - Nº de sesiones dedicadas por el Comité Asesor al análisis de los resultados de las acciones de mejora - Nº de modificaciones anuales aprobadas e introducidas en el Manual SISTEVAL - Porcentaje anual de incremento del grado de satisfacción de las partes interesadas en el SEA PUNTOS CRÍTICOS - Calidad y representatividad de la información contenida en los documentos de valoración y seguimiento - Cumplimiento de calendario REGISTROS - Actas de reuniones del Comité Asesor - Actas de reuniones del Servicio de Apoyo al SEA - Resultados de encuestas de evaluación y satisfacción OBSERVACIONES Y COMENTARIOS

38

39

40 Manual SISTEVAL Procedimiento de Auditoría Interna PC-AI Una de las fuentes de datos para el análisis y mejora del SEA de la Universidad de son las auditorias internas. En consecuencia esta universidad realizará por periodos de tres años una auditoría interna para comprobar el grado de implantación y la eficacia del sistema de gestión de calidad del SEA y la conformidad de dicho sistema de calidad con los requisitos de la norma UNE-EN-ISO 9001:2000. El procedimiento que se sigue es el que se describe a continuación 1- El plan de anual de auditorías (Documento 07) irá dirigido a los cuatro niveles del SEA y afecta a todos los órganos unipersonales y colegiados implicados. Dado el gran número de estos, cada curso se auditará una tercera parte de los mismos. 2- Al Vicerrector de corresponde aprobar el plan anual de auditorías. 3- El responsable del Servicio de Apoyo al SEA es la persona encargada de: a) La elaboración y ejecución del plan anual de auditorías b) La selección y formación de los auditores c) El registro de los informes de auditorías d) La remisión de los mismos a los centros y departamentos auditados y al Comité Asesor 4- Los auditores designados para cada centro serán los responsables de: a- Pactar con los centros y departamentos el programa de auditoría b- Realizar el informe de auditoría 5- La responsabilidad del Comité Asesor es analizar los informes de las auditorias anuales de los centros y asociar acciones de mejora (preventivas o correctivas) a los resultados de las mismas Procedimiento de Control de los Producto No Conformes PC-CPNC La participación de todas las partes interesadas en el diseño, aplicación y mejora del SEA de la Universidad de está asegurada en los diferentes subprocesos definidos en este Manual SISTEVAL. Sin embargo, la aparición de no conformidades en el proceso de aplicación del SEA y, sobre todo, las no conformidades de los estudiantes respecto a los resultados de la evaluación de su aprendizaje en las asignaturas se consideran como elementos normalizados del proceso de evaluación. Son la segunda fuente anual de datos para el análisis y la mejora del SEA.

41 37 Capítulo 3. Procesos y procedimientos del Sistema de Evaluación del Aprendizaje En consecuencia, para realizar el análisis y el control de las no conformidades se contempla el procedimiento siguiente: 1- Durante el desarrollo del Plan de Evaluación del Centro (PEAC) En los periodos en que se lleva a cabo la evaluación del aprendizaje en los centros es previsible el surgimiento de incidencias sobre infraestructura (no disponibilidad o inadecuación de locales y medios), sobre tiempos (horarios no disponibles o insuficientes) o condiciones de evaluación (ruidos, iluminación, etc.) no previstas, no conformes. Dichas incidencias, cuando tienen entidad suficiente para distorsionar el desarrollo normalizado de la evaluación (no solucionables en el momento), son registradas por el profesor en el Protocolo de Incidencias (Documento 23) que se dirige al Vicedecano de. El resultado del análisis realizado por dicho vicedecano sobre el conjunto de incidencias acaecidas durante el curso se remite anualmente al Vicerrector de en forma de Informe Anual sobre el SEA de la Universidad de (Documento 08) para su mejora. l 2- En la fase de calificación del aprendizaje de los estudiantes por el profesorado La formulación y tratamiento de las reclamaciones de los estudiantes sobre proceso, resultados y criterios de evaluación aplicados por los profesores en sus asignaturas están regulados por la Normativa Anual para la Evaluación del Aprendizaje de la Universidad de. Las reclamaciones se formulan en un Protocolo de Reclamaciones (Documento 22), a disposición de los estudiantes en la Secretaría del Departamento al que pertenezca el profesor. 3- El análisis y la valoración del conjunto anual de no conformidades es responsabilidad del Comité Asesor, así como asociar acciones de mejora (preventivas o correctivas) a los resultados de esta tarea. El PC-CPNC aparece diagramado a continuación.

42 Manual SISTEVAL Procedimiento de Revisión por la Dirección PC-RPD La tercera fuente de datos para el análisis y la mejora son las personas que lideran el SGC del SEA de la Universidad de. Y tal como se especifica en el Capítulo 4 de este manual (4.2. Organigrama y responsabilidades). El conjunto de personas implicadas en la revisión configuran el PC-RPD que se especifica a continuación: I. El Comité Asesor, como encargado de la revisión anual de los datos aportados por otros respecto al seguimiento del SEA, realiza durante el mes de marzo 2 el análisis del seguimiento del SEA. 2 Una vez finalizados todos los periodos de evaluación de un curso académico (evaluaciones ordinarias y extraordinarias).

43 39 Capítulo 3. Procesos y procedimientos del Sistema de Evaluación del Aprendizaje II. El Vicerrector de, como responsable máximo del SGC del SEA, convoca al Comité Asesor en ese mismo mes, valora con él los resultados de la aplicación anual del SEA y toma decisiones sobre las posibles acciones de mejora. III. El (órgano de gobierno) conoce a través Vicerrector de, los resultados y la propuesta de plan de mejora y toma decisiones sobre la propuesta de SAE y Mejora que se hará al Claustro. IV. El Consejo de Gobierno es informado antes de que los centros y departamentos inicien la elaboración del Plan de Organización Docente del curso siguiente; es decir en el mes de sobre los resultados de la aplicación del SEA del curso anterior y del Plan de Mejora del mismo y aprueba el nuevo SAE para el curso siguiente y las acciones de mejora a implementar.

44 Manual SISTEVAL Procedimiento de Acciones Preventivas y/o Correctivas (PC-AP-AC) El análisis y la revisión de los datos aportados por los distintos colectivos implicados y por los responsables de las unidades de docencia de la universidad respecto a la aplicación anual del SEA de la Universidad de arroja unos resultados que constituyen el elemento básico para la elaboración de acciones de mejora del propio SEA. El procedimiento que se utilizará para realizar dicha tarea es éste:

45 41 Capítulo 3. Procesos y procedimientos del Sistema de Evaluación del Aprendizaje 1) El Comité Asesor, una vez revisados los datos del seguimiento del SEA, diseña durante el mes de marzo el Plan de Mejora del SEA 3 (Documento 05) que se propondrá para su aplicación en el curso siguiente. El diseño de las acciones de mejora se realizará conforme a un Protocolo de acciones correctivas preventivas estándar (Documento 26) 2) El Vicerrector de analiza la viabilidad de las acciones de mejora preventivas y/o correctivas contempladas en dicho plan y las presenta al (órgano de gobierno) y al Claustro para su aprobación 3) Los protocolos de las acciones preventivas y/o correctivas son enviados a los responsables de las unidades docentes implicadas para que procedan a su aplicación y al Servicio de Apoyo al SEA para que realice su seguimiento. 3 Incluye: Acciones de mejora preventivas y correctivas a acometer en el curso siguiente y dotaciones presupuestarias necesarias para su implantación.

46

47 Capítulo 4: Recursos para la evaluación del aprendizaje 1. Recursos organizacionales y humanos El aseguramiento y la mejora continua de la calidad del SEA de la Universidad de exige disponer de una estructura de apoyo estable en la propia organización de la universidad. Es por ello que se han considerado los siguientes recursos organizacionales: 1- Creación del Comité Asesor cuyas funciones son: Aportar conocimientos técnicos sobre evaluación Analizar buenas prácticas sobre adaptación de la evaluación al EEES realizadas en otras universidades y países Redactar borrador de la normativa anual Revisar resultados de seguimiento para la mejora Estará integrado por 10 profesores, dos por cada una de las cinco áreas generales de conocimientos 4, nombrados por el Vicerrector de. 2- Colaboración de la ya existente Unidad de Calidad (denominación propia: UTC ) cuya función consiste en: o Aportar los datos de satisfacción sobre el SEA vertidos en las encuestas institucionales por profesores y estudiantes o Localizar buenas prácticas de evaluación 3- Servicio de apoyo al SEA, integrado en la unidad administrativa que gestiona la formación del profesorado de la Universidad. Sus funciones son las siguientes: Realizar propuestas anuales de formación sobre evaluación Coordinar grupos de innovación sobre evaluación del aprendizaje Fomentar el diseño y difusión de metodologías y materiales para la evaluación Realizar el seguimiento del SEA de la Universidad Elaborar y ejecutar el plan anual de auditorías 4 Sociales y Jurídicas; Ciencias de la Salud; Enseñanzas Técnicas; Humanidades y Ciencias Experimentales

48 Manual SISTEVAL 44 Estará coordinado por un profesor especialista en evaluación y dispondrá de al menos un funcionario de administración y servicios a tiempo completo. 2. Organigrama y responsabilidades ORGANIGRAMA RESPONSABILIDADES Vicerrector de - Diseño, implantación, seguimiento y revisión anual del SGC (Documentos 02, 04 y 06) - Planificación y difusión del SEA de la universidad (Documento 02 y Documento 06) - Previsión y gestión de recursos materiales, económicos, de personal y de infraestructuras para la evaluación - Aprobar el plan anual de auditorías (Documento 07) - Revisar y proponer para su aprobación el Plan de Mejora del SEA (acciones preventivas y correctivas) (Documentos 05 y 26) - Realizar el Informe Anual sobre el SEA de la Universidad de (Documento 08) - Gestionar y custodiar los documentos y registros de su competencia

49 45 Capítulo 4. Recursos para la evaluación del aprendizaje (órgano de gobierno) - Revisar y aprobar la propuesta anual de SEA de la universidad y del SGC del mismo - Remitir SEA y SGC a órgano de gobierno competente para su aprobación - Aprobar las acciones de mejora (acciones preventivas y correctivas) (Documento 05) (Claustro o Consejo de Gobierno) - Analizar y aprobar SEA de la universidad y su SGC Vicedecano de - Convocar a los coordinadores de las titulaciones de todos los departamentos implicados para elaborar el PEAT de cada titulación y el PEAC - Elaborar y difundir el Plan de Evaluación y Seguimiento de los PEATs y del PEAC (Documentos 09 al 16) - Difundir el PEAC y los PEATs de cada titulación (pagina web y guía del estudiante, del Centro) - Analizar incidencias del proceso de evaluación en su Centro (Documento 23) - Cumplimentación del documento Informe anual sobre el SEA de la Universidad de (Documento 08) - Gestionar y custodiar los documentos y registros de su competencia Coordinadores de Titulaciones - Elaborar y consensuar el PEAT de cada titulación (Documento 13) Comisión de (denominación propia: Docencia del Departamento ) - Elaboración, difusión y mejora del PEAD (Documentos 17 al 20) - Cumplimentación del documento Protocolo de recursos de apoyo a la evaluación (documento 21) - Cumplimentación del documento Informe anual sobre el SEA de la Universidad de (Documento 08) - Gestionar y custodiar los documentos y registros de su competencia Directores de Departamento - Convocar a la Comisión de del departamento para que elabore el Plan de Evaluación del Aprendizaje del departamento de (PEAD) (Documento 17) - Convocar al consejo del departamento para analizar, consensuar y aprobar dicho documento - Proponer al consejo de departamento los coordinadores de las titulaciones en las que imparte docencia

50 Manual SISTEVAL 46 - Convocar al consejo del departamento para analizar y realizar aportaciones al PEAT de cada una de las titulaciones en que está implicado el departamento Comité Asesor - Aportar conocimientos técnicos sobre evaluación - Localizar y analizar buenas prácticas sobre adaptación de la evaluación al EEES realizadas en otras universidades y países - Redactar borrador de la normativa anual - Revisar resultados de seguimiento para la mejora - Elaboración anual del Plan de Mejora del SEA (Documento 05) - Gestionar y custodiar los documentos y registros de su competencia Unidad de Calidad - Aportación de resultados de encuestas de satisfacción de profesores, estudiantes, egresados y empleadores (Documento 25) - Localización de buenas prácticas de evaluación Servicio de Apoyo al SEA - Realizar propuestas anuales de formación sobre evaluación - Coordinar grupos de innovación sobre evaluación de los aprendizajes - Fomentar el diseño y difusión de metodologías y materiales para la evaluación - Realizar el seguimiento del SEA de la universidad - Elaborar y ejecutar el plan anual de auditorías (Documento 07) - Gestionar y custodiar los documentos y registros de su competencia Profesorado - Confeccionar el programa de la asignatura de acuerdo al SEA, al PEAC, PEAT y al PEAD (Documento 24) - Registro de incidencias en el proceso de evaluación - Gestionar y custodiar los documentos y registros de su competencia Alumnando - Formular sugerencias sobre el SEA de la universidad - Formular reclamaciones / no conformidades sobre el proceso de evaluación de su Centro - Formular sugerencias sobre el Plan de Evaluación del Aprendizaje del departamento de (PEAD) (Documento 17) - Formular reclamaciones / no conformidades sobre los resultados de la evaluación de sus asignaturas, en su caso

51 47 Capítulo 4. Recursos para la evaluación del aprendizaje 3. Infraestructura La infraestructura requerida se concreta en una dependencia (despacho) de gestión para el servicio de apoyo, con sus dotaciones informáticas normalizadas. Esta infraestructura puede ser específica o compartida con otras unidades administrativas o de servicios.

52

53 ANEXOS

54

55 Anexo 1: Listado de indicadores Proceso Indicadores Umbral Planificación de la Evaluación de los Aprendizajes en la Universidad (Nivel I) Evaluación de los Aprendizajes en los Centros y Titulaciones (Nivel II ) Evaluación de los Aprendizajes en los Departamentos (Nivel III) Evaluación de los Aprendizajes en las Materias y Asignaturas (Nivel IV) Seguimiento, análisis y mejora del SEA de la Universidad de - Nº de sesiones de trabajo realizadas - Nº de cambios normativos justificados - Número y tipo de acciones para difundir el SEA - Porcentaje de visitas a página web sobre total comunidad universitaria - Grado de conocimiento del SEA - Grado de utilidad del SEA para el profesorado - Grado de satisfacción global con el SEA - Grado de utilidad del SEA para el alumnado - Nº de sesiones de trabajo - Nº de no conformidades - Nº y tipo de acciones de difusión del PEAC/PEAT - Porcentaje de visitas a página web del PEAC/PEAT sobre total de alumnos del centro - Grado de conocimiento del PEAC/PEAT - Grado de utilidad del PEAC/PEAT para el profesorado - Grado de utilidad del PEAC/PEAT para el alumnado - Grado de satisfacción global con el PEAC/PEAT - Nº de sesiones de trabajo realizadas por la Comisión de - Porcentaje de miembros del consejo de Dpto. presentes en la discusión y debate del PEAD - Nº de no conformidades - Nº y tipo de acciones de difusión del PEAD - Porcentaje de visita a página web del PEAD sobre total de alumnado y profesorado - Grado de conocimiento del PEAD - Grado de utilidad del PEAD para el profesorado - Grado de utilidad del PEAD para el alumnado - Grado de satisfacción global con el PEAD - Porcentaje de reclamaciones/no conformidades sobre total del alumnos matriculados en las materias impartidas por el profesor -Grado de utilidad de la programación para el alumnado - Porcentaje de no conformidades identificadas en el control de documentación con respecto al total de documentos analizados - Porcentaje de documentos revisados anualmente sobre los recogidos en la lista documentación - Grado de cumplimiento de las fechas de elaboración de propuestas de mejora - Porcentaje de auditorías internas realizadas anualmente respecto a las previstas - Porcentaje de documentos de valoración y seguimiento recepcionados por el Comité Asesor en las fechas señaladas sobre el total -Grado de cumplimiento de las fechas de presentación del plan y de las acciones Medida Curso 200./200. Procedimiento de medida Responsable Vicerrector de. Vicedecano de. Comisión de. (Docencia ) del Departamento Profesores de las materias Vicerrector de.

56 de mejora para su aprobación - Nº de acciones de mejora iniciadas efectivamente - Porcentaje de aplicación de cada una de las acciones de mejora - Nº de sesiones dedicadas por el Comité Asesor al análisis de los resultados de las acciones de mejora - Nº de modificaciones anuales aprobadas e introducidas en el Manual SISTEVAL -Porcentaje anual de incremento del grado de satisfacción de las partes interesadas en el SEA