Unidades Técnicas de Calidad Región de Murcia. Universidad de Murcia, 30 de octubre de 2013

Transcripción

1 Unidades Técnicas de Calidad Región de Murcia Universidad de Murcia, 30 de octubre de 2013

2 UPCT - SGC. DOCENTIA. SGIC. Aplicaciones. Información. Seguimiento y renovación de la acreditación.

4 Escuelas. 7 Centros propios y 2 Centros adscritos. 7 Centros de Ingeniería-Arquitectura y 2 Centros CCSS. Títulos Oficiales. 17 Grados. 18 Másteres (4 Interuniversitarios de los que nos somos responsables administrativos). Formación permanente. Títulos propios. Extensión Universitaria. Universidad de Mayores. Cursos de Verano. Cursos de habilidades. Servicios. 17 Unidades administrativas. Comunidad Universitaria Estudiantes. 575 PDI. 400 PAS.

5 Asesoría Sistemas / Modelos Información Dirección de la Universidad Modelo de dirección Planes estratégicos A partir de nuestras bases de datos Títulos Oficiales Apoyar en los procesos de evaluación externa SGIC (AUDIT-RD) DOCENTIA Result. Academics. Satisfacciones Empleabilidad Formación permanente Apoyar en los procesos de evaluación externa SGIC Satisfacción Extensión Universitaria Satisfacción Servicios Apoyar la definición de las funciones de las Unidades

6 Isabel Rocio Antonio Lola/Yolanda/Jimena Asesoría Sistemas / Modelos Información Dirección de la Universidad Modelo de dirección Planes estratégicos A partir de nuestras bases de datos Títulos Oficiales Apoyar en los procesos de evaluación externa SGIC (AUDIT-RD) DOCENTIA Result. academics. Satisfacciones. Empleabilidad Formación permanente Apoyar en los procesos de evaluación externa SGIC Satisfacción Extensión Universitaria Satisfacción Servicios Apoyar la definición de las funciones de las Unidades

8 Encuestas de satisfacción de los estudiantes con la actividad docente de los títulos oficiales Una única fuente de información que expresa su opinión mediante una encuesta. En principio, parece que queda un poco corto para considerarlo evaluación de la actividad docente. Modelo de evaluación de la actividad docente - DOCENTIA Concreta las dimensiones de la actividad docente. Fija los criterios de evaluación: adecuación, satisfacción, eficiencia y orientación a la innovación docente. Amplia las fuentes de información. Concreta formatos y procedimientos para recoger la información. Define una matriz de evaluación. Facilita la identificación de áreas de mejora.

9 Primera versión de DOCENTIA-UPCT Experiencia: 2 Convocatorias. Misma Comisión de Evaluación. 12 expedientes en la primera convocatoria y 24 en la segunda. Conclusiones: Los grandes principios siguen siendo adecuados (concretar dimensiones de la actividad docente a evaluar, fijar diferentes criterios de evaluación y ampliar fuentes de información). Han aumentado las fuentes de información y la información disponible, pero no es información útil para conocer de qué manera se ha desarrollado la actividad docente en sus diferentes dimensiones y aplicar los criterios de evaluación. La valoración final depende en gran medida de la valoración cuantitativa que realizan los Directores de Centro y Departamento, así como de las encuestas de estudiantes. Los informes de evaluación, que además de contener la valoración final deben recoger comentarios y propuestas de mejora, aportan poca información con ese fin.

10 Segunda versión de DOCENTIA-UPCT desde 2010 Experiencia: Principal aportación: referencias para la actividad docente y matriz para la evaluación de la actividad docente. Ha sido enviado y evaluado por ANECA 3 veces. Principal problema: consecuencias de la evaluación. Necesitamos ponerlo en marcha para comprobar si es bueno. Es complejo de implantar. No queremos poner consecuencias sobre la carrera docente hasta que no estemos seguros de su fiabilidad y validez.

11 Para qué sirve y para qué no sirve? Analiza el grado en que la actividad de un profesor y sus resultados se ajustan a lo que la UPCT espera de ellos y emite una valoración. La actividad docente objeto de análisis es la desarrollada en diferentes títulos, diferentes asignaturas y diferentes años. Cada 5 años emite una valoración y genera un plan de mejora. Creemos que es un buen modelo para medir y mejorar en el LP. Su capacidad para resolver problemas de actividad docente a CP es limitada. No es su función.

12 Planteamiento actual Dar difusión y fomentar: La implantación de las referencias para la actividad docente. La generación y archivo de evidencias de la aplicación de esas referencias. Que los Equipos de Dirección de Centros, cuando detecten problemas en las asignaturas (resultados de rendimiento o quejas), empleen esas evidencias para analizar la actividad docente de la asignatura. Objetivo: Mejorar a CP la actividad docente. Usar las mismas dimensiones de la actividad docente para resolver los problemas a CP y para evaluar a LP. Otras consecuencias positivas: Dar tiempo al profesorado para conocer qué es espera de ellos y para que aprendan a trabajar de ese modo. Favorecer la aceptación del nuevo modelo de evaluación de la actividad docente.

14 SGIC-AUDIT 1. Procedimientos 2. Procedimientos implantados 3. Soporte informático: Alfresco 4. Situación de los centros. 5. Puntos a mejorar.

15 SGIC- AUDIT 36 Procedimientos: 01. Política y objetivos de la calidad Planes de mejora Mapas de títulos Diseño de títulos Planificación de títulos Criterios Definir perfiles de ingreso y egreso Definir programa de apoyo Definir programa de acogida Acoger estudiantes de N.I Apoyar la mejora del aprendizaje Apoyar a estudiantes de N.I Tratar desajustes entre perfil real y perfil idóneo Definir información para medir resultados académicos Definir información para medir inserción laboral Definir información para medir necesidades, expectativas y satisfacción Medir resultados académicos Medir la Inserción laboral de los egresados... Cada cuatro años Cada cuatro años. Cuando corresponda. Cuando corresponda. Anual. Cuando corresponda. Cuando corresponda. Cada cuatro años. Cada cuatro años. Anual. Anual. Anual. Anual. Cuando corresponda. Cuando corresponda. Cuando corresponda. Anual. Anual.

16 SGIC- AUDIT 36 Procedimientos: 19. Medir necesidades, expectativas y satisfacción Definir programa de publicación de información Publicar información Definir información para seguir una actividad Seguir una actividad Revisar, mejorar y rendir cuentas Auditorías Control de documentación Definir mecanismo para tratar quejas y sugerencias Tratar quejas y sugerencias Definir la política de personal Detectar y cubrir necesidades de personal Evaluar la actividad del personal Definir información para seguir la actividad del personal Seguir la actividad del personal Detectar y cubrir necesidades de recursos materiales y servicios Definir información para seguir la gestión de recursos y servicios Seguir la gestión de recursos materiales y servicios... Anual. Cada cuatro años. Anual. Cuando corresponda. Anual. Anual. Anual. Anual. Cuando corresponda. Anual. Cada cuatro años. Anual. Anual. Cuando corresponda. Anual. Anual Cuando corresponda. Anual.

17 Puntos a revisar del Sistema : 1. Llegada de Acredita, qué supone para nuestro Sistema? Nuestro P-CENTROS-24 sería el Informe de Autoevaluación. 2. Revisar si la información que recogemos se corresponde con la que ANECA nos demanda en ACREDITA. 3. Revisar si la información que recogemos es útil para los centros en el análisis que realizan de sus títulos. 4. Demasiados procedimientos que dificultan el manejo y comprensión por parte de los subdirectores de calidad de los centros del Sistema. 5. Gran volumen de Registros por cada Procedimiento. 6. Dificultad para medir la satisfacción de algunos grupos de interés como PAS y Empleadores.

19 Asesoría Sistemas / Modelos Información Dirección de la Universidad Títulos Oficiales Formación permanente Alfreso - SGIC (AUDIT-RD) Alfresco - DOCENTIA Pentaho. Satisfacción con actividad docente Encuestas on-line Extensión Universitaria Generar las encuestas / Procesar los datos Servicios

20 Soporte Informático Alfresco: - Soporte técnico: Servicio de Informática. - Existen tres perfiles de usuarios: administrador, subdirectores de Calidad y personal que maneja el Sistema en cada centro y, perfil ANECA. - DOCENTIA.

21 Desarrollo de aplicaciones informáticas para la gestión de la evaluación de la actividad docente del profesorado

22 - Base de datos de Access para manejar todos los datos relativos a los planes de ordenación docente. - Desarrollo informático para extraer, manejar y enviar correos masivos a los docentes: comprobación encargo docente. - Base de datos de Access para manejar todos los datos relativos a las evaluaciones: presenciales y on-line. - Evaluaciones on-line: desarrollo informático para manejar la web y un servidor. Cuestionario en la web. Acceso autenticado. 22

23 - Recogida de datos evaluaciones presenciales. Escaneado de cuestionarios (OMR7): pdf > asc. Aplicación informática para pasar de código ascii a código texto y chequear errores del proceso de escaneado. - Recogida de datos evaluaciones on-line: formato txt. - Desarrollo informático para generar informes y certificados a partir de los archivos anteriores. Es el proceso más complejo: utilización de diferentes base de datos y scripts para generar bases de datos de resultados e informes. Se hace en entorno Linux. 23

24 - Desarrollo informático para generar carpetas independientes en entorno web para cada uno de los profesores. Cada docente consulta on-line sus informes con acceso autenticado. - Desarrollo informático para que los profesores soliciten certificados de los informes a través de la web, con acceso autenticado. Control del proceso en base de datos. Un desarrollo similar se utiliza para solicitudes de evaluación de prácticas. - Desarrollo informático para generar informes específicos como los destinados al proceso de acreditación nacional. 24

25 - Aplicación para gestionar on-line la evaluación de los títulos propios: cuestionarios, datos... Basado en los mismos principios descritos anteriormente, aunque más sencillo. - Aplicación para gestionar en entorno web los datos del proceso de evaluación de la actividad docente de la Universidad de Mayores. Generación de informes en Linux con scripts apropiados. - Gestión de informes agregados dinámicos para diferentes destinatarios mediante SPSS y tablas dinámicas de Excel: evaluación de la actividad docente, satisfacción de estudiantes. - Utilización de Pentaho para manejar la información de gestión académica (administración externa) Utilización de R para manejar la información de egresados/empleabilidad (administración externa).

26 PROSPECCIÓN -Aplicación de mysql en las bases de datos. - Aplicación de Pentaho/Kettle para gestionar bases de datos, automatizar procesos y generar informes. -Aplicación de WordPress como entorno web para desarrollar el proceso de evaluación on-line. 26

28 Generación de información para el funcionamiento de sistemas

29 Informes y certificados de evaluación de la actividad docente (individuales / específicos) Profesores Informes de evaluación de la activ. docente individuales/agregados (simples o con formato de tabla dinámica) Responsables de centros y departamentos, Vicerrectorados 29

30 Informes de evaluación de la actividad docente de Títulos Propios Responsable del curso, Vicerrectorado de Profesorado e Innovación Docente Informes de evaluación de la actividad docente de Cursos de Verano y Universidad de Mayores 30 Responsables del curso, Vicerrectorado de Estudiantes y Extensión Universitaria

31 Informes de satisfacción de estudiantes Responsables de Centros Informes de egresados/empleabilidad Responsables de Centros 31

32 Otros informes no estandarizados A petición de los interesados Informes de satisfacción del profesorado Responsables de los Centros 32

33 III Jornada de trabajo de las universidades públicas de la Región de Murcia Gracias por la atención 33

35 Todos los grados verificado en 2008 y 2009 y los másteres verificados en 2008, 2009 y 2010 tienen al menos 1 informe MONITOR, por lo que no tienen que participar en esta convocatoria.

36 Servicio de Gestión de la Calidad UPCT Previsión de cursos para renovar la acreditación si agotamos los dos años de prórroga M. TAIDAA M. EERR GIHJ GIA GI. Civil GI. Rec. Minrls. G. Arquitc. Naval M. Ec. Social M. Emp. Turisc. G. Arquitectura G. Turismo GIOI GIQI GIE GIEIA GIM GITI GI. Telemática. GI. Sistemas. MI. Telecomunc. MI. Caminos GADE MBA GIDE M. Patrimonio

37 Elementos positivos: Que exista: Ya sabemos cómo van a evaluar los títulos. Podemos adaptar nuestras herramientas (SGIC e información) para facilitar su superación.

38 Dudas: A veces es difícil saber qué están tratando de comprobar: implantación de la memoria verificada, coherencia de los apartados de la memoria verificada, actualización de la memoria, adecuación de la memoria La definición de dimensiones, criterios es poco concreta. Es comprensible porque es la primera versión, pero su interpretación va a depender de la Comisión que la aplique. La titulación debe hacer un IA que no se genera por la aplicación de su SGIC y que puede hacer una Comisión que se cree específicamente con ese fin. En la visita están previstas audiencias con grupos de interés.

39