ENCUENTRO SEMINAR ON. Methodological common instruments for assessment and accreditation in the european framework

Universidad Internacional Menéndez Pelayo Cursos de Verano 2004 INSTRUMENTOS COMUNES METODOLÓGICOS PARA LA EVALUACIÓN Y ACREDITACIÓN EN EL MARCO EUROPEO DE LA DECLARACIÓN DE BOLONIA Santander, 28 al 30 de julio de 2004 METHODOLOGICAL COMMON INSTRUMENTS FOR ASSESSMENT AND ACCREDITATION IN THE EUROPEAN FRAMEWORK Santander, 28th-30th July 2004 Agencia Nacional de Evaluación de la Calidad y Acreditación

ENCUENTRO Instrumentos metodológicos comunes para la evaluación de la calidad y la acreditación en el marco Europeo de la Declaración de Bolonia Santander, 28 al 30 de julio de 2004 SEMINAR ON Methodological common instruments for assessment and accreditation in the european framework Santander, July 28 th - 30 th 2004

Índice Index Objetivos........................................................................7 Objectives.......................................................................9 CONCLUSIONES GENERALES. NUEVAS TENDENCIAS Y PROPUESTAS Gaspar Rosselló, Director de Programas de la ANECA...................................11 GENERAL CONCLUSIONS. NEW TRENDS AND PROPOSALS Gaspar Rosselló, Programmes Director of ANECA.......................................13 PRESENTACIÓN: LA AGENCIA NACIONAL DE LA EVALUACIÓN DE LA CALIDAD Y ACREDITACIÓN Francisco Marcellán, Director de la ANECA............................................15 PRESENTACIÓN: THE SPANISH NATIONAL AGENCY FOR QUALITY ASSESSMENT AND ACCREDITATION Francisco Marcellán, Director of ANECA..............................................21 EL PAPEL DE LAS REDES EN LA PROMOCIÓN DEL RECONOCIMIENTO MUTUO DE LAS DECISIONES SOBRE ACREDITACIÓN Francisco Marcellán, Director de la ANECA............................................27 THE ROLE OF NETWORKS IN THE PROMOTION OF MUTUAL RECOGNITION OF DECISIONS ON ACCREDITATION Francisco Marcellán, Director of ANECA..............................................31 INSTRUMENTOS COMPATIBLES PARA LA EVALUACIÓN DE LA CALIDAD Séamus Puirséil, Miembro de la Dirección de la ENQA...................................35 COMPATIBLE INSTRUMENTS FOR QUALITY ASSESSMENT Séamus Puirséil, Member of ENQA Steering Group......................................41 3

ÍNDICE / INDEX MARCO EUROPEO DE CUALIFICACIONES: SIGNIFICADO E IMPORTANCIA Ian McKenna, Miembro del Grupo de Trabajo de Bolonia................................47 EUROPEAN FRAMEWORK OF QUALIFICATIONS: WHAT IT MEANS AND WHY IS IT IMPORTANT? Ian McKenna, Member Bologna Working Group.......................................53 INSTRUMENTOS COMUNES DE EVALUACIÓN Y ACREDITACIÓN EN EUROPA Lesley Wilson, Secretaría General de la EUA...........................................59 COMMON INSTRUMENT FOR ASSESSMENT AND ACCREDITATION IN EUROPE Lesley Wilson, Secretary General EUA................................................65 UNA APROXIMACIÓN DIRIGIDA A LAS MEJORAS Ailsa Crum, Representante del Reino Unido en el Grupo de Seguimiento de Bolonia...........69 AN ENHANCEMENT-LED APPROACH Ailsa Crum, UK Delegate to the BFUG................................................73 GARANTÍA DE CALIDAD Y LO QUE LOS ESTUDIANTES ESPERAN DE ELLA Nicolas Heerens, Representante de la National Unions of Students in Europe................77 QUALITY ASSURANCE AND WHAT STUDENTS EXPECT FROM IT Nicolas Heerens, Representative of the National Unions of Students in Europe...............81 INSTRUMENTOS COMUNES PARA LA ACREDITACIÓN: PROCEDIMIENTOS Y REVISIÓN POR PARES Karl Dittrich, Vicepresidente de la Netherlands Accreditation Organisation (NAO).............85 COMMON INSTRUMENTS FOR ACCREDITATION: PROCEDURES AND PEER REVIEW Karl Dittrich, Vice-president of the Netherlands Accreditation Organisation (NAO)............95 CRITERIOS COMUNES INDICADORES Y ESTÁNDARES: PUNTOS DE REFERENCIA Helmut Konrad, Presidente del Austrian Accreditation Council...........................105 COMMON CRITERIA, INDICATORS AND STANDARDS: POINTS OF REFERENCE Helmut Konrad, President of the Austrian Accreditation Council..........................109 EL SISTEMA DE ACREDITACIÓN POLACO EN LA EDUCACIÓN SUPERIOR Andrzej Jamiolkowski, Presidente del Comité Polaco para la Acreditación..................113 THE POLISH SYSTEM OF ACCREDITATION IN TERTIARY EDUCATION Andrzej Jamiolkowski, President of the Polish Committee for Accreditation.................117 INSTRUMENTOS Y CRITERIOS COMUNES PARA LA ACREDITACIÓN Hans-Uwe Erichsen, Presidente del Consejo de Acreditación Alemán.......................121 COMMON INSTRUMENTS AND CRITERIA FOR ACCREDITATION Hans-Uwe Erichsen, President of the German Accreditation Council.......................125 INSTRUMENTOS PARA LA ACREDITACIÓN Oddvar Haugland, Director de la Agencia Noruega para la Garantía de la Calidad en la Educación............................................129 INSTRUMENTS FOR ACCREDITATION Oddvar Haugland, Director of the Norwegian Agency for Quality Assurance in Education.....137 4

ÍNDICE / INDEX PROCESOS COMPARABLES PARA LA EVALUACIÓN DE LA CALIDAD Fidel Corcuera, Director de Relaciones Institucionales de la ANECA........................145 COMPARABLE PROCESSES FOR QUALITY ASSESSMENT Fidel Corcuera, Director for Institutional Relations of ANECA............................153 5

Objetivos La Conferencia Ministerial que tuvo lugar en Berlín el 18 y 19 de septiembre de 2003, subrayó la necesidad y la importancia de desarrollar los instrumentos metodológicos comunes y los criterios que se aplicarán en el proceso de evaluación y acreditación de la calidad en la Educación Superior. La ENQA (European Network for Quality Assurance in Higher Education), de la cual España es miembro y forma parte del Comité de Decisión, asume este mandato, con la participación de sus miembros y asociaciones y organizaciones similares. El Ministerio de Educación y Ciencia junto con la Agencia Nacional de Evaluación de la Calidad y Acreditación (ANECA), la institución que representa a España en la ENQA, organizarán un Seminario sobre los "Instrumentos metodológicos comunes para la evaluación de la calidad y la acreditación en el marco europeo de la Declaración de Bolonia", con el fin de crear el instrumento necesario que será compartido en los procesos de la evaluación de la calidad y acreditación. El Seminario tendrá lugar en Santander, en la Universidad Internacional Menéndez Pelayo, del 28 al 30 de Julio de 2004. Todas las Agencias Europeas para la Evaluación de la Calidad y Acreditación están invitadas para que sus expertos puedan asistir. El Seminario incluirá presentaciones individuales de expertos que se ocupan del desarrollo de la metodología, así como los temas que se tratarán en los talleres de trabajo, donde todos los participantes serán recibidos para formar parte y contribuir en el debate con sus aportaciones. El objetivo del Seminario es elaborar un documento con las conclusiones de las propuestas más significativas, con el fin de alcanzar el modelo de Espacio Europeo de Educación Superior. 7

Objectives The Ministerial Conference held in Berlin on the 18/19th September, 2003, underlined the need and importance of developing common methodological instruments and criteria to be applied on quality assessment and accreditation processes of Higher Education in Europe. The European Network for Quality Assurance in Higher Education (ENQA), of which Steering group Spain is a member, assumed such a commitment, with the participation of the its members and similar associations and organizations. The Spanish Ministry of Education, Culture and Sports along with Spanish National Agency for Quality Assessment and Accreditation (ANECA), the institution that represents Spain at ENQA, will organize a Seminar on "Methodological common instruments for assessment and accreditation in the European framework", in order to make it possible to create the needed instrument to be shared in quality assessment and accreditation processes. The Seminar will take place in Santander (International University Menendez Pelayo), from the 28th,to the 30th of July, 2004. All the European Agencies for Quality Assessment and Accreditation will be invited to send experts on assessment and accreditation to the Seminar. The Seminar will include individual experts' presentations dealing with the development of methodology, as well as topic related workshops, where all the participants will be welcome to take part and contribute to the discussion. The aim of the seminar is to elaborate a document of conclusions with the most outstanding proposals to work with in the near future which will be another step forward in the way of Bologna Process. 9

Conclusiones generales Nuevas tendencias y propuestas Gaspar Rosselló Director de Programas de la ANECA (Versión original en Castellano) Este Seminario se ha enmarcado en las actividades de seguimiento del Proceso de Bolonia en el periodo comprendido entre las conferencias de Ministros de Berlín y Bergen. Una vez más queda de manifiesto que los espacios temporales entre conferencias son particularmente activos para avanzar en debates que se formalizan en los respectivos encuentros. Así desde Praga a Berlín tuvieron lugar 10 seminarios oficiales, y de Berlín a Bergen se han realizado hasta la fecha 4 seminarios, siendo este el cuarto de ellos, estando prevista la celebración de 10 más. Con una destacada participación de expertos y representantes de instituciones de educación superior, gobiernos y agencias de acreditación europeas, y con destacada presencia de la Comisión Europea, ENQA, ECA, EUA y ESIB, el seminario de Santander ha aplicado el esquema de trabajo ya habitual en este tipo de encuentros consistente en la exposición mediante conferencias de temas de carácter fundamental y de talleres de discusión sobre aspectos concretos derivados de dichas exposiciones. OBJETIVOS El objetivo principal del seminario ha sido avanzar en el desarrollo de instrumentos metodológicos comunes para la evaluación de la calidad y la acreditación de la Educación Superior en el marco europeo de la Declaración de Bolonia, con el fin de que puedan ser aplicados sobre la base generalmente aceptada de su idoneidad y eficacia. Como objetivos adicionales se planteaba comparar procesos y analizar el trabajo en red de las agencias y entidades de evaluación para el reconocimiento mutuo de sus decisiones. Al mismo tiempo se pretendía profundizar en el debate de la Educación Superior en el Espacio Europeo. 11

CONCLUSIONES GENERALES. NUEVAS TENDENCIAS Y PROPUESTAS CONCLUSIONES Ha quedado confirmado el importante papel que las redes de agencias están llamadas a tener en el establecimiento de criterios y metodologías comunes de acreditación que lleven al reconocimiento mutuo de sus decisiones, subrayándose su labor en el impulso de un mayor y mejor conocimiento de las buenas prácticas, así como el intercambio de información y experiencias. Al mismo tiempo, se ha puesto de manifiesto la conveniencia de atender en la definición de estos criterios y metodologías comunes a la diversidad de los respectivos sistemas y tradiciones que llevarán al establecimiento de un marco comparable. La armonización debe ser el resultado de la suma de estas tradiciones y en ningún caso debe significar la reducción a un patrón común. Se evidencia la necesidad de establecer un glosario de términos que haga posible la interpretación de las especificaciones de cada institución a la luz de principios y puntos de referencia comunes pero flexibles en el ámbito europeo. Es imprescindible para la implantación de una cultura efectiva de calidad que en ella se impliquen gobiernos, instituciones de educación superior, agencias de calidad, profesores y estudiantes desde el convencimiento del beneficio cierto que reportará tanto a los actores involucrados como a la sociedad en general. En este sentido conviene recordar el mandato de los ministros en Berlín acerca del compromiso de disponer de sistemas nacionales de aseguramiento de la calidad en 2005. El establecimiento de criterios y metodologías comunes sólo es posible desde la mutua confianza entre instituciones y agencias sobre la base fundamentada en el incremento de la transparencia de los procesos de acreditación. Para ello es fundamental impulsar la evaluación de las Agencias por sus pares. Esta es una labor que debe ser realizada por el conjunto de instituciones y agencias de los países que participan en el proceso de Bolonia. La acreditación se contempla como un instrumento esencial para favorecer la garantía de la calidad de los sistemas de Educación Superior. Es necesario vincular el proceso de acreditación a la puesta en marcha de recomendaciones de mejoras específicas de las titulaciones e instituciones evaluadas. Se recomienda el establecimiento, dentro del proceso de Bolonia, de un programa concreto de acreditación que incluya un calendario preciso de actividades para el cumplimiento de objetivos específicos. Santander, 30 de julio de 2004 12

General conclusions New trends and proposals Gaspar Rosselló Programmes Director of ANECA (Translated version to English) This Seminar is part of the Bologna Process follow-up activities leading from the Berlin to the Bergen ministerial conference. The outcome shows once again that the intervals between these conferences are particularly busy in terms of furthering the debates that are initiated at them. Thus, in the interval between Prague and Berlin there were ten official seminars; between Berlin and Bergen there were four so far, including this one, and ten more are planned. Thanks to the participation by key experts and representatives from higher education institutions, governments and European accreditation agencies and the high-profile presence of the European Commission, ENQA, ECA, EUA and ESIB, the Santander seminar followed the standard work pattern of conferences of this kind, with presentations consisting of lectures on fundamental issues and workshop discussions on specific aspects raised in these presentations. OBJECTIVES The main objective of the seminar was to move forward in the development of common methodological tools for quality evaluation and accreditation of higher education within the European framework of the Bologna Declaration, with a view to identifying tools that are generally accepted as suitable and effective and can therefore be applied as such. Additional objectives were to compare processes and to analyse the networking of evaluation agencies and bodies with a view to the mutual recognition of their decisions. At the same time there was the intention to deepen the debate on the European Higher Education Area. 13

GENERAL CONCLUSIONS. NEW TRENDS AND PROPOSALS CONCLUSIONS It was confirmed that the networks of agencies will have an important role to play in the establishment of common accreditation criteria and methodologies that may lead to the mutual recognition of their decisions, in particular by means of their efforts to push for more and better knowledge of good practices and exchange of information and experience. At the same time it was made clear that in defining these common criteria and methodologies it is necessary to take into account the diversity of the various systems and traditions that will go into the construction of a comparable framework. Harmonisation should be the result of the conjunct of these traditions and should under no circumstances mean their reduction to a common pattern. There is a clear need to establish a glossary of terms that will make it possible to interpret the main features of each institution in the light of common but flexible principles and points of reference agreed at European level. For the implantation of an effective culture of quality, it is essential that governments, higher education institutions, quality agencies, teachers and students all participate, in view of the expectation that this process will benefit not only all agents involved but also society at large. We would recall in this connection the mandate issued by ministers in Berlin regarding the commitment to have national quality assurance systems in place by 2005. It will only be possible to establish common criteria and methodologies if mutual trust among institutions and agencies is achieved on a basis of greater transparency in accreditation processes. To that end it is essential to promote a peer review process among agencies. That is a task that has to be undertaken by the community of institutions and agencies taking part in the Bologna process. Accreditation is viewed as an essential tool for the promotion of quality assurance in higher education systems. The accreditation process should be linked to the implementation of specific recommendations for the improvement of the evaluated qualifications and institutions. It is recommended that a concrete accreditation scheme be set up within the Bologna process; it should include a detailed calendar of activities for the achievement of specific objectives. Santander, 30 th July 2004 14

Presentación: La Agencia Nacional de Evaluación de la Calidad y Acreditación Francisco Marcellán Director de la ANECA (Versión original en Castellano) INTRODUCCIÓN En primer lugar desearía exponerles brevemente las actividades de la Agencia Nacional de Evaluación de la Calidad y Acreditación en relación con el mandato de la Ley de Universidades para garantía de la calidad de las mismas. Para todos los que mantenemos un contacto directo con la Universidad actual, no es un secreto que ésta se encuentra actualmente inmersa en un proceso de toma de conciencia de su necesidad de adaptación a un nuevo modelo de estudios y enseñanzas en un futuro no muy lejano que supondrá una verdadera revolución del concepto de universidad mantenido durante mas dos siglos. Este cambio profundo viene directamente impulsado por dos movimientos que van adquiriendo consistencia en los últimos años: 1. La cultura de Evaluación de la Calidad 2. El proceso de Convergencia Europea Los dos movimientos conducen hacia el Espacio Europeo de Educación Superior, cuya fecha límite es el año 2010. En ambos, los actores fundamentales son los profesores y los alumnos aunque hay otros actores involucrados: Ministerio de Educación y Ciencia, Consejo de Coordinación Universitaria, las propias universidades, y en menor medida la Agencia Nacional y las Agencias regionales. En este marco de cambios sustantivos para el sistema universitario España ocupa una posición destacada, formando parte del grupo de cabeza y jugando un papel relevante en la puesta en marcha de los principios de convergencia establecidos en la Declaración de Bolonia. 15

PRESENTACIÓN A comienzos de esta década, la Universidad española tenía tres retos: El cambio de la normativa legal y su adaptación a las nuevas condiciones en que se desenvuelve la actividad universitaria (se cumple con la LOU). La convergencia europea: la Declaración de Bolonia y sus implicaciones en nuestro sistema universitario. El reto de la calidad: - Afrontarlo es responsabilidad principal de las propias Universidades. - Para ello disponen de la máxima autonomía y competencias en los cuatro ejes fundamentales de la actividad universitaria: investigación, docencia, formación de profesionales y gestión de sus propios servicios. La participación de la ANECA en relación con la Calidad es, en primer lugar, contribuir a la expansión de la cultura de la evaluación para la mejora de las Instituciones. El Programa de Evaluación Institucional tiene un objetivo muy determinado que es el de preparar a las titulaciones a superar satisfactoriamente el proceso de evaluación del desarrollo efectivo de sus enseñanzas (acreditación), que la Ley de Universidades establece como obligatorio para todos los títulos oficiales. Este proceso permitirá medir el rendimiento del servicio público universitario e informar a la sociedad, a las administraciones educativas y a las propias universidades para las que tendrá consecuencias claramente positivas. En segundo lugar, la ANECA impulsa y apoya los procesos de Convergencia Europea. Que se fundamenta en la comparabilidad de las enseñanzas y en la mutua confianza entre instituciones que llevará al reconocimiento automático de períodos de estudios y titulaciones en todos los países firmantes de la Declaración de Bolonia. La Agencia Nacional en España y las redes de Agencias de Evaluación supranacionales europeas serán garantes de la calidad de los procesos y resultados de las actividades universitarias. 16

INSTRUMENTOS METODOLÓGICOS COMUNES PARA LA EVALUACIÓN DE LA CALIDAD Y LA ACREDITACIÓN EN EL MARCO EUROPEO DE LA DECLARACIÓN DE BOLONIA DE QUE MANERA LA ANECA VA A ENFRENTAR EL RETO DE LA CALIDAD: Los proyectos y actuaciones futuras. 1. Convergencia Europea. Este constituye uno de los grandes retos del futuro inmediato y tanto las Universidades como las Administraciones Públicas deben volcar sus esfuerzos en su puesta en marcha, sobre la base de un alto grado de consenso y de ideas claras acerca del significado del proceso. Más concretamente, la evaluación de la experiencia de las tres convocatorias publicadas, orientadas a la elaboración de los Libros Blancos de titulaciones en los estudios de grado, debe servir de referente para dicho trabajo. Para tener una visión completa del proceso es necesario iniciar experiencias similares con los nuevos estudios de postgrado (Master y Doctorado). El programa de Convergencia Europea de la ANECA se fundamenta sobres tres ejes principales de actuaciones: Difusión de los objetivos de Bolonia y toma de conciencia por parte de los actores involucrados. Definición de indicadores para medir la aplicación de los criterios de convergencia europea. Puesta en marcha de experiencias piloto de diseño e implantación de titulaciones con la estructura de dos ciclos definida en Bolonia. Todas estas iniciativas están dirigidas a reforzar las actuaciones de las universidades, sobre las que recae la competencia y la responsabilidad fundamental de conseguir el objetivo de la Convergencia Europea. En paralelo, debemos realizar una reflexión y generar un trabajo en red con los servicios académicos que en las universidades españolas centran su actividad en los programas de movilidad de alumnos y profesores en el Espacio Europeo de la Educación Superior. 2. Programa de Evaluación Institucional y Acreditación Desde la experiencia acumulada en el pasado mediante los Planes de Calidad de las Universidades, debemos dar un salto hacia adelante en términos tanto cuantitativos como cualitativos, en la evaluación de aquellas titulaciones que no han alcanzado la velocidad de crucero en los controles de calidad, de manera que se les posibilite avanzar hacia la acreditación. En ese sentido, esta a primera fase del proceso debería contar con un apoyo específico de las Comunidades Autónomas, interviniendo la ANECA en la posterior fase de acreditación. Por otra parte, el Programa de Acreditación de Títulos Oficiales es un proceso de carácter obligatorio, que debe considerarse como una re-homologación más ambiciosa que la simple homologación previa actual, ya que se trata de un control de la calidad de una determinada titulación efectuado a- posteriori. La acreditación se realizará sobre las nuevas titulaciones que se definan como consecuencia del proceso de Convergencia europea y se efectuará sobre criterios que incidan en la calidad y en 17

PRESENTACIÓN la integración del sistema español en el Espacio Universitario europeo. Esto llevará a que nuestros títulos oficiales puedan ser homologados automáticamente en otros países por el procedimiento de reconocimiento mutuo entre agencias. Asimismo, hay que retomar el excelente trabajo desarrollado en el Programa de Certificación de Bibliotecas Universitarias para su extensión a otros servicios estratégicos en las Universidades como los relacionados con la investigación y transferencia de resultados, la imagen institucional y la actividad de los gabinetes de comunicación, entre otros, incorporando metodologías estándar y adaptadas a la realidad universitaria. 3. Evaluación del profesorado. Este es un aspecto a destacar en la actividad de la ANECA desde su puesta en funcionamiento: El profesorado es el elemento clave y fundamental que dota de contenido a la Ley de Universidades y hará posible la mejora de la calidad. La actuación de la Agencia Nacional de Evaluación de la Calidad y Acreditación en relación con el profesorado se refiere a la evaluación de su actividad docente e investigadora a efectos de su contratación por cualquier universidad pública o privada en todo el territorio nacional para las figuras de: Profesor Ayudante Doctor Profesor Colaborador Profesor Contratado Doctor Profesor de Universidad Privada La Agencia Nacional efectúa estas evaluaciones de forma gratuita y a lo largo de todo el año; su certificado es válido en todo el territorio nacional y por tiempo indefinido. Tenemos intención de incrementar el grado de transparencia y credibilidad de los procesos realizados desde la ANECA en las diferentes figuras de profesorado contratado, de acuerdo con criterios cuantificables que induzcan expectativas reales en los solicitantes. Complementariamente, se potenciará una coordinación más estrecha con las Agencias Autonómicas, con la finalidad de compartir criterios definitorios de indicadores y bancos de datos de evaluadores. Asimismo, fomentaremos la cooperación activa con las Universidades que deseen poner en práctica incentivos dirigidos a sus profesores basados en evaluación de méritos docentes, investigadores y de gestión. La independencia y autonomía de ANECA pueden servir de contrapeso en este proceso, en el que el reconocimiento de la excelencia de la labor de los profesores será reconocida desde la su propia institución universitaria. 18

INSTRUMENTOS METODOLÓGICOS COMUNES PARA LA EVALUACIÓN DE LA CALIDAD Y LA ACREDITACIÓN EN EL MARCO EUROPEO DE LA DECLARACIÓN DE BOLONIA 4. Programas de Estudios y Prospectiva Estimo muy conveniente que la proyección social de la Universidad española, sobre la base a datos contrastables, pueda contar desde la ANECA con un apoyo permanente. El esfuerzo realizado desde mediados de los años ochenta para renovar la institución universitaria merece el reconocimiento de la sociedad española y su complicidad es absolutamente necesaria para alcanzar los retos que hemos asumido y que están basados en la potenciación de la calidad y la excelencia del servicio público universitario. Acciones de cara a la nueva dimensión de la investigación en las Universidades, más allá de la generación del conocimiento (su contribución a la cohesión, innovación y dinamización del tejido socioeconómico), el papel de los profesores y alumnos ante los procesos de aprendizaje, la reflexión cultural sobre una sociedad cambiante, la solidaridad y apoyo cooperativo a las estructuras universitarias de nuestro área lingüística, el impulso de una oferta de formación continua destinada a todos los ciudadanos que quieran adquirir una formación especializada en diferentes momentos vitales, exigen contemplar con carácter prospectivo los diversos escenarios del devenir universitario. ESTRUCTURA DE LA AGENCIA NACIONAL Para hacer frente a sus compromisos, la Agencia se estructura en Cuatro Unidades Directivas: Coordinación General, Gerencia, Dirección de Programas y Dirección de Relaciones Institucionales, y un Gabinete de apoyo a la Dirección que se encargará, igualmente de coordinar las actuaciones en materia de Imagen y Comunicación y del Plan de Publicaciones. La Coordinación General tiene como misión: Coordinar las actuaciones de Evaluación del Profesorado y de Evaluación para la Equivalencia: - Coordinar el Plan de Formación y Selección de los Evaluadores que han de participar en los diferentes procesos externos - Elaborar y coordinar el Plan de Estudios y Prospectiva - Diseñar y coordinar las actuaciones conducentes a organizar los procesos de gestión interna de acuerdo con sistemas de garantía de calidad. - Elaborar y coordinar el plan de formación del personal, en coordinación con la Gerencia. La Gerencia se encarga de la elaboración y coordinación de los planes en materia presupuestaria y de gestión económica; de personal, patrimonio, infraestructura y equipamiento, así como de la accesoria jurídica y del servicio de auditoria. Por su parte, la Dirección de Programas, impulsa, promueve y coordina las actuaciones de los Programas de: Acreditación y Evaluación Institucional en la programación y seguimiento de los proyectos pilotos, el diseño de guías y herramientas y el análisis de los resultados obtenidos en colaboración con Coordinación General (Unidad de estudios y prospectiva) 19

PRESENTACIÓN Igualmente coordina las actuaciones del Programa de Convergencia Europea para titulaciones de grado, con el objetivo de obtener libros blancos para cada titulación. Esta actuación implica: convocar, resolver, hacer el seguimiento y validar el trabajo de los grupos. En un futuro inmediato coordinará las actuaciones del Programa de Convergencia Europea para la nueva estructura del postgrado. Por último, tiene encomendado las actuaciones de los Programas de Certificación: Bibliotecas, Programas de Doctorado y Servicios Universitarios. Finalmente, la Dirección de Relaciones Institucionales tiene como cometido: Coordinar las relaciones institucionales con los órganos de evaluación de las Comunidades Autónomas, así como con las autoridades educativas de las propias Comunidades Autónomas en la medida en que lo demanden, con el fin de articular un sistema de evaluación de la educación superior y establecer mecanismos claros, fluidos y eficaces de coordinación y de actuación Coordinar las relaciones institucionales con las Universidades, sus unidades de evaluación y los Consejos Sociales, con el objetivo de garantizar la fluidez en la comunicación y la transparencia de las actuaciones programadas, así como el establecimiento de cauces de información y colaboración que faciliten el desarrollo de sus funciones. Participar activamente en las redes de las que la Agencia es miembro (ENQA, ECA, RIACES, INQAAHE), estableciendo acuerdos bilaterales de colaboración con organismos afines de otros países y coordinando los ya existentes, así como potenciar la proyección internacional de la Agencia en los foros internacionales. Las líneas antes que he señalado se sustentan en el rigor, la voluntad de trabajo, la independencia, la transparencia y el compromiso, tanto del Director de la Agencia, de su equipo directivo y personal de plantilla, como del conjunto de colaboradores vinculados a la misma en sus diferentes niveles. Estamos viviendo un momento importante para el sistema universitario, en el que Universidades, Comunidades Autónomas y Ministerios están trabajando conjuntamente en la construcción del Espacio Europeo de Educación Superior. Creo que el consenso existente respecto a la necesidad de garantizar la calidad de los sistemas, estudios e instituciones de enseñanza superior de la Unión Europea, como medio indispensable para alcanzar otras metas igualmente deseables, debe considerarse un gran logro; así como el convencimiento de que para alcanzar esa meta, es preciso que contemos con mecanismos comunes, eficaces y rigurosos de evaluación de la calidad y en este momento paso a desarrollar de manera especifica el contenido de mi ponencia relativo al papel de las redes como mecanismo impulsor del reconocimiento mutuo de las decisiones de acreditación. 20

The Spanish National Agency for Quality Assessment and Accreditation Francisco Marcellán Director of ANECA (Translated version to English) INTRODUCTION To begin with I should like to give a brief account of the activities of the Spanish National Agency for Quality Assessment and Accreditation as they relate to its mandate under the Universities Act to guarantee the quality of universities. Anyone in direct contact with the universities today will know that they are currently engaged in coming to terms with the need to adapt, in the not very far future, to a new model of studies and teaching which will constitute a veritable revolution in the concept of the university as it has existed for more than two hundred years. Behind this deep-going change are two movements that have been gaining strength in recent years: 1. The culture of Quality Assessment 2. The process of European Convergence The end point of both movements is the European Higher Education Area, the deadline for whose achievement is the year 2010. The fundamental movers in both cases are the teaching staff and the students, although there are other agents involved: the Ministry of Education and Science, the University Coordination Board, the universities themselves, and to a smaller extent the ANECA and regional Agencies. Within this framework of substantial changes in the university system, Spain has a prominent place as part of the leading group and plays an important role in implementing the principles of convergence laid down in the Bologna Declaration. 21

PRESENTATION At the beginning of the decade there were three challenges facing the Spanish universities: The change in the legal rules and their adaptation to the new conditions in which university activity takes place (this was accomplished with the LOU or Universities Act). European convergence: the Bologna Declaration and its implications for our university system. The challenge of quality: - To meet this challenge is chiefly the responsibility of the universities themselves - To that end they have the greatest possible autonomy and competences in the four fundamental areas of university activity: research; teaching; training of professionals; and management of their own services. The ANECA's role as regards Quality is firstly to assist growth of the culture of assessment for the improvement of universities as institutions. The Institutional Assessment Programme has a very specific objective, and that is to prepare qualifications to satisfactorily pass the assessment of effective teaching of their materials (accreditation), which under the Universities Act is compulsory for all official qualifications. Through this process it will be possible to measure the performance of the universities as a public service and to duly inform society, education authorities and the universities themselves, for which it will have clearly positive consequences. In the second place, the ANECA promotes and supports European Convergence processes. Convergence basically entails the comparability of teaching and mutual trust between institutions, leading to automatic recognition of study periods and qualifications in all countries that are signatories of the Bologna Declaration. The Spanish National Agency for Quality Assessment and Accreditation and the networks of European supranational Assessment Agencies will stand as guarantors of the quality of the processes and results of university activities. 22

METHODOLOGICAL COMMON INSTRUMENTS FOR ASSESSMENT AND ACCREDITATION IN THE EUROPEAN FRAMEWORK HOW THE ANECA WILL ADDRESS THE CHALLENGE OF QUALITY: Future plans and initiatives. 1. European Convergence. This is one of the major challenges arising in the immediate future, and both the universities and the public authorities must make every effort to help set it in motion. For that purpose it is essential to achieve a high degree of consensus and to have clear ideas about the meaning of the process. More specifically, the basic reference for this work should be an assessment of the experience of the three public announcements issued for the preparation of White Papers on degree qualifications. To gain a comprehensive view of the process, it will be necessary to start up similar experiments with the new postgraduate studies (Masters and Doctorate). The ANECA's European Convergence programme is organised around three main lines of action: Dissemination of the Bologna objectives and building of awareness among the parties involved. Definition of indicators to measure compliance with European convergence criteria. Setting in motion of pilot experiments in design and implantation of qualifications with the twocycle structure defined at Bologna. All these initiatives are intended to reinforce the initiatives taken by the universities, with which lie the competence and the basic responsibility for achieving the objective of European Convergence. At the same time, we need to undertake discussions and network with the academic services in Spanish universities whose activity focuses on student and teacher mobility programmes in the European Higher Education Area. 2. Institutional Assessment and Accreditation Programme On the basis of the experience accumulated in the past through university quality plans, we need to take a major step forward, both quantitatively and qualitatively, in the assessment of those qualifications that have not yet come up to standard in quality controls, so that they can move towards accreditation. To that end, this first stage of the process should receive specific support from the Autonomous Communities, with the ANECA acting in the subsequent accreditation stage. The Programme of Accreditation of Official Qualifications is a compulsory process; it is to be considered as a rehomologation, and as such more ambitious than the existing simple prior homologation in that this it entails ex-post quality control of a given qualification. The accreditation will apply to whatever new qualifications are defined as a result of the European Convergence process and will be carried out on the basis of criteria that reflect quality and the degree of integration of the Spanish system in the European University Area. 23

PRESENTATION This means that eventually our official qualifications can be automatically homologated in other countries through mutual recognition between agencies. Also, we need to take up the excellent work carried on for the University Libraries Certification Programme and apply it to other strategic services at universities, such as services connected with research and the transfer of research results, institutional image and the activities of communication offices, incorporating standard methodologies that are adapted to the realities of university life. 3. Assessment of teaching staff. This has been a major aspect of the ANECA's activity since its inception: teaching staff are the fundamental key element that gives substance to the Universities Act and will make it possible to improve quality. The work of the Spanish National Agency for Quality Assessment and Accreditation as it affects teaching staff entails the assessment of teaching and research activity for purposes of engagement by any public or private university, anywhere in the national territory, of: Assistant Doctorate Lecturers Part-time Lecturers Doctorate Lecturers Private University Lecturers The ANECA performs these assessments free of charge, all the year round; its certificate is valid throughout the national territory for an indefinite period. We intend to improve the transparency and credibility of the processes run by the ANECA in connection with the various different categories of teaching staff, following quantifiable criteria that will inspire real confidence in the applicants. Complementing this, we intend to encourage closer cooperation with the regional agencies with a view to sharing criteria to define indicators and assessor data bases. We shall also be fostering active cooperation with those universities wishing to implement incentives to their teaching staff on the basis of assessment of teaching, research and management merits. The ANECA's independence and autonomy may serve as a counter-balance in this process, where recognition of the excellence of teachers' work will come from their own universities. 4. Study and Prospective programmes I feel it very desirable that the social projection of the Spanish universities enjoy the permanent support of the ANECA on the basis of verifiable data. The effort made since the mid-eighties to renew the universities as an institution deserves to be acknowledged by Spanish society, and the coopera- 24

METHODOLOGICAL COMMON INSTRUMENTS FOR ASSESSMENT AND ACCREDITATION IN THE EUROPEAN FRAMEWORK tion of that society is essential if we are to attain the goals we have set ourselves, based on enhancement of the quality and excellence of the universities as a public service. Actions addressing the new dimension of research at the universities, moving beyond the simple generation of knowledge (their contribution to the cohesion, innovation and galvanisation of the socio-economic fabric); the role of teachers and students in learning processes; cultural debate on a changing society; solidarity with and cooperative assistance to university structures within our own linguistic area; stimulation of a constant training supply available to all citizens wishing to acquire specialised training at different moments of their lifetime - all these things require a prospective examination of the various possible future scenarios in the development of the universities. STRUCTURE OF THE SPANISH NATIONAL AGENCY In order to meet these commitments, the Agency is structured in four Management Units: General Coordination, Management, Programmes Department and Institutional Relations Department, plus a Management Support Office, which will also be in charge of coordinating actions in the fields of Image and Communication and the Publications Plan. The purpose of General Coordination is: To coordinate actions in Teaching Staff Assessment and Assessment for Equivalence: - To coordinate the Plan for Training and Selection of the Assessors who will be taking part in the various external processes - To draw up and coordinate the Study and Prospective Plan - To design and coordinate actions leading to the organisation of internal management processes in accordance with quality assurance systems - To draw up and coordinate the personnel training plan, in conjunction with the Management. The Management is in charge of drawing up and coordinating plans connected with budgeting and financial management; personnel, assets, infrastructure and equipment, and also legal and auditing services. The Programmes Department will foster, promote and coordinate actions in connection with Programmes of: Institutional Accreditation and Assessment in the programming and follow-up of pilot projects, the design of guides and tools and the analysis of results, in conjunction with General Coordination (Study and Prospective Unit) It likewise coordinates actions under the European Convergence Programme for degree qualifications, with a view to generating white papers for each qualification. This action entails: announcing, deciding, following up and validating the work of the groups. It will shortly commence coordination of actions under the European Convergence Programme 25

PRESENTATION for the new postgraduate structure. And lastly, it is responsible for actions under the Certification Programmes: Libraries, Doctorate Programmes and University Services. Finally, the task of the Institutional Relations Department is: To coordinate institutional relations with the assessment bodies of the Autonomous Communities, and likewise with the education authorities of the Autonomous Communities insofar as there is demand for this, the object being to build a higher education assessment system and establish clear, fluid and effective mechanisms for coordination and action. To coordinate institutional relations with the universities, their assessment units and the Social Councils, with a view to ensuring fluidity of communication and transparency of programmed actions, and also to establishing channels of information and collaboration to facilitate the discharge of their functions. To take an active part in the networks of which the Agency is a member (ENQA, ECA, RIACES, INQAAHE), concluding bilateral collaboration agreements with comparable bodies in other countries and coordinating existing agreements, and also to enhance the Agency's projection in international forums. The lines I have described depend on the rigour, will to work, independence, transparency and commitment of the Agency's Director, of management and staff, and of all the collaborators connected with it at the various different levels. We are currently at a vital moment for the university system, in which universities, Autonomous Communities and Ministries are working together to build the European Higher Education Area. I believe that the existing consensus regarding the need to guarantee the quality of higher education systems, studies and institutions in the European Union, as an indispensable means of attaining other equally desirable goals, should be seen as a great achievement; I am also convinced that to achieve that goal, we need to have effective and rigorous common mechanisms for assessing quality. And it is at this point that I turn to the specific substance of my paper regarding the role of networks as a means of fostering mutual recognition of accreditation decisions. 26

El papel de las redes en la promoción del reconocimiento mutuo de las decisiones sobre acreditación Francisco Marcellán Director de la ANECA (Versión original en Castellano) La incorporación de la cultura de la calidad a los Sistemas de Educación Superior ha tenido como resultado inmediato en sus instituciones la puesta en marcha, por una parte, de un proceso de reflexión interna y de análisis de sus actuaciones, en relación con los objetivos y misión establecidos para la institución, que ha conducido a la elaboración y establecimiento de planes de mejora y de mecanismos de control y de seguimiento y por otra, de un proceso de información y difusión de los resultados conseguidos, destacando de manera especial lo que la institución considera logros en la calidad del servicio que ofrece a la sociedad. Pero la cultura de la calidad en la universidad ha tenido igualmente resultados de índole más práctica, como son los de incrementar la transparencia de sus procesos formativos, lo que ha facilitado enormemente la movilidad de estudiantes entre instituciones y el de definir las competencias y cualificaciones de sus graduados, con la consiguiente mejora en la incorporación de estos al mercado de trabajo. De igual modo, las instituciones de Educación Superior han buscado el referente externo que sancione y refrende sus afirmaciones. Es así como, de manera natural, el proceso de evaluación ha promovido el de acreditación: esta se convierte en el necesario complemento de aquella en el esfuerzo de las instituciones por mejorar y mantener elevados niveles de calidad en el servicio a la sociedad. En la mayoría de los países de nuestro entorno, las instituciones de Educación Superior buscan el referente externo en las autoridades educativas que tienen la capacidad y la competencia para traducirlo en una decisión de carácter normativo que le asegure un reconocimiento explícito, en muchos casos de carácter presupuestario. Por su parte, los responsables de la política de Educación Superior en Europa, iniciadores del proceso de Bolonia del que este seminario forma parte, han impulsado, con decisión, el establecimiento de entidades y organismos que faciliten el desarrollo de iniciativas de evaluación para la mejora puestas en marcha por las Universidades. En un paso mas hacia delante, la Comisión Europea, en el ejer- 27

EL PAPEL DE LA REDES EN LA PROMOCIÓN DEL RECONOCIMIENTO MUTUO DE LAS DECISIONES SOBRE ACREDITACIÓN cicio de sus competencias de promover la dimensión europea e incorporar valor añadido a las iniciativas de los Estados Miembros, patrocinó el establecimiento de redes de entidades evaluadoras que tiene su máxima expresión en la ENQA, reconocida por la conferencia de ministros de Berlín en septiembre de 2003 como el interlocutor privilegiado en materia de garantía de la calidad en el proceso de Convergencia Europea. La ENQA ha desempeñado un papel crucial en la implantación de la evaluación institucional como parte de la actividad de las instituciones de Educación Superior, así como parte de la estrategia nacional de los estados europeos. No cabe duda que la actividad en red de las entidades de evaluación ha incrementado exponencialmente sus efectos, en cuanto al mayor y mejor conocimiento de los ejemplos de buenas prácticas, el intercambio de información y de experiencias y la fluidez de comunicación de expertos internacionales. Esta experiencia satisfactoria de trabajo en red, representada por la ENQA en cuanto a la evaluación institucional, debe ser imitada en relación con la acreditación. Y esto debe ser así porque la acreditación está llamada a ser el instrumento más eficaz que las instituciones van a tener a su alcance para establecer con claridad sus objetivos, planificar sus actividades y definir sus programas. Del mismo modo, la acreditación servirá a los poderes públicos para establecer políticas a medio y largo plazo en materia de Educación Superior y contribuir de manera efectiva a incrementar la competitividad de la economía europea y a conseguir mayores cuotas de bienestar social para sus ciudadanos. Hacer que los sistemas de Educación Superior europeos sean atractivos para estudiantes, profesores e investigadores del resto del mundo es un objetivo declarado por los jefes de estado y de Gobierno de los Estados Miembros de la Unión Europea en la Cumbre de Barcelona, en marzo de 2002. El atractivo de los sistemas debe estar fundado en la calidad, la diversidad y las facilidades de movilidad entre instituciones de países diferentes, que aporten valor añadido a las competencias y calificaciones académicas y profesionales que los estudios proporcionen. El reconocimiento de diplomas y periodos de estudios entre instituciones y sobre todo entre Estados es un elemento clave para promover la movilidad. La información y la acreditación de la calidad de los estudios y trabajos realizados en una institución son, a su vez, fundamentales para que este reconocimiento pueda producirse. Para un grupo creciente de responsables de Agencias de acreditación europeas es cada vez mas patente que el camino más rápido, eficaz y consistente para que se den estas condiciones es el de la organización de su trabajo en red, para conseguir avanzar en el conocimiento profundo de las metodologías, parámetros y procedimientos utilizados en las diferentes agencias, lo que llevará paulatinamente al acercamiento de criterios, mecanismos y herramientas de trabajo hasta llegar al consenso acerca del uso común de todos ellos. Este es el objetivo que se ha planteado el Consorcio Europeo de Acreditación, ECA, creado en La Haya en junio de 2003, por iniciativa de ocho agencias de acreditación europeas y formalmente constituido en Noviembre de ese mismo año en Córdoba, España. 28