Visión general y particular de la Universidad de Zaragoza en los rankings

Visión general y particular de la Universidad de Zaragoza en los rankings.

Visión general y particular de la Universidad de Zaragoza en los rankings 1) Introducción: Los rankings de universidades 2) Luces y sombras 3) Tipos de rankings 4) Los rankings globales: ARWU, THE y QS 5) La Universidad de Zaragoza en los rankings 6) Recomendaciones de la guía 7) Conclusiones Visión general y particular de la Universidad de Zaragoza en los rankings

1. Introducción: Los rankings de universidades Comparar universidades según criterios de calidad. Calidad (excelencia) concepto multidimensional: no existe consenso. Mayoría mide la calidad académica en su doble vertiente docente e investigadora (o solo investigadora). Muy condicionados por la reputación y la falta de indicadores docentes. En la práctica, están sesgados hacia la actividad investigadora, (única actividad que dispone de datos comparables a escala global). Lo más llamativo en un ranking es la clasificación que proporciona (y la calificación). Visión general y particular de la Universidad de Zaragoza en los rankings 1. Introducción

1. Introducción: Los rankings de universidades Se debe destacar y aprovechar la información que se suministra al comparar diversos indicadores de calidad. En la última década explosión de rankings de Instituciones de Educación Superior en ambos niveles, el internacional y el nacional. Su popularidad deriva de que ofrecen información de manera comprensible, simple y sintética que facilita las comparaciones entre las universidades. Esta popularidad refleja el grado de internacionalización de la educación superior. Los rankings de universidades han llegado para quedarse, con sus luces y sombras, y no depende de las universidades el participar o no (en la mayoría de ellos). Visión general y particular de la Universidad de Zaragoza en los rankings 1. Introducción

Luces 2. Luces y sombras en los rankings a) Los rankings son herramientas útiles aunque puedan resultar imprecisas para distintos grupos sociales interesados: Ofrecen información a estudiantes o investigadores que les permite orientar sus decisiones de movilidad internacional. Facilitan información comparativa a los gobiernos sobre los resultados de las universidades que puede ser utilizada como una guía para asignar recursos o para la rendición de cuentas de las universidades a la sociedad. Complementan el trabajo de las agencias de evaluación de la calidad de las universidades y suministran información a los analistas interesados. b) Su comprensión facilita un mejor visibilidad y posicionamiento. Visión general y particular de la Universidad de Zaragoza en los rankings 2. Luces y sombras

2. Luces y sombras en los rankings c) Han centrado la atención en la medición del rendimiento de las instituciones de educación universitaria para su evaluación (antes basada en la reputación para el gran público). d) Han incrementado la competencia entre las universidades. e) Han tenido una amplia aceptación entre el gran público, y los stakeholders han destacado su valor como herramienta de decisión e incentivo para la transparencia. f) El éxito de primeros rankings de universidades ha generado una gran competencia en el campo de los rankings, multiplicando la aparición de nuevos rankings. Visión general y particular de la Universidad de Zaragoza en los rankings 2. Luces y sombras

Sombras 2. Luces y sombras en los rankings i. Riesgo de evaluar a todas las universidades bajo los criterios de las universidades más importantes. ii. iii. iv. Riesgo de abuso de los rankings. Riesgo de usar los rankings para orientar acciones distintas de aquellas para las que fueron diseñados. Riesgo de confundir lo que se puede medir con lo que es importante medir. v. Riesgo de utilizar indicadores sintéticos poco robustos. vi. Riesgo de premiar la cantidad en vez de la calidad. vii. Riesgo de fijarse sólo en la élite y olvidar el resto. viii. Riesgo de comparar universidades heterogéneas. Visión general y particular de la Universidad de Zaragoza en los rankings 2. Luces y sombras

1. Introducción: Los rankings de universidades Objetivo del Grupo de Trabajo del Ministerio: Redacción de una Guía de buenas prácticas con el fin de que las universidades tengan mejor visibilidad. Mejorar la visibilidad y representación de las universidades Visión general y particular de la Universidad de Zaragoza en los rankings 1. Introducción

Globales 3. Tipos de rankings Investigación Multiranking Otros Visión general y particular de la Universidad de Zaragoza en los rankings 3. Tipos de rankings

3. Tipos de rankings Un solo ranking? Global, por áreas, materias, edad, zonas Visión general y particular de la Universidad de Zaragoza en los rankings 3. Tipos de rankings

4. Los rankings globales: ARWU, THE y QS También denominados League Tables o Worldwide rankings. Presentan sus resultados como tablas. Evalúan a las universidades a través de varios indicadores agrupados por dimensiones (docencia, investigación, transferencia, prestigio o internacionalización). Ordenan por medio de un indicador sintético a cada una de las dimensiones analizadas. Los tres más relevantes son: ARWU, THE y QS. Visión general y particular de la Universidad de Zaragoza en los rankings 4. Ránkings globales: ARWU, THE y QS

4. Los rankings globales: ARWU, THE y QS Criterio ARWU THE QS Universidades evaluadas 1200 2000 3000 Universidades españolas evaluadas 29 22 No dan el dato por confidencialidad Universidades rankeadas 500 400 1000 (Pero en el Ranking oficial + 700) Universidades españolas rankeadas 12 6 18 Prestigio Academic Reputation: 40% Employer Reputation: 10% Docencia Alumni: 10% Award: 20% Learning environment 30% Faculty-Student Ratio: 20% Internacionalización International Outlook 7,5% Proportion of International students: 5% Proportion of International faculty: 5% Tamaño de la institución Size: 10% Producción científica NyS: 20% SCI: 20% Volume, income, reputation 30% Repercusión HiCi: 20% Research influence 30% Citations per Faculty: 20% Innovación Research influence 2,5% Visión general y particular de la Universidad de Zaragoza en los rankings 4. Ránkings globales: ARWU, THE y QS

4. Los rankings globales: ARWU, THE y QS Indicador ARWU (Alumni) Alumnos premiados 10% (Awards) Personal (PDI) de la institución premiado 20% (HiCi) Investigadores más citados 20% (N & S) Publicaciones en Nature & Science 20% PUB Publicaciones en SCIE y en SSCI 20% PCP Rendimiento docente 10% Definición Nº alumnos con premios Nobel o medallas Fields. Nº de PDI de que ha ganado alguna Medalla Fields o premio Nobel Nº de investigadores muy citados dentro de la Web of Science Nº de artículos publicados en Nature y Science (5 años). Nº de publicaciones en SCI-E y SSCI. Las puntuaciones ponderadas de los cinco indicadores anteriores divididos por el número de personal académico equivalente a tiempo completo (FTE). 4. Ránkings globales: ARWU, THE y QS RANKING SUBJECT Indicador Peso Subject Alumni 10% Mathematics Premio 15% Physics HiCi 25% Chemistry PUB 25% Computer Science TOP 25% EconomicBusiness Nota: EL indicador TOP tiene en cuenta las publicaciones en las revistas top 20% del SUBJECT o FIELD que esta evaluando RANKING FIELD Indicador Peso FIELD Alumni 10% SCI Premio 15% ENG HiCi 25% LIFE PUB 25% MED TOP 25% SOC Fondos 25% Este indicador solo se aplica a ENG

4. Los rankings globales: ARWU, THE y QS Áreas e Indicadores Times Higher Education World University Ránkings Área Subáreas World Rank Fuente de Datos Reputación académica 15% Encuesta Ratio Prof / Alumno 4,50% Universidad Enseñanza: ambiente de Proporción doct / licenc 2,25% Universidad aprendizaje 30% Ratio doctorandos / PDI 6% Universidad Ingresos institucionales / PDI 2,25% Universidad Reputación Investigadora 18% Encuesta Investigación: ingresos y Ingresos investigación 6% Universidad reputación 30% Nº artículos en Web of Science / Thomsom 6% Nº Prof Reuters Citas: influencia de investigación Nº Citas en 5 años en Web of Thomsom 30% 30% Science Reuters Ingresos Industria: innovación 2,50% Perspectiva internacional: PDI, Alumnos, investigación 7,50% Ingresos investigación procedentes de la industria / PDI 2,50% Universidad Ratio Alum intern / Alum nac 2,50% Universidad Ratio PDI intern / PDI nac 2,50% Universidad Publicaciones con coautoría internacional 2,50% Universidad 4. Ránkings globales: ARWU, THE y QS

4. Los rankings globales: ARWU, THE y QS Humanidades Reputación académica: 25,3% Ratio Alumos / Profesores: 3,8% Ratio doctores / Enseñanza: 37,5% egresados: 1,9% Ratio doctorandos / PDI: 4,7% Ingresos institucionales / PDI: 1,9% Reputación Investigadora: 30% Investigación: Ingresos investigación / 37,5% PDI: 3,8% Artículos en Web of Science / PDI: 3,8% Citas recibidas por los artículos publicados los Citas: 15% últimos 5 años en WoS: 27,5% Ingresos investigación Ingresos procedentes de la Industria: 2,5% industria / PDI: 2,50% Perspectiva internacional: 7,5% Salud, Medicina Clínica y Preclínica. Ciencias de la Vida y Ciencias Físicas. Reputación académica: 17,9% Ratio Alumos / Profesores: 2,8% Enseñanza: Ratio doctores / 27,5% egresados: 1,4% Ratio doctorandos / PDI: 4,1% Ingresos institucionales / PDI: 1,4% Reputación Investigadora: 19,3% Investigación: Ingresos investigación / 27,5% PDI: 4,1% Artículos en Web of Science / PDI: 4,1% Citas recibidas por los artículos publicados los Citas: 35% últimos 5 años en WoS: 35% Ingresos Industria: 2,5% Ratio Alum internacionales / Alumnos nacionales: 2,50% Perspectiva Ratio PDI internacional internacional: / PDI nacional: 2,50% 7,5% Publicaciones con coautoría internacional: 2,50% Ingresos investigación procedentes de la industria / PDI: 2,50% Ratio Alum internacionales / Alumnos nacionales: 2,50% Ratio PDI internacional / PDI nacional: 2,50% Publicaciones con coautoría internacional: 2,50% Enseñanza: 30% Investigación: 30% Citas: 27,5% 4. Ránkings globales: ARWU, THE y QS Ingeniería y Tecnología Reputación académica: 19,5% Ratio Alumos / Profesores: 3% Ratio doctores / egresados: 1,5% Ratio doctorandos / PDI: 4,5% Ingresos institucionales / PDI: 1,5% Reputación Investigadora: 21% Ingresos investigación / PDI: 4,5% Artículos en Web of Science / PDI: 4,5% Citas recibidas por los artículos publicados los últimos 5 años en WoS: 30% Ingresos investigación Ingresos procedentes de la Industria: 5% industria / PDI: 5% Perspectiva internacional: 7,5% Ratio Alum internacionales / Alumnos nacionales: 2,50% Ratio PDI internacional / PDI nacional: 2,50% Publicaciones con coautoría internacional: 2,50% Enseñanza: 32,5% Investigación: 32,5% Citas: 25% Ingresos Industria: 2,5% Perspectiva internacional: 7,5% Ciencias Sociales Reputación académica: 21,1% Ratio Alumos / Profesores: 3,3% Ratio doctores / egresados: 1,6% Ratio doctorandos / PDI: 4,9% Ingresos institucionales / PDI: 1,6% Reputación Investigadora: 22,8% Ingresos investigación / PDI: 4,9% Artículos en Web of Science / PDI: 4,9% Citas recibidas por los artículos publicados los últimos 5 años en WoS: 25% Ingresos investigación procedentes de la industria / PDI: 2,50% Ratio Alum internacionales / Alumnos nacionales: 2,50% Ratio PDI internacional / PDI nacional: 2,50% Publicaciones con coautoría internacional: 2,50%

Indicadores QS World Ranking Prestigio académico 40% Prestigio laboral 10% Citas PDI 20% 4. Los rankings globales: ARWU, THE y QS RANKINGS INTERNACIONALES "QS" Definición Mide el prestigio universitario-académico por medio de una encuesta Mide el Prestigio universitario laboral por medio de una encuesta. El Nº de citas recibidas durante cinco años entre el Nº de PDI Ratio El promedio de estudiantes PDI/alumno 20% por profesor/investigador % estudiantes Se mide por medio de la internacionales proporción de personal no 5% nacional % profesores internacionales 5% Se mide por medio de la proporción de personal no nacional Fuente de los datos Encuestas Encuestas SCOPUS Universidades Universidades Universidades FACULTY AREA ACADEMIC EMPLOYER CITATIONS H ARTS & 60% 20% 10% 10% HUMANITIES ENGINEERING & TECHNOLOGY LIFE SCIENCES & MEDICINE NATURAL SCIENCES SOCIAL SCIENCES & MANAGEMENT 40% 30% 15% 15% 40% 10% 25% 25% 40% 20% 20% 20% 50% 30% 10% 10% 4. Ránkings globales: ARWU, THE y QS

4. Los rankings globales: ARWU, THE y QS Reproducibilidad de ARWU (Docampo) 4. Ránkings globales: ARWU, THE y QS

4. Los rankings globales: ARWU, THE y QS 4. Ránkings globales: ARWU, THE y QS

4. Los rankings globales: ARWU, THE y QS Universidad de Zaragoza (PDI FTE 13/14) = 2.495,8 4. Ránkings globales: ARWU, THE y QS

5. La Universidad de Zaragoza en los rankings 5. La Universidad de Zaragoza en los rankings

5. La Universidad de Zaragoza en los rankings Visión general y particular de la Universidad de Zaragoza en los rankings 5. La Universidad de Zaragoza en los rankings

5. La Universidad de Zaragoza en los rankings 2014 2013 2012 2011 2009 2008 Universidad de Barcelona 166 178 176 176 171 186 Universidad Autónoma de Barcelona 173 177 187 194 215 256 Universidad Autónoma de Madrid 178 195 206 222 211 254 Universidad Complutense de Madrid 212 216 226 253 252 306 Universidad de Navarra 254 315 359 375 381 401-450 Universidad Pompeu i Fabra 298 281 266 308 324 342 Universidad Politécnica de Cataluña 337 345 350 373 Universidad Carlos III de Madrid 355 317 343 347 Universidad Politécnica de Madrid 385 389 451-500 451-500 Universidad Politécnica de Valencia 421-430 383 401-450 501-600 501-550 Universidad de Granada 461-470 501-550 451-500 501-550 401-450 501+ Universidad de Salamanca 481-490 441-450 451-500 451-500 501-550 401-450 Universidad de Valencia 501-550 471-480 451-500 401-450 401-450 Universidad de Zaragoza 501-550 481-490 501-550 551-600 501-550 501+ Universidad de Sevilla 501-550 551-600 551-600 501-600 501+ Universidad de Santiago de Compostela 551-600 451-500 401-450 501-600 501-550 Universidad de Alcalá 651-700 651-700 601+ Universidad de Murcia 701+ 701+ 601+ 601+ 501+ 5. La Universidad de Zaragoza en los rankings

5. La Universidad de Zaragoza en los rankings ÁREA DE CONOCIMIENTO ARTS & HUMANITIES UNIVERSIDAD 2014 2013 Universidad Complutense de Madrid 88 75 Universidad de Barcelona 91 58 Universidad Autónoma de Barcelona 126 122 Universidad Autónoma de Madrid 145 129 Universidad de Salamanca 175 165 Universidad de Granada 217 165 Universidad de Navarra 231 274 Universidad Pompeu i Fabra 283 192 Universidad de Sevilla 304 231 Universidad de Santiago de Compostela 317 295 Universidad Carlos III de Madrid 333 259 Universidad de Alcalá 347 Universidad de Valencia 359 258 Universidad Politécnica de Cataluña 385 320 Universidad de Zaragoza 391 Universidad Politécnica de Valencia 342 5. La Universidad de Zaragoza en los rankings

5. La Universidad de Zaragoza en los rankings ÁREA DE CONOCIMIENTO ENGINEERING & TECHNOLOGY UNIVERSIDAD 2014 2013 Universidad Politécnica de Cataluña 60 76 Universidad de Barcelona 101 87 Universidad Politécnica de Madrid 117 114 Universidad Politécnica de Valencia 165 105 Universidad Carlos III de Madrid 231 218 Universidad Autónoma de Barcelona 233 216 Universidad Complutense de Madrid 237 Universidad Autónoma de Madrid 273 179 Universidad de Zaragoza 341 313 Universidad de Sevilla 346 290 Universidad de Granada 325 Universidad de Valencia 398 5. La Universidad de Zaragoza en los rankings

5. La Universidad de Zaragoza en los rankings ÁREA DE UNIVERSIDAD CONOCIMIENTO 2014 2013 Universidad de Barcelona 76 74 Universidad Autónoma de Madrid 97 85 Universidad Autónoma de Barcelona 111 129 Universidad Complutense de Madrid 194 144 Universidad de Valencia 195 213 NATURAL SCIENCES Universidad Politécnica de Valencia 289 251 Universidad de Granada 257 285 Universidad de Zaragoza 362 298 Universidad Politécnica de Cataluña 345 303 Universidad de Sevilla 345 Universidad de Santiago de Compostela 395 5. La Universidad de Zaragoza en los rankings

6. Recomendaciones de la guía 1) Fortalecimiento de la identidad de marca de la institución. La reputación es fundamental. Las universidades deberían desarrollar una identidad institucional única y fácilmente reconocible (mismo nombre, mismo logotipo, etc.). Ser más proactivas en la colaboración con los rankings internacionales recomendando a expertos académicos y empleadores que conozcan bien la institución. Recomendar a su profesorado tener una firma única y normalizada, tanto para el nombre del investigador como el de la institución. 2) Incremento de la colaboración investigadora con los organismos públicos de investigación ubicados en el entorno de las universidades. Desarrollar estrategias que impliquen alianzas de investigación, así como la publicación conjunta con otros organismos de investigación, como OPIs, CSIC, y hospitales de su entorno. 6. Recomendaciones

6. Recomendaciones de la guía 3) Desarrollar políticas capaces de atraer talento internacional. En una educación superior globalizada las universidades necesitan atraer y retener a los mejores profesores, investigadores y estudiantes capaces de competir en el ámbito internacional. Ser conscientes de la valía del PDI altamente citado y de alta productividad científica y buscar los medios que consideren más adecuados para facilitar su actividad y potenciar su reconocimiento. 4) Establecer un protocolo de entrega de datos a los ránkings. Establecer un centro de contacto entre los principales rankings y el sistema universitario español. Colaborar de manera activa con los principales rankings internacionales enviando los datos que les solicitan. Los datos de las universidades deberían ser revisados y consensuados con los responsables académicos con el fin de que reflejen la realidad de la actividad investigadora, docente y de transferencia. 6. Recomendaciones

6. Recomendaciones de la guía 4) Establecer un protocolo de entrega de datos a los ránkings Contar con un interlocutor único para la difusión de sus datos con el fin de controlar en todo momento la precisión de los datos que envían. Fomentar la viabilidad y utilización de bases de datos únicas tipo SIIU, IUNE y Encuesta de la Red OTRI, gestionadas a nivel nacional y que contienen una información relevante y fiable sobre las actividades realizadas por las universidades españolas. Creación de unidades de provisión de datos centralizada para que todas las partes interesadas (gestores públicos y universitarios, profesores, estudiantes, empresas, etc.) tengan un acceso en el que se pudieran consultar todos los resultados obtenidos por el Sistema Universitario Español en todos los rankings de reconocido prestigio. Deberían implicarse en la obtención de los datos relevantes que influyen en los indicadores. Esto les permitiría tanto el reconocer al profesorado que más aporta a los rankings como el desempeño que tiene su universidad año a año, facilitando así la toma de decisiones. 6. Recomendaciones

6. Recomendaciones de la guía 5) Incremento de la producción científica. Incentivar al profesorado para que publique en revistas de prestigio internacional y que lo haga en aquellas de mayor impacto. Peligro de intentar sesgar la contratación de profesores e investigadores hacia aquellas áreas que favorecen una mejor clasificación. Esto supondría un error. El volcar la política universitaria sin una profunda reflexión hacia lo que miden los indicadores (actualmente incompletos y sesgados), puede generar a medio plazo unos resultados contrarios a los esperados. La aparición de los rankings por áreas o materias, la incorporación paulatina de áreas peor representadas en los indicadores bibliométricos (humanidades y gran parte de las ciencias sociales), así como la evolución de los indicadores hacia una mejor comparabilidad entre áreas o materias, desaconsejarían este tipo de respuestas. El número de artículos que publican nuestras universidades en WoS y SCOPUS es uno de sus puntos fuertes. Por tanto, se debería favorecer la publicación de artículos incluidos en estas bases de datos. 6. Recomendaciones

6. Recomendaciones de la guía 5) Incremento de la producción científica. La normalización de la firma de los investigadores de una misma institución es fundamental para que se le asignen todas sus publicaciones. Los profesores e investigadores incluyan en las publicaciones todas las afiliaciones institucionales. Tratar de difundir, cuando se pueda replicar, la parte que sea posible, cómo se calculan las calificaciones obtenidas por las universidades españolas en los rankings para que cada una de ellas sea consciente de su posición. 6. Recomendaciones

7. Conclusiones A. Primera conclusión de carácter preventivo: tener presente en todo momento que todos los rankings analizados, pese a su evidente utilidad, contienen también elementos discutibles. Así el diseño de políticas encaminadas únicamente a la mejora de los resultados en esos indicadores puede producir efectos muy perversos, como podría ser la minusvaloración de las actividades docentes frente a las investigadoras. Asimismo, podría conducir a una especialización de las universidades condicionada por los sesgos que contienen, como por ejemplo renunciar a gran parte de las Humanidades y Ciencias Sociales al estar peor recogidos sus resultados de investigación en las bases de datos internacionales. 7. Conclusiones

7. Conclusiones B. Los rankings fundamentalmente miden: i. La investigación (lo que es más fácilmente medible actualmente en educación superior en todo el mundo). ii. La reputación de las instituciones (a través de encuestas a expertos). C. Se ha ido ampliando el catálogo de ránkings más desagregados (áreas, materias, geográficos o por edad) ante las críticas del empleo de un único indicador sintético para cada universidad o las referentes a los sesgos que contienen los datos bibliométricos. 7. Conclusiones

7. Conclusiones D. Los rankings han llegado para quedarse y que su influencia crece año a año. Muchas universidades incluyen la mejora en la posición en los rankings como una de sus actuaciones estratégicas Muchos países están limitando las becas internacionales que conceden a sus estudiantes más brillantes a aquellas universidades que aparecen bien posicionadas en los rankings internacionales, para garantizarse una educación de calidad. Por tanto, el aumento de la visibilidad de las universidades españolas incrementaría nuestras opciones en las posibles negociaciones con terceros países que exijan la presencia en los rankings para enviar a sus mejores estudiantes. 7. Conclusiones

7. Conclusiones E. El aspecto más destacable de los rankings es que permiten medir y comparar a todas las universidades del mundo incluidas en sus listados de acuerdo con los indicadores recogidos en cada ránking (pese a sus limitaciones). Mezclan las posibilidades del benchmarking y la rendición de cuentas, herramientas básicas en la gestión actual. Su fácil interpretación, que no comprensión, hace que sean muy atractivos para los gestores públicos y medios de comunicación. En el caso de España, se comprueba que los resultados obtenidos por las universidades españolas mejoran, cuanto mayor es el grado de desagregación recogido en los rankings internacionales. 7. Conclusiones