El ecosistema de las métricas en la evaluación de la investigación

Tamaño: px

Comenzar la demostración a partir de la página:

Download "El ecosistema de las métricas en la evaluación de la investigación"

José Ignacio Alarcón Jiménez
hace 5 años
Vistas:

1 El ecosistema de las métricas en la evaluación de la investigación por Andoni Calderón Facultad de Veterinaria, 14 de octubre de 2014

2 Índice h Autor investiga y publica artículos en una revista Calidad de revista Factor de impacto Cuartil WoS Son leídos y son citados Son leídos y no citados No publican Altmetrics Scopus Los usan en otro ámbito Publicarán algún día No son leídos y son citados No son leídos y no son citados Firma Cobertura de bases de datos Agencias evaluadoras Problemas fundamentales

3 Empecemos con los problemas

4 1. La cobertura de las fuentes no es la misma (revistas, años, tipos de documento) No se obtienen los mismos resultados Encontraremos lagunas: no tendremos todas las publicaciones No podemos calcular adecuadamente ni la producción ni los índices de impacto, salvo que dispongamos de un espacio en el que se recopile toda la producción (PI)

5 Ejemplo de bases de datos de Economía

Revistas de Psicología http://www.revistacomunicar.com/indice/articulo.php?

6 Revistas de Psicología

7 Herramientas de análisis Contratados

8 2. La firma del investigador varía No se pueden calcular, ni siquiera en una fuente concreta, ni la producción ni el impacto sin hacer agregaciones por nuestra cuenta Hay que firmar siempre de la misma manera El uso de determinados identificadores (como ORCID) puede ayudar a ello En caso de detectar diferentes firmas hay opciones de normalización WoS y Scopus ( )

9 Variantes de nombre de una autora

10 3. La firma del investigador coincide con la de otro Los resultados que se obtienen no pertenecen en su totalidad al investigador. Es dificultoso discriminar documentos propios. Hay que intentar encontrar una firma que se aleje de esta situación, especialmente en apellidos muy comunes. Una de las opciones es utilizar los dos apellidos unidos por un guión, ya que en el mundo anglosajón se usa sólo un apellido. Identificar la institución de manera unívoca ayuda.

11 Casilda es identificable en InCites porque su cobertura está acotada a la UCM y hemos añadido el filtro de su Facultad La cosa se complica cuando además hay hermanos: Ejemplos de firmas con guión:

12 3. Las agencias evaluadoras se centran en la publicación Publish or Perish Investigamos cómo publicar Fraude en la ciencia Merma de la calidad Endogamias, etc.

13 Sigamos con la producción y las citas

14 Citas >= Documentos

19 X

21 El factor de impacto y el cuartil

22 Independientemente de si hemos tenido citas o no, nos pedirán el factor de impacto de la revista en la que hayamos publicado y/o el cuartil en el que se encuentra. Son datos que se aplican a la revista en la que se publica, no a nuestro trabajo. A pesar de la Ley de Pareto (20/80), da una idea de la relevancia de la revista y de la exigencia para publicar en ella.

23 El factor de impacto es el indicador más extendido y con mayor tradición, al que han seguido otras propuestas. Es el resultado de dividir el número de citas recibidas en un año dado por los artículos de los dos años precedentes entre el número de artículos publicados. El cuartil mide la posición en un ranking de revistas ordenado según el factor de impacto (el que se considere en cada recurso).

24 Q1 Cuartil en JCR Q2 Q1 Q3 Q2 Q3 Q4 Q4 + = Media La línea superior e inferior pueden ser el valor más alto o el más bajo; pero otras veces es el resultado de una ecuación que relaciona los cuartiles 1 y 3

25 Cómo encontrar el cuartil de una revista en JCR

26 En nuestro ejemplo, será la de mayor Factor de Impacto (IF) de una categoría temática. Podríamos buscar directamente por el nombre de la revista si quisiéramos.

30 La revista se incluye en dos categorías y se muestra su ranking en ambas El cuartil se indica directamente +

33 Pasos

38 Citing data: Revistas que nos citan

39 Cited data: Revistas que citamos

40 En realidad no es tan difícil si sabemos qué artículo estamos buscando

48 No sólo cuentan las citas

49 Username: ucm-es Password: gzr$^`!9b]

52 Y hay más En la BUC

55 IN

Documentos relacionados

Diseño instruccional: herramientas de análisis de bibliométrico Módulo 4

Diseño instruccional: herramientas de análisis de bibliométrico Módulo 4 Item Type info:eu-repo/semantics/report Authors Rivera Hurtado, Enrique; Chávez Quispe, Carlos; Uceda Rentería, Fátima Publisher