Organiza: Aula de Formación del Vicerrectorado de Política Científica e Investigación

Transcripción

1 Organiza: Aula de Formación del Vicerrectorado de Política Científica e Investigación Rafael Ruiz Pérez (rruiz@ugr.es) Universidad de Granada

2 Evaluación de la Actividad investigadora CNEAI: Sexenios de Investigación Campos 9. Derecho y Jurisprudencia 10. Historia y Expresión Artística 11. Filosofía, Filología y Lingüística

3 % Sexenios concedidos Complementos de Productividad. Resultados CNEAI Gráfico 1. % de sexenios concedidos por campos de conocimiento Campo Universidades públicas Evaluados Concedidos % 1. Matemáticas-Física , Biología 70 Celular-Molecular , Ingenierías 20 y Arquitectura , Mat y Fis 2. Quim 4. Biomed Sexenios Química ,7 4. Ciencias Biomédicas Ciencias Naturaleza ,3 7. C. P, S, Comporta y Ed C. Nat 6. Ing Arquit 9. Derch 10. Hist Art 8. Económicas-Empresariales Biol Cel Mol 7. Soc Pol Comp Ed 8. Econ Emp 11. Filos Filolo Ling 9. Derecho ,9 10. Hª y Expresión Artística ,1 11. Filosofía, Filología y Lin ,3

4 Complementos de Productividad. Actividad Investigadora Sexenios / Quinquenios Sexenios (CNEAI). Complemento de Investigación. Solo evalúa Investigación. Externos; voluntarios (hay que pedirlos); competitivos; incentivadores de la investigación de calidad mediante el sistema de recompensas científico-académicas INVESTIGACIÓN ORIGINAL INVESTIGACIÓN RELEVANTE LIDERAZGO EN LA INVESTIGACIÓN Quinquenios (Universidades) Evaluación Docente: Internos; se dan de oficio; no competitivos= no incentivadores de una docencia de calidad

5 CNEAI. Criterio General de Evaluación 1. Dominio de la Publicaciones Cinco Aportaciones-Periodo de 6 años Fundamentalmente Ordinarias: Artículos en Revistas; Libros; Capítulos ; Prólogos (estudios preliminares de investigación con aportación valiosa), Introducciones y Anotaciones de textos; Patentes o modelos de utilidad >En determinadas áreas son también aportaciones ordinarias los desarrollos tecnológicos, proyectos arquitectónicos singulares, creaciones artísticas, actas de congresos de relevancia Excepcionalmente extraordinarias: Informes, estudios, dictámenes; trabajos técnicos, artísticos; participación en exposiciones, excavaciones o catalogaciones; dirección de tesis de mérito excepcional; comunicaciones a congresos. >En todo caso tendrán una consideración complementaria Excluidos: Manuales, Trabajos meramente descriptivos y los resultados de investigación para servicios de consultoría

6 FILOSOFÍA DE LA EVALUACIÓN CNEAI. Criterios de Evaluación. Filosofía y objetivos Para entender los criterios que se utilizan es conveniente no olvidar los fundamentos de las evaluaciones CNEAI: Difusión e INTERNACIONALIZACIÓN de la ciencia española Evaluaciones sobre RESULTADOS de investigación, fundamentalmente PUBLICACIONES Evaluaciones FORMALES, no sobre contenidos sino mediante la utilización de indicadores de objetivación formal El sistema planteado se inspira en la tradición académica de la EVALUACIÓN POR PARES: Comisiones de expertos e informes de especialistas en la disciplina

7 FILOSOFÍA DE LA EVALUACIÓN CNEAI: Criterio General de Evaluación 2. Filosofía y objetivos CNEAI precisa las condiciones que deben cumplir las publicaciones. La principal el prestigio del Medio de Difusión empleado (Revistas y Libros) del que se espera una repercusión (impacto), valor y reconocimiento nacional y /o internacional CNEAI consideran que en los distintos ámbitos de conocimiento existen Índices internacionales que proporcionan indicadores de relevancia y prestigio de estos Medios de Difusión En consecuencia las comisiones comprueban formalmente: 1. Que nuestras publicaciones están en Medios de Difusión recogidos en esos Índices Internacionales. 2. Que posición o posiciones ocupan esos Medios de Difusión en dichos Índices internacionales

8 Criterio General de Evaluación 3 para publicaciones en Revistas Para todos los Campos CNEAI PREFERENCIA POR APORTACIONES EN REVISTAS DE PRETIGIO, ACEPTÁNDOSE COMO TALES Las que ocupen posiciones relevantes en los listados por ámbitos científicos en los JCR del Science Citation Index, del Social Sciences Citation Index y del Arts and Humanities Citation Index, WOS-JCR CENTRISMO SSCI; SCI; A&HCI

9 FILOSOFÍA DE LA EVALUACIÓN

10 Criterios Generales de Evaluación para revistas. Ponderaciones WOS-JCR Centrismo con ponderaciones según áreas de conocimiento Ciencias y Ciencias de la Salud Ingenierías y Arquitectura Ciencias Sociales Arte & Humanidades Jurídicas CNEAI: Especialmente las publicaciones JCR de alto impacto (SCI) CNEAI: CNEAI: Se Especialmente las consideran publicaciones JCR especialmente las de alto-medio publicaciones impacto (SCI) JCR (SSCI) También el También las desarrollo de recogidas? en patentes y Econlit; Catálogo transferencia de Latindex; otros tecnología Adaptación Índices de evaluación de Revistas (IN- RECS; SCOPUS; ERIH; DICE). Además los libros CNEAI: Libros y Publicaciones en Revistas internacionales con inclusión en las bases de datos siguientes se considera como referencia: FRANCIS; IBSS; A&HCI, SSCI; HA, IMB, II; LISA que cumplan los criterios del Apéndice 1 Además creaciones artísticas / profesionales Derecho: Revistas nacionales de reconocido prestigio y amplia difusión académica y profesional recogidas? en IN_RECS; SCOPUS; ERIH; DICE; Latindex

11 FILOSOFÍA DE LA EVALUACIÓN Criterios de Evaluación CNEAI. Indicios de Calidad Valorado el Medio de Difusión en el siguiente orden: A)Recogido en Índices de Impacto inter (Para Hum. no JCR) B)Recogido en Índ. de Impacto Nac. C)Recogido en Plataformas y Sistemas de Valoración de Revistas D)Recogido en Bases de Datos Los criterios se centran después en: A) Impacto (FI) de la Revista y Posición dentro de su categoría B) Valoración + de la revista en las Plataformas y Sistemas C) Número e importancia de las bases de datos D) Importancia de los propios trabajos según: -Citas. Referencia que otros autores hacen al trabajo. -Participación en los trabajos >Ojo: participación y orden de firma -Reseñas en revistas especializadas (libros) -Premios y distinciones recibidas >Ojo: para creaciones artísticas -Apreciaciones del propio interesado sobre sus aportaciones al progreso del conocimiento. En publicaciones colectivas (coautorías) mencionar la contribución del solicitante -En patentes: datos de explotación económica

12 CRITERIOS DE EVALUACIÓN CNEAI. Criterios Específicos de Evaluación campo 10 Artículos campo 10: Publicados en revistas de reconocida valía. Es referente de calidad su inclusión en: >Francis, IBSS, A&HCI, SSCI, BHArts (RLG), HA, IMB, II, RILMS Abstracts of Music Literature, etc. >En todo caso, serán revistas que cumplan los criterios que se especifican en el Apéndice I >Podrán considerarse también artículos en revistas listadas en otras BD (ojo: no son BD) como ERIH, INRECS, LATINDEX, SCOPUS, DICE- CINDOC, etc., que a juicio del comité cuenten con calidad similar y cumplan criterios Apéndice 1 >Podrán considerarse también artículos en revistas acreditadas por FECYT >Revistas electrónicas sujetas a los mismos criterios

13 CRITERIOS DE EVALUACIÓN CNEAI. Criterios Específicos de Evaluación campos 10 Trabajos creativos-artísticos campo 10: Valoración: Repercusión y reconocimiento público de la obra Prestigio en función de su difusión en medios especializados. Impacto en la crítica Artes plásticas: preferentemente exposiciones individuales, obras de singular relieve >Obras que hayan sido premiadas Música: composiciones publicadas o estrenadas por intérpretes reconocidos Musicología se evaluarán las ediciones críticas No se consideran las simples revisiones de partituras -impresas o manuscritas-, salvo que vayan acompañadas de estudios preliminares o anotaciones Se estimará el comisariado de exposiciones en cuyos catálogos se aporten novedades de investigación con repercusión en los medios nacionales e Internacionales Excluidos: Los libros de texto, apuntes, obras y diccionarios de divulgación o artículos de opinión. Las ediciones de textos o las traducciones, salvo que estén precedidas de estudios preliminares Las catalogaciones, las transcripciones, prólogos Las actas de congresos. Enciclopedias

14 CRITERIOS DE EVALUACIÓN CNEAI. Criterios Específicos de Evaluación campo 11 Artículos campo 11: >Referencia de calidad: Revistas en bases de datos internacionales como el «A&HCI, SSCI», Index Islámicus o su clasificación alta en los listados ERIH >Podrán considerarse los publicados en revistas listadas en INRECS, LATINDEX, SCOPUS, DICE, que a juicio del comité asesor cuenten con calidad científica similar a las incluidas en los índices mencionados y satisfagan los criterios del Apéndice I. >Podrán considerarse artículos en revistas acreditadas por FECYT No se tendrán en cuenta las publicaciones en revistas en la que se está de director o en algún cargo en el comité editorial Comisariado de exposiciones campo 11 >Con catálogos que aporten novedades relevantes de investigación con repercusión en los medios especializados nacionales e internacionales Excluidos a) los libros de texto, b) las obras de divulgación, c) artículos de opinión, antologías o diccionarios comunes, d) las actas de congresos, que no respondan a criterios de calidad equiparables a los exigidos para las revistas científicas e) Enciclopedias

15 CRITERIOS DE EVALUACIÓN CNEAI. Criterios Específicos de Evaluación campo 9 Campo 9. Derecho En la valoración de los trabajos se atenderá al medio de difusión, aceptándose las publicaciones en revistas de reconocida valía y libros en editoriales de prestigio Preferentemente se valorarán: a) Libros y capítulos de calidad avalada por las citas e inclusión en bibliografías independientes del autor. Deberán reflejar que son fruto de investigación o reflexión documentada b) Artículos en revistas españolas o extranjeras reconocidas que cumplan los criterios del Apéndice 1 Ojo: orden de preferencia Que se considera investigación en Derecho: a) Trabajos que desarrollen nuevas perspectivas del pensamiento jurídico b) Investigaciones originales en evolución histórica, social o cultural de las normas c) Estudios de política jurídica y que introduzcan propuestas relevantes de perfeccionamiento de las normas d) Que aporten conocimientos e instrumentos conceptuales y analíticos para mejorar la eficacia de las normas jurídicas d) Los análisis de jurisprudencia. e) Las obras generales que se reconozcan como de referencia dentro de la disciplina No se valorarán como aportaciones distintas las contribuciones en que haya podido ser dividida una misma investigación en el caso de que, por sus características, debiera constituir una única monografía o un único artículo de revista.

16 PUBLICACIONES LIBROS CNEAI. Arte, Humanidades y Jurídicas. Libros CRITERIOS DE CALIDAD EN LOS LIBROS. Campo Número de citas generadas (cantidad y calidad) Prestigio de la editorial, los editores, la colección en la que se publica la obra Reseñas en las revistas científicas especializadas Especialmente relevantes los que no estén publicados por la misma institución en la que trabaja el investigador, salvo que satisfagan Apéndice 1 (garantía de la editorial de que aplica riguroso proceso selección y evaluación) (ojo, esta condición desaparece en la convocatoria de 2009, pero.yo no fundamentaría el grueso de mi solicitud en base a libros de la editorial de mi universidad) Traducciones de la propia obra a otras lenguas Inclusión en bibliografías independientes del autor y su entorno Deberán reflejar claramente que son fruto de la investigación o de la reflexión documentada No serán nuevas aportaciones las traducciones a otras lenguas Poseer ISBN (imprescindible) Número autores elevado puede reducir puntuación cuando sea superior a la media de la especialidad. Justificar la aportación del solicitante al trabajo colectivo CNEAI

17 Buscando la relevancia del medio de difusión; los FI y los Indicios de Calidad

18 LA AUTORÍA. Despejar CNEAI-ANECA dudas. Clasificar Herramientas Bases de Datos Int Generales / Especializadas -WOS (La revista esté recogida en la bd) -Bibliography of the History of Arts (RLG) -International Bibliography of the Social Sciences (IBSS) -FRANCIS. Directorios (Fuentes de información) Ulrich s Dialnet Directorio Latindex Índices de Impacto Sistemas / Plataformas de Valoración WOS (JCR) In-RECS-H SJR ESF / ERIH DICE-CINDOC Catálogo Latindex MIAR FECYT

19 Ordenando los Sistemas y Herramientas de Evaluación / Valoración de Revistas Científicas 1. VÍA PREFERENTE -JCR. Índices de Impacto de los Citation Index (SCI; SSCI) -Humanidades y Jurídicas. La inclusión de la revista en la WOS (A&HCI) DIRECTORIOS 3. PLATAFORMAS DE VALORACION 4. B. de Datos 2. Otros IN DE IMPACTO FRANCIS IBSS HA WOS Bibliography of the History of Arts HA MLA Philosopher s Index Répertoire Bibliographique Lovain..

20 1. FI LA Internacionales: AUTORÍA. CNEAI-ANECA La WOS y las Humanidades: WOS, A&HCI;JCR Para saber si una revista está en la WOS UTILIDAD DE LA WOS PARA HUMANIDADES Y JURIDICAS Listado de Revistas Internacionales o Españolas de humanidades en la WOS A&HCI Para buscar citas internacionales WOS Los JCR (A&HCI no tiene JCR) Derecho: Tienen FI en los JCR por estar en el SSCI Revista de Estudios Políticos; R de Derecho Comunitario Europeo; R Española de Derecho Constitucional; Historia y Política; Hacienda Pública Española Categorías JCR relacionadas con Derecho: -Law (100) -Legal Medicine (9) -International Relations (51); -Criminology and Penology (29)

21 LA AUTORÍA. CNEAI-ANECA 1. Los FI asociados a revistas Scopus SJR

22 LA AUTORÍA. 1. Los FI CNEAI-ANECA para Revistas Españolas de Humanidades

23 LA AUTORÍA. 1. Los CNEAI-ANECA FI para Revistas Españolas Derecho

24 1.Los LA FI AUTORÍA. para Revistas CNEAI-ANECA Españolas de Sociales, Humanidades y Derecho

25 LA 2. AUTORÍA. Sistemas CNEAI-ANECA / Plataformas de Valoración / Calidad Herramientas que valoran la calidad editorial y/o científica de una revista de forma mas o menos directa / indirecta. No ofrecen ranking PRODUCTO ÁREA DOMINIO ESF / ERIH Todas las disciplinas Europa LATINDEX Todas las disciplinas Iberoamericano DICE Sociales/Humanidades España FECYT Todas las disciplinas España MIAR (no CNEAI) Sociales/Humanidades Mundial

26 LA AUTORÍA. 2. Sistemas CNEAI-ANECA / Plataformas Valoracion de Calidad

27 LA AUTORÍA. 2. Sistemas CNEAI-ANECA / Plataformas Valoracion Calidad Catálogo. Es fuente de información y un sistema de valoración para revistas iberoamericanas. Figurar en Latindex no es indicio de calidad por si mismo mientras no se cumplan todos o buena parte de sus criterios de valoración

28 LA AUTORÍA. 2. Sistemas CNEAI-ANECA / Plataformas de Valoración / Calidad Es fuente de información y al mismo tiempo un sistema de valoración para revistas españolas. Figurar en DICE no es indicio de calidad por si mismo mientras no se cumplan todos o buena parte de sus criterios de valoración

29 2. Sistemas / Plataformas Valoracion Calidad Revistas FECYT

30 3. Presencia en Bases de Datos: Internacionales de la especialidad; Multidisciplinares internacionales; Nacionales Existen productos especializados en ofrecer esta información

31 3. Presencia en Bases de Datos: Internacionales de la especialidad; Multidisciplinares internacionales; Nacionales

32 3. Presencia en Bases de Datos: Internacionales de la especialidad; Multidisciplinares internacionales; Nacionales

33 Cumplimiento Apéndice 1 Cumplimiento Apéndice 1

34 Libros. Indicios de calidad Indicios de Calidad Aportaciones ordinarias: Libros No existen herramientas /sistemas de valoración para libros. Solo la opinión / percepción que se tenga sobre las editoriales mas prestigiosas de un área, las citas y las reseñas que podamos aportar de

35 Editoriales de prestigio, ejemplos PARA TODAS LAS ÁREAS Routledge Edwad Elgar Oxford University Press Cambridge University Press Macmillan Press Palgrave Springer Ashgate Kluwer McGraw Hill Wiley MIT Press Sage Blackwell Prentice Hall Panamericana HUMANIDADES Y SOCIALES Sintesis Alianza Piramide Akal Anthropos Catedra Trea Thomson-Aranzadi Bosch Marcial Pons Dykinson Ariel Pearson Gredos

36 Editoriales de Prestigio campo 9. Libros Editoriales de calidad en Derecho. Libros -Thomson-Aranzadi -Thomson-Civitas -Tirant lo Blanch Bosch Marcial Pons Atelier Giuffre Harvard University Press Oxford University Press La Ley Mohr Siebeck Wolters kluwer Comares Dykinson Tecnos

37 LA AUTORÍA. Buscando CNEAI-ANECA mas citas, sobre todo para libros Google Scholar OJO Se alimenta de documentos en la Web: Son clave los REPOSITORIOS, Catálogos de Bibliotecas, Catálogos Comerciales de revistas, Productos propios de Google (google books, google patents) Existen programas y aplicaciones que nos pueden ayudar a trabajar con GS: Publish or Perish de Anne-Wil Harzing: Citation-Gadget: Tenurometer:

38 LA AUTORÍA. CNEAI-ANECA Aplicación informática

39 Una cuestión polémica: la Autoría de los trabajos

40 Qué dicen los criterios? El número de autores no será evaluable como tal, pero si deberá estar justificado por el tema, complejidad y extensión del mismo: Campos 1,2,3,4,5,6: Física, Matemáticas, Biología Celular y Molecular, Ciencias Biomédicas, Ciencias de la Naturaleza, Ingenierías y Arquitectura Salvo que estuviera plenamente justificado por la complejidad del tema y/o la extensión del trabajo, un elevado número de autores puede reducir la calificación asignada a una aportación. Campos 7,8,10,11: Sociología, Política, Educación, Economía, Geografía, Psicología, Historia y expresión artística, Filosofía, Filología, Lingüística El número de autores de una aportación deberá estar justificado por el tema, complejidad y extensión del mismo. Para que una aportación sea considera, el solicitante deberá haber participado activamente haciendo constar su concreta autoría en la investigación publicada mediante referencia a páginas, capítulos o apartados. Sólo se valorará la labor investigadora personal individualizada del solicitante. Campos 9: Derecho. ES IMPORTANTE POR TANTO FIGURAR EN POSICIONES RELEVANTES (Inicial, correspondencia) EN PARTE DE LAS CINCO APORTACIONES QUE SE PRESENTEN.

41 Qué quieren evitar?

42 LA AUTORÍA. CNEAI-ANECA El nº de autores, una cuestión de altura Boca la Pescá 903 metros Trenvenque metros Aneto metros Monte Kenia metros Everest metros IF 0,000 IF 0,734 IF 1,258 IF 12,827 IF 50,017 revista sin Factor de Impacto Revista Clínica Española Medicina Clínica (Barc) British Medical Journal New England Journal of Medicine Esfuerzo- Equipo necesario