presentación

Transcripción

1

2 presentación Daniel Torres Salinas (postdoc) Evaristo Jiménez Contreras (director)

3 Contenido 1.Criterios generales de evaluación: ANECA, CNEAI y UNIQUAL. 2.Criterios específicos para revistas científicas por áreas. 3. Cómo localizar indicios de calidad. 4.Consejos para mejor la difusión y recuperación de nuestros trabajos.

4

5 Cursus honorum

6

7 Éxito en las acreditaciones

8 Evaluación integral, dimensiones

9 Finalidad ANECA

10 Aspectos a tener en cuenta Baremo muy detallado Aplicación informática muy compartimentada y muy lenta de completar Evaluación por dos expertos y por un comité (consenso / mayoría) Retroalimentación Plazos

11 peso ANECA a las publicaciones (1)

12 peso ANECA a las publicaciones (2)

13 LA AUTORÍA. CNEAI-ANECA Cuántas publicaciones?

14 Fundamentos ANECA de Evaluación

15 Fundamentos ANECA de Evaluación

16 Fundamentos ANECA de Evaluación En los ámbitos científicos de orientación básica (Ciencias y Ciencias de la Salud) se consideran especialmente las publicaciones en revistas de reconocido prestigio En los ámbitos de Arte y Humanidades, Ciencias Sociales y Jurídicas se valoran especialmente las publicaciones en revistas y libros de prestigio, así como creaciones artísticas y profesionales innovadoras En ámbitos mas aplicados como Ciencias Aplicadas, Ingenierías y Arquitectura se consideran de especial relevancia el desarrollo de patentes y actividades de transferencia de tecnología

17 Fundamentos ANECA de Evaluación Que significa publicaciones de prestigio? Es un indicador formal. ANECA, siguiendo a CNEAI considera que en los distintos ámbitos del conocimiento existen índices internacionales que ordenan por relevancia las publicaciones de reconocido prestigio Se inventa el concepto de Publicaciones en Revistas Indexadas con INDICE DE CALIDAD RELATIVO si bien, acto seguido las equipara a Publicaciones en Revistas recogidas en los Journal Citation Reports (JCR) o equivalentes de cada especialidad

18 LA AUTORÍA. CNEAI-ANECA Publicaciones en revistas Pueden considerarse también artículos en revistas sin ICR y en revistas no incluidas en las mencionadas base de datos, siempre que cumplan las siguientes características: bibliográficos de su especialidad Acepta y publica trabajos en mas de una lengua Publica fundamentalmente trabajos de investigación Declara periodicidad y la cumple Antigüedad superior a tres años Publica un % elevado de trabajos de autores externos a la revista (Consejo de Redacción e institución editora) Cuenta con Comité Científico de nivel internacional

19 Publicaciones Indexadas Vs No indexadas ANECA clasifica en dos bloques: Revistas Indexadas o con Índice de Calidad Relativo Revistas no Indexadas o sin Índice de Calidad Relativo

20 Congresos Como Publicaciones Científicas en Revistas Ingeniería y Arquitectura: Excepcionalmente. Incluidos en Actas de Congresos Internacionales de prestigio cuando tales congresos son medio de difusión comparable a revistas JCR y selección por Peer Review. Como Libros o Capítulos de Libro En todas las áreas de conocimiento. Congresos organizados por asociaciones internacionales o nacionales de periodicidad fija, que publican actas del congreso con contribuciones completas seleccionadas previamente mediante evaluación externa y con ISBN. Como Congresos, Seminarios,.. (1.A.5 / 1.A.6) En todas las áreas de conocimiento, se valoran los de carácter internacional o nacional de especial relevancia en su ámbito, que incluyan revisión por pares y con la antigüedad suficiente para ser referentes ensu ámbito

21 Los libros Libros y capítulos de libro de carácter científico e investigación, publicados en editoriales de prestigio nacional o internacional Ediciones o traducciones anotadas Reseñas bibliográficas; Prólogos Ediciones de las tesis se valoran como libros monográficos solo si han sido publicadas en editoriales de prestigio Preferentemente: libros con ISBN publicados en editoriales especializadas de reconocido prestigio que garanticen un riguroso proceso de selección y evaluación Excluidos(aunque esta exclusión se cita solo en Ciencias Sociales y Jurídicas: libros de texto y manuales (Publicaciones docentes)

22 Los libros Criterios Número de citas generadas (cantidad y calidad) Prestigio de la editorial, los editores, la colección en la que se publica la obra Reseñas en las revistas científicas especializadas Acreditar riguroso proceso de selección y evaluación de originales Que no estén publicados por la misma institución en la que trabaja el investigador, salvo que ésta satisfaga los criterios especificados en el Apéndice 1 ANECA Traducciones de la propia obra a otras lenguas Inclusión en bibliografías independientes del autor y su entorno Presencia en bases de datos, repertorios bibliográficos especializados y catálogos de bibliotecas universitarias Acreditar un proceso de selección riguroso mediante evaluadores externos a las Universidades de la Comunidad Autónoma (Derecho) Poseer ISBN (imprescindible)

23 Creaciones artísticas En áreas de A&H caracterizadas por actividades de creación artística, estos méritos son especialmente valorados, y pueden suplir carencias en publicaciones en revistas, pero siempre en función del reconocimiento de las obras artísticas, que podrán ser: creaciones profesionales o artísticas, obras artísticas por encargo, presentadas en exposiciones y/o ferias, museos, informes científicos y técnicos, trabajos presentados a premios y concursos, participación en exposiciones, fotografías científicas, aportaciones vinculadas a la valoración, incremento y disfrute del patrimonio histórico y artístico (Arqueología, arte..) Indicios de calidad obras artísticas o profesionales Participación en exposiciones como autor o comisario con publicación de catálogo con impacto en los medios especializados Premios, distinciones o menciones de calidad obtenidas Reconocimiento profesional y público Impacto obtenido en la crítica especializada

24 Proyectos y Contratos Participación como IP o como investigador en Proyectos de programas competitivos de la UE u otros organismos internacionales, Planes Nacionales, Autonómicos y de otros organismos públicos y privados. Requisitos: obtenidos en convocatorias competitivas, sometidos a evaluación externa por agencias nacionales o internacionales como la ANEP osimilar Participación como IP o como investigador en Contratos de investigación con la Administración Pública, instituciones o empresas, siempre que generen conocimiento (si no a 1.C.2 transferencia al sector productivo) Otros méritos asociados a los proyectos y contratos: pertenencia a redes internacionales, publicaciones especializadas derivadas y autoría en informes técnicos asociados a contratos. La participación como IP en Proyectos de relevancia se valora adicionalmente también como mérito de gestión en 4.C(TU) 3.C(CU

25 Transferencia Patentes y productos con RPI Especialmente valorada en ámbitos tecnológicos en los que esta actividad es significativa Patentes nacionales o internacionales en explotación o con contrato de cesión o licencia Patentes solicitadas que hayan superado alguna fase de valoración Productos con RPI (obras artísticas, técnicas, programas informáticos Transferencia de conocimiento al sector productivo Actividades innovadoras de transferencia de conocimiento, informes, desarrollo de sofware en explotación, colaboración con empresas Actividades ligadas al mantenimiento e incremento del patrimonio cultural, artístico, museístico Cursos y seminarios impartidos en empresas y organismos públicos asociados a transferencia de resultados o a formación de personal cualificado

26 Otros méritos Movilidad Estancias media/larga (superiores a 1 mes) en centros de investigación de prestigio Becas y ayudas o contratos obtenidos en convocatorias competitivas para realizar estancias Otros meritos Actividad Investigadora Evaluador (Peer) de artículos para revistas JCR o equivalentes Evaluador de proyectos (ANEP o similares) Pertenencia a comisiones de selección de solicitudes de movilidad OJO. Pertenencia a Consejos editoriales revista JCR o equivalentes en méritos de gestión 3.C (CU), 4.C (TU)

27 Aplicación informática ANECA

28 Aplicación informática ANECA

29 Aplicación informática ANECA

30 Aplicación informática ANECA * * Este campo también aparece en el apartado de revistas indexadas

31

32 Criterios 2009 Ojo Ayer se publicaron los criterios para la convocatoria Hasta donde hemos podido comprobar los criterios se mantienen prácticamente igual. Cambio significativo, se tendrán en cuenta o aquellas revistas acreditadas por la FECYT, si cumplen apéndice 1

33 ÍNDICE SDE LA UPV/EHU ÍNDICE S = NSO/NSP ÍNDICE S = NSO/NSP: NSO=número total de sexenios obtenidos por el colectivo NSP=número total de sexenios posibles para dicho colectivo.

34 ÍNDICE S DE LA UPV/EHU

35 ÍNDICE S DE LA UPV/EHU

36 ÍNDICE S DE LA UPV/EHU

37 ÍNDICE S DE LA UPV/EHU

38 ÍNDICE S DE LA UPV/EHU

39 LA AUTORÍA. CNEAI-ANECA CNEAI. Filosofía general -Introducir un régimen retributivo para incentivar, mediante evaluaciones, la actividad investigadora de calidad entre el profesorado de las Universidades y el CSIC- -Es aspiración de la CNEAI fomentar que los investigadores orienten sus trabajos a lograr resultados de amplia repercusión (internacional) científica y social -Se han constatado dos hechos desde la puesta en marcha del sistema: 1. la ciencia española ha experimentado un importante crecimiento tanto en calidad como en cantidad. 2. La CNEAI ha desarrollado una amplia experiencia evaluadora -Tanto es así que la CNEAI ha sido y es referente para otras agencias en tareas evaluadoras y políticas de evaluación de personas e instituciones -Tras la larga experiencia acumulada, la Resolución de 2005 consideró objetivo fundamental el precisar la objetivación de los criterios de evaluación a fin de poder determinar que investigación tiene suficiente repercusión científica y socioeconómica en base a la utilización de indicadores aceptados internacionalmente

40 Fundamentos CNEAI de Evaluación Cinco aportaciones ordinarias Libros; capítulos de libro; prólogos (estudios preliminares de investigación con aportación valiosa), introducciones y anotaciones de textos; artículos en revistas; patentes o modelos de utilidad. En determinadas áreas de conocimiento, son también aportaciones ordinarias los desarrollos tecnológicos, proyectos arquitectónicos singulares, creaciones artísticas, actas de congresos de relevancia Excepcionalmente aportaciones extraordinarias: Informes, estudios, dictámenes; trabajos técnicos, artísticos; participación en exposiciones, excavaciones; dirección de tesis; comunicaciones a congresos

41 Fundamentos CNEAI de Evaluación CNEAI precisa que exige a las aportaciones Contribución progreso del conocimiento, innovación o creatividad Participación relevante en los trabajos: argumentar participación y orden de firma Relevancia científica del medio de difusión en que se publica la aportación : Impacto (revistas), Editorial (Libros) Premios y distinciones recibidas: para creaciones artísticas Referencia que otros autores hacen y que sean indicativos de relevancia: se refiere a las citas Apreciaciones del propio interesado sobre las aportaciones de su trabajo al progreso del conocimiento. En publicaciones colectivas mencionar la contribución del solicitante Reseñas en revistas especializadas En patentes: datos de explotación económica

42 LA AUTORÍA. CNEAI-ANECA CNEAI. El apéndice 1 - Resolución de 2005: incluye el Apéndice 1 con una lista de criterios mínimos de carácter formal, de calidad editorial y de difusión que debe cumplir un medio de difusión de la investigación (revista, libro o congreso) para que pueda ser reconocido a priori como de suficiente garantía - No obstante, se deja abierta la posibilidad para que los autores comuniquen a la Comisión las citas, valores y reconocimientos independientes que han tenido las publicaciones elegidas para su curriculum -Los requerimientos mínimos que se exponen para obtener una evaluación positiva tratan de reglar lo más posible el proceso evaluador y su aplicación no tiene carácter absoluto

43 LA AUTORÍA. CNEAI-ANECA CNEAI. El apéndice 1 Apéndice 1 Criterios que hacen referencia a la calidad informativa 1. Identificación de los miembros de los comités editoriales y científicos. 2. Instrucciones detalladas a los autores. 3. Información sobre el proceso de evaluación y selección de manuscritos o jueces. 4. Traducción del sumario, títulos de los artículos, palabras clave y resúmenes al inglés, en caso de revistas y actas de Congresos. Criterios sobre la calidad del proceso editorial 5. Periodicidad 6. Anonimato en la revisión de los manuscritos. 7. Comunicación motivada de la decisión 8. Existencia de un consejo asesor, formado por profesionales e investigadores de reconocida solvencia, sin vinculación Criterios sobre la calidad científica de las revistas 9. Porcentaje de artículos de investigación; más del 75% de los artículos. 10. Autoría: grado de endogamia editorial, más del 75% de los autores serán externos al comité editorial y ajenos a la organización editorial de la revista. 11. Indexación de las revistas en las bases de datos internacionales especializadas

44 Hoja de evaluación CNEAI

45

46 UNIQUAL peso investigación

47 peso UNIQUAL a las publicaciones

48 UNIQUAL = Imprecisión -No Indica criterios de calidad de las revistas ni de los libros Cómo deben ser? -No da referencia sobre bases de datos - No hace distinciones entre disciplinas -Parece más una guía basada en ANECA que unos criterios Por ejemplo: Publicaciones Científicas Indexadas en revistas de nivel medio/alto de su área [?] Publicaciones Científicas en revistas con consejos de redacción o revisores nacionales [?] Consejo: en general las agencias autonómicas adoptan los criterios nacionales sin demasiado criterio, por tanto mejor seguir ANECA para interpretar los criterios UNIQUAL

49

50 LA AUTORÍA. CNEAI-ANECA Qué dicen las agencias de la autoría? CNEAI El número de autores no será evaluable como tal, pero si deberá estar justificado por el tema, complejidad y extensión del mismo: Campos 1,2,3,4,5,6: Física, Matemáticas, Biología Celular y Molecular, Ciencias Biomédicas, Ciencias de la Naturaleza, Ingenierías y Arquitectura Salvo que estuviera plenamente justificado por la complejidad del tema y/o la extensión del trabajo, un elevado número de autores puede reducir la calificación asignada a una aportación. Campos 7,8,10,11: Sociología, Política, Educación, Economía, Geografía, Psicología, Historia y expresión artística, Filosofía, Filología, Lingüística El número de autores de una aportación deberá estar justificado por el tema, complejidad y extensión del mismo. Para que una aportación sea considera, el solicitante deberá haber participado activamente haciendo constar su concreta autoría en la investigación publicada mediante referencia a páginas, capítulos o apartados. Sólo se valorará la labor investigadora personal individualizada del solicitante. Campos 9: Derecho ANECA Se tiene en cuenta la posición y el número de autores, reduciendo el valor de la publicación cuando este número sea superior a la media en la especialidad. Todas las áreas de conocimiento

51 LA AUTORÍA. CNEAI-ANECA Qué quieren evitar?

52 LA AUTORÍA. CNEAI-ANECA Cual debe ser el número de autores? (1) Número de autores (aprox.) en trabajos en revistas Web of Science (Principalmente internacionales y anglosajonas) Categoría Categoría Agricultura 4 Matemáticas 2 Ciencias de la Alimentación 4 Ing. Mecánica, naval, 3 Ingeniería Civil y Arquitectura 3 Medicina 5 Ciencias Computación / Informática 3 Bioquímica y Biología Molecular 5 Ciencias Sociales 2/3 Psicología 3 Derecho 2 Química 4 Economía 2 Comunicaciones 3 Ing. Eléctrica y Electrónica 4 Farmacia y Farmacología 5 Filosofía, Filología 1 Ganadería y Pesca 5 Historia 1 Ciencias materiales 5

53 LA AUTORÍA. CNEAI-ANECA Cual debe ser el número de autores? (2) Número de autores (aprox.) en trabajos en revistas In-Recs/In-Recj (revistas nacionales) Categoría Antropología 1 Documentación 1/2 Ciencia Política 1 Comunicación 1 Economía 1/2 Educación 1/2 Geografía 2 Psicología 2 Sociología 1/2