Evaluación científica en España en Ingeniería Informática y Telecomunicaciones: criterios y procedimientos

Tamaño: px

Comenzar la demostración a partir de la página:

Download "Evaluación científica en España en Ingeniería Informática y Telecomunicaciones: criterios y procedimientos"

Juan Manuel Botella Río
hace 5 años
Vistas:

1 Granada, 19 de mayo de 2011 Evaluación científica en España en Ingeniería Informática y Telecomunicaciones: criterios y procedimientos Emilio Delgado López-Cózar Catedrático de Metodología de la Investigación Facultad de Comunicación y Documentación

2 presentación

3 La evaluación de la investigación Hay necesidad de evaluación ANEP Proyectos Plan Nacional Rendir cuentas a la sociedad Recursos limitados 1986 Repartir racional y eficientemente los recursos ANECA La cultura de la evaluación Profesorado 2002 Inherente a la ciencia Todo es evaluable: personas, instituciones, programas, proyectos, publicaciones Proliferación de agencias: estatales, autonómicas CNEAI Investigadores OPIS 1989

4 Las Agencias de Evaluación en España ANECA - Evaluación para la contratación - Acreditación nacional para el acceso a los cuerpos docentes universitarios CNEAI Evaluación de la actividad investigadora de los profesores universitarios y de las escalas científicas del CSIC Agencias autonómicas Otras agencias estatales

5 Esto es lo que nos espera

6 Filosofía y criterios generales

Filosofía a y objetivos en que se fundamentan las

entender los criterios que se utilizan es conveniente

actividad investigadora FILOSOFÍA DE LA EVALUACIÓN

Evaluación sobre resultados de investigación.

sistema planteado se inspira en la tradición académica

7 Filosofía a y objetivos en que se fundamentan las evaluaciones y los criterios de evaluación Para entender los criterios que se utilizan es conveniente no olvidar los fundamentos de las evaluaciones de la actividad investigadora FILOSOFÍA DE LA EVALUACIÓN Difusión e Internacionalización de la ciencia española Evaluación sobre resultados de investigación. Publicaciones Evaluaciones formales, NO sobre contenidos. Utilización de indicadores de objetivación formal El sistema planteado se inspira en la tradición académica de la evaluación por pares: comisiones de expertos y requerimiento de informes a especialistas en la disciplina de cada candidato

8 El profesor de universidad Una evaluación n integral de la actividad académica

9 Peso de la Actividad Investigadora en el conjunto curricular En la evaluación curricular personal el peso de la Actividad Investigadora es decisivo

Ponderaciones por áreas de conocimiento No todos somos iguales En los ámbitos científicos de orientación básica (Ciencias y Ciencias de la Salud) se consideran especialmente las publicaciones en

10 Ponderaciones por áreas de conocimiento No todos somos iguales En los ámbitos científicos de orientación básica (Ciencias y Ciencias de la Salud) se consideran especialmente las publicaciones en revistas de reconocido prestigio En ámbitos más aplicados como Tecnología, Ingenierías se consideran de especial relevancia el desarrollo de publicaciones en revistas de reconocido prestigio, patentes y actividades de transferencia del conocimiento

11 ANECA. Peso de las publicaciones por categoría a profesional Ingenierías

12 ARTÍCULOS EN REVISTAS CIENTÍFICAS Ingenierías de la Comunicación, Computación y Electrónica CRITERIOS DE EVALUACIÓN Se valorarán preferentemente Los trabajos publicados en revistas de reconocida valía, aceptándose como tales las que ocupen posiciones relevantes en los listados por ámbitos científicos en el «Subject Category Listing» del «Journal Citation Reports» del «Science Citation Index» (Institute for Scientific Information, - ISI- Philadelphia, PA, USA)

13 LA AUTORÍA. CNEAI-ANECA El Universo Thomson WEB OF KNOWLEDGE (WOK) WEB OF SCIENCE SCI Science Citation Index (7858) JCR Journal Citation Reports A&HCI SSCI Art & Social Science Citation Index Humanities Citation Index (2553) (1462) Impact Factor (8200) ESI Essential Science Indicators

14 Revistas de Ingeniería Informática y Electrónica Ulrichs Revistas en el mundo JCR / WOS Revistas nucleares INSPEC Revistas importantes

15 CATEGORÍAS AS TEMÁTICAS TICAS INGENIERÍA A INFORMÁTICA Y ELECTRÓNICA JOURNAL CITATION REPORTS

16 CATEGORÍAS AS TEMÁTICAS TICAS INGENIERÍA A INFORMÁTICA Y ELECTRÓNICA JOURNAL CITATION REPORTS

18 Publicar en revistas científicas Qué revistas publican artículos sobre mi tema?

19 Publicar en revistas científicas Qué revistas publican artículos sobre mi tema? Históricamente Recientemente

20 ANECA. Número de publicaciones para obtener la puntuación máxima

21 CNEAI. Número mínimo de artículos en revistas científicas para obtener el sexenio Ingenierías de la Comunicación, Computación y Electrónica

22 ANECA. ComunicacionesC en Congresos Ingenierías Excepcionalmente, se puede valorar en este apartado los trabajos incluidos en las Actas de Congresos internacionales de prestigio, en aquellos ámbitos científicos en los que dichos Congresos sean vehículo de difusión comparable a las revistas Journal Citation Report de máximo prestigio y si los criterios de selección tuviesen un nivel de rigor similar a los de las citadas revistas. Los artículos cuyos contenidos son meras transcripciones de actas de congresos (por ejemplo los Lecture Notes ) se valoran en el segundo bloque de 1, dentro del apartado 1.A.5.

23 CNEAI. ComunicacionesC en Congresos Ingenierías de la Comunicación, Computación y Electrónica Los trabajos publicados en las actas de congresos que posean un sistema de revisión externa por pares, cuando estas actas sean vehículo de difusión del conocimiento comparable a las revistas internacionales de prestigio reconocido. Se aceptarán como tales los trabajos publicados en las actas de los congresos que ocupen posiciones muy relevantes en los listados de los índices CiteSEER ( Computing Research and Education (CORE) ( o CS Conference Rankings (

31 Transfiriendo conocimiento Creando empresas, patentando, contratando, innovando

32 CNEAI

33 La cuestión de la autoría de los trabajos

34 CNEAI LA AUTORÍA. CNEAI-ANECA Quédicen las agencias de la autoría? El número de autores no será evaluable como tal, pero sí deberá estar justificado por el tema, complejidad y extensión del mismo ANECA Para la valoración de las publicaciones científicas se atiende, entre otros, a los siguientes factores: el número de autores y, cuando sea relevante, la posición que ocupa entre ellos el solicitante. En general, se tiene en cuenta el número de autores, reduciendo el valor de cada publicación cuando el número de autores sea superior a la media en la especialidad. El número de autores se tiene en cuenta y El orden de firma importa

35 LA AUTORÍA. CNEAI-ANECA Cuál debe ser el número de autores? Patrones de autoría a en la ETSI de la Universidad de Granada ( ) a través s de la Web of Science

36 LA AUTORÍA. CNEAI-ANECA Existe el orden alfabético en Informática? Patrones de autoría a en la ETSI de la Universidad de Granada ( ) a través s de la Web of Science % 48% 46% 52% 54% 69%

37 LA AUTORÍA. CNEAI-ANECA Existe el orden alfabético en Informática? Patrones de autoría a en la ETSI de la Universidad de Granada ( ) a través s de la Web of Science 11% trabajos con 4 o más autores 89%

38 La producción científica Un retrato bibliométrico

40 Evolución citas recibidas

41 Categorías temáticas Tipos documentales

43 Revistas de publicación

45 Colaboración Países Colaboración Instituciones

46 Autores más prolíficos

50 Los indicadores bibliométricos

51 La fórmula mágica del IMPACT FACTOR Tiempo JCR Impact Factor Número de citas recibidas en 2006 por los trabajos publicados en 2004 y 2005 Número de trabajos publicados en 2004 y 2005 Impact Factor = A/B

52 El correcto uso del IF Miden la utilidad y la influencia intelectual, no la calidad Cuando un científico cita un trabajo anterior lo que formalmente hace es reconocer la utilidad que ha tenido dicho trabajo en la confección del suyo propio y, por ende, es un indicador de influencia. Si se acepta esta premisa los trabajos más citados tienen una influencia mayor en las actividades investigadoras que los que tienen menos citas Mide el impacto de la revista y no el del artículo Son un magnífico indicador de competitividad Si se emplea para evaluar países, instituciones o individuos recordar que entonces es un indicador de impacto esperado y no observado Los datos de citación deben ser cuidadosamente usados e interpretados y no deben reemplazar el juicio humano (expertos). Deben ayudar en la toma de decisiones y no ser aplicados mecánicamente

Introducción y estudio comparativo de los nuevos indicadores de citación

54 Las alternativas al Impact Factor Citas con pesos Torres-Salinas, Daniel; Jiménez-Contreras, Evaristo. Introducción y estudio comparativo de los nuevos indicadores de citación sobre revistas científicas en Journal Citation Reports y Scopus. El profesional de la información, 2010, v. 19, n. 2, pp

55 Las alternativas al Impact Factor Citas con pesos Loet Leydesdorff. How are new citation-based journal indicators adding to the bibliometric toolbox?, Journal of the American Society for Information Science and Technology 60(7) (2009)

56 El Índice H

57 El Índice H Fortalezas Combina producción e impacto en un solo indicador Simple y sensillo de calcular y entender Debilidades Valora la carrera de un investigador: No existen bases de datos que contengan todos los trabajos y las citas asociadas a las mismas- Las que existen se limitan a un número limitado de publicaciones (artículos en revistas indizadas en WoS o SCOPUS; todo tipo de publicaciones en Google Scholar). Inadecuado para comparar a investigadores de distintas áreas científicas Favorece a los autores senior frente a los noveles No excluye las autocitas Penaliza a los autores con estrategias de publicación muy selectivas: pocos documentos y altamente citados

58 Para finalizar Un par de consejos

59 Eligiendo línea de investigación Si empezamos bien terminaremos Buenas preguntas conducirán Los buenos investigadores son los que saben elegir sugestivos problemas

60 Procura Continuidad Coherencia

61 Cuánto publicar? Más vale poco y bueno que mucho y mediocre Se nos medirá por su impacto científico, no por su volumen y peso

62 Busca a los mejores

67 Ni desalientos. Ni depresiones

68 Muchas gracias por su atención Emilio Delgado López-Cózar ec3.ugr.es/emilio ec 3 Grupo de investigación Evaluación de la Ciencia y de la Comunicación Científica Facultad de Comunicación y Documentación

Documentos relacionados

Indicadores de calidad de las publicaciones científicas en Ciencias de la Salud

Indicadores de calidad de las publicaciones científicas en Ciencias de la Salud Emilio Delgado López-Cózar Profesor de Metodología de la Investigación España en estado de excitación evaluativa Qué es la