Indicadores para evaluar repositorios universitarios argentinos, de la teoría a la práctica Marcela Fushimi, Patricia Genovés, Mónica Pené, Carolina Unzurrunzaga Equipo de investigación: "El acceso abierto al conocimiento científico en Argentina: Estado de situación y principales tendencias" Segundo Taller de Indicadores de Evaluación de Bibliotecas Web: http://tieb.fahce.unlp.edu.ar - ISSN 1853-7324 La Plata, 27-28 de junio de 2011
Antecedentes Trabajo de Fushimi y Banzato (2010): Presencia de revistas de acceso abierto y repositorios institucionales en web de las Universidad Nacionales del país. Encuesta MinCyT (2010): Estado de situación de los repositorios digitales argentinos.
Características RI en Argentina Iniciativas variadas y en estadio inicial. Gestión a cargo de las biblioteca. Baja utilización del autoarchivo. Poca recepción en los autores. Disparidad en los software utilizados. Re-utilización de los registros del catálogo. Escasez de personal y capacitación. (MinCyT, 2011)
Hipótesis de trabajo La producción de indicadores de evaluación se encuentra todavía enfocada en los desarrollos locales de los RIs y, por lo tanto, es tan importante tratar de aplicar aquellos que ya se han experimentado en otros contextos, como producir indicadores y estándares propios, siempre teniendo en cuenta la posibilidad de diálogo con los RIs más consolidados.
Objetivos de la ponencia Analizar y seleccionar indicadores de evaluación Aplicar indicadores a un grupo de repositorios universitarios argentinos Aportar indicadores adaptados al contexto local
Estado del Arte Propuestas de indicadores y criterios para la evaluación de RIs Barrueco Cruz, 2010 (Guía para la evaluación de repositorios institucionales de investigación) ; Cassella, 2010. Directrices para la creación de repositorios Barton y Waters, 2004 ; Bustos González y Fernández Porcel, 2007 ; López Medina, 2007. Evaluación bibliotecas digitales Cabrera Facundo y Coutín Domínguez, 2005 ; Ramírez Céspedes, 2006.
Metodología Revisión de la literatura. Definición de la muestra (Fushimi y Banzato, 2010). 10 repositorios de universidades nacionales argentinas Selección y adaptación de indicadores. 51 indicadores, agrupados en 9 categorías Evaluación de los RIs de la muestra. Fuentes de recolección de datos: Sitio web de cada RI y de la institución que lo desarrolla, archivo OAI-PHM encuesta del MinCyT y sitio web de directorios y recolectores.
A. Visibilidad (1/2) 90% 80% 70% 60% 50% 40% 30% 20% 10% 0% A.1. Enlace al RI desde web institucional A.2. URL amigable A.5. Difusión del RI en la institución No se sabe NO SI
A. Visibilidad (2/2) RI Balseiro RI UBA RI UNL RI SEDICI RI UNCU RI MA RI UNICEN RI MDP RI UNR RI UNSA 0% 50% 50% 75% Directorios Recolectores Directorios Recolectores Directorio de AAAA de Mincyt - ROAR: Registry of Open Access Repositorie - OpenDOAR Directory of Open Access Repositories - OAI Data Providers Google Scholar - OAIster - Scirus - Scientific Commons - BASE
B. Interoperabilidad 90% 80% 70% 60% 50% 40% 30% 20% 10% 0% B.1 B.2 B.3 B.4 B.5 B.6 B.7 No aplicable No se sabe NO SI Referencia: B.1. Implementación protocolo OAI-PMH; B.2. Uso identificadores persistentes; B.3. Uso sets recolección selectiva de datos; B.4. Marcación temporal registros eliminados; B.5. Presencia etiqueta AdminEmail (Identify); B.6 Presencia etiqueta Description (Identify); B.7. Uso vocabulario normalizado nacional o internacionalmente en etiqueta DC.type
C. Políticas 90% 80% 70% 60% 50% 40% 30% NO SI 20% 10% 0% C.1. Misión y objetivos C.2.Política archivo C.3. Política preservación C.4. Política reutilización metadatos C.5. Información contacto
D. Aspectos legales 90% 80% 70% 60% 50% 40% 30% 20% 10% 0% No aplicable No se sabe NO SI D.1. Información propiedad intelectual para los autores D.2. Autorización para difusión de contenidos D.3. Información derechos de autor en metadatos exportables
E. Comunidad No pudieron medirse en su totalidad Número de comunidades que depositan Porcentaje de miembros de la comunidad que depositan Promedio de ítems depositados por miembro de la comunidad Dificultades: Definición comunidades. Nivel de granularidad. Forma de depósito.
F. Colecciones y servicios No pudieron medirse en parte. Dificultades: Ausencia de datos sobre las colecciones. Falta de estadísticas de uso. Diferencias de criterio en la forma de registrar e informar los datos en la web.
G. Metadatos 90% 80% 70% 60% 50% 40% 30% 20% 10% 0% G.1. Metadatos descriptivos G.2. Metadatos técnicos/preservación G.3. Vocabularios temáticos normalizados G.4. Esquemas clasificación normalizados SI NO No se sabe
H. Interfaz 90% 80% 70% 60% 50% 40% 30% 20% 10% 0% H.1 H.2 H.3 H.4 H.5 H.6 H.7 H.8 No aplicable No se sabe Referencias: H.1. Homogeneidad diseño; H.2. Versiones otras lenguas; H.3. Interfaz búsqueda amigable; H.4. Inclusión ayudas búsqueda; H.5. Funciones búsqueda avanzada; H.6. Opción recuperar sólo textos completos; H.7. Funciones navegación; H.8. Relación con el OPAC de la UI. NO SI
I. Presupuesto No pudieron medirse en su totalidad. Costo por depósito Costo por descarga Total staff FTE Costos en capacitación del personal del RI Monto anual del financiamiento externo recibido Dificultades: Información interna.
Conclusiones Aplicamos 33 de los 51 indicadores propuestos. Detectamos particularidad para lograr la adaptación de los indicadores al contexto local. Creemos que debe fomentarse el diálogo entre los desarrolladores para establecer indicadores y estándares propios.
Gracias por su atención Sitio web http://www.memoria.fahce.unlp.edu.ar Consultas memoria@fahce.unlp.edu.ar