Conclusiones Grupo de Trabajo Arquitectura y Datos

Transcripción

1 ASUNTO: Conclusiones LUGAR DE REUNIÓN: FECHA DE REUNIÓN: Madrid, Instituto Geográfico Nacional 1 de julio de 2008 ASISTENTES Laguna Ruiz Daniel Andalucía Consejería de Medio Ambiente Crespo Calvo Roberto Andalucía Consejería de Medio Ambiente Silgado Herrero Álvaro Atos Origin Riego Utrilla Jose Luís Atos Origin Fernández Carlos DEIMOS Rodriguez Sánchez Francisco Javier Extremadura Consejería de Industria, Energia y Medio Ambient Vallés Villa Lorenzo Extremadura Consejería de Medio Ambiente Montesinos Salomón GEOSYS Asistencia Técnica IMIDA (MURCIA) Sánchez-Girón Díaz Octavio IN2 Moreno Burgos Victoriano INDRA-ESPACIO Redondo Martín José Antonio INDRA-ESPACIO Domenech Tofiño Emilio Mº Fomento Instituto Geográfico Nacional () Rodriguez Domínguez Andrés Manuel Mº Fomento Instituto Geográfico Nacional () Ayuso González Juan Emilio Mº Fomento Instituto Geográfico Nacional () Peces Morera Juan José Mº Fomento Instituto Geográfico Nacional () Plaza Medina Nuria Mº Fomento Instituto Geográfico Nacional () Tejeiro Orellana José Antonio Mº Fomento Instituto Geográfico Nacional () Villa Alcazar Guillermo Mº Fomento Instituto Geográfico Nacional () Díez Pérez Esther Mº Fomento Instituto Geográfico Nacional () Machín Javier OPENTEXT Chanfreu Rosa Andalucía Consejería de Agricultura Castillo García Pablo Mº Medio Ambiente Rural y Marino Parques Nacionales Presentaciones BREVE ACTA DE LA REUNIÓN 1. Gestión de productos del PNT (Emilio Domenech) 2. Protocolos de Transferencia de Archivos (Andrés Rodríguez) 3. Descarga de Información CNIG- (Ester Díez) 4. Gestión documental (Juan Emilio Ayuso) 5. WEB Plan Nacional de Teledetección (Emilio Domenech) (la descarga de las presentaciones se puede hacer a través de la dirección FTP: ftp:// /tldt/) Temas tratados Página 1 de 5

2 Introducción, Guillermo Villa () Presentación de la reunión y de los participantes, exposición del orden del día: 5 ARQUITEC. INFORMÁTICA. Almacenamiento y Backup. Sistema de Gestión de datos. Transmisión entre Centros de Proceso de. Diseminación a usuarios. Sitio Web. Asignación de tareas y Cronograma del GT. Especificaciones Técnicas Tratamientos y Productos DATOS Y METADATOS. Formatos (HDF, GeoTIFF, JPEG2000, ). Estándares ((ISO , ISO 19121, ISO 19123, ISO 19124, ISO 19129, ISO 19130, Normas OGC, Inspire Data Specification Drafting. Especificaciones Técnicas Tratamientos y Productos Teams -Orthoimagery-, ). Metadatos (ISO , NEM, ) Expone el flujo de datos en cinco niveles de usuarios con diferentes niveles de servicio: 1. Centros de recepción (entre 3 y 5) 2. Centros de proceso de datos (entre 3 y 10) 3. Nodos: Comunidades Autónomas (17+2) y Ministerios (7) 4. Usuarios públicos 5. Usuarios privados Centros de Recepción Centros de Proceso CCAA y Ministerios Usuarios Necesidad de diseñar un sistema de información capaz de soportar a esos usuarios y niveles de servicio. Presentación Gestión de productos del PNT, Emilio Domenech (). Revisión de los productos del PNT: Alta resolución, Media resolución, baja y muy baja resolución. Espacios estimados de almacenamiento (incluidas las adquisiciones de Landsat histórico). - Representantes de Extremadura apuntan que los formatos propietarios de imágenes (como puede ser img), pueden ser problemáticos para los usuarios finales. Plantean la posibilidad de reducir el número de productos presentados en el PNT ante la posibilidad de que algunos de ellos no se utilicen. - El representante de Deimos propone el uso de la Red Iris a Universidades. - Representantes de Extremadura y J.E. Ayuso, plantean la posibilidad de utilizar servicios intermedios que no precisen descargar la imagen, alternativa: IDEE. Página 2 de 5

3 Presentación Gestor documental, Juan Emilio Ayuso () Utilidad de sistema de gestión documental. Definición de matriz roles y permisos. BMP / Workflow. Prueba piloto del gestor documental en el (octubre de 2008). - G. Villa, ante la necesidad de distribuir la información del PNT, propone contar con una solución de urgencia para la descarga de imágenes que solucione el acceso actual a los datos hasta el momento en que este operativa la prueba piloto que se realizará en octubre de Representantes de Atos Origin, plantean la posibilidad de acceder a datos de manera transparente, sin necesidad de saber como se gestiona internamente. - G.Villa. y representantes de Atos Origin, proponen que se gestionen los permisos adecuados para que los usuarios pueden subir información (productos derivados). - G. Villa apunta la necesidad de disponer de Quick looks para poder visualizar los contenidos sin tener que realizar una descarga previa de los mismos. - Representantes de Extremadura proponen la posibilidad de realizar avisos ante los posibles fallos en las imágenes. Se debate en relación a la aprobación y validación de los productos. Presentación Descargas de información, Esther Díez () Introducción a la metodología empleada para la descarga de información en CNIG-. - Surge la duda de implementar Bit Torrent, Esther Díez indica que no se ha considerado en un principio en el CNIG pero se realizará una prueba piloto. Presentación, Protocolos de Transferencia, Andrés Rodríguez () Posibilidades de uso de diferentes protocolos de transferencia de archivos para la distribución de información geográfica. - Representantes de Atos Origin cuentan con un grupo de trabajo específico de Grid Computing. - El representante de Geosys, tiene contactos con Redes.net, que gestionan documentación electrónica y gestionan Red Iris, a la vez que mueven grandes redes de Ministerios. - Andrés Rodríguez plantea, en una fase inicial, la distribución por FTP y posteriormente, en función de la demanda, utilizar Bit Torrent. Representantes de Atos Origin indican que Bit Torrent es eficiente si hay muchos usuarios conectados. Presentación, Web PNT, Emilio Domenech () Versión demo de la página Web del PNT, con los contenidos y funcionalidades. Conclusiones: Las conclusiones del la reunión del GT de datos se estructuran en el siguiente cuadro: DISEÑO DE SISTEMA DE INFORMACIÓN Soluciones a diseñar e Requerimientos Sistema de Información implementar Almacenamiento: La gran cantidad de productos a Servidores NAS escalables almacenar dentro del PNT requiere sistemas de en: almacenamiento dimensionados de forma adecuada. ALTA resolución MEDIA resolución MEDIA resolución Histórica BAJA resolución MUY BAJA resolución ESPACIO TOTAL ANUAL ESPACIO en TB / CNIG - Centros de proceso de datos - Nodos Acciones Cálculo del volumen de almacenamiento necesario en cada nodo Responsable Presentación: Gestión de productos del PNT Página 3 de 5

4 Transmisión de datos: Tráfico de transmisión en GB/ día entre nodos y usuarios. Ancho de banda/ 100 MB 500 MB 1 GB 3 GB 15 GB 50 GB 100 GB 1 TB 4 TB 3MB 5,46 min. 27,31 min. 54,61 min. 2,73 horas 13,65 horas 1,90 días 3,79 días 37,93 días 113,78 días 7Mb 2,34 min. 11,70 min. 23,41 min. 1,17 horas 5,85 horas 19,50 horas 1,63 días 16,25 días 48,76 días 15Mb 1,09 min. 5,46 min. 10,92 min. 32,77 min. 2,73 horas 9,10 horas 18,20 horas 7,59 días 22,76 días Red adecuada a la velocidad esperada y al tráfico estimado Estadísticas de descargas para determinar peticiones por productos y velocidades de transmisión de datos Por evaluar: - Red Iris - Red.es - Otros Estimación de ratios. Presupuesto coste anual de líneas. Diseñar un sistema de transferencia capaz de dar soporte a los usuarios y a los distintos niveles de servicio. Organizar productos en distintos grados de demanda. Presentación: Descargas de información CNIG- Protocolos de transmisión de datos: Establecer el protocolo de comunicación para satisfacer los diferentes niveles de servicio Protocolos - FTP - P2P - Otros Estimación del número de descargas de cada producto. Estudio de las distintas soluciones para satisfacer los diferentes niveles de servicio Presentación: Protocolos de transferencia de archivos. Formatos: Establecer formatos de intercambio de datos. Geotiff JPEG200 Formatos abiertos Otros Tendencia al uso de software libre y de formatos estándares y abiertos Quick locks de datos para visualizar rápidamente Evaluar la viabilidad de este tipo de formatos (Objetivo, no requisito) Nombres de los ficheros auto explicativos Metadatos: Planteamiento inicial de metadatos por familias o por productos Gestor documental: Plantilla de familia + Base de datos con peculiaridades de cada fichero Generación de metadatos por demanda Enlace con Sistema de Información Geográfica Alfresco () Otros Estudio de las soluciones planteadas. Definir estructura de los metadatos de los productos del PNT Prueba piloto Alfresco Presentación: Gestión documental. Página 4 de 5

5 Buisness Proccess Management (BPM): Establecer una Gestión normalizada de la producción distribuida y un Modelo organizativo. Modelos de datos Definir modelos Procesado de datos: Volumen de datos a procesar. Estimación de Teraflops / día. Gestión de acceso: Roles / modelos de participantes. Sistemas de gestión de permisos e identidades. Roles de usuarios: Matriz roles y permiso. Presentación: Gestión documental Grid computing Supercomputación Workstations dedicadas Establecer una hoja de registro Establecer un control de seguridad Estudiar las distintas soluciones Definir matriz de roles y permisos Establecer sistema de registro Difución: Página web con los contenidos y aplicaciones del PNT. Página web Diseño e implementación Presentación: WEB del PNT Diseminación de datos: A los distintos niveles de servicio. Política de datos del CNIG. Soluciones progresivas: IDEE WMS FTP (en los distintos niveles: CCAA,, CNIG ) Cronograma: - 1 julio: subir FTP. - 1 julio: descargas de internet (usuarios urgentes) julio: FTP 1 Tb con control de usuario y password. - 1 octubre: Test Alfresco. Estudio de las diferentes soluciones Página 5 de 5