Desafíos en Accesibilidad a la Información. Loreto Bravo Universidad de Concepción

Transcripción

1 Desafíos en Accesibilidad a la Información Loreto Bravo Universidad de Concepción

2 Asimetrías de Información El consejo de innovación de Chile ha destacado: Es necesario pasar de una economía basada en recursos naturales a una basada en conocimiento e innovación Un obstáculo para conseguirlo son las fallas de información. En particular: Asimetrías de información: problema encontrado en una transacción donde una parte tiene más o mejor información que otros. Sugieren como solución: generación de la información publicación de la información Bases de Datos II,

3 Qué se ha hecho? Ley sobre documentos electrónicos, firma electrónica y servicios de certificación de dicha firma (N , 2002) Ley de Transparencia (2009) Reparticiones de gobierno deben publicar sus datos en la Web Bases de Datos II,

4 Datos Públicos en Chile Biblioteca del Congreso Nacional Congreso Nacional Senado de Chile Cámara de Diputados Gobierno de Chile Diario Legislativo Oficial INE Servicio de Aduanas Dirección del trabajo Banco Central Ministerio de Hacienda CORFO Municipalidades Superintendencia de Valores y Seguros SERNAC Ministerio de Educación Ministerio de Salud CONICYT Superintendencia de Salud FONASA ISAPRES Subtel Servicio Electoral CONAF SERNATUR Instituto Geográfico Militar Transantiago Y muchos más! Bases de Datos II,

5 Datos Públicos en Chile Hay un creciente volumen de información que comienza a estar formalmente disponible Sin embargo, para que sea realmente accesible debe ser posible: localizar consultar agregar navegar Esto se ve dificultado en la situación actual por: heterogeneidad de los formatos de datos diferentes modelos de datos grandes volúmenes de información Bases de Datos II,

6 Congreso de Estudiantes, UBB 6

7 Buscando en la Web Busqueda por palabras claves Palabras claves + estructura site: filetype: colores filetype:ppt site:.cl define: intitle: Bases de Datos II,

8 Buscando en la Web Cual es la correlación entre partido político y voto a favor de proyectos de ley medioambientales? Cual es la relación a lo largo del tiempo de la tasa de interés fijada por el banco central y la utilizada en los bancos? Dado un código de un examen de salud y mi sueldo: que plan de salud me da una mejor cobertura? Bases de Datos II,

9 Dificultad: heterogeneidad de datos Congreso de Estudiantes, UBB 9

10 Dificultad: estructura de la web menos estructurado <comida> <nombre> Pavo A </nombre> <ingredientes> <ingrediente>1 Pavo</ingrediente> <ingrediente>tomillo</ingrediente> <ingrediente>jugo de limon</ingrediente> </ingredientes> <preparacion> </preparacion> </comida> Ingredientes Comida Ingrediente Pavo A 1 Pavo Pavo A Tomillo Pavo A Jugo limon Recetas Comida Preparacion Pavo A más estructurado Congreso de Estudiantes, UBB 10

11 Dificultad: grandes volumenes de información web superficial web profunda Bases de Datos II,

12 Dificultad: distintos tipos de usuario Bases de Datos II,

13 Dificultad: semántica Qué significa cada uno de los elementos de la tabla? "IPM General Variación Porcentual"="Ipm gral-var."? Bases de Datos II,

14 Dificultad: semántica Qué significan los códigos? Qué unidades corresponden a los distintos montos? Bases de Datos II,

15 Qué se puede hacer? Muchos de estos problemas ya han sido investigados en forma aislada en el área de bases de datos y manejo de información Sin embargo, el problema actual es a una escala, heterogeneidad y descentralización que no ha sido enfrentado antes Bases de Datos II,

16 Publicación de datos Publicar, hoy en día, no tiene ninguna regulación Solo los protocolos básicos de la Web (HTML, HTTP, URL) Recíen el 26 de Marzo del 2012 surgió una propuesta: Consulta pública Propuesta de Norma Técnica para Publicación de Datos en Chile Este problema puede (y debe!) ser tratado en forma sistemática Es necesario crear estándares para: publicar protocolos de acceso políticas de acceso metadatos para guardar información de procedencia, uso y contenido Bases de Datos II,

17 Vinculación de datos Con la aparición de la Internet la información comenzó a ser una colección de islas de documentos y servicios conectados por enlaces sin semántica Los primeros pasos hacia convertir la Web en una fuente de datos usables por aplicaciones es el enlace de datos en la Web con semántica entendible Ejemplo: RDFa All content on this site is licensed under <a rel="license" href=" a Creative Commons License </a>. Se necesita más: poder vincular datos no solo paginas! Ejemplo: linked data Bases de Datos II,

18 Consultas a los datos La noción de consultar y obtener respuestas lógicas es el estándar en el campo de base de datos, pero no en la Web. En la Web, no existe una forma de preguntar consultas estructuradas y lógicas a las fuentes de datos Proveedores que tienen contratos sobre MM$10 con el Ministerio de Salud? Los datos están disponibles, pero En distintas localizaciones En formatos tan diversos que hacen imposible cualquier procesamiento directo Posible solución: contratar a un programador para escribir los scripts adecuados, construir una base de datos común, y un lenguaje como SQL para consulta Bases de Datos II,

19 Consultas a los datos La navegación a través de los datos es un compañero necesario a la consulta. Para las fuentes de datos chilenas, esta es la forma de alcanzar los datos. El problema de consultar/navegar no es simple! La investigación en lenguajes de consulta como XQuery y SPARQL ha mostrado que no es imposible La solución no esta allí aun, pero abren el camino... Bases de Datos II,

20 Integración de datos Si se quiere que la información este realmente disponible a un usuario común, integración es una meta inevitable y crucial. Por ejemplo, información acerca de estudiantes de escuelas básicas y el sueldo por familia del Ministerio de Educación son necesarios en un proyecto de conectividad en la Agencia de Telecomunicación. Muchas veces es necesario: Tener una vista común Tener una forma común de consulta Agregar datos eficiencia en servidores necesidades del usuario, etc Transferir datos de un esquema a otro Bases de Datos II,

21 Qué se ha hecho? Existen varios proyectos que han tratado de atacar algunos de estos problemas: Publicación/Vinculación Linked data (Datos Vinculados) Freebase Ley de transparencia en Chile RDFa Consulta/Integración Técnicas tradicionales de integración de datos Dataspaces APIs Lenguajes de consultas para grafos Bases de Datos II,

22 Linked Data Surge dentro de la Web semántica Tiene cuatro principios (definidos por Tim Berners-Lee) Utilizar URIs para identificar los recursos publicados en la Web Utiliza HTTP URIs para que la gente pueda localizar y consultar estos recursos. Cuando alguien busque una URI, proporciona información útil utilizando algún estándar (RDF) Incluir enlaces a otras URI de forma que se potencie el descubrimiento de información en la Web. Presentación en TED: Bases de Datos II,

23 Linked data Información de los recursos se presenta usando el modelo de datos de RDF (resource description framework) Basado en tripletes (sujeto-predicado-obecto) Subject: Predicate: Object: owl:sameas 77 Pulp Fiction Bases de Datos II,

24 Navegando Linked Data Congreso de Estudiantes, UBB 24

25 Navegando Linked Data El URI de Concepción en la dbpedia es: Al acceder ese link el servidor identifica el formato requerido y redirecciona al documento correcto para representar esos datos: html (por ejemplo si la solicitud viene de un navegador) Lo que vemos al hacer click a n3 (rdf) ttl (rdf) Y otros

26 Navegando Linked Data Se puede recorrer siguiendo los links de source, target o predicate 26

27 Linked Data Los datos organizados de esa manera pueden ser explorados y procesados directamente por computadoras ya no estan dentro de documentos en donde su significado, utilización, formato, relaciones, etcétera, no son visibles para motores de búsqueda o aplicaciones de computadora. Bases de Datos II,

28 Como generar Linked data 1. Desde cero 2. Utilizando herramientas para RDFizar desde otros formatos 3. Utilizando herramientas que genera vistas en Linked data para bases de datos relacionales Ej: D2R 4. Wrappers para envolver APIs Bases de Datos II,

29 Mayo 2007 Bases de Datos II,

30 Abril 2008 Congreso de Estudiantes, UBB 30

31 Julio billiones de tripletes RDF vinculados por 142 million de links Congreso de Estudiantes, UBB 31

32 Septiembre 2011 Linking Open Data cloud diagram, by Richard Cyganiak and Anja Jentzsch.

33 Septiembre 2011 Distribución de tripletas por dominio Distribución de links por dominio Bases de Datos II,

34 Consultando Linked Data Lenguaje de consulta para RDF: SPARQL Recomendación de la W3C desde Enero 2008 Tan expresiva como algebra relacional No permite aprovecharnos de la estructura de grafo de linked data Mejor que no tener lenguaje de consulta! Bases de Datos II,

35 Freebase ( "Base de datos abierta, compartida con el conocimiento del mundo" Esquema es fijo y al igual que linked data, los datos son guardados como un grafo Construida por la gente Tiene un lenguaje de consulta MQL (Metaweb Query Language) Freebase es una empresa que genera ingresos a través de publicidad en su sitio. En el futuro esperan también tener ingresos ordenando datos propietarios Bases de Datos II,

36 Esquemas en Freebase Mas de 37 millones de temas Cada tema tiene tipos y propiedades Si se quiere ver como una base de datos relacional cada tipo es una tabla Ejemplo: tema: /music Tipo: /music/album Propiedad; Artist Congreso de Estudiantes, UBB 36

37 Lenguaje de consulta Freebase MQL Metaweb Query Language Ejemplo de consulta con API: :"/music/artist","name": Los Tres","album":[]} Para consumo humano se puede usar el link: Bases de Datos II,

38 Freebase Los datos pueden ser accedidos a través de API: utilizando lenguaje de consulta MQL puntos RDF: entregan los datos en formato linked data Volcado de una base de datos (database dump) Bases de Datos II,

39 Web de datos vs Web de documentos Congreso de Estudiantes, UBB 39

40 Desafío Hacer este mundo de datos accesible a todos y procesable por todos, de la forma como las maquinas de búsqueda y los navegadores lo hicieron con el mundo de documentos. Bases de Datos II,

41 Desafíos en Accesibilidad a la Información Loreto Bravo Universidad de Concepción