Almacenes de datos espaciales y SOLAP utilizando software libre. Leonardo Pandolfi González

Transcripción

1 Almacenes de datos espaciales y SOLAP utilizando software libre Leonardo Pandolfi González

2 Agenda Por qué SOLAP? Modelo Multidimensional Operaciones OLAP Arquitectura Esquema conceptual (caso práctico) Definición de los cubos (esquema XML) Despliegue de operaciones Trabajo futuro Conclusiones 2

3 Por qué SOLAP? Spatial On-line Analytical Processing Despliegue simultáneo y manipulación dinámica de datos espaciales Utilización de mapas, tablas y gráficos en forma sincronizada Integración de datos espaciales y convencionales Cuáles provincias registraron la mayor incidencia de cáncer de próstata entre el año 2000 y el 2005? Carácter interdisciplinario Interfaz gráfica intuitiva 3

4 Modelo Multidimensional 4

5 Operaciones OLAP: Drill-down 5

6 Operaciones OLAP: Roll-up 6

7 Operaciones OLAP: Slice-and-dice 7

8 Operaciones OLAP: Pivot 8

9 Arquitectura Capa de presentación GeoOLAP (Despliegue de tablas, gráficos y mapas) Capa de lógica GeoMondrian (Modelo multidimensional, Servidor OLAP) Capa de datos PostgreSQL + PostGIS (Almacén de datos espacial) 9

10 Capa de datos Capa de presentación GeoOLAP (Despliegue de tablas, gráficos y mapas) Capa de lógica GeoMondrian (Modelo multidimensional, Servidor OLAP) Capa de datos PostgreSQL + PostGIS (Almacén de datos espacial) 10

11 Esquema conceptual (caso práctico) Cubo Dimensión Medidas 11

12 Esquema conceptual (caso práctico) 12

13 Esquema conceptual (caso práctico) 13

14 Esquema conceptual (caso práctico)

15 Capa de lógica Capa de presentación GeoOLAP (Despliegue de tablas, gráficos y mapas) Capa de lógica GeoMondrian (Modelo multidimensional, Servidor OLAP) Capa de datos PostgreSQL + PostGIS (Almacén de datos espacial) 15

16 Características de GeoMondrian Desarrollador Base Lenguaje de consulta Definición de cubos Almacenamiento de resultados Spatialytics Mondrian (Pentaho) MDX Esquema XML Memoria RAM 16

17 Definición de los cubos (esquema XML) <Schema> Definición Asociación de dimensión con con una la tabla jerarquía de 3 física niveles: Dimensión Provincia espacial? Se Inicio agrega y fin la del esquema Inicio y fin Cantón propiedad del cubo Geometry, Distrito indicando la columna Definición de medidas y su función de agregación <Cube name="cancer"> <Table name="cancer_fact"/> <Dimension name="distritos" foreignkey="codigo_distrito"> <Hierarchy hasall="false" primarykey= codigo_distrito"> <Table name="geografia"/> <Level name="provincia column="nombre_provincia" type="string /> <Property name="geom column="geometria_provincia" type="geometry" /> <Level name="cantón column="nombre_canton" type="string" /> <Property name="geom column="geometria_canton" type="geometry" /> <Level name="distrito" column="nombre_distrito" type="string" /> <Property name="geom column="geometria_distrito" type="geometry" /> </Hierarchy> </Dimension> <Measure name="casos" column="casos" aggregator="sum"/> <Measure name="muertes" column="muertes" aggregator="sum"/> </Cube> </Schema>

18 Capa de presentación Capa de presentación GeoOLAP (Despliegue de tablas, gráficos y mapas) Capa de lógica GeoMondrian (Modelo multidimensional, Servidor OLAP) Capa de datos PostgreSQL + PostGIS (Almacén de datos espacial)

19 Despliegue de operaciones: drill-down 19

20 Despliegue de operaciones: roll-up 20

21 Despliegue de operaciones: slice-and-dice 21

22 Despliegue de operaciones: pivot 22

23 Despliegue de operaciones: combinación de dimensiones espaciales 23

24 Características adicionales de GeoOLAP Cubos virtuales Medidas calculadas Simples: cambio de moneda Complejas: tasa de mortalidad por tipo de cáncer Medidas por aditividad Aditiva Semiaditiva No aditiva 24

25 Trabajo futuro Simplificación de geometrías Combinación de datos espaciales Verificación de orientación y relaciones topológicas 25

26 Trabajo futuro Simplificación de geometrías Combinación de datos espaciales Verificación de orientación y relaciones topológicas 26

27 Trabajo futuro (2) Medidas espaciales Vistas materializadas Nueva definición de los cubos en Mondrian 4 Reescribir o transformar el esquema Mejoramiento de la interfaz Sencilla y funcional: amigable con el usuario Múltiples medidas en una misma consulta Utilización de funciones espaciales 27

28 Conclusiones Exploración de datos espaciales para ampliar posibilidades de análisis en la toma de decisiones Nuevas opciones a los usuarios no expertos en OLAP y SOLAP Interfaz es fundamental Actualmente, opciones SOLAP open-source son limitadas Espacio para el desarrollo de una herramienta SOLAP más funcional y gratuita Más detalles: D. Bogantes y L. Pandolfi, Spatial Data Warehouses and SOLAP Using Open-Source Tools. Simposio de Sistemas Innovadores de Datos, CLEI 2013, Vargas, Venezuela. 28