Migración y Ecosistema. 14 de Julio de 2009

Transcripción

1 Migración y Ecosistema 14 de Julio de 2009

2 Objetivo El objetivo de esta presentación es dar una mirada muy general a los principales problemas que surgen en la implementación de un sistema de gestión. Vamos a focalizar nuestra atención en los puntos más relevantes, mostrando las herramientas que permiten encontrar soluciones rápidas y eficientes.

3 Agenda IBM DataStage EDW Otras Fuentes de Datos Sistemas Operacionales Extracción Transformación y Carga Servidor Analítico Modelo de Gestión Visualización Monitoreo Modelamiento Datos / Metadata / Modelamiento Procesos de Negocio

4 Visión General Sistemas Operacionales: Fuente origen de los datos. Extracción, Transformación y Carga: Herramientas que ayudan a la movilización de los datos desde las fuentes de origen hacia el sistema de gestión. Servidor Analítico: Servidor Sybase IQ. Modelo de gestión: Modelo de datos tipo estrella, copo de nieve o constelación. Visualización: Herramientas que permiten extraer la información de nuestro sistema de gestión. Monitoreo: Herramientas que permiten revisar el estado de salud del servidor de gestión, mediante el monitoreo de los recursos de nuestro servidor Sybase IQ y con ello obtener buenos tiempos de respuesta. PowerDesigner: Herramienta que permite modelar un Sistema de Gestión, permite extraer los modelos de datos desde los sistemas operacionales, modificarlos y crear las tablas en Sybase IQ.

5 Migración y Ecosistema IBM DataStage EDW Otras Fuentes de Datos Sistemas Operacionales Extracción Transformación y Carga Servidor Analítico Modelo de Gestión Visualización Monitoreo Modelamiento Datos / Metadata / Modelamiento Procesos de Negocio

6 PowerDesigner El producto PowerDesigner permite: Extraer los modelos de datos desde más de 50 tipos de Bases de Datos distintas Visualizar los modelos de datos de forma gráfica Permite fácilmente hacer modificaciones a los modelos Genera de forma sencilla los script de creación del modelo físico. PowerDesigner facilita el modelamiento todo el Sistema de Gestión: Permite realizar un Diseño Conceptual, independiente de la tecnología a utilizar. Permite realizar un Modelamiento de Requerimientos de Negocio, con Diagramas UML para los Casos de Uso. Permite el modelar el Sistema de Gestión como un flujo de procesos BPM, generando diagramas BPEL, definiendo roles y responsabilidades.

7 Migración y Ecosistema IBM DataStage EDW Otras Fuentes de Datos Sistemas Operacionales Extracción Transformación y Carga Servidor Analítico Modelo de Gestión Visualización Monitoreo Modelamiento Datos / Metadata / Modelamiento Procesos de Negocio

8 Servidor Sybase IQ Servidor Analítico SYBASE IQ, especialmente diseñado para sistemas que requieren consultar grandes volúmen de datos, obteniendo inmejorables tiempos de respuesta.

9 Migración y Ecosistema IBM DataStage EDW Otras Fuentes de Datos Sistemas Operacionales Extracción Transformación y Carga Servidor Analítico Modelo de Gestión Visualización Monitoreo Modelamiento Datos / Metadata / Modelamiento Procesos de Negocio

10 Herramientas ETL Traspasar datos hacia un Sistema de Gestión no es una tarea sencilla, los modelos de datos entre sistemas cambian, por ejemplo: Un Sistema Operacional puede estar contenido en un modelo en tercera forma normal y un sistema de gestion en un modelo tipo estrella. Por tal motivo los registros deben ser previamente transformados antes de su ingreso al sistema de gestión. Esta tarea requiere de un alto consumo de tiempo y gran capacidad de procesamiento, lo cual conlleva un elevado costo.

11 Herramientas ETL Resolviendo el problema: Mediante código SQL y comandos Unix: Tiene la ventaja de ser un método por todos conocido, pero con muchas desventajas, es muy difícil su mantenimiento y modificación, no existe posibilidad de incorporar meta-información, muy compleja la implementación de funciones avanzadas de transformación y no es fácil la programación del control y manejo de alertas. Mediante la Construcción Procesos con Herramientas ETL: Estos son ambientes especializados, que permiten la definición y manipulación de objetos típicos de aplicaciones de intercambio de datos, poseen facilidades para su mantenimiento y la modificación de los procesos, permite generar meta-información y su objetivo principal es facilitar el desarrollo y la reutilización de aplicaciones que migran datos aplicando transformaciones.

12 Herramientas ETL

13 Herramientas ETL

14 Migración y Ecosistema IBM DataStage EDW Otras Fuentes de Datos Sistemas Operacionales Extracción Transformación y Carga Servidor Analítico Modelo de Gestión Visualización Monitoreo Modelamiento Datos / Metadata / Modelamiento Procesos de Negocio

15 Visualización La obtención de información desde un Sistema de Gestión implementado con Sybase IQ, se puede lograr mediante la utilización de cualquier herramienta que utilice el lenguage ANSI SQL e implemente los estándares de conexión ODBC y JDBC.

16 Visualización

17 Visualización

18 Visualización

19 Migración y Ecosistema IBM DataStage EDW Otras Fuentes de Datos Sistemas Operacionales Extracción Transformación y Carga Servidor Analítico Modelo de Gestión Visualización Monitoreo Modelamiento Datos / Metadata / Modelamiento Procesos de Negocio

20 Monitoreo El objetivo es que el Sistema de Gestión funcione correctamente siempre y para ello debemos entender que los recursos con los cuales se cuenta no son ilimitados. Con Bradmark Surveillance es posible: Monitorear Servidores en tiempo real (Sybase IQ, Sybase ASE, Sybase Replication Server, Oracle, SQLServer, DB2 y sus Sistemas Operativos. Detectar la tasa de crecimiento de cada uno de los recursos. Detectar las consultas que hacen un uso intensivo del sistema. Anticipar las acciones mediante alertas tempranas. Visualizar el comportamiento histórico del servidor mediante la obtención de reportes.

21 Monitoreo Bradmark Surveillance

22 Monitoreo

23 Consultas? IBM DataStage EDW Otras Fuentes de Datos Sistemas Operacionales Extracción Transformación y Carga Servidor Analítico Modelo de Gestión Visualización Monitoreo Modelamiento Datos / Metadata / Modelamiento Procesos de Negocio

24 FIN Muchas Gracias