Por qué construir un Data Warehouse? Inteligencia de Negocios Una herramienta para la toma de decisiones SQL Server 2005 the BI Release

Transcripción

1 Inteligencia de Negocios Una herramienta para la toma de decisiones 2005 the BI Release Por qué construir un Data Warehouse? No es fácil obtener información! Contamos con montañas de información en la compañia, pero no tenemos acceso a ésta Ing. José Mariano Alvarez Jose.mariano.alvarez@sqltotalconsulting.com Requerimientos de consistencia y compatibilidad en la información Recibo reportes de diferentes personas y todos son contradictorios Por qué construir un Data Warehouse? Por qué construir un Data Warehouse? Relevancia de la información Democratización de la información Sólo estoy interesado en la información más relevante! Dependo de demasiadas personas para obtener la información que requiero! Todos saben que algunos datos no son confiables! Quiero información al día, confiable, relevante en mi escritorio. Adicionalmente, quiero herramientas que me muestren donde estan los problemas y las oportunidades Sin un Data Warehouse Data Warehouse / Sistemas Operacionales Actividades: Sist Operac Operacional Data Warehouse Informacional Periodo Tiempo: Actual Histórico Fuente : Trabajo: Usuarios: Interna Predecible Funcionarios Interna / externa Ad-hoc Trabajadores conoc 1

2 Business Intelligence Un Data Warehouse no es... El Reemplazo de los sistemas operacionales (OLTP) El Reemplazo de los reportes generados por los OLTP. Un Repositorio para datos que no se tengan, no se usen, o no sirvan. La Solución a todos los problemas Data Warehousing Data warehousing no es una meta, es un Proceso. Por qué Data Warehousing? Ventaja Competitiva Toma de Decisiones Conocimiento Percepción de Inteligencia de Negocios Soluciones Complejas Soluciones Costosas Más de lo que realmente necesitamos Número limitado de usuarios Se requiere mucho entrenamiento Se requieren nuevos procesos No hay certeza del resultado final Riesgo Número limitado de usuarios No provee resultados por anticipado No aprovecha infraestructura existente Costoso de personalizar y cambiar de acuerdo a las necesidades del negocio Información Bajo Impacto de Negocios Base de usuarios limitada Flexibilidad limitada Requiere nuevos procesos Ciclos largos de implementación Visión de Inteligencia de Negocios de Microsoft Mejorar a las organizaciones proveyendo entendimiento del negocio a todos los empleados llevándolos a tomar mejores decisiones, más relevantes y más rápido Plataforma y aplicaciones integradas Segura y personalizada Colaborativa Costo efectiva y completa Enfoque de BI de Microsoft Enfoque Valor Práctico Bajo Riesgo Impacto Inmediato Soluciones Escalables y Extensibles Obtiene lo que necesita Ambiente Colaborativo Aprovecha herramientas en uso Aprovecha procesos existentes Fácil de predecir el resultado Alto retorno de Inversión (ROI) Fácil despliegue y prueba de concepto Aprovecha herramientas en uso Fácil de personalizar Rápido Despliegue Se requiere poco entrenamiento Fácil de personalizar BI para las masas Ecosistema de Partners Soluciones de 3ros 2

3 Soporto Mis Soporto Mis Soporto Mis Decisiones Valor Estratégico Inteligencia de Negocios para la Empresa Estratégico Oportuno De fácil uso Vista de alto nivel Táctico Acceso a Colaboración Número de decisiones Operacional 24x7 BI Soluciones para Usuarios de la Información del Negocio Business Performance Management y poderoso Visualización de Toma de decisiones responsable y orientadas a la acción Transformar los datos valiosos de la empresa en información compartida para tomar mejores decisiones oportunas Ver datos y procesos de forma gráfica Microsoft Business Intelligence Completa, accesible, diseñada para uso de todos Aplicaciones s de Usuario (Office) Plataforma de BI (SQL) Microsoft Business Intelligence Una oferta integrada de principio a fin Aplicaciones Administración De Desempeño Plataforma BI Business Scorecarding (Business Scorecard Manager 2005) Integración Integration Scorecards,, Planeación (PerformancePoint Server 2007) Contenido y Colaboración (Office SharePoint Server 2007) Usuario Final (Excel 2007) 2005 RDBMS Office Avanzado (ProClarity 6.2) 2005 La Plataforma Completa e Integrada Arquitectura de BI Microsoft Sistemas Fuente ERP CRM s Empresariales Entrega de Información Cliente Portal s de BI Familiares y poderosas App. De 3ros Business Performance Management & LOB ETL Empresarial Data Warehouse de (, Data Mining) Dispositivos Data Visualization Project management Plataforma Integrada de BI Poderoso Empresariales Business Performance Management 3

4 Integration 2005 Qué es Integration? Un nuevo servicio de Business Intelligence de SQL 2005 El Sucesor de los DTSs La plataforma de una nueva generación de tecnologías de integración de datos de alto desempeño Integration Capacidades ETL de avanzada Plataforma ETL Empresarial Alto Rendimiento Alta Escalabilidad Confiable El mejor en su clase en facilidad de uso Ambiente de desarrollo amigable y completo Control de fuentes Debugging visual de control de flujo y datos Gran rango de transformaciones out-of-the-box Altamente extensible Personalización de tareas Personalización de transformaciones Personalización de fuentes de datos 2005 y el Unified Dimensional Model Qué es? Técnica de Multidimensional de BI On-Line Analytical Processing Diseñado para lograr un buen rendimiento en consultas ad-hoc para Inteligencia de Negocios Vista Multidimensional de los datos: modelo de datos intuitivo Fácil de usar por los analistas del negocio Navegar en los Velocidad de las consultas Esconde complejidad Riqueza analítica Multidimensional Dimensión, Miembro, Métricas Jerarquías caminos de agregación Dimensión Producto Canal de ventas Directa Bazar Bebidas Alimentos Mayoristas Minoristas Otro Miembros Categoría Región Cantidad de clientes Trimestre 200 Ventas 3,000,000 Utilidad 500,000 Producto Ciudad Mes Semana Crecimiento 15% Ene Feb Mar Abr Dimensión tiempo Producto Región Tiempo Industria País Año Métricas Oficina Día 4

5 XML/A or ODBO Retos en de Información Muchas Islas de Información Arquitectura poco Flexible BI Empresarial Hoy Fuentes de datos Modelo de Inconsistentes Cambios en las necesidades del Negocio M M Múltiples s Necesidades de acceso a datos dispersos Cómo puedo.. Construir una infraestructura analítica que soporte las necesidades diversas? Habilitar acceso fácil a la información? Habilitar navegación, exploración y descubrimiento de datos amigable al usuario? Hacer que la información correcta esté disponible a tiempo? Tool (3) BI Empresarial Desorden Enterprise BI con Unified Dimensional Model Fuentes de Modelo de Fuentes de Modelo de M M vs. M M Tool (3) Duplicados Modelos Duplicados Enterprise BI con Unified Dimensional Model Servidor Escalable, Alta performance Fuentes de Modelo de Fuentes de M M M M Un único modelo dimensional para todo el análisis y las necesidades de reportes relacionales SQL Optimizado para los principales plataformas de bases de datos El almacén más escalable API s OLE DB y XML/A automáticamente expone Web Service API soportado por los principales proveedores de BI 5

6 XML/A or ODBO XML/A or ODBO XML/A or ODBO XML/A or ODBO Cache M Transparente Fuentes de s son Virtualizados Fuentes de M M Cache Notifications Cache Proactive Caching Creación y administración automática de cache M M se vuelve transparente no se necesita administrar el almacenamiento M nunca más Relacionales disfrutan de performance como la M provee vistas del por áreas Perspectivas permite a usuarios o grupos vistas específicas de los mismos datos la Infraestructura de BI Fuentes de Qué es 2005? Cache Modelo lógico unificado para tanto relacional y con rendimiento superior y escalabilidad Un almacén de datos a administrar asegura consistencia de datos y bajo costo total de propiedad Experiencia de usuario excepcional con muchas herramientas de Microsoft y terceros SQL Server Teradata Oracle DB2 LOB Una sola versión de la verdad Enriquecimient o de datos y análisis avanzado Tiempo-Real y alto rendimiento Misión crítica Hojas de Cálculo s de BI Ad-Hoc sofisticados Tableros de Control Empresarial SQL Server Teradata Oracle DB2 LOB Cache Spreadsheets BI Front Ends Ad-Hoc Reports Rich Reports Dashboards 2005 con convergencia de Relacional y Funcionalidad Relacional SS2005 Esquema Flexible Acceso de datos en tiempo real Almacén de datos único Administración simple detallados Alto desempeño Orientado el usuario final Fácil navegación y exploración poderoso Semántica enriquecida 6

7 Infraestructura KPI Framework Centralizado de KPIs: Descripción de KPIs, valores y metas Estados (Bueno/Malo), Tendencias Visualizaciones Categorización y Scorecards Expuestos via XML/A API s s de debug de KPI Escalabilidad de Misión Critica Cálculos totalmente centralizados en el servidor No se hacen cálculos en el cliente No se transporta exceso de datos al cliente Cálculos en Cache Capacidad de crear cache de cálculos en disco Almacenamiento de dimensiones basadas en disco El tamaño de las dimensiones no está limitado por limites de memoria 150 millones de miembros probados Jerarquías basadas en atributos Quita la necesidad de duplicar información entre jerarquías que comparten atributos en común Algunos números de una aplicación real 4 Fact tables: Ventas, Compras, Inventario y tipo de cambio. 112 tablas en DSV: 4955 tablas en 150 Particiones 1,229,296,030 filas 58 jerarquías de usuario 677 atributos en 27 dimensiones 24 medidas Tamaño de Dimensiones: Cliente : 13,012,462 miembros Licencia: 23,109,084 miembros Tamaño de discos: Base de datos Relacional: 390 GB : 31.1 GB Dimensiones: 17.8 GB Fact data e índices: 13.3 GB Tiempos de Proceso: Dimensiones: 5.5 horas Lectura de datos: 4 horas Construcción de Índices: 1 hora. Ciclo de vida de los Perfiles de Usuarios soporta todo el ciclo de vida de los reportes, incluyendo Creación, Administración y Entrega. Analistas 5-10% de los usuarios Creación Administración Entrega Exploradores de Información 15-25% de los usuarios Consumidores de Información 65-80% de los usuarios 7

8 Creación de Creación Administración de Administración Los desarrolladores pueden crear reportes que van a ser publicados al Servidor de usando herramientas de Microsoft o de terceros que soporten XML Report Definition Language (RDL). Creación Administración Entrega Definición de reportes, carpetas y recursos son publicados y manejados en un Web Service. Los reportes administrados pueden ser ejecutados por demanda de usuarios o ser agendados y puestos en cache para un mejor desempeño y consistencia. Creación Administración Entrega Definición Administrado Acceso En línea Canales de Entrega Definición Administrado Acceso En línea Canales de Entrega Entrega de soporta dos tipos de entrega: por demanda ( pull ) y basado en eventos ( push ). Los usuarios pueden ver los reportes a través de web o suscribirse para que sean entregados por . Creación Administración Entrega Definición Report Administrado Acceso En línea Canales de Entrega Entrega Report Builder Una nueva herramienta de diseño de reportes ahhoc para Enfocada el usuario de negocios (usuario final) que quiere encontrar y compartir respuestas a preguntas interesantes Guiado por un modelo de negocios de los datos habilitando a los usuarios sin la necesidad que entiendan las estructuras de datos que están soportando el modelo No es una herramienta de análisis completo o un remplazo a las tablas dinámicas (pivot tables) Totalmente Integrado con 2005 Arquitectura Report Builder Fuentes de (SQL, OLE DB, XML/A, ODBC, Oracle, Custom) Navegador Office Web Service XML Report Server Aplicaciones Servicios de Seguridad (NT, Passport, Custom) 2005 Data Mining Procesamiento Consulta Seguridad Despliegue Agendas & Entrega Formatos de Salida (HTML, Excel, PDF, Customizado) Catálogo de SQL Objetivos de Entrega ( , SharePoint, Customizado) 8

9 Qué hace la Minería de? 2005 Conjunto completo de algoritmos Explora Encuentra Patrones Realiza Predicciones Decision Trees Clustering Time Series Introducido en 2000 Sequence Clustering Association Naïve Bayes Neural Net Microsoft Corporation. All rights reserved. This presentation is for informational purposes only. Microsoft makes no warranties, express or implied, in this summary. 9