Arquitecturas Empresariales y de Integración. Sesión #5: Arquitectura de Datos

Transcripción

1 Arquitecturas Empresariales y de Integración Sesión #5: Arquitectura de Datos Departamento de Ingeniería de Sistemas y Computación Jorge Arias jor-aria@uniandes.edu.co Bogotá, 2011

2 1. Contexto 2. Motivación 3. Arquitectura de datos 4. Conclusiones 2

3 La estrategia de negocio define la esencia y estructura de todo proyecto de TI Estrategia de Negocio Define Define Define Procesos de negocio Modelo de información Aplicaciones Tecnología Iniciativa o Proyecto #1 Iniciativa o Proyecto #2 Iniciativa o Proyecto #N Cultura y Gestión del Cambio Gobernabilidad 3

4 Enfoque para levantar EA 2 1. Levantar AS-IS 2. Determinar TO-BE 3. Identificar brechas 4. Priorizar 5. Elaborar roadmap Arquitectura de negocio 6 1 MOTIVADORES DE NEGOCIO 3 1. Levantar AS-IS 2. Determinar TO-BE 3. Identificar brechas 4. Priorizar 5. Elaborar roadmap Arquitectura de datos e Información 4 1. Levantar AS-IS 2. Determinar TO-BE 3. Identificar brechas 4. Priorizar 5. Elaborar roadmap Arquitectura de Aplicaciones Levantar AS-IS 2. Determinar TO-BE 3. Identificar brechas 4. Priorizar 5. Elaborar roadmap Arquitectura Tecnología

5 1. Contexto 2. Motivación 3. Arquitectura de datos 4. Conclusiones 5

6 Motivación: Requerimientos del día a día: Vistas 360 Cerca del 75% de las empresas son incapaces de generar un vista 360 de sus clientes Gartner 2007 OLTP: TC, Credito, Hipotecas, etc. Información de productos DWH Perfil & Segmento del cliente Dashboards OLTP: Seguimientos a problemas (CRM) Indicadores de gestión Seguimiento de PQRs Screen shot tomado de Novell IDM - Novell Derechos Reservados

7 Motivación: Requerimientos del día a día: Tableros de control Sumarizaciones semanales NTR: Near To real time Tiempo Real Screen shot tomado de Novell IDM - Novell Derechos Reservados

8 Motivación: Integración horizontal ( Cadenas de valor Inter-organización) Dell: Order 2 Cash Business Process Cliente Pago Factura Cuenta Orden Dell China Logistics DHL Citibank Customer Care Inc Capturar Orden Aprovisionar Orden Entregar Orden Facturar & Recolectar Pago Evaluar Prestación. servicio 8 Necesitamos estructurar dialectos de negocio Basado en modelos canómicos que den flexibilidad

9 Motivación: De donde partimos (1) Cliente Cobol Oracle SAP SQL Server MS-Access Excel

10 Motivación: De donde partimos (2) Cliente Cliente Cliente Cliente Cliente Cliente Cobol Oracle SAP SQL Server MS-Access Excel

11 Motivación: De donde partimos (1) Sistemas de informació Siebel SAP Vision + FACT Systematics Remedy Trouble Ticket Cliente RW RW RW R RW R Cuentas R RW RW RW Tarjetas RW RW RW Facturas R RW RW R R Pagos R RW RW RW Como podremos ir desde Múltiples puntos de entrada de la misma información a una simple vista consistente del negocio? Entidades de negocio Más de un sistema es dueño de la misma entidad: Problemas de calidad e inconsistencia de datos.

12 Arquitectura de datos e información Considera: Identificar las principales entidades de negocio de la organización (Cliente, Producto, Servicio, etc.) Identificar las aplicaciones & procesos dueños de las entidades de negocio, tanto en su modelo actual como de referencia Duplicidad de modelos de datos Identificación de problemas calidad y duplicidad de datos Definición/adopción de un dialecto genérico para comunicar sistemas (SIM, IFX, Accord, Swift, TMF-ML, etc.) Tranformación Especifico Genérico Especifico Identificación y definición de los KPI (Key Performance Indicators) Dimensiones Valores objetivos y tolerancias 12 Rol de un ODS como habilitador de una estrategia centrada en el cliente Back..

13 1. Contexto 2. Motivación 3. Arquitectura de datos 4. Conclusiones 13

14 1. Modelo de entidades de negocio (1) Entidades genericas ( Sustantivos) que determinan el que hacer del negocio. ( Modelo de objetos genericos) En la realidad existen diferentes versiones e instanciaciones de la misma entidad de negocio en diferentes sistemas. Defínición Cliente ERP (Objeto Especifico) Definición Cliente CRM (Objeto Especifico) Definición cliente Generica (Objeto genéricos) Definición Cliente Facturador (Objeto Especifico) 14 10/0 3/20

15 1. Modelo de entidades de negocio (2) Semantica de las relaciones Entidades de negocio 10/0 3/20 15

16 2. Asignación de sistemas & Procesos dueños de los datos (1) Identificación de sistemas dueños de datos. Sistemas de información Siebel SAP Vision + FACT Systematics Remedy Trouble Ticket Cliente RW RW RW R RW R Cuentas R RW RW RW Tarjetas RW RW RW Facturas R RW RW R R Pagos R RW RW RW Entidades de negocio Más de un sistema es dueño de la misma entidad: Problemas de calidad e inconsistencia de datos. 16

17 2. Asignación de sistemas & Procesos dueños de los datos (2) Identificación de sistemas dueños de datos. Siebel SAP Vision + FACT Systematics Remedy Trouble Ticket Cliente RW R R R R R Cuentas R RW R R Tarjetas RW R R Facturas R RW R R R Pagos R RW R R 17 Un sólo dueño de la entidad: SAP debe publicar un servicio de datos que permite manejar el ciclo de pagos

18 3. Modelos canónicos Empleado Factura Cuenta Balance Tarjeta Credito Sistema de Cuentas de Ahorro Sistema de Tarjeta de Credito IFX, FIX Sistema de Credito Hipotecario Empleado Factura Cuenta Balance Tarjeta Credito Empleado Factura Cuenta Balance Tarjeta Credito

19 4. KPI: Procesos de negocio medibles - Contexto KPI (Key Performance Indicador) Medida de desempeño (Resultado & Oportunidad de mejora) Los KPI puede ser monitoreados a través de: BI(Business Intelligence): Valorar el estado presente del negocio comparándolo contra el pasado (Ventana de datos superiores a un mes) BAM(Business Activity Monitoring): Monitoreo cercano al tiempo real, sólo tiene en cuenta el estado presente con visibilidad máximo un mes en el pasado. Los KPIs se deben definir de acuerdo al modelo SMART S: Specific (Simple) M: Measurable ( Medible y de significado para la organización) A: Attainable (Accionable, lograble) R: Relevant(Orientado al resultado) T: Time bound( Orientado al tiempo, marcos de tiempos reales y claros) Métricas: Umbrales dentro de los cuales se considera el resultado de un indicador malo (rojo), regular (amarillo) y bueno

20 4. KPI: Procesos de negocio medibles (1) Alertas de negocio Eventos Métricas de negocio Tablero de control (Dashboard) Numero de créditos de consumo otorgados en Ciudad de Guatemala en la última semana? Dimensión: Geografía Ciudad de Guatemala Fact: Créditos Otorgados Dimensión: Tiempo Último año Dimensión: Tipo Crédito Consumo Modelo Estrella

21 4. KPI: Procesos de negocio medibles (2) Canales Presenciales Agencias Asesores Fuerza Ventas 35 Créditos de consumo aprobados en las ultimas dos horas en Ciudad de Guatemala BAM: Business Activity Monitoring Evento: Tipo de crédito, Fecha Evento: Geografía Evento: Otorgado Repositorio de eventos de negocio Gestionar Solicitud de crédito de consumo Capturar Solicitud Digitalizar/Digitar Solicitud Realizar Análisis crediticio & Riesgo

22 4. KPI: Procesos de negocio medibles (3) Generar campaña de mercadeo Sí créditos de consumo otorgados en los últimos dos días < 100 Modelo Pro-activo frente a eventos Evento: Tipo de crédito, Fecha Gestionar Solicitud de crédito de consumo Evento: Geografía Evento: Otorgado Repositorio de eventos de negocio Capturar Solicitud Digitalizar/Digitar Solicitud Realizar Análisis crediticio & Riesgo

23 5. Patrones Arquitectura de Datos (0) Integración GRANDES BatchVOLUMENES DE Datos Aplicación INFORMACIÓN Linea Sincróna Asincrona Presentación Screen Scrapper Acomplamiento fuerte Acomplamiento débil 23 ETL, ELT, DB Link EII, ODS Sockets RPC /DCOM RMI CORBA WebServices EAI MOM / JMS / MQ Series Conectores HTTP Conectores Telnet

24 5. Patrones Arquitectura de Datos (1) Grandes Volúmenes de Información ERP CRM ERP CRM Ordenes Bus de Integración Ordenes Facturador Facturador Punto a Punto (N * (N-1)) Interfaces EAI (N Interfaces)

25 5. Patrones Arquitectura de Datos (2) Integración en batch de clientes ETL (1) CRM ETL (2) ERP ETL (5) ETL (6) ETL N*(N-1) (9) Interfaces ETL (10) ETL (7) ETL (8) ETL (3) Facturador ETL (4 Ordenes Situación inmanejable

26 5. Patrones Arquitectura de Datos (3) Datos inconsistentes CRM Extracción Transformación Carga ERP Las duplica (off-line) / Las lee en línea Tablas de listas de valores Funciona bastante bien. Sin embargo, puede tener problemas de desempeño por movimientos de data entre el engine y el target MOTOR ETL

27 5. Patrones Arquitectura de Datos (4) Fuente de datos compartida, accedida por varios sistemas en producción(oltp) y la cual consolida información de diversas fuentes de datos o sistemas tanto OLAP, como OLTP. 5 Minutos NRT Aplicación 1 Aplicación 2 ODS 2 Horas CRM Aplicación 3 Copia compartida de datos. ERP Aplicación 4 Integración por base datos 5 Días DWH

28 5. Patrones Arquitectura de Datos (5) Sistema B Sistema C Sistema A Sistema D Si quisiéramos llevar el sistema A a un data center? Acaso los DB Links no s generan un acoplamiento demasiado fuerte? Sistema E

29 5. Patrones Arquitectura de Datos (6) Manejador Ordenes Qué sucede sí al pasar grandes volúmenes de información falla la comunicación? Aplico nuevamente todos los registros? Como puedo validar en qué registro voy?

30 5. Patrones Arquitectura de Datos (7) Vistas consolidadas de datos (Clientes, Empleado,etc.) Portal Página Web (Visiones centralizadas) Ficha del cliente (Vista compuesta de datos) Actualizaciones Consulta SOAP JMS RMI MQ Series Remoting File Bus de Servicios Servicio de Información (Vista 360 ) ODS Sincronización CIF CRM 30 Systematics Sistemas operacionales DHW

31 5. Patrones Arquitectura de Datos (8) Agregación virtual de datos Canales Ciclo de vida del cliente Servicio de datos Entidad Cliente 31 CRM BI ERP PQR

32 5. Patrones Arquitectura de Datos (9) Aplicaciones Clientes (Canales) Orientado a la consulta Servicio(Interfaz) :Ciclo de vida del cliente EII: Enterprise Information Integration Agregador Virtual de información Metadata: Schema Virtual Sub-queries Sub-queries Sub-queries Sub-queries Adapter Adapter Adapter Adapter ERP CRM Facturador Ordenes

33 5. Patrones Arquitectura de Datos (10) OLTP Canales Portal IVR Internet ATM CRM ERP FACT. SOA SOA SOA EL-T EL-T EL-T Enterprise Service Bus (ESB) EL-T Soporte a toma de decisiones Reportes SOA Dashboards MDM (Clientes, Productos, Proveedores, etc) ETL / EL-T DWH Ad Hoc Queries Cubos Analisis OLAP

34 1. Contexto 2. Motivación 3. Arquitectura de datos 4. Conclusiones 34