ÍNDICE. Introducción... Capítulo 1. Conceptos de Big Data... 1

Transcripción

1 ÍNDICE Introducción... XIII Capítulo 1. Conceptos de Big Data... 1 Definición, necesidad y características de Big Data... 1 Aplicaciones típicas de Big Data... 4 Patrones de detección del fraude... 4 Patrones de Social Media... 6 Patrones de modelado y gestión de riesgo... 7 Big Data y el sector de la energía... 8 Big Data en el Call Center... 9 Capítulo 2. Componentes de una plataforma de Big Data Plataforma de código abierto Hadoop Hadoop Distributed File System (HDFS) Hadoop MapReduce Hadoop Common Aplicaciones de desarrollo en Hadoop Avro Cassandra Chukwa Flume Hbase (NoSQL) Hive Jaql Lucene Oozie Pig ZooKeeper Hadoop streaming Situar datos en Hadoop... 19

2 BIG DATA. TÉCNICAS, HERRAMIENTAS Y APLICACIONES Copia de datos básica Big Data y el campo de la investigación Capítulo 3. Big Data con herramientas de IBM IBM Power Systems Hardware Sistemas operativos Software System Herramientas Analytics con Power System IBM Solution for Hadoop Power Systems Edition IBM Solution for Analytics Power Systems Edition IBM BLU Acceleration Solution Power Systems Edition IBM AIX Solution Editions para Cognos y SPSS IBM PureData System for Operational Analytics (US) Big Data Solution with InfoSphere BigInsights and Streams IBM i para Business Intelligence (US) IBM DB2 Web Query for i Cloud Computing en Power Systems Virtualization Foundation Solutions IBM SmartCloud Entry for Power Systems IBM Power Systems Solution Edition for Cloud IBM Power Systems Solution Edition for Scale Out Cloud Herramientas Avanzadas en la nube IBM SPSS Modeler Usando el ratón Ayuda en Modeler El menú Herramientas de Modeler Ejemplo de trabajo con IBM SPSS Modeler Insertar un nodo fuente (origen) de datos en el área de trabajo Enlazar un nodo con una fuente de datos Controlar la carga de datos con un nodo Tabla Definir variables predictoras con el nodo Tipo Utilizar un nodo de modelado Ejecutar de una ruta Predecir con un modelo Guardar un modelo Nodos de orígenes de datos Nodos de operaciones con registros VI RC Libros

3 ÍNDICE Nodos de operaciones con campos Nodos para gráficos Nodos para modelado Nodos de resultado Nodos de exportación IBM SPSS Modeler e IBM SPSS Statistics Capítulo 4. Big Data con herramientas de Oracle Oracle y el Big Data Oracle Big Data Appliance Oracle Big Data Connectors Oracle NoSQL Database Oracle Exadata Database Oracle Exalytics In-Memory Machine Oracle Business Analytics Oracle Business Intelligence Foundation Suite Enterprise Performance Management Aplicaciones analíticas Information Discovery Advanced Analytics Nube Soluciones de datos rápidos de Oracle Oracle Social Cloud Capítulo 5. Big Data con herramientas de Microsoft Microsoft y el Big Data Solución Big Data de Microsoft Acceso a Hadoop Adaptación de Hadoop para la empresa Aprovechamiento de información El papel de SQL Server Los orígenes de Hadoop. La nube HDInsight Escalamiento con total flexibilidad a petición Análisis de datos semiestructurados, estructurados y no estructurados Desarrollo en el lenguaje favorito. Hardware Excel para visualizar datos de Hadoop Los clusters locales de Hadoop y la nube RC Libros VII

4 BIG DATA. TÉCNICAS, HERRAMIENTAS Y APLICACIONES HDInsight y HBase Conceptos esenciales en Azure HDInsight Datos de gran tamaño Apache Hadoop MapReduce HDInsight El ecosistema Hadoop en Azure Pig Hive Sqoop Herramientas de Business Intelligence y conectores Escenarios de datos de gran tamaño en HDInsight Introducción al uso de HDInsight de Azure Requisitos previos Configuración de un entorno local para ejecutar PowerShell Aprovisionamiento de un cluster de HDInsight Ejecución de un trabajo WordCount de MapReduce Conexión a las herramientas de inteligencia empresarial de Microsoft Uso de MapReduce con HDInsight Escenario Ejecución de la muestra con Azure PowerShell El código Java para el programa de recuento de palabras de MapReduce Carga de datos en HDInsight Carga de datos en el almacenamiento de blobs usando AzCopy Carga de datos en el almacenamiento de blobs usando Azure PowerShell. 131 Carga de datos en el almacenamiento de blobs usando el explorador de almacenamiento de Azure Carga de datos en el almacenamiento de blobs usando la línea de comandos de Hadoop Importación de datos a HDFS desde base de datos SQL o SQL Server usando Sqoop Administración de HDInsight con PowerShell Aprovisionamiento de un cluster de HDInsight Enumeración y visualización de clusters Eliminación de un cluster Concesión/Revocación del acceso a los servicios de HTTP Envío de trabajos de MapReduce Envío de trabajos de Hive Introducción al emulador de HDInsight Instalación del emulador de HDInsight VIII RC Libros

5 ÍNDICE Ejecución de un trabajo de MapReduce de recuento de palabras Ejecución de los ejemplos de introducción Los escenarios de datos del registro de IIS w3c Carga de los datos de ejemplo del registro de w3c Ejecución de trabajos de MapReduce de Java Ejecución de trabajos de Hive Ejecución de trabajos de Pig Recompilación de los ejemplos Almacenamiento de blobs de Azure Conexión con el emulador de almacenamiento Conexión con el almacenamiento de blobs de Azure Uso de un contenedor de almacenamiento de blobs de Azure como sistema de archivos predeterminado Ejecución de HDInsight PowerShell Uso del almacenamiento de blobs de Azure con HDInsight Arquitectura de almacenamiento de HDInsight Ventajas del almacenamiento de blobs de Azure Preparación de un contenedor para el almacenamiento de blobs Creación de un contenedor de blobs para HDInsight usando el Portal de administración Creación de un contenedor usando Azure PowerShell Archivos de dirección en almacenamiento de blobs Acceso a un blob usando Azure PowerShell Capítulo 6. Hive, Pig, Oozie, MapReduce y Excel en HDInsight Utilizando Hive con HdInsight Uso de Hive Carga de archivos de datos al almacenamiento de blobs Ejecución de las consultas de Hive usando PowerShell Utilizando Pig con HDInsight Uso de Pig Carga de archivos de datos al almacenamiento de blobs Descripción de Pig Latin Ejecución de Pig Latin usando PowerShell Utilizando Oozie con HDInsight Definición del flujo de trabajo de Oozie y el script de HiveQL relacionado Implementación del proyecto de Oozie y preparación del ejemplo Ejecución de proyecto de Oozie RC Libros IX

6 BIG DATA. TÉCNICAS, HERRAMIENTAS Y APLICACIONES Desarrollo de programas MapReduce de Java para HDInsight Desarrollo de un programa de MapReduce para el recuento de palabras en Java Prueba del programa en el emulador Carga de archivos de datos al almacenamiento de blobs de Azure Ejecución del programa de MapReduce en HDInsight de Azure Recuperación del resultado del trabajo de MapReduce Conexión de Excel a HDInsight con Power Query Instalación de Microsoft Power Query para Excel Importación de datos de HDInsight a Excel Conexión de Excel a HDInsight con Microsoft Hive ODBC driver Instalación de Microsoft Hive ODBC driver Creación de un origen de datos de Hive ODBC Importación de datos a Excel desde un cluster de HDInsight Capítulo 7. Business intelligence y Big Data con Microsoft SQL Server SQL Server 2014 y el Big Data Características de Big Data y Business Intelligence en Microsoft BI SQL Server PowerPivot para SharePoint PowerPivot para SharePoint Power View para SharePoint Server: crear, guardar e imprimir informes Crear un informe en Power View para SharePoint Server Abrir un informe existente de Power View Guardar un informe Permisos para Power View Exportar a PowerPoint desde Power View en SharePoint Actualizar los datos del informe Imprimir vistas en un informe de Power View para SharePoint Server Informes de Power View basados en modelos de datos Descripción de los objetos de modelo multidimensional de Power View Gráficos y otras visualizaciones en Power View Gráficos circulares Gráficos de dispersión y de burbujas Gráficos de líneas, barras y columnas Gráficos de barras Gráficos de columnas Gráficos de líneas Mapas X RC Libros

7 ÍNDICE Múltiplos: un conjunto de gráficos con los mismos ejes Matrices Tarjetas Mosaicos Analysis Services, Integration Services y Reporting Services Informes de Reporting Services (SSRS) SQL Server Integration Services Analysis services Capítulo 8. Herramientas de Big Data en SAS Hadoop y Big Data en SAS SAS, Hadoop y el proceso analítico Big Data y soluciones Hadoop de SAS Acceso y administración de datos de Hadoop Explorar, visualizar y tratar datos científicos Analizar y modelizar Implementar e integrar SAS/ACCESS interface to Hadoop Características Requisitos del sistema Software de SAS requerido SAS Data Management Características Requisitos del sistema SAS servidor de federación Características Requisitos del sistema Software SAS Base Características Requisitos del sistema Herramientas para explorar y visualizar datos científicos SAS Visual Analytics Características Requisitos del sistema. Entorno de servidor Requisitos del sistema. Entorno del cliente Software necesario Soporte al cliente de BI móvil SAS RC Libros XI

8 BIG DATA. TÉCNICAS, HERRAMIENTAS Y APLICACIONES SAS In-Memory Statistics for Hadoop Características Requisitos del sistema Índice analítico XII RC Libros