Big Data para Inteligencia de Negocio

Big Data para Inteligencia de Negocio

1. Planificación del Proyecto

   • Idea clara de como alcanzar el objetivo del proyecto
     • Arquitecturas
       • HDFS/MapReduce
         • NoSql
           • NewSql
             • Datos conocidos, gran cantidad de metadatos para análisis y tiempo suficiente.
           • Formato variable dentro NoSql, metadatos y consultas especificas.
         • Variedad de fuentes de datos, almacenamiento original y procesamiento rápido
     • Herramientas
       • Flume
         • Pig
           • Crear programas MapReduce similar a SQL.
           • Storm
             • Procesamiento Streaming de alto rendimiento
             • SPARK
               • Procesamiento general de datos en memoria de alto rendimiento
               • Pentaho Data Integration
                 • Open Source para definición ETLS forma grafica
                 • DRILL
                   • Consultar multiples datos NoQl
         • Recoger datos y fuentes de Streaming

2. Definición de Etapa de Datos

   • Requisitos de Análisis
     • Funcionalidades, tiempo y calidad
       • Optimizar procesos y mejorar eficiencia, monitorizar y respuesta automática, interpretar tendencias y estudio de comunidades
         • Gestión de las Fuentes:
           • Internas por Lotes
             • Control total, hacer pruebas
             • Externas por Lotes
               • Bajo control, limitar, cambiar, extraer información
               • Sensores y Tiempo real
                 • Nuestro control o terceros, información en el momento y puede generar errores.

3. Adición de Valor a los Datos

   • Exploración y Estructuración
     • Big Data Warehouses
       • Modelo Multidimensional aplicado a big data
         • Identificar medidas y hechos, candidatos a fusión, repetición iterativa
           • Varias iteraciones, jerarquías y baja latencia.

4. Diseño de Visualización

   • Interpretación de Datos
     • Adaptar, re-analizar, buscar
       • Relaciones: Diagramas de queso, mapas de nodos.
         • Distribuciones: mapa de árbol, estallido solar, burbujas, mapas de calor.
           • Localización: mapas geográficos.

Imagens e arquivos do mapa