Arquitectura para implementar Big Data

Arquitectura para implementar Big Data

1. Origen: Dispositivos, aplicaciones móviles o IoT

   • Apache Kafka
     • Spark Streaming
       • HDFS, Hive
         • Informes de resultados
         • HDFS, Hive
           • Almacenamiento de datos
           • Apache Drill
             • Análisis de datos a gran escala
             • Power BI, Qlik, Tableau, Grafana
               • Visualización y reporte de datos
       • Procesamiento de datos
     • Inserción de grandes volúmenes de datos

2. Origen: Base o archivos de datos

   • Apache Sqoop
     • HDFS, Parquet
       • Apache Spark
         • Procesamiento de datos
         • HDFS, Hive
       • Almacenamiento de datos
     • Inserción de datos

Images and files in the map