Soporte Tecnológico

Soporte Tecnológico

1. Capa Batch (Batch Processing)

   • Procesamiento en Tiempo Real (Streaming)
     • Apache Kafka
       • Es
         • Plataforma de mensajería
       • Funcionalidades
         • Crear sistemas resilientes
         • Crear sistemas escalables
       • Usado en
         • Transmisión de datos y eventos en tiempo real
         • Ingesta y el procesamiento de flujos de datos
     • Apache Flink
       • Es
         • Framework de procesamiento de datos
       • Funcionalidades
         • Análisis en tiempo real de flujos de datos.
       • Usado en
         • Datos en tiempo real
     • Procesamiento en Tiempo Real (Streaming)
       • Bases de Datos NoSQL
         • Ejemplo
           • Cassandra
           • Redis
         • Funcionalidades
           • Manejar datos no estructurados
           • Acceso rápido y escalable a estos datos en tiempo real
   • Procesamiento de Datos en Lotes
     • Apache Spark
       • Es
         • Framework para procesamiento de datos
       • Funcionalidades
         • Procesamiento de datos en paralelo
       • Usado en
         • Procesamiento por lotes
         • Procesamiento en tiempo real
     • Apache Hadoop
       • Es
         • Herramienta de procesamiento de Big Data
       • Usado en
         • Procesamiento por lotes (análisis histórico)
       • Funcionalidades
         • Procesar datos de forma distribuida
         • Almacenar grandes volumenes datos
     • Procesamiento de Datos en Lotes
       • HDFS (Hadoop Distributed File System)
         • Es
           • Sistema de archivos distribuido
         • Funcionalidades
           • Almacenar grandes cantidades de datos
           • Almacenamiento en varios servidores
         • Utilizado en
           • Hadoop
       • Data Lakes
         • Es
           • Espacios de almacenamiento masivo
         • Funcionalidades
           • Guardar datos sin estructurar o semiestructurados
           • Almacenar grandes volúmenes de datos
       • Data Warehouses
         • Es
           • Bases de datos optimizada
         • Funcionalidades
           • Consultas rápidas y análisis
           • Almacenar datos estructurados, procesados
   • Capa de Almacenamiento y Bases de Datos
     • Datos almacenados en DataLake
       • Minería de Datos y Análisis Predictivo
         • Python y R
           • Son
             • Lenguajes de programación
           • Utilizados en
             • Minería de datos
             • Análisis predictivo
             • Modelos de Machine Learning
           • Librerias
             • Pandas
             • SciPy
             • TensorFlow
             • Keras
         • Apache Mahout
           • Es
             • Framework de minería de datos
           • Utilizado
             • Crear modelos de machine learning
             • Clustering
             • Clasificación para Big Data
         • Visualización de Datos
           • Tableau
             • Es
               • Herramienta de visualización de datos
             • Funcionalidades
               • Crear dashboards
               • Presentacion resultados del análisis de Big Data
           • Power BI
             • Es
               • Herramienta visualización de datos en tiempo real
             • Funcionalidades
               • Facil integracion con sistemas de Big Data
                 • Hadoop
                 • Spark
           • Gestión y Orquestación de Flujos de Trabajo
             • Apache Airflow
               • Funcionalidades
                 • Gestionar datos
                 • Programar y monitorear flujos de trabajo
             • Airflow
               • Funcionalidades
                 • Crear pipelines de datos

Images and files in the map