Sistemas de Big Data: Módulo 7

Sistemas de Big Data: Módulo 7

1. Apache Spark

   • librerías que componen Spark Core
     • Spark SQL: permite integrar comandos y componentes relacionales junto con programación funcional
     • Spark Streaming: procesa transmisiones de datos en tiempo real
     • Spark MLiB: Librería de Spark para Machine Learning
     • Spark GraphX: es la API de procesamiento en paralelo de grafos
     • Spark Core es el motor de ejecución de procesos. Presenta toda la implementación de Spark
       • Lenguajes en los que puede trabajar Spark
         • R
         • Python
         • Scala: el lenguaje en el que fue construido
         • SQL
         • Java
       • Características
         • Trabaja en memoria, de forma paralela
         • Permite la interacción con distintos entornos
         • Más veloz que MapReduce
         • Usa RDD como estructura de datos
       • Elaborado por: María Susana Espinosa Soto