APACHE HIVE

APACHE HIVE

1. DEFINICION

   • HERRAMIENTA DE ANALISIS Y CONSULTA SQL DISEÑADA PARA PROCESAR Y ANALIZAR GRANDES CONJUNTOS DE DATOS DISTRIBUIDOS ALMACENADOS EN HADOOP
   • PROPORCIONA UNA INTERFAZ SQL PARA ESCRIBIR CONSULTAS Y TRANSFORMACIONES DE DATOS

2. OBJETIVO

   • FORMA EFICIENTE Y SENSILLA DE REALIZAR ANALISIS DE DATOS. GRANDES VOLUMENES DE DATOS ESTRUCTURADOS Y NO ESTRUCTURADOS ALMACENADOS EN HADOOP, CONSULTAS AS HOC, ANALISIS Y GENERACION DE INFORMES

3. INTEGRACION

   • APACHE SPARK
     • CONSULTA Y ANALISIS DE DATOS EN TIEMPO REAL - PROCESAMIENTO RAPIDO
   • APACHE PIG
     • REALIZAR TRANSFORMACIONES COMPLEJAS EN DATOS ALMACENADOS
   • HDFS
     • ACCESO A LOS DATOS DISTRIBUIDOS
   • APACHE HBASE
     • BASE DE DATOS DE HADOOP ORIENTADO A COLUMNAS
   • MAP REDUCE
     • EJECUTAR TAREAS DE CONSULTA EN PARALELO EN EL CLUSTER DE HADOOP

4. ARQUITECTURA

   • METASTORE
     • BASE DE DATOS QUE ALMACENA METADATOS Y ESUQEMAS DE LAS TABLAS DE HIVE. ESTRUCTURA DE TABLAS, TIPO DE DATOS, UBICACION DE DATOS INFORMACION DE PARTICION
   • DRIVER
     • INTERACCION CON EL CLIENTE Y COORDINACION DEL PROCESAMIENTO DE CONSULTAS.
   • COMPILADOR Y OPTIMIZADOR
     • TRANSFORMA CONSULTAS HIVEQL EN UN PLAN DE EJECUCION EFICIENTE. REALIZA OPTIMIZACIONES
   • MOTOR DE EJECUCION
     • EJECUTA LAS CONSULTAS EN EL CLUSTER.

5. LICENCIAMIENTO

   • LICENCIA DE APACHE 2.0 - CODIGO ABIERTO Y GRATUITO PARA SU USO Y MODIFICACION

6. MADUREZ

   • DESDE EL 2010. PRESENCIA SOLIDA. CONFIABLE Y ESTABLE

7. ACTIVIDAD

   • COMUNIDAD ACTIVA Y EN CONSTANTE DESARROLLO. VARIAS ACTUALIZACIONES Y MEJORAS

8. CLIENTES

   • NETFLIX, AMAZON, TWITTER, FACEBOOK, LINKEDIN

9. APLICACIONES

   • ANALISIS DE DATOS Y GENERACION DE INFORMES
   • BI PARA EXPLORAR Y ANALIZAR DATOS ESTRUCTURADOS Y NO ESTRUCTURADOS
   • PROCESAMIENTO DE REGISTROS MASIVOS
   • SEGMENTACION Y PERSONALIZACION DE EXPERIENCIAS DE USUARIOS EN APLICACIONES Y PLATAFORMAS
   • ANALISIS DE DATOS CIENTIFICOS EN EXPERIMENTOS, SIMULACIONES Y ESTUDIOS DE INVESTIGACION