BIG DATA

BIG DATA

1. DEFINICION

   • Conjunto de datos cuyo tamaño esta mas alla de las capacidades de las herramientas tipicas de software de bases de datos para capturar, almacenar, gestionar y analizar.
     • Nueva generacion de tecnologias, arquitecturas y estrategias diseñadas para capturar y analizar grandes volumenes de datos provenientes de multiples fuentes heterogeneas a una lata velocidad con el objeto de extraer valor economico de ellos.
     • En suma la definicion puede variar seguna las caracteristicas de las empresas.

2. TIPOS DE DATOS

   • Big Data es diferente a las fuentes de datos tradicionales.
     • Datos estructurados.
       • Datos con formato o esquema fijo que poseen campos fijos.
         • Son los datos de las BDs, hojas de calculo y los archivos.
     • Datos semiestructurados
       • Tiene flujo logico y un formato que puede ser definido pero no es facil su comprension por el usuario.
     • Datos no estructurados
       • Son datos sin tipos predefinidos.
         • Se almacenan como documentos y objetos sin estructura uniforme y se tiene poco o ningun control sobre ellos.

3. INTEGRACION DE DATOS

   • Facilita a la organizacion la combinacion de los Big Data con los datos transaccionales tradicionales para generar valor y conseguir la mayor eficacia posible.
     • Supone una gran oportunidad de negocio para organizaciones y empresas.

4. CARACTERISTICAS

   • Volumen
   • Velocidad
   • Variedad
   • Veracidad
   • Valor

5. TAMAÑO DE BIG DATA

   • IDC predice que el universo digital se multipiclara por un factor de 44 para llegar a 35 zettabytes en 2020.
     • Su indicador final dependera del analisis de los datos, como se realizara y como mejorara el negocio.

6. EXPLOTACION

   • En la ultima decada redes sociales, movilidad, caida del coste de banda ancha, interconexion y cloud computing.
     • Producen una ingente cantidad de datos que necesitan ser captados, almacenados, procesados y analizados.

7. ORIGEN DE LA FUENTE DE DATOS

   • El gran volumen de datos procede de numerosas fuentes
     • Especialmente de medios sociales, maquina a maquina, transaccion de grandes datos, biometria, datos generados por las personas.
       • Tambien numerosas empresas de todo el mudno ya tenian almacenados petabytes de datos.
     • Numerosas fuentes tanto tradicionales como nuevas alimentan a los Big Data

8. ARQUITECTURA

   • Se compone de
     • Arquitectura de Big Data
       • Consta de 16 capas
         • 1. Fuentes de Big Data, 2. Componentes de Hadoop. 3. Analiticade flujo continuo. 4. Bases de Datos. 5. Integracion de Big Data. 6. Analitica de textos. 7. Descubrimiento de Big Data. 8. Calidad de Big Data. 9. Metadatos. 10. Gestion de politicas de informacion. 11. Gestion de datos maestros. 12. Data warehouses y data marts. 13. Analitica y reporting de Big Data. 14. Seguridad y privacidad de Big Data. 15. Gestion del ciclo de vida de Big Data. 16. La nube.
     • Gobierno de Big Data

9. FUENTES

   • Los Big Data proceden de numerosas fuentes de datos.
     • Datos tradicionales de empresas, generados por maquinas (M2M), sociales, biometria y genetica y datos personales o generados por personas.

10. DATA WAREHOUSE Y DATA MARTS

    • Los datos se almacenan normalmente en los almacenes de datos de las empresas, y los almacenes de datos especiales.
      • Data warehousing, principalmente para procesamiento de grandes conjuntos de datos.
        • Data marts, subconjuntos o conjuntos especializados de data warehouses.

11. BASES DE DATOS

    • Las empresas tienen la opcion de seleccionar multiples categorias de bases de datos.
      • SQL
      • NoSQL
      • In-memory
      • Legacy

12. HADOOP

    • Biblioteca de software de codigo abierto que soporta el procesamiento distribuido de grandes conjuntos de datos a traves de miles computadoras digitales.
      • Lider de en plataformas de Big Data.

13. INTEGRACION BIG DATA

    • Se construyen generalmente sobre fuentes de datos de archivos estructurados y relacionales que aprovechan las ventajas de la aquitectura de datos.

14. OPEN DATA

    • Filosofia y practica que requiere que ciertos datos esten disponibles libremente para cualquier persona sin restricciones de copyright, patentes u otros organismos de control.