Big Data: Ferramentas e Aplicabilidade

Big Data: Ferramentas e Aplicabilidade

1. Big Data

   • Tratamento no volume de dados
   • Alta velocidade no processamento
     • Na busca por valores
       • obtido através de correlações entre dados
   • Ferramentas 5 Vs
     • Volume
       • quantidade de dados acumulados
     • Variedade
       • programação e tipo de dados
     • Velocidade
       • taxa de transmissão de dados
     • Veracidade
       • se os dados são confiáveis
     • Valor
       • resultado obtido no uso das ferramentas

2. Qualificação dos dados

   • dados estruturados
     • pertencentes a um SGBD relacional
   • dados semiestruturados
     • documentos HTML, logs de web sites
   • dados não estruturados
     • videos, imagens e e-mails

3. Sistemas SQL

   • Escalabilidade vertical
     • Investimento em máquinas com tecnologias mais avançadas
       • aprimorando o processamento dos dados
       • Consequentemente mais caras

4. Big Data Analytics

   • Escalabilidade horizontal
     • computação paralela
       • maquinas de nível intermediário “commodities"
         • reduz custos e possibilitando o processamento de grandes volumes de dados

5. Propriedades Acid

   • Atomicidade
   • Consistência
   • Isolamento
   • Durabilidade

6. Propriedades Base

   • Basically Avaliable
     • Dados serão replicados e serão sempre consistentes
   • Soft State
     • Dados inconsistentes serão tratados posteriormente
   • Eventually Consistent
     • Garante a consistência em algum momento

7. Aplicabilidade do Big Data ( ex.)

   • Saúde
   • Empresa de transporte aéreo
   • Segurança pública