Big Data: Ferramentas e Aplicabilidade

Big Data: Ferramentas e Aplicabilidade

1. Big Data

   • Origem dos dados
     • Web
     • Redes sociais
     • Dados de transações
   • Cinco VS
     • Volume
     • Variedade
     • Velocidade
     • Veracidade
     • Valor
   • Categorias
     • Dados estruturados
     • Dados semiestruturados
     • Dados não estruturados

2. Sistemas

   • Sistemas tradicionais
     • Máquinas com tecnologia
     • Business intelligence
   • Propriedades ACID e CAP
     • ACID
       • Atomicidade
       • Consistência
       • Isolamento
       • Durabiidade
     • CAP
       • Consistency
       • Availability
       • Partition Tolerance

3. Ferramentas

   • Ambientes em nuvem
     • Grande aliada
   • HDFS
     • Arquivos grandes
     • Name node
   • YARN
     • Gerenciador de recursos
   • MAP REDUCE
     • Grandes volumes de dados
   • HADOOP
     • Ferramenta mais importante de Big Data
     • Computação distribuída
   • MPP
     • Processar grandes quamtidades de informações
   • HBASE
     • Banco de dados Nosq1
   • SPARK
     • Ferramenta de processamento
   • MACHINE LEARNING
     • Processo de ensinamento da máquina

4. Casos de uso

   • Saúde
     • Algoritmos de predição
   • Empresa de transporte aéreo
     • Maior gasto: combustivel
   • Segurança pública
     • Atntado terrorista