Hadoop

Hadoop

1. Aula 1

   • 4V's
     • Volume
     • Velocidade
     • Variedade
       • Estruturado
       • Semi-estruturado
       • Não estruturado
     • Veracidade
   • Quando usar
     • Cases
       • Google
       • Danone
   • Ferramentas
     • Explicar o ecossistema
     • Ambari
     • Cloudera Manager
   • Arquitetura hadoop
     • Explicar a arquitetura do HDFS
       • Tamanho maximo de cada bloco
       • Distribuição de blocos pelo hdfs
     • Explicar arquitetura do MapReduce
       • Mapper
       • Reducer
       • Shuffle
       • Executar um script de mr em python
   • Ambari
     • Por que usar o ambari
       • Interface gráfica
       • Facilidade de uso
       • Free
     • Instalação
       • configurar repositorio
       • Instalar ambari
       • configurar chave de confiança
       • configurar hostname
     • Configuração
       • Ambari server
       • Ambari client (agent)
     • Acessar a interface web
       • Configurar master slaves
       • Configurar chave de confiança
       • Instalar as ferramentas do cluster
       • Verificar se tudo está ok
       • Adiconar novas ferramentas
       • Verificar se foram instaladas OK
       • Remover uma ferramenta
       • Verificar se foi removida
   • DataLake

2. Aula 2

   • HDFS
     • comandos básicos
       • comandos Linux
       • copyFromLocal/get/put
       • Alterar quantidade de bloco
     • Arquivo de configuração
       • Alterar tamanho do bloco
       • Explicar os parametros
     • Mostrar o xml
   • MapReduce
     • Arquivo de configuração
       • Explicar os parametros do arquivo
   • ZooKepper