Mind map
Ecossistema Hadoop - 2
Map content
Ecossistema Hadoop - 2
Ambari
- Cluster Hadoop
- Provisionamento
- Gestão
- Monitoramento
- Cluster Hadoop
Yarn
- Gerenciador Hadoop
- Resource Manager
- um por cluster
- Node Manager
- em cada node do cluster
- Resource Manager
- Entre a camada de aplicação e armazenamento
- Spark
- Yarn Client Mode
- Componente Interativo
- spark-shell
- pyspark
- Debug imediato
- Bom para construir programas spark
- Componente Interativo
- Yarn Cluster Mode
- Jobs em ambiente de produção
- Execução em cluster
- Jobs em ambiente de produção
- Yarn Client Mode
- Caracteristicas
- Compatibilidade
- Aplicações Mapreduce v1.0
- Escalabilidade
- Foco no cluster
- expansão de nodes
- Foco no cluster
- Utilização do Cluster
- Alocação dinâmica de recursos
- Compatibilidade
- Gerenciador Hadoop
HDFS
- Replicados
- fator de replicação = 3
- diferentes datanodes
- Características
- filesystem
- Desenvolvido Java
- Grandes qtd dados
- hw baixo custo
- projetado
- pouca qtde. de grandes arqs.
- Não otimizado para ops. randônicas
- WORM
- Write Once Read Many Times
- Blocos
- 64 Mb
- 128 Mb
- filesystem
- Namenode
- Mapa
- Blocos
- compõem arquivo
- Blocos
- disponível para acessar cluster
- Metadados
- em memória
- grava em discos periodicamente
- em memória
- Mapa
- Replicados
Information
- Description
- Profissionalizante data analytics Mind Map on Ecossistema Hadoop - 2, created by Leandro Pina on 04/12/2017.
- Created by
- Leandro Pina
- Views
- 0
- Rating