HDF

Robustez

El HDF almacena los datos aún estos contengan fallas

Fallas Comunes

NameNode

DataNode

particiones de red

La arquitectura de HDF está disponibles para un reequilibrio de grupo.

Integridad de Datos

En el momento que lleguen bloques de datos dañados en el DataNote, HDFS realiza unas copias con la información sin eliminar estos datos

Error de Discos

FsImage y EditLog son estructuras de datos de HDF S,

El NameNode es configurable para que tome varias copias de estos archivos

Estos datos si están corruptos hacen que HDFS falle

Con esto logra que se tome la ultima actualización y no se refleje el daño de estos datos

Es decir que es capaz de mover los datos automáticamente de un DataNote

Cada una de estas fallas se relacionan entre si

y los datos que hayan sido registrados no se encontrarán disponibles en el HDF

ya que si se evidencia una partición de red esta puede logar que un subconjunto de DataNotes pierda conectividad

Organización de Datos

Bloques de Datos

Puesta en Escena

Tubería de Replicación

HDFS tiene definido el tamaño de sus bloques

Un archivo se divide en fragmentos de 64 MB

Esto logra que un fragmento se ubique en un DataNote diferente

Se logran correctas velocidades de transmición

En el momento en que el archivo local acumula datos por un tamaño de bloque HDFS, el cliente se pone en contacto con el NameNode

Cuando se cierre un archivo, los datos se transfieren a un DataNote

Cuando se insertan datos en un archivo HDFS estos se escriben en un archivo local

Realiza replicas de bloques

Un DataNote puede recibir datos almacenados en repositorios