No HDFS (Hadoop Distributed File System), os dados são divididos em blocos de tamanho fixo (geralmente 128 MB ou 256 MB) para armazenamento e processamento distribuídos eficientes. Isto permite:

Armazenar ficheiros grandes dividindo-os em partes que são distribuídas por diferentes nós do cluster.
Processar paralelamente os blocos em diferentes nós, o que acelera os cálculos.
Garantir tolerância a falhas através da replicação de blocos em vários nós.

Assim, a divisão em blocos é um mecanismo chave para a escalabilidade e fiabilidade do HDFS.

Anterior Próximo