Hadoop学习笔记之HDFS

HDFS 架构:
1个或n个namenode与n个datanode

HDFS的设计目标:
非常巨大的分布文件系统
运行在普通廉价的硬件上
易扩展,为用户提供性能不错的文件存储服务
HDFS将文件拆分成等大小的block块,将其存入不同的datanode上

NameNode的职责:
响应客户端请求
负责元数据(文件的名称、副本系数、block存放的DN)的管理

DataNode的职责:
存储相应数据block块
定期向NameNode发送心跳信息,汇报datanode健康状况。

HDFS的副本机制:
hdfs的副本机制的目的就是为了容错,当分布式集群中的某一机器故障时,可通过其他副本来进行数据管理,防止数据丢失
Hadoop学习笔记之HDFS