HDFS-DataNode启动流程
HDFS DataNode启动流程
HDFS DataNode启动流程梳理
- 创建DataStorage对象
- 创建DataXceiverServer对象
- 启动HttpServer服务
- 启动RpcServer服务
- 创建blockPoolManager对象，遍历所有NameNode节点，一对HA服务（包含2个NN）对应一个BPOfferservice对象，其中包含2个BPServiceActor（每个对应一个NN）
- 获取NameNode对象代理，检查NameNode信息，之后调用NN远程服务，注册dataNode到各种数据结构中，同时注册信息到heartbeatManager中
- 向NameNode发送心跳信息，NameNode更新已存储的信息，并更新上一次的心跳时间
- NameNode中HeartbeatManager（内部Thread）定时遍历DataNode的心跳信息，如果发现有dead的DataNode，清除掉对应DataNode的信息
参考流程图