Hdfs系统文件上传的机制
-
Hdfs系统文件上传的机制
-
访问的流程 client --namenode --client--datanode(机器1)--datanode(机器2)--机器.....(datanode通过管道传递)----namenode(datanode通过heart机制汇报信息)
客户端操作Hdfs系统文件读写操作必须向namenode来获取块信息,datanode信息,通过管道进行传递数据信息,datanode再向namenode进行汇报
1:Client 向NameNode审请DataNode信息。保存到哪一个机器上。返回3台机器 。
2:Client切分文件每一块128M。向DataNode传递。
3:各个dataNode之间互相进行文件的复制。
4:dataNode在接收完成数据以后,向Namenode+client汇报信息
--
每一上传一块,Client都 要向NameNode申请元数据信息。
俩张重要的图表:
图表2: