Datenode的目录结构

和namenode不同的是,datanode的存储目录是初始阶段自动创建的,不需要额外格式化。在/export/servers/hadoop-2.6.0-cdh5.14.0/hadoopDatas/datanodeDatas/current这个目录下查看版本号
Datenode的目录结构
(1)storageID:存储id号
(2)clusterID集群id,全局唯一
(3)cTime属性标记了datanode存储系统的创建时间,对于刚刚格式化的存储系统,这个属性为0;但是在文件系统升级之后,该值会更新到新的时间戳。
(4)datanodeUuid:datanode的唯一识别码
(5)storageType:存储类型
(6)layoutVersion是一个负整数。通常只有HDFS增加新特性时才会更新这个版本号。
目录结构:
Datenode的目录结构
这个例子中“test.txt”有两个数据块。
Datenode的目录结构
第一个块“Block0”, 块大小134217728(128M),块ID:1073741853,块池ID:BP-866966434-192.168.100.129-1560531186882,存储在节点node01,node03上。
Datenode的目录结构
第二个块“Block0”, 块大小49671168(47.3M) ,块ID: 1073741854,块池ID:BP-866966434-192.168.100.129-1560531186882,存储在节点node01,node03上。
进入node01或node03节点的DataNode存储数据的目录,进入到块池的ID目录
/export/servers/hadoop-2.6.0-cdh5.14.0/hadoopDatas/datanodeDatas/current/BP-866966434-192.168.100.129-1560531186882
Datenode的目录结构
进入到blk的目录找到块的ID
Datenode的目录结构