hadoop离线 day05 发展史和集群安装

hadoop 1.X的架构

HDFS文件系统:

典型的主从架构

  1. NameNode:集群中的主节点,主要用于管理集群中的各种数据。
  2. secondarynode:主要用于hadoop当中元数据信息的辅助管理 。
  3. DataNode:集群中的从节点,主要用于存储集群中的各种数据。

MapReduce分布式文件计算系统

hadoop离线 day05 发展史和集群安装

jobTracker:主节点,接收用户请求,分配任务给taskTracker节点。
taskTracker:执行任务

hadoop 2.X的架构