Hadoop 2.6 集群搭建从零开始之4 Hadoop的安装与配置(完全分布式环境)

1、在VMware重将伪分布式的pc1虚拟机拷贝2个pc2 pc3


2、启动pc2

3、使用vim /etc/hostname命令进入修改主机名为pc2,保存退出

4.重启pc2,此时主机名生效为pc2


5、启动pc3

6、使用vim /etc/hostname命令进入修改主机名为pc3,保存退出

7.重启pc3,此时主机名生效为pc3


8.对pc1 pc2 pc3 使用vim /etc/hosts命令将hosts文件改为(3个一样):

Hadoop 2.6 集群搭建从零开始之4 Hadoop的安装与配置(完全分布式环境)

其中的三个ip地址根据ubuntu网络中的实际ip


9.修改三台机器的hdfs-site.xml

将dfs.replicaition改为2


将每个机器的防火墙关掉

将每个机器/etc/hosts中127.0.0.1的项目注释掉


10.先将之前伪分布时创建的hdfs tmp目录删除,否则会导致错误

11.在pc1上使用hadoop namenode -format对集群进行格式化

12.在pc1上使用./start-all.sh启动集群


Hadoop 2.6 集群搭建从零开始之4 Hadoop的安装与配置(完全分布式环境)

使用jps可以看到pc1上启动的进程

Hadoop 2.6 集群搭建从零开始之4 Hadoop的安装与配置(完全分布式环境)

13.使用wordcount测试集群

Hadoop 2.6 集群搭建从零开始之4 Hadoop的安装与配置(完全分布式环境)

运行成功

查看结果

Hadoop 2.6 集群搭建从零开始之4 Hadoop的安装与配置(完全分布式环境)