hadoop单节点搭建

一、操作环境

1.ssh

生成公钥:

ssh-****** -t dsa -P '' -f /root/.ssh/id_dsa

hadoop单节点搭建

追加公钥:

cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys

hadoop单节点搭建

2.jdk

cat /etc/profile

hadoop单节点搭建

source /etc/profile

3.hosts和hostname修改

 

hadoop单节点搭建

 

 

二、hadoop部署

1. 解压包

tar xf hadoop-2.6.5.tar.gz

2.配置path

hadoop单节点搭建

3.修改配置文件

修改如下文件java_home:

hadoop单节点搭建

修改core-site.xml

hadoop单节点搭建

修改core-hdfs.xml

hadoop单节点搭建

修改slaves

hadoop单节点搭建

修改临时文件目录:

hadoop单节点搭建

修改second-namenode配置

hadoop单节点搭建

4.格式化

hdfs namenode -format

5.启动

start-dfs.sh

hadoop单节点搭建

6.WebUI

hadoop单节点搭建

7.HDSF指令

创建目录

 hdfs dfs -mkdir -p /user/root

上传文件

hdfs dfs -put /usr/local/software/hadoop/hadoop-2.6.5.tar.gz /user/root