hadoop 安装与环境搭建

这篇已经太老了,请点击:点击打开链接

1. 在终端使用  wget +"hadoop 下载地址",下载安装包。(配合慕课网教程使用体验更好)

hadoop-1.2.1.tar.gz              下载地址:http://mirrors.hust.edu.cn/apache/hadoop/common/hadoop-1.2.1/hadoop-1.2.1.tar.gz

hadoop-3.0.0-alpha1.tar.gz 下载地址:http://mirrors.hust.edu.cn/apache/hadoop/common/hadoop-3.0.0-alpha1/hadoop-3.0.0-alpha1.tar.gz

2. 使用tar -zxvf解压缩。并且移动至自己的目标文件夹, 例如 mv hadoop-1.2.1  /opt

3. 打开文件夹 /opt/hadoop-1.2.1/conf 使用 ls 查看此文件夹下的文件,这儿我们要修改四个文件。

4. 第一个,vim hadoop-env.sh   修改JAVA_HOME与 jdk 中环境变量JAVA_HOME保持一致。记得去掉前面"#" 号。

5. 第二个,vim core-site.xml      修改如下:

hadoop 安装与环境搭建

要添加的代码如下:

   <property>
         <name>hadooop.tmp.dir</name>
         <value>/hadooop</value>
    </property>
   <property>
         <name>dfs.name.dir</name>
         <value>/hadoop/name</value>
    </property>
   <property>
         <name>fs.default.name</name>
         <value>hdfs://VM-44-213-ubuntu:9000</value>
    </property>

//VM-44-213-ubuntu是自己的机器名称 要改为自己的。

6. 第三个,vim hdfs-site.xml  修改如下:

hadoop 安装与环境搭建

具体要添加代码:

   <property>
         <name>dfs.data.dir</name>
         <value>/hadoop/data</value>
         <description></description>
    </property>

7. 第四个,vim mapred-site.xml 修改如下:

hadoop 安装与环境搭建

具体添加代码:

   <property>
         <name>mapred.job.tracker</name>
         <value>VM-44-213-ubu
ntu:9001<value>
         <description></description>
    </property>
   

//VM-44-213-ubuntu是自己的机器名称 要改自己的。

至此四个文件修改完成。

8. 修改环境变量,添加HADOOP_HOME,并且在PATH中添加HADOOP_HOME,修改如下:

hadoop 安装与环境搭建

9. 最后一步使用 source /etc/profile 使得配置生效。

10. 此时便可使用 hadoop 命令检测是否配置成功。

11. 如有错误,请留言指导。