hadoop 安装与环境搭建
这篇已经太老了,请点击:点击打开链接
1. 在终端使用 wget +"hadoop 下载地址",下载安装包。(配合慕课网教程使用体验更好)
hadoop-1.2.1.tar.gz 下载地址:http://mirrors.hust.edu.cn/apache/hadoop/common/hadoop-1.2.1/hadoop-1.2.1.tar.gz
hadoop-3.0.0-alpha1.tar.gz
下载地址:http://mirrors.hust.edu.cn/apache/hadoop/common/hadoop-3.0.0-alpha1/hadoop-3.0.0-alpha1.tar.gz
2. 使用tar -zxvf解压缩。并且移动至自己的目标文件夹, 例如 mv hadoop-1.2.1 /opt
3. 打开文件夹 /opt/hadoop-1.2.1/conf 使用 ls 查看此文件夹下的文件,这儿我们要修改四个文件。
4. 第一个,vim hadoop-env.sh 修改JAVA_HOME与 jdk 中环境变量JAVA_HOME保持一致。记得去掉前面"#" 号。
5. 第二个,vim core-site.xml 修改如下:
要添加的代码如下:
<property>
<name>hadooop.tmp.dir</name>
<value>/hadooop</value>
</property>
<property>
<name>dfs.name.dir</name>
<value>/hadoop/name</value>
</property>
<property>
<name>fs.default.name</name>
<value>hdfs://VM-44-213-ubuntu:9000</value>
</property>
//VM-44-213-ubuntu是自己的机器名称 要改为自己的。
6. 第三个,vim hdfs-site.xml 修改如下:
具体要添加代码:
<property>
<name>dfs.data.dir</name>
<value>/hadoop/data</value>
<description></description>
</property>
7. 第四个,vim mapred-site.xml 修改如下:
具体添加代码:
<property>
<name>mapred.job.tracker</name>
<value>VM-44-213-ubuntu:9001<value>
<description></description>
</property>
//VM-44-213-ubuntu是自己的机器名称 要改自己的。
至此四个文件修改完成。
8. 修改环境变量,添加HADOOP_HOME,并且在PATH中添加HADOOP_HOME,修改如下:
9. 最后一步使用 source /etc/profile 使得配置生效。
10. 此时便可使用 hadoop 命令检测是否配置成功。
11. 如有错误,请留言指导。