Windows环境下hadoop安装和配置详细步骤
一、下载Hadoop
http://www.apache.org/dyn/closer.cgi/hadoop/common
(我下载的版本是hadoop-2.6.0-cdh5.14.2.tar.gz,这里就以此版本为例)
下载 hadoop 安装包至安装目录
安装目录:/opt/download/hadoop
2、解压安装包至软件目录(最好更名,以便之后方便配置文件)
3、进入文件,准备配置
因为需要用到 java 的路径,可以代码查找,并复制至剪贴板备用
二、配置Hadoop的环境变量
修改配置文件
注:注意修改路径和IP地址之类的变更项
1.配置 jdk 路径
#更换 JAVA_HOME 的路径
2.修改核心配置文件
设置默认文件系统(本地默认 file:/位置)此处端口与HBASE端口设成一样
创建临时存储文件路径
授权访问用户为所有 root 型
授权访问用户为任意组的 root 型
3.设置文件副本个数
这里:最少3个伪分布只写1个,我只用一台机子模拟
4.设置映射化简模型框架
这里需要复制 mapred-site.xml.template 临时文件,并在复制后的文件中配置(注意命名)
设置框架为 yarn
5.设置 yarn 站点+节点
设置 yarn 站点名称为:localhost
设置辅助节点管理
6.添加环境变量的相关项
三、启动调试是否配置成功
1.加载环境变量配置文件
2.格式化 NameNode
3.启动 Hadoop
4.检验启动是否成功
后台进程应该有相关的5项
5.网页键入 http://192.168.95.138:50070 页面显示为:
检验成功,即安装成功!