您的位置: 首页  >  文章  >  window7安装hadoop2.7.5

window7安装hadoop2.7.5

分类: 文章 • 2022-10-17 22:36:30

hadoop本来是在centos上运行的，然而在window7中idea开发时，调试centos上的hadoop下载文件功能，就必须要window环境的hadoop，这就很蛋疼了。。。。
下面介绍一下window的hadoop2.7.5如何配置~

一：安装准备

  1. JDK1.8安装，不会的自己百度一下，这里不在累赘
  2. 下载hadoop
    window7安装hadoop2.7.5
  3. 下载window版的hadoop2.7.5**包

完成上面3步之后，hadoop的已经完成一半了，再配置一下，hadoop就能运行起来了~~


二：配置步骤

  1. 下载好Hadoop2.7.5的压缩包之后，解压到目录，我放在D:\hadoop-2.7.5
  2. 配置Hadoop环境变量
    window7安装hadoop2.7.5
    window7安装hadoop2.7.5
  3. 将刚刚下载的hadoop2.7.5**包的bin目录整个替换D:\hadoop-2.7.5\bin目录
  4. 配置一下hadoop的运行文件：
    将目录切换到D:\hadoop-2.7.5\etc\hadoop下
    1. 编辑core-site.xml文件
<configuration>
<property>
<name>hadoop.tmp.dir</name>
<!--临时文件地址-->
<value>/F:/bigdata/hadoop-2.7.5/workplace/tmp</value>
</property> 
<property>
<name>dfs.name.dir</name>
<value>/F:/bigdata/hadoop-2.7.5/workplace/name</value>
</property>
<property> 
<name>fs.default.name</name>
<value>hdfs://localhost:9000</value>
</property>
</configuration>
  1. 编辑mapred-site.xml(没有就将mapred-site.xml.template重命名为mapred-site.xml)
<configuration>
<property>       
<name>mapreduce.framework.name</name>       
<value>yarn</value>    
</property>    

<property>       
<name>mapred.job.tracker</name>       
<value>hdfs://localhost:9001</value>    
</property>

</configuration>
  1. 编辑hdfs-site.xml文件
<configuration>
<!-- 这个参数设置为1，因为是单机版hadoop -->    
<property>        
<name>dfs.replication</name>        
<value>1</value>    
</property>    

<property>        
<name>dfs.data.dir</name>        
<value>/F:/bigdata/hadoop-2.7.5/workplace/data</value>    
</property>
</configuration>
  1. 编辑yarn-site.xml文件
<property>       
<name>yarn.nodemanager.aux-services</name>       
<value>mapreduce_shuffle</value>    
</property>    

<property>       
<name>yarn.nodemanager.aux-services.mapreduce.shuffle.class</name>
<value>org.apache.hadoop.mapred.ShuffleHandler</value>    
</property>
  1. 编辑hadoop-env.cmd文件
set JAVA_HOME=D:\java\jdk(这里替换成自己jdk路径，这个东东大概在58行)

自此，hadoop的运行环境全部配置完成，下面我们来启动一下~

三： 运行：

  1. 首先在cmd里输入hadoop version，看看有没有出现版本信息，没有的话估计是path环境没有配对
  2. 使用cmd切换到D:\hadoop-2.7.5\bin目录下，然后执行：
    hdfs namenode -format（格式化）
  3. cmd再切换到D:\hadoop-2.7.5\sbin目录下，然后执行
    start-all.cmd
    如果有4个终端弹出来，说明hadoop已经启动起来了

四：测试

  1. 资源管理GUI:http://localhost:8088/；
    window7安装hadoop2.7.5
  2. 节点管理GUI:http://localhost:50070/；
    window7安装hadoop2.7.5

相关推荐