hadoop工程的本地调试——Eclipse


前言

此操作仅仅为减少hadoop本地调试的麻烦。仅供参考。


一、配置文件

二、环境变量的配置

  1. 此电脑——>属性——>高级系统设置——>环境变量
  2. 若无环境变量:HADOOP_HOME 则点击新建,如值为:D:\Java\hadoop\hadoop-2.7.3\bin,找到hadoop源码包存放的位置。如下图:
    hadoop工程的本地调试——Eclipse

三、源码包操作

  1. 从链接获取到源码包并且解压到一个目录里面。
    hadoop工程的本地调试——Eclipse

  2. 下载winutil.exehadoop.dll文件并且解压;

  3. 解压后的文件将其放入——>hadoop\hadoop-2.7.3\bin\下面;
    hadoop工程的本地调试——Eclipse

  4. 还需要把hadoop.dll(从)拷贝到 C:\Windows\System32文件下;

四、文件路径配置

  1. 找到工程,单击右键Run as ——>Run Congrations
    hadoop工程的本地调试——Eclipse

2.找到工程的main之后设置文件输入路径及其输出文件的路径。(这里我是以wordcount做的调试。)
hadoop工程的本地调试——Eclipse

  1. 调试结果如下
    hadoop工程的本地调试——Eclipse

总结:配置时需要将hadoop.dll文件放到C:\Windows\System32,切勿忘记。output是调试过程中创建的不能手动创建。