Eclipse安装Hadoop插件配置Hadoop开发环境

Eclipse 安装 Hadoop 插件

1、首先下载对应版本的hadoop插件 

注意:Hadoop插件要跟自己安装的Hadoop版本相对应。

这儿有一个Hadoop 2.X版本对应的Hadoop插件,前往下载, 下载hadoop2x-eclipse-plugin.zip。解压后,release文件夹下的hadoop.eclipse-kepler-plugin-2.2.0.jar即为我们所需要的插件。

2、进入Eclipse的目录,找到Plugins文件夹,讲刚才下载的插件拷贝进去(注意,Eclipse最好要处于关闭状态)并重启Eclipse

Eclipse安装Hadoop插件配置Hadoop开发环境

3、打开,Eclipse,会发现左侧多了一个DFS Location,说明已经安装成功 

Eclipse安装Hadoop插件配置Hadoop开发环境

 

打开Window-->Preferens,可以看到Hadoop Map/Reduc选项,然后点击,然后添加hadoop-2.6.0进来,如图所示:

Eclipse安装Hadoop插件配置Hadoop开发环境

4、打开Windows–Show View 

配置Map/ReduceLocations

   1)点击Window-->Show View -->MapReduce Tools  点击Map/ReduceLocation

   2)点击Map/ReduceLocation选项卡,点击右边小象图标,打开Hadoop Location配置窗口: 输入Location Name,任意名称即可.配置Map/Reduce Master和DFS Mastrer,Host和Port配置成hdfs-site.xml与core-site.xml的设置一致即可。

Eclipse安装Hadoop插件配置Hadoop开发环境

5、选择Other 

Eclipse安装Hadoop插件配置Hadoop开发环境

6、选择Map/Reduce Location 

Eclipse安装Hadoop插件配置Hadoop开发环境

7、这是,下面应该会出现 
Eclipse安装Hadoop插件配置Hadoop开发环境 
8、空白部分,右键,New Hadoop Location,然后双击,编辑 

Eclipse安装Hadoop插件配置Hadoop开发环境
Eclipse安装Hadoop插件配置Hadoop开发环境

如果出现 , 
Eclipse安装Hadoop插件配置Hadoop开发环境 
请检查 hdfs 里面是否有input和output目录

新建hdfs input目录: 
hdfs dfs -mkdir /user 
hdfs dfs -mkdir /user/root 
hdfs dfs -mkdir /user/root/input

9、安装到这里,还缺少一个一个小插件

到网上搜索下载 hadoop-common-2.2.0-bin-master.jar

1、解压jar包

2、将jar包里面的 hadoop.dll 拷贝到系统盘目录 Windows/System32 下

3、将bin目录配置到环境变量中

10、这些配置完成之后,就可以新建一个项目,然后导入jar包开始写mapreduce程序了,,,,但是要注意的是,,,,这个时候还需要加载一个配置文件,,,可以拷贝hadoop的配置文件 core-site.xml 到项目中(可以在main下面新建一个resource文件,放入即可)。。。