在eclipse中操作HDFS
本文主要讲述如何在本地eclipse操作HDFS集群
1.配置hadoop的插件,以便在eclipse中操作HDFS
1)在eclipse的安装路径下查看是否有dropins文件夹,若没有则新建一个。
2)在dropins文件夹下创建plugins文件夹。
3)把hadoop-eclipse-plugin-2.6.0.jar包放到plugins文件夹下。
2.重启eclipse
1)点击windows-show view,找到Map/Reduce Location视图并显示。
2)在Map/Reduce Location视图下新建hdfs。
3)配置hdfs。
4)左上角的项目目录会显示如下状态。
3.Java API操作HDFS
1).导入jar包
进入到hadoop安装包的share/hadoop目录下,将common、hdfs、tools目录下的以及lib下的jar导入到我们的项目中并buildpath。
2).操作HDFS