配置eclipse+hadoop开发环境 详细操作步骤

配置Eclipse、Hadoop开发环境

第一步：安装Eclipse-Hadoophadoop集成插件

把hadoop-eclipse-plugin-1.1.2.jar插件放到/usr/lib/eclipse/plugins中，然后重新启动Eclipse如

细心的你从上图左侧“Project Explorer”下面发现“DFS Locations”，说明Eclipse已经识别刚才放入的Hadoop Eclipse插件了。

第二步：在Eclipse中指定Hadoop的安装目录

选择“Window”菜单下的“Preference”，然后弹出一个窗体，在窗体的左侧中找到“Hadoop

Map/Reduce”选项，点击此选项，选择Hadoop的安装目录(如我的Hadoop目录：

/home/inspur/hadoop)。结果如下图：

第三步：切换“Map/Reduce”工作目录

有两种方法：

1)、选择“Window”菜单下选择“Open Perspective–>Other”，弹出一个窗体，从中选择“Map/Reduce”选项即可进行切换。

第四步：配置DFS Locations

建立与Hadoop集群的连接，在Eclipse软件下面的“Map/Reduce Locations”进行右击，弹出一个选项，选择“New Hadoop Location ”，然后弹出一个窗体。

注意上图中的红色标注的地方，是需要我们关注的地方。

Location Name：可以任意填，标识一个“Map/Reduce Location”

Map/Reduce Master

Host：xx.xx.xx.xx(Master.Hadoop的IP地址，即/home/hadoop/hadoop-1.1.1/conf/m apred-site.xml中ip)

Port：xx(即/home/hadoop/hadoop-1.1.1/conf/m apred-site.xml中端口)

DFS Master

Use M/R Master host：前面的勾上。(因为我们的NameNode和JobTracker都在一个机器上。) Host：xx.xx.xx.xx(/home/hadoop/hadoop-1.1.1/conf/core-site.xml中ip)

Port：xxxx (/home/hadoop/hadoop-1.1.1/conf/core-site.xml中端口)

User name：hadoop(操作hadoop的用户)

接着点击“Advanced parameters”从中找到“hadoop.t m p.dir”，修改成为我们Hadoop集群中设置的地址，我们的Hadoop集群是“/home/hadoop/hadoop-datastore/”，这个参数在“core-

再从中找到“fs.default.nam e”，修改成为我们Hadoop集群中设置的地址，我们的Hadoop集群是

点击“finish”之后，会发现Eclipse软件下面的“Map/Reduce Locations”出现一条信息，就是我们刚才建立的“Map/Reduce Location ”。

第五步：查看HDFS文件系统

查看HDFS文件系统，点击Eclipse软件左侧的“DFS Locations”下面的“localhost”，就会展示出

)。

到此为止，我们的Hadoop Eclipse开发环境已经配置完毕。