centos下使用eclipse开发mapreduce

论坛 期权论坛 编程之家     
选择匿名的用户   2021-5-22 18:08   11   0

配置eclipse环境注意几点:

某些较新版本的hadoop貌似没有eclipse插件,但如果单下一个hadoop-0.20.2-eclipse-plugin.jar放进eclipse里,可能因为hadoop版本和插件版本不一致导致配置错误;

实在没办法重新换一个hadoop-0.20.2,插件就在/contrib 里。

第一个mapreduce工程:

new->project->map/reduce project ;

new -> class , 建立一个.java文件,例如WordCount.java ;

右键->run as -> run configurations , 在左侧导航栏中的JavaApplication上右击->new ,arguments中填入hdfs中的input、output文件夹路径,然后点击run;

如果程序运行没有错误,可以在DFSLocation下找到output文件夹,查看程序输出结果。没有output文件夹可以refresh刷新一下~

分享到 :
0 人收藏
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

积分:3875789
帖子:775174
精华:0
期权论坛 期权论坛
发布
内容

下载期权论坛手机APP