Linux下的Eclipse远程运行Mapreduce到hadoop集群

假设已经配置好集群。

在开发客户机Linux centos 6.5上进行:

a.客户机centos 有一个和集群同名的访问用户:huser.

b.vim /etc/hosts 加入namenode,加入本机IP.

-------------------------

1.安装hadoop集群 同版本的 jdk, hadoop,

2.Eclipse 编译和安装同版本的 hadoop-plugin,

 2.a设定preference->hadoop MR->hadoop install directory

 2.b设置hadoop-plugin的IP和端口号

3.将hadoop 配置文件core-site.xml 复制到客户机的指定目录下/home/huser

4.创建MR 项目,导入hadoop Lib

 创建wordcount class.

5.run hadoop;run config

 

================

 

郑重声明:本站内容如果来自互联网及其他传播媒体,其版权均属原媒体及文章作者所有。转载目的在于传递更多信息及用于网络分享,并不代表本站赞同其观点和对其真实性负责,也不构成任何其他建议。