您的位置:首页 > 运维架构

win7上搭建hadoop开发环境

2014-01-23 15:43 357 查看

【Hadoop】Win7上搭建Hadoop开发环境,方法一

在Win7上,编写hadoop程序

操作系统:win7

hadoop版本:CDH3u6

1、下载安装JDK,以及Eclipse

具体看此链接:/content/973976.html

2、新建JAVA Project



3、去cloudera网站下载hadoop的CDH3u6版本。将起解压到win7的某个目录

4、选中OperateHDFS,右击,选择“property”,弹出右侧的窗口;

选择“Java Build Path” —— “Libraries” —— Add External Jars



5、到上面的画面后,下面就是选择开发hadoop程序时,用到的一些jar包

将lib文件夹下的所有的jar包,添加进去;将红框内的jar包,安装进去。

6、创建配置文件夹



7、将core-site.xml,hdfs-site.xml,mapred-site.xml放入到此文件夹中。





8、右键->属性 进行如下操作,添加刚刚创建conf文件夹



配置搞定!

写代码的过程中要写入的namenode和jobtracker地址(修改为你自己的)

在你的代码中,加入如下代码就可以了

Configuration conf = new Configuration();
conf.set("fs.default.name","192.1.1.2:9000");
conf.set("mapred.job.tracker","192.1.1.2:9001");
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: