win7上搭建hadoop开发环境
2014-01-23 15:43
357 查看
【Hadoop】Win7上搭建Hadoop开发环境,方法一
在Win7上,编写hadoop程序操作系统:win7
hadoop版本:CDH3u6
1、下载安装JDK,以及Eclipse
具体看此链接:/content/973976.html
2、新建JAVA Project
3、去cloudera网站下载hadoop的CDH3u6版本。将起解压到win7的某个目录
4、选中OperateHDFS,右击,选择“property”,弹出右侧的窗口;
选择“Java Build Path” —— “Libraries” —— Add External Jars
5、到上面的画面后,下面就是选择开发hadoop程序时,用到的一些jar包
将lib文件夹下的所有的jar包,添加进去;将红框内的jar包,安装进去。
6、创建配置文件夹
7、将core-site.xml,hdfs-site.xml,mapred-site.xml放入到此文件夹中。
8、右键->属性 进行如下操作,添加刚刚创建conf文件夹
配置搞定!
写代码的过程中要写入的namenode和jobtracker地址(修改为你自己的)
在你的代码中,加入如下代码就可以了
Configuration conf = new Configuration(); conf.set("fs.default.name","192.1.1.2:9000"); conf.set("mapred.job.tracker","192.1.1.2:9001");
相关文章推荐
- ActiveMQ 远程监控JMX设置
- Shell 小技巧的问题 mysql -e ,字符串替换telnet命令检测
- Centos5.4下安装Layer7禁止QQ、MSN、p2p软件
- 在linux下,扫描连接到服务器指定端口的客户端ip信息,以及每个ip有几个链接。
- linux basename命令的使用
- Citrix虚拟化技术之七XenDesktop7.1介绍
- linux在shell中获取时间
- QCopChannel的用法
- Apache ActiveMQ 高级应用 - 自定义分发策略
- Apache ActiveMQ 高级应用 - 自定义分发策略
- 访问外网Tomcat不成功
- Linux 计划任务 — crontab
- Web项目上线之Tomcat配置--IP访问
- Linux/Unix监控常用命令
- POJ2186 Popular Cows 强联通求出度为零
- opencv imread函数无法调用问题
- linux查找技巧: find grep xargs
- VMware扩大硬盘后修改Linux逻辑卷大小
- Linux(Ubuntu)新建用户只有一个$问题
- Ubuntu 12.04 配置hadoop完全分布式