Win8系统的Myeclipse远程连接Hadoop配置
2016-07-15 21:46
316 查看
1. 准备好与Hadoop版本对应的eclipse插件和解压后的Hadoop;
我的Hadoop版本是hadoop-0.20.2,因此我用到的myeclipse插件版本是hadoop-eclipse-plugin-0.20.203.0
2.将插件拷贝到..\MyEclipse Professional 2014\dropins文件夹下;
3.打开myeclipse通过菜单windows-》 Preference查看是否有下图标红的部分,如果有说明配置的第一步已经实现了;
4.点击上图的Hadoop Map/Reduce菜单,添加本地解压的Hadoop,点击OK;
5.接下来就是配置需要连接的Hadoop集群,点击Windows-》showview-》others,找到MapReduce Tools选项,选择黄色的小象,进入配置部分。
6.鼠标右键,New Hadoop Location...创建新的Hadoop集群连接,进入如下的配置界面。其中步骤1是自定义的可以随便填写;步骤2是Hadoop的master节点所在服务器的IP;步骤3和步骤5分别是两个接口,一般Hadoop安装时默认的就是9001和9000,如果Hadoop配置时修改了两部分的值,可以分别查看core-site.xml和mapred-site.xml来确定;步骤4是Hadoop的master节点所在服务器的用户名。至此,General部分配置完成。
7.下面接着配置Advanced Parameters部分,主要需要注意的是hadoop.tmp.dir项,需要将默认的内容改成hadoop配置文件中对应的内容(具体哪个文件我忘记了,找找吧,还好配置文件就3个),这里我的配置内容是/usr/hadoop/tmp。
8. 至此,应该是配置完了,但是最后别忘了把服务器上的hadoop集群开启下,Ubuntu系统下hadoop集群的启动命令是:start-all.sh;
启动HBase的命令应该是bin/start-hbase.sh。
9.第九小节是补充,关系win7系统下hosts文件是不是需要添加服务器IP配置的问题,我也不太清楚,反正目前我配置成功的情况下是对hosts进行了配置,在hosts内添加了如下的一行:
IP master
我的Hadoop版本是hadoop-0.20.2,因此我用到的myeclipse插件版本是hadoop-eclipse-plugin-0.20.203.0
2.将插件拷贝到..\MyEclipse Professional 2014\dropins文件夹下;
3.打开myeclipse通过菜单windows-》 Preference查看是否有下图标红的部分,如果有说明配置的第一步已经实现了;
4.点击上图的Hadoop Map/Reduce菜单,添加本地解压的Hadoop,点击OK;
5.接下来就是配置需要连接的Hadoop集群,点击Windows-》showview-》others,找到MapReduce Tools选项,选择黄色的小象,进入配置部分。
6.鼠标右键,New Hadoop Location...创建新的Hadoop集群连接,进入如下的配置界面。其中步骤1是自定义的可以随便填写;步骤2是Hadoop的master节点所在服务器的IP;步骤3和步骤5分别是两个接口,一般Hadoop安装时默认的就是9001和9000,如果Hadoop配置时修改了两部分的值,可以分别查看core-site.xml和mapred-site.xml来确定;步骤4是Hadoop的master节点所在服务器的用户名。至此,General部分配置完成。
7.下面接着配置Advanced Parameters部分,主要需要注意的是hadoop.tmp.dir项,需要将默认的内容改成hadoop配置文件中对应的内容(具体哪个文件我忘记了,找找吧,还好配置文件就3个),这里我的配置内容是/usr/hadoop/tmp。
8. 至此,应该是配置完了,但是最后别忘了把服务器上的hadoop集群开启下,Ubuntu系统下hadoop集群的启动命令是:start-all.sh;
启动HBase的命令应该是bin/start-hbase.sh。
9.第九小节是补充,关系win7系统下hosts文件是不是需要添加服务器IP配置的问题,我也不太清楚,反正目前我配置成功的情况下是对hosts进行了配置,在hosts内添加了如下的一行:
IP master
相关文章推荐
- 详解HDFS Short Circuit Local Reads
- Hadoop_2.1.0 MapReduce序列图
- 使用Hadoop搭建现代电信企业架构
- MyEclipse Web Project转Eclipse Dynamic Web Project
- 单机版搭建Hadoop环境图文教程详解
- MyEclipse连接Mysql数据库的方法(一)
- MyEclipse常用配置图文教程
- hadoop常见错误以及处理方法详解
- MyEclipse连接MySQL数据库报错解决办法
- 在myeclipse中如何加入jquery代码提示功能
- MyEclipse 6.0.1 6.0GA 6.0M1 5.5GA 5.1.1GA 注册码及高速下载地址
- javascript在myeclipse中报错的解决方法
- eclipse3.2.2 + MyEclipse5.5 + Tomcat5.5.27 配置数据库连接池
- eclipse+myeclipse 环境配置方法
- 使用MyEclipse 开发struts2框架实现登录功能(结构教程)
- hadoop 单机安装配置教程
- hadoop的hdfs文件操作实现上传文件到hdfs
- hadoop实现grep示例分享
- 设置Myeclipse中的代码格式化、注释模板及保存时自动格式化
- 在MyEclipse上部署Tomcat服务器的方法