hadoop+zookeeper+hbase分布式环境配置之zookeeper分布式环境搭建
2014-07-28 11:54
519 查看
1.hadoop最新版安装 省略此处可参考我的博客自行搭建
192.168.1.252 master namenode secondarynamenode resourcemanager
192.168.1.251 slave1 DataNode NodeManager
192.168.1.250 slave2 DataNode NodeManager
2.zookeeper最新版的安装
下载zookeeper解压到指定目录(如:/home/yufan/program/zookeeper)
创建zoo.cfg文件,可将zoo_sample.cfg文件复制改名即可,修改该配置如下:
tickTime=2000
initLimit=10
syncLimit=5
clientPort=2181
server.1=master:2888:3888
server.2=slave1:2888:3888
server.3=slave2:2888:3888
dataDir=/home/yufan/temp/zookeeper
其实就是添加红色部分的配置,该配置就是zookeeper集群环境的各节点IP端口以及选举端口,此处server.1 2 3数字只是代表一个节点的标示,这个数字标示是需要在指定
文件中配置的,配置路径就是dataDir,
在dataDir路径下新建文件myid,内容为数字1,这里的1就代表本机master,这个数字可以随意改,只要和zoo.cfg文件中server.后面的数字对应相同即可
将整个zookeeper文件夹通过scp命令复制到slave1和slave2服务器上,同时修改slave1服务器中zookeeper的myid内容为数字2,slave2服务器中zookeeper的myid内容为数
字3
在/etc/profile文件中配置zookeeper的ZOOKEEPER_HOME,将lib路径加入到classpath,将bin加入到path,同样将改文件复制到slave1和slave2服务器上,并且通过source
/etc/profile命令使之生效
在每台服务器上运行zkServer.sh start命令来启动zookeeper,可通过zkServer.sh status来查看leader和fllower角色
要使hbase正常运行,此处还需注意一点的就是开启客户端服务,运行一下命令,zkCli.sh,ls /,rmr /hbase 退出
以上是最基本的配置,到此zookeeper基本搭建完成,稍后记录hbase分布式配置
192.168.1.252 master namenode secondarynamenode resourcemanager
192.168.1.251 slave1 DataNode NodeManager
192.168.1.250 slave2 DataNode NodeManager
2.zookeeper最新版的安装
下载zookeeper解压到指定目录(如:/home/yufan/program/zookeeper)
创建zoo.cfg文件,可将zoo_sample.cfg文件复制改名即可,修改该配置如下:
tickTime=2000
initLimit=10
syncLimit=5
clientPort=2181
server.1=master:2888:3888
server.2=slave1:2888:3888
server.3=slave2:2888:3888
dataDir=/home/yufan/temp/zookeeper
其实就是添加红色部分的配置,该配置就是zookeeper集群环境的各节点IP端口以及选举端口,此处server.1 2 3数字只是代表一个节点的标示,这个数字标示是需要在指定
文件中配置的,配置路径就是dataDir,
在dataDir路径下新建文件myid,内容为数字1,这里的1就代表本机master,这个数字可以随意改,只要和zoo.cfg文件中server.后面的数字对应相同即可
将整个zookeeper文件夹通过scp命令复制到slave1和slave2服务器上,同时修改slave1服务器中zookeeper的myid内容为数字2,slave2服务器中zookeeper的myid内容为数
字3
在/etc/profile文件中配置zookeeper的ZOOKEEPER_HOME,将lib路径加入到classpath,将bin加入到path,同样将改文件复制到slave1和slave2服务器上,并且通过source
/etc/profile命令使之生效
在每台服务器上运行zkServer.sh start命令来启动zookeeper,可通过zkServer.sh status来查看leader和fllower角色
要使hbase正常运行,此处还需注意一点的就是开启客户端服务,运行一下命令,zkCli.sh,ls /,rmr /hbase 退出
以上是最基本的配置,到此zookeeper基本搭建完成,稍后记录hbase分布式配置
相关文章推荐
- 配置密码分布式集群环境hadoop、hbase、zookeeper搭建(全)
- [转]云计算之hadoop、hive、hue、oozie、sqoop、hbase、zookeeper环境搭建及配置文件
- Hadoop -分布式环境搭建安装配置
- hadoop - hadoop2.6 分布式 - 集群环境搭建 - JDK安装配置和SSH安装配置与免密码登陆(集群中)
- hadoop - hadoop2.6 分布式 - 集群环境搭建 - 系统搭建和网络配置
- Hadoop2.7.3+HBase1.2.5+ZooKeeper3.4.6搭建分布式集群环境
- 分布式集群环境hadoop1.2.0、hbase0.94.4、zookeeper、elasticsearch搭建
- Ubuntu hadoop 伪分布式环境搭建步骤+ssh密钥(免密码登录)配置
- Ubuntu16.04下伪分布式环境搭建之hadoop2.6.0、jdk1.7、Hbase0.98的安装与配置
- Ubuntu系统安装+Hadoop伪分布式环境搭建+eclipse环境配置
- hadoop2.6完全分布式环境搭建(下-->配置文件)
- hadoop+zookeeper+hbase分布式环境配置之hbase分布式环境搭建
- 从零开始搭建hadoop分布式集群环境:(四)配置ssh无密码登录
- Hadoop2.7.2 Centos 完全分布式集群环境搭建 (2) - Hadoop安装与配置(完全分布式)
- Hadoop环境搭建-入门伪分布式配置(Mac OS,0.21.0,Eclipse 3.6)
- 从零开始搭建hadoop分布式集群环境:(五)hadoop完全分布式集群环境配置
- hadoop+hive+zookeeper+hbase全分布式环境配置
- Hadoop伪分布式环境搭建(hadoop-0.20.2、hive-0.11.0、pig-0.5.0、zookeeper-3.4.3)
- 伪分布式集群环境hadoop、hbase、zookeeper搭建(全)
- Mac系统下,Hadoop 2.6.2 + ZooKeeper 3.4.6 + HBase 1.1.5 完全分布式环境搭建