storm集群安装配置
2017-08-12 09:07
232 查看
安装storm集群,需要依赖以下组件:
Zookeeper
Python
Storm
JDK
supervisor.slots.ports:对于每个Supervisor工作节点,需要配置该工作节点可以运行的worker数量。每个worker占用一个单独的端口用于接收消息,该配置选项即用于定义哪些端口是可被worker使用的。默认情况下,每个节点上可运行4个workers,分别在6700、6701、6702和6703端口
将storm分发到其他机器
ok,配置完成,可以启动看看了。
5.启动
在nimbus.host所属的机器上启动 nimbus服务
切换到storm目录下的bin目录(如果你没有配置环境变量的情况下)
在nimbus.host所属的机器上启动ui服务
在其它个点击上启动supervisor服务
OK,配置成功。
Zookeeper
Python
Storm
JDK
1.安装jdk
省略,安装jdk很简单,网上有很多教程,这里不再说明。2.安装zookeeper
可以参照这篇:http://blog.csdn.net/weiyongle1996/article/details/737447703.安装python
一般linux系统都会自带python,查看是否安装python[root@mini3 bin]# python -V Python 2.7.5
4.安装storm
下载稳定版本的storm,然后解压将其拷贝到安装目录(目录可以任选):$ wget https://github.com/downloads/nathanmarz/storm/storm-0.8.1.zip $ unzip storm-0.8.1.zip $ mv storm-0.8.1 /home/storm/apps配置环境变量(可以不配置)
export STORM_HOME=/home/storm/apps export PATH=$PATH:$STORM_HOME/bin建立storm存储目录:
mkdir /home/storm/apps/storm-0.8.1/storm修改配置文件/usr/lib/storm/conf/storm.yaml,修改为如下:
storm.zookeeper.servers: #zookeeper集群主机名 - "mini1" - "mini2" - "mini3" ui.port: 8081 #Storm UI的服务端口 nimbus.host: "mini1" #Storm集群Nimbus所在机器主机名 storm.local.dir: "/home/storm/apps/storm-0.8.1/storm" #storm存储目录,刚才所创建的 supervisor.slots.ports: - 6700 - 6701 - 6702 - 6703
supervisor.slots.ports:对于每个Supervisor工作节点,需要配置该工作节点可以运行的worker数量。每个worker占用一个单独的端口用于接收消息,该配置选项即用于定义哪些端口是可被worker使用的。默认情况下,每个节点上可运行4个workers,分别在6700、6701、6702和6703端口
将storm分发到其他机器
scp -r storm-0.8.1/ root@mini2:/home/storm/apps scp -r storm-0.8.1/ root@mini3:/home/storm/apps
ok,配置完成,可以启动看看了。
5.启动
在nimbus.host所属的机器上启动 nimbus服务切换到storm目录下的bin目录(如果你没有配置环境变量的情况下)
nohup ./storm nimbus &
在nimbus.host所属的机器上启动ui服务
nohup ./storm ui &
在其它个点击上启动supervisor服务
nohup ./storm supervisor &启动好之后可以使用jps查看是否有相关进程,也可以使用浏览器访问如下:
OK,配置成功。
相关文章推荐
- storm的集群安装与配置
- storm单机版和集群版安装配置过程
- Storm集群安装配置详细方法
- storm的集群安装与配置
- storm集群安装配置
- storm0.9.1 集群环境安装配置
- (一) storm的集群安装与配置
- Twitter Storm安装配置(集群)笔记
- Storm系列(一)集群的安装配置
- Storm 集群安装配置
- Storm集群的安装与配置
- Storm集群的安装配置
- Storm入门到精通(二)----Storm集群安装配置
- storm单机版和集群版安装配置过程
- Storm集群安装配置详细步骤(接上篇VM安装及Ubuntu安装)
- [置顶] Jstorm安装与集群环境搭建(storm集群配置类似)
- Storm集群的安装配置
- Storm 集群的安装与配置
- storm安装集群配置详情
- storm集群安装配置