Storm入门之附录B
2015-06-07 12:03
337 查看
本文翻译自《Getting Started With Storm》译者:吴京润 编辑:郭蕾 方腾飞
有以下两种方式创建Storm集群:
使用Storm部署在亚马逊EC2上面创建一个集群,就像你在第6章看到的。
手工安装(详见本附录)
要手工安装Storm,需要先安装以下软件
Zookeeper集群(安装方法详见管理向导)
Java6.0
Python2.6.6
Unzip命令
NOTE: Nimbus和管理进程将要依赖Java、Python和unzip命令
安装本地库:
安装ZeroMQ:
安装JZMQ:
本地库安装完了,下载最新的Storm稳定版(写作本书时是Storm0.7.1。译者注:翻译本章时已是v0.9.1,可从http://storm.incubator.apache.org/或https://github.com/apache/incubator-storm/releases下载),并解压缩。
编辑配置文件,增加Storm集群配置(可以从Storm仓库的defaults.yaml看到所有的默认配置)。
编辑Storm目录下的conf/storm.yaml,添加以下参数,增加集群配置:
storm.zookeeper.servers:
– "zookeeper addres 1"
– "zookeeper addres 2"
– "zookeeper addres N"
storm.local.dir: "a local directory"
nimbus.host: "Nimbus host addres"
supervisor.slots.ports:
– supervisor slot port 1
– supervisor slot port 2
– supervisor slot port N
参数解释:
storm.zookeeper.servers
你的zookeeper服务器地址。
原创文章,转载请注明: 转载自并发编程网 – ifeve.com
安装Storm集群
译者注:本附录的内容已经有些陈旧了。最新的Storm已不再必须依赖ZeroMQ,各种依赖的库和软件也已经有更新的版本。有以下两种方式创建Storm集群:
使用Storm部署在亚马逊EC2上面创建一个集群,就像你在第6章看到的。
手工安装(详见本附录)
要手工安装Storm,需要先安装以下软件
Zookeeper集群(安装方法详见管理向导)
Java6.0
Python2.6.6
Unzip命令
NOTE: Nimbus和管理进程将要依赖Java、Python和unzip命令
安装本地库:
安装ZeroMQ:
01 | wget http://download.zeromq.org/historic/zeromq-2.1.7. tar .gz |
02 |
03 | tar -xzf zeromq-2.1.7. tar .gz |
04 |
05 | cd zeromq-2.1.7 |
06 |
07 | ./configure |
08 |
09 | make |
10 |
11 | sudo make install |
1 | git clone https://github.com/nathanmarz/jzmq.git |
2 | cd jzmq |
3 | ./autogen.sh |
4 | ./configure |
5 | make |
6 | sudo make install |
编辑配置文件,增加Storm集群配置(可以从Storm仓库的defaults.yaml看到所有的默认配置)。
编辑Storm目录下的conf/storm.yaml,添加以下参数,增加集群配置:
storm.zookeeper.servers:
– "zookeeper addres 1"
– "zookeeper addres 2"
– "zookeeper addres N"
storm.local.dir: "a local directory"
nimbus.host: "Nimbus host addres"
supervisor.slots.ports:
– supervisor slot port 1
– supervisor slot port 2
– supervisor slot port N
参数解释:
storm.zookeeper.servers
你的zookeeper服务器地址。
storm.local.dir: Storm进程保存内部数据的本地目录。(务必保证运行Storm进程的用户拥有这个目录的写权限。)
nimbus.host Nimbus运行的机器的地址
supervisor.slots.ports 接收消息的工人进程监听的端口号(通常从6700开始);管理进程为这个属性指定的每个端口号运行一个工人进程。 当你完成了这些配置,就可以运行所有的Storm进程了。如果你想运行一个本地进程测试一下,就把nimbus.host配置成localhost。 启动一个Storm进程,在Storm目录下执行:./bin/storm 进程名。 NOTE:Storm提供了一个出色的叫做Storm UI的工具,用来辅助监控拓扑。
原创文章,转载请注明: 转载自并发编程网 – ifeve.com
相关文章推荐
- nyoj 171 聪明的kk
- JQuery学习笔记(一)
- 【百度之星复赛】最强密码
- Linux内核与驱动开发学习总结:内核访问外设IO.map_desc和ioremap(七)
- 练习作品13:电子试卷自动生成软件
- JNDI介绍
- [DP][NOIP2004] 合唱队形
- 第13周项目1-动物这样叫(2)
- Storm入门之附录A
- Storm入门之第8章事务性拓扑
- Automatic WordPress Updates Using FTP/FTPS or SSH
- 【转】如何查看linux版本 如何查看LINUX是多少位
- 性能测试是目的
- nil、null与ngx.null
- OJ 求硬币组合数
- My First Blog,It's my Start!
- 权限表的设计
- Linux内核与驱动开发学习总结:原子操作实现(六)
- ASP.NET检测到不安全 Request.Form 值解决方案汇总
- [DP]LIS+LCS+最大连续子段和