flume高并发优化——(5)KafkaOffsetMonitor
2016-04-25 18:05
399 查看
本片博客是介绍一款kafka监控的软件,以配合查看flume的kafka channel性能,其实这是个非常简单的项目,我们只需要下载好jar包,就可以使用了
1,下载jar包
http://pan.baidu.com/s/1eSPlzpw
2,启动
3,查看
输入网址,我的是http://192.168.10.84:8089
效果:
3,参数说明
Topic:创建Topic名称
Partition:分区编号
Offset:表示该Parition已经消费了多少Message
LogSize:表示该Partition生产了多少Message
Lag:表示有多少条Message未被消费
Owner:表示消费者
Created:表示该Partition创建时间
Last Seen:表示消费状态刷新最新时间
总结:
通过观察我们发现,现在虽然kafka的压力不大,但是基本上性能瓶颈的压力都在kafka和es上了,这样我们就能安心吃晚餐了,不会被半夜叫醒调bug了!由此可见,简化架构是一个多么明智的决定啊!希望这几篇博客能帮到你,也不被半夜叫醒!
1,下载jar包
http://pan.baidu.com/s/1eSPlzpw
2,启动
java -cp KafkaOffsetMonitor-assembly-0.2.0.jar \ com.quantifind.kafka.offsetapp.OffsetGetterWeb \ --zk 192.168.2.16:2181 \ --port 8089 \ --refresh 10.seconds \ --retain 30.days
3,查看
输入网址,我的是http://192.168.10.84:8089
效果:
3,参数说明
Topic:创建Topic名称
Partition:分区编号
Offset:表示该Parition已经消费了多少Message
LogSize:表示该Partition生产了多少Message
Lag:表示有多少条Message未被消费
Owner:表示消费者
Created:表示该Partition创建时间
Last Seen:表示消费状态刷新最新时间
总结:
通过观察我们发现,现在虽然kafka的压力不大,但是基本上性能瓶颈的压力都在kafka和es上了,这样我们就能安心吃晚餐了,不会被半夜叫醒调bug了!由此可见,简化架构是一个多么明智的决定啊!希望这几篇博客能帮到你,也不被半夜叫醒!
相关文章推荐
- 团队项目个人工作总结(4月25日)
- MySQL引擎
- TCP IP网络编程2 简单的Web服务器
- Apache的安装
- 创业第一步
- python logging模块的简单使用
- RxJava----操作符:创建操作符
- android使用百度地图获取当前经纬度
- Android中Drawable和Bitmap的区别及互相转化
- android打包apk流程
- nginx 多个站点配置
- 详解Java中的注解
- 关于无穷大量的选择
- Win10手动添加开始磁铁
- 查找数据库中字段为空和0的数据
- Eclipse下NDK开发与调试
- 手把手教导航头像缩放效果
- AndroidStudio错误汇总(一)
- 各个JSON技术的比较
- 架构のHP&HA&LB