第53课: Spark大型项目广告点击项目技术骨架实现之Spark+Kafka+Flume实战
2016-09-28 09:40
239 查看
Flume
Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。
kafka
http://kafka.apache.org/
flume
http://flume.apache.org/FlumeUserGuide.html
zookeeper
http://zookeeper.apache.org/
Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。
kafka
http://kafka.apache.org/
flume
http://flume.apache.org/FlumeUserGuide.html
zookeeper
http://zookeeper.apache.org/
相关文章推荐
- 大数据Spark“蘑菇云”行动第53课: Spark大型项目广告点击项目技术骨架实现之Spark+Kafka+Flume实战 项目!!!大项目!!!超大型大数据项目!!!
- 第53课实战操作Kafka+Flume成功! Spark大型项目广告点击项目技术骨架实现之Spark+Kafka+Flume实战
- Spark广告点击项目技术骨架一
- Spark广告点击项目技术骨架二
- 大数据Spark “蘑菇云”行动第52课: Spark大型项目广告点击项目数据建模 项目!!!大项目!!!超大型大数据项目!!!
- 第52课: Spark大型项目广告点击项目数据建模
- 第三课、Spark大型项目广告点击项目数据建模
- 大数据Spark “蘑菇云”行动第59课: 广告点击系统TopN热门广告分析与实现
- 大数据Spark “蘑菇云”行动第60课: 广告点击系统广告点击趋势分析与实现
- 第111讲: Spark Streaming电商广告点击综合案例在线实现每个Province点击排名Top5广告
- 第108讲: Spark Streaming电商广告点击综合案例动态黑名单过滤真正的实现代码
- 大数据Spark“蘑菇云”行动第55课:在线广告点击流处理代码的分析和实现
- 第110课: Spark Streaming电商广告点击综合案例通过updateStateByKey等实现广告点击流量的在线更新统计
- 第105讲 Spark Streaming电商广告点击综合案例在线点击统计实战项目第一天
- 大数据Spark“蘑菇云”项目实战第63课: 广告点击系统高可用性和性能优化 checkpoint wal driver高可用 并行度配置
- 大数据Spark “蘑菇云”行动第58课: 广告点击广告累计点击数分析与实现
- 第108课: Spark Streaming电商广告点击综合案例动态黑名单过滤真正的实现代码
- 第107课: Spark Streaming电商广告点击综合案例底层数据层的建模和编码实现(基于MySQL)
- 第107课: Spark Streaming电商广告点击综合案例底层数据层的建模和编码实现(基于MySQL)
- 第104讲: Spark Streaming电商广告点击综合案例需求分析和技术架构