HBase1.2.3架构剖析(七)之 MOB
2017-02-24 09:52
155 查看
1 Storing Medium-sized Objects (MOB)
保存到HBase中的所有数据大小各异,包括二进制数据像图片或者文档是比较合适的(MOB技术存储和检索非结构化的数据)。Hbase从技术上可以处理大于100KB的cells二进制对象,HBase正常读写路径小于100KB是最优的。当HBase处理超过这个阀值的大对象,这儿称之为中等大小对象或者MOBs。性能下降的写入放大会导致拆分和compactions。用MOBs时,对象大小最好在100KB-10M之间。FIX_VERSION_NUMBER可以更好的管理大量的MOBs以保持性能,一致性和低成本的运营。要发挥MOB的优势需要使用HFile的版本3。1.1 MOB方式配置列
注意:这个特性是在版本3中(Hbase 0.98),在1.2版本并没有... HColumnDescriptor hcd = new HColumnDescriptor(“f”); hcd.setMobEnabled(true); ... hcd.setMobThreshold(102400L); ...
1.2 测试MOB
$ sudo -u hbase hbase org.apache.hadoop.hbase.IntegrationTestIngestMOB \ -threshold 102400 \ -minMobDataSize 512 \ -maxMobDataSize 5120
thresholds 是cells的阀值,默认1KB。
minMobDataSize MOB数据大小的最小值。默认为512B。
maxMobDataSize MOB数据大小的最大值。默认为5KB。
相关文章推荐
- HBase1.2.3架构剖析(七)之 MOB
- 二、HBase深入使用(2)—HBase架构深入剖析
- Hadoop核心架构HDFS+MapReduce+Hbase+Hive内部机理详解
- Hbase 之 HBase 的整体架构
- [转载]SQL Server内核架构剖析
- FrameWork层WiFi模块架构剖析
- OceanBase架构剖析(读写事务、单点性能、SSD支持、数据正确性、分层结构)
- ASP.NET温故而知新学习系列之深度剖析ASP.NET架构—HttpModule(二)
- Kafka剖析(一):Kafka背景及架构介绍
- kafka--Kafka剖析(一):Kafka背景及架构介绍
- 【转载】hbase系统架构及数据结构
- 最全最强解析:支付宝钱包系统架构内部剖析(架构图)
- Hbase系统架构及数据结构
- 阿里云HBase产品体系架构及特性解析
- Unity3D-深入剖析NGUI的游戏UI架构
- VLC架构剖析
- 从技术角度剖析云计算的架构
- Hbase架构与原理
- Ceph架构剖析
- hbase学习教程(一):hbase的概述和hbase架构及基本组件