hbase 协处理器
2016-07-01 19:17
253 查看
hbase提供大数据存储方案,但是对数据查询,统计方面支持不多,如果把数据全部加载到客户端进行求和、均值,会对客户端造成很大压力,幸而hbase提供了协处理器,
下面是hbase自带的协处理器AggregationClient ,对表的行数进行汇总。
例子如下:
public int getRowCount(String tableName, String column) {
AggregationClient aggregationClient = new AggregationClient(conf);
Scan scan = new Scan();
//指定扫描列族,唯一值
scan.addFamily(Bytes.toBytes(column));
long rowCount = 0;
try {
rowCount = aggregationClient.rowCount(TableName.valueOf(tableName), new LongColumnInterpreter(), scan);
} catch (Throwable e) {
e.printStackTrace();
}
System.out.println("row count is " + rowCount);
return 0;
}
对于几百万行的表,查询时间在1s左右
下面是hbase自带的协处理器AggregationClient ,对表的行数进行汇总。
例子如下:
public int getRowCount(String tableName, String column) {
AggregationClient aggregationClient = new AggregationClient(conf);
Scan scan = new Scan();
//指定扫描列族,唯一值
scan.addFamily(Bytes.toBytes(column));
long rowCount = 0;
try {
rowCount = aggregationClient.rowCount(TableName.valueOf(tableName), new LongColumnInterpreter(), scan);
} catch (Throwable e) {
e.printStackTrace();
}
System.out.println("row count is " + rowCount);
return 0;
}
对于几百万行的表,查询时间在1s左右
相关文章推荐
- 关于ARM9协处理器CP15及MCR和MRC指令
- 深入浅出MIPS 三 MIPS的协处理器CP0 (Section 1)
- 深入浅出MIPS 三 MIPS的协处理器CP0 (Section 2)
- 深入浅出MIPS 三 MIPS的协处理器CP0 (Section 3)
- arm9 协处理器
- iOS开发 CoreMotion 获取当前运动状态 步行/跑步/自行车/驾车 CMMotionActivityManager
- 新书《Intel Xeon Phi协处理器高性能编程指南》 上市
- Hbase协处理器coprocessor
- HBase的协处理器编码实战
- Hbase协处理器(Coprocessor)
- ARM协处理器介绍
- HBase协处理器实战
- HBase 协处理器 (Coprocessors)
- ESP32 应用实践:基于 ULP 的超低功耗浇花设备
- ESP32 - ULP 协处理器在低功耗模式下读片内霍尔传感器 HALL SENSOR
- ESP32 - ULP 协处理器在超低功耗模式下软件模拟 I2C 读取光照传感器
- hbase协处理器引发的问题解决方案
- 怎么在S12X上使用XGATE协处理器
- Hbase 协处理器 Coprocessor
- ARM 汇编语言 学习