elastic按小时统计当天数据
2017-10-17 17:43
204 查看
要实现这样一个功能
select count(1),小时 from user where createDate=今天 group by 每小时
原本以为很简单的一个聚合很容易找到相关资料,没想到花了好几个小时
首先建一个测试的index和type,分别为ksearch_test和user,
建立mapping
http://ip:port/ksearch_test/user/_mapping PUT
实现聚合,按每小时统计当天数据:
http://ip:port/ksearch_test/user/_search POST
使用spring-data-elasticsearch在java中实现
select count(1),小时 from user where createDate=今天 group by 每小时
原本以为很简单的一个聚合很容易找到相关资料,没想到花了好几个小时
首先建一个测试的index和type,分别为ksearch_test和user,
建立mapping
http://ip:port/ksearch_test/user/_mapping PUT
{ "user":{ "properties":{ "name":{ "type":"string", "index":"not_analyzed" //不分词 }, "createDate":{ "type":"date", "index":"not_analyzed" } } } }
实现聚合,按每小时统计当天数据:
http://ip:port/ksearch_test/user/_search POST
{ "size": 0, "aggs": { "group_by_state": { "date_histogram": { //es提供的时间处理函数 "field": "createDate", //需要聚合的字段名字 "interval": "hour", //按小时group by "format": "yyyy-MM-dd HH", //返回值格式化,HH大写,不然不能区分上午、下午 "min_doc_count": 0, //为空填充0 "extended_bounds": { //需要填充0的范围 "min": "2016-12-19 01", "max": "2016-12-19 23" } } } }, "query": { //这就是where "filtered": { "filter": { "range": { "createDate": { "gte": "2016-12-19T00:00:00.000", "lt": "2016-12-20T00:00:00.000" } } } } } }
使用spring-data-elasticsearch在java中实现
@SuppressWarnings("deprecation") @Test public void group_by_day(){ String indexName = "ksearch_test3"; String typeName = "ks_user_trace"; //QueryBuilder queryBuilder = QueryBuilders.boolQuery().must(QueryBuilders.queryFilter(QueryBuilders.rangeQuery("create_time").gte("2016-11-19T01:00:00.000").lt("2016-12-19T00:00:00.000"))); QueryBuilder queryBuilder = QueryBuilders.queryFilter(QueryBuilders.rangeQuery("create_time").gte("2016-11-19T01:00:00.000").lt("2016-12-19T00:00:00.000")); AbstractAggregationBuilder aggregation = AggregationBuilders.dateHistogram("group_by_day").field("create_time").interval(DateHistogramInterval.DAY).format("yyyy-MM-dd").minDocCount(0L).extendedBounds("2016-11-19", "2016-12-19"); SearchRequestBuilder reqBuilder = client.prepareSearch(indexName) .setTypes(typeName) .setQuery(queryBuilder) .addAggregation(aggregation); SearchResponse resp = reqBuilder.execute().actionGet(); Aggregations aggs = resp.getAggregations(); InternalHistogram agg = aggs.get("group_by_day"); List<Bucket> buckets = (List<Bucket>) agg.getBuckets(); for(Bucket bucket:buckets){ Long docCount = bucket.getDocCount(); String date = bucket.getKeyAsString(); System.out.println(date+":"+docCount); } }
相关文章推荐
- 气象雨量数据按照小时整点统计,最后一点的数据取整点
- Sql Server 统计当天数据
- access 通过union以天为单位统计当天的每个时段的数据(24H)
- SQL server 按小时统计一天的数据
- 按天统计数据,如果当天没有记录,则统计为0
- mysql按照天统计报表当天没有数据填0的实现代码
- 使用SQL返回按小时排序的统计数据
- sql统计当天的数据
- mysql按照天统计报表,当天没有数据,填0
- Mysql按小时,按日,按周,按月,按季度,按年分组统计数据
- mysql按照天统计报表,当天没有数据,填0
- laravel实现按月或天或小时统计mysql数据
- Jawbone Up 数据的按小时统计及可视化(R 语言实现)
- 日期时间以天为单位统计小时区间时间段数据
- 按小时统计数据,无数据的时间点填充为0的实现方法
- 按周,按月,按日,按小时分组统计数据
- 时间数据统计~当天时间到上周的时间段
- mysql查询统计当天,本周,本月数据(time字段为时间戳格式)
- 按小时统计数据
- Mysql按小时统计数据