当前位置:   article > 正文

ElasticSearch查询大于10000条的数据_es查询10000条后的数据

es查询10000条后的数据

注: 部分概念介绍来源于网络

在使用es进行数据查询时,由于es官方默认限制了索引一次性最多只能查询10000条数据,查询第10001条数据开始就会报错,
错误的内容大致为:

Result window is too large, from + size must be less than or equal to:[10000] but was [10500]. See the scroll api for a more efficient way to requestlarge data sets. This limit can be set by changing the[index.max_result_window] index level parameter

方案1:在设置索引属性时解除索引最大查询数的限制

put _all/_settings
{
“index.max_result_window”:20000
}
_all表示所有索引,针对单个索引的话修改成索引名称即可

方案2:修改集群配置config/elasticsearch.yml 文件
增加如下配置

max_result_window: 20000

方案3:在创建索引的时候加上

“settings”:{
“index”:{
“max_result_window”: 20000
}
}

如果这样设置完毕之后还不行,这时候需要在API中添加一行代码:

searchSourceBuilder.trackTotalHits(true);

如果是使用kibana等工具的dsl语句,可以参考下面编写

GET 索引名/_search
{
“query”: {
“match_all”: {}
},
“track_total_hits”:true
}

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/笔触狂放9/article/detail/402158
推荐阅读
相关标签
  

闽ICP备14008679号