搜索
查看
编辑修改
首页
UNITY
NODEJS
PYTHON
AI
GIT
PHP
GO
CEF3
JAVA
HTML
CSS
搜索
盐析白兔
这个屌丝很懒,什么也没留下!
关注作者
热门标签
jquery
HTML
CSS
PHP
ASP
PYTHON
GO
AI
C
C++
C#
PHOTOSHOP
UNITY
iOS
android
vue
xml
爬虫
SEO
LINUX
WINDOWS
JAVA
MFC
CEF3
CAD
NODEJS
GIT
Pyppeteer
article
热门文章
1
Python标准库函数之calendar的使用_itermonthdates 星期
2
万宾智能井盖,城市井盖管理得力助手
3
如何搭建Home Assistant智能家居系统并通过内网穿透实现远程控制家中设备_homeassist
4
Flutter之单例模式的四种方法_dart 设置单列模式
5
Python matplotlib.pyplot常用方法_plt.text(a, b + 0.05, '%.2f' % b, ha='center', va=
6
Hadoop-熟悉常用的HDFS操作_hadoop的常用命令实验报告
7
binbinyang-----自定义VIEW.刻度尺.左右滑动选择对应数值_android 自定义view 刻度滚动
8
【DL】2023年你应该知道的 10 大深度学习算法
9
用Python和开源NLP工具库开发一个小型聊天机器人原型
10
Navicat Premium 15数据库的使用【保姆级教程】_navicat premium 15中在librarydb数据库的表插入数据的命令
当前位置:
article
> 正文
Elasticsearch优化_elasticsearch 空间优化
作者:盐析白兔 | 2024-04-20 15:15:26
赞
踩
elasticsearch 空间优化
2.out of memory错误
因为默认情况下es对字段数据缓存(Field Data Cache)大小是无限制的,查询时会把字段值放到内存,特别是facet查询,对内存要求非常高,它会把结果都放在内存,然后进行排序等操作,一直使用内存,直到内存用完,当内存不够用时就有可能出现out of memory错误。
解决方法:
(1)设置es的缓存类型为Soft Reference,它的主要特点是据有较强的引用功能。只有当内存不够的时候,才进行回收这类内存,因此在内存足够的时候,它们通常不被回收。另外,这些引 用对象还能保证在Java抛出OutOfMemory 异常之前,被设置为null。它可以用于实现一些常用图片的缓存,实现Cache的功能,保证最大限度的使用内存而不引起OutOfMemory。在es的配置文件加上index.cache.field.type: soft即可。
(2)设置es最大缓存数据条数和缓存失效时间,通过设置index.cache.field.max_size: 50000来把缓存field的最大值设置为50000,设置index.cache.field.expire: 10m把过期时间设置成10分钟。
剩余磁盘空间达到es最小值,添加数据被block
PUT _all/_settings
{"index.blocks.read_only_allow_delete": null}
解除每次search最大10000size的限制
PUT [xxx]/_settings
{
"max_result_window" : 20000
}
删除单个index全部内容
DELETE /new_listings_investment
{ "query": { "match_all": {} } }
声明:
本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:
https://www.wpsshop.cn/w/盐析白兔/article/detail/457936
推荐阅读
article
Flink 输出至
Elasticsearch
_
flink
elasticsearch
sink
...
Flink 输出至
Elasticsearch
。_
flink
elasticsearch
sink
flink
elast...
赞
踩
article
Elasticsearch
的
嵌套
聚合和递归
查询
_
elasticsearch
嵌套
查询
...
是一个分布式搜索和分析引擎,可以用于处理大规模和复杂的数据集。在实际应用中,经常会遇到需要对多层
嵌套
文档进行聚合分析和递...
赞
踩
article
elasticSearch...
倒排索引中查找搜索串, 文档id bitset 过滤 追踪query,近256个query中超过次数 缓存bitset,...
赞
踩
article
Elasticsearch
文档中
嵌套
对
象
的管理_
elasticsearch
会
对
嵌套
对
象
创建
索引
吗...
在大数据领域中,
Elasticsearch
是一个非常强大的搜索和分析引擎,它能够处理海量的数据。
创建
索引
和映射定义了嵌...
赞
踩
article
Elasticsearch
:通过摄取
管道
加上嵌套
向量
对大型
文档
进行分块轻松地实现段落
搜索
_elast...
向量
搜索
是一种基于含义而不是精确或不精确的 token 匹配技术来
搜索
数据的强大方法。然而,强大的
向量
搜索
的
文本
嵌入模型...
赞
踩
article
elasticsearch
一对
多
嵌套
文档
_
elasticsearch
多
层
嵌套
...
嵌套
文档
就是在
文档
中再申明一个 nested 类型的属性。这个属性用来保存我们的子对象,就好像
嵌套
在主
文档
里面的一样。嵌...
赞
踩
article
ElasticSearch
【有与无】【
搜索引擎
】【ES27】
嵌套
对象
_
es
n
es
ted
filte...
目录1.简介1.1.
嵌套
对象
映射1.2.
嵌套
对象
查询1.3.使用
嵌套
字段排序1.4.
嵌套
聚合1.5.逆向
嵌套
聚合1.6....
赞
踩
article
ELK
企业级
日志
分析
系统(
elasticsearch
+
logstash
+
kibana
)...
ELK
平台是一套完整的
日志
集中处理解决方案,将ElasticSearch、Logstash 和 Kiabana三个开源工...
赞
踩
article
elk
(
elasticsearch
+
logstash
+
kibana
)搭建
日志
监控
平台_
elk
日志
监控
...
基于 ELK(Elasticsearch、Logstash、Kibana)技术栈搭建了一个
日志
监控
平台。_
elk
日志
监控
...
赞
踩
article
微
服务
04 分布式
搜索引擎
elasticsearch
DSL
数据
聚合
自动补全 数据同步 集群 微...
默认的拼音分词器会将每个汉字单独分为拼音,而我们希望的是每个词条形成一组拼音,需要对拼音分词器做个性化定制,形成自定义分...
赞
踩
article
Sleuth
,Zipkin集成
rabbitmq
和
elasticsearch
实战(
分布式
系统服务链追踪...
一、什么是
sleuth
1.微服务的现状?微服务的现状随着业务的发展,单体架构变为微服务架构,并且系统规模也变得越来越大,...
赞
踩
article
阿里开源组件
Canal
+消息队列
Kafka
构建
ElasticSearch
索引方案(一)_
canal
+...
Canal
前言最近工作中需要全新的构建一套微信小程序,在技术选型上思考很久,设计上需要满足以下条件:如何不依赖旧系统的数...
赞
踩
article
ELasticsearch
:什么
是
语义
搜索
?_
语义
搜索
引擎
有
哪些...
语义
搜索
是
一种解释单词和短语含义的
搜索
引擎
技术。
语义
搜索
的结果将返回与查询含义匹配的内容,而不
是
与查询中的单词字面匹配的...
赞
踩
article
Elasticsearch
:
语义
搜索
快速入门
_
elasticsearch
相似
文章
检测...
这个交互式 jupyter notebook 将使用官方向你介绍
Elasticsearch
的一些基本操作。你将使用进...
赞
踩
article
Chat
GPT
和
Elastic
search:使用
Elastic
数据
创建自定义
GPT
...
Chat
GPT
Plus 订阅者现在有机会创建他们自己的定制版
Chat
GPT
,称为
GPT
,这替代了之前博客文章中讨...
赞
踩
article
Elasticsearch
高频
面试题
(
含答案)_
es
面试题
...
关于分布式,限流+缓存+缓存,这三大技术
(
包含:ZooKeeper+Nginx+MongoDB+memcached+Re...
赞
踩
article
Elastic
search:如何将
MongoDB
数据引入
Elastic
Cloud
...
Elastic
Cloud
是由
Elastic
提供的基于云的托管服务。
Elastic
Cloud
允许客户在亚马逊...
赞
踩
article
Elasticsearch
.
NET
客户端
的演变...
在 .
NET
世界中,与
Elasticsearch
的集成长期以来一直由 NEST 库提供支持,该库作为开发人员与 E...
赞
踩
article
Elasticsearch
:简化
KNN
搜索...
在这篇博客文章中,我们将深入探讨我们为了使
KNN
搜索的入门体验变得更加简单而做出的努力!我们在 Elastic 处理...
赞
踩
article
RAG
(
Retrieval
Augmented
Generation) 结合
LlamaIndex
...
在这篇文章中,我们将讨论如何使用
RAG
技术(检索增强生成)和
Elasticsearch
作为向量数据库来实现问答体...
赞
踩
相关标签
flink
elasticsearch
大数据
java
面试
后端
性能优化
jenkins
搜索引擎
全文检索
人工智能
ElasticSearch
elk