1. 调整内存占用
修改config/jvm.options里的默认1g增大.自己看情况改。
# Xms represents the initial size of total heap space
# Xmx represents the maximum size of total heap space
-Xms4g
-Xmx4g
关于用到的垃圾回收器等等,分析gc日志前,建议先默认就可以里.默认也是配置CMS和G1这种高效的收集器。
2. 添加设置
修改cofig/elasticsearch.yml:
indices.memory.index_buffer_size: 40%
# 写入线程个数(默认:5*cores数),对应旧版本的bulk.size
thread_pool.write.size: 5
thread_pool.write.queue_size: 1000
3. 修改服务器参数
vi /etc/security/limits.conf
配置如下:
* soft nofile 65536
* hard nofile 65536
调整最大虚拟内存:
vi /etc/sysctl.conf
追加内容:
vm.max_map_count=655360
注意:需要执行“sysctl -p”生效。
另外,在ES的官方文档上,要求Disabled Swapping,执行“swapoff -a”(临时)。要永久的关闭swapping,需要编辑/etc/fstab文件,将包含swap的行的注释掉。
/dev/mapper/centos-root / xfs defaults 0 0
UUID=6a38540f-2ba9-437b-ac8b-8757f5754fff /boot xfs defaults 0 0
# /dev/mapper/centos-swap swap swap defaults 0 0
4. 动态调整index设置
比如这里的写入调优,可以把刷新时间设置为不刷新:
curl -H "Content-Type: application/json" -XPUT '127.0.0.1:9500/index_name/_settings' -d '{"index" : {"refresh_interval" : "-1" }}'
设置异步同步磁盘:
# 语法同第一条.就是加参数
"index" : {"translog.durability":"async" }
还有磁盘刷新的间隔:
index.translog.sync_interval
5. 批量插入
参考
博客园:Elasticsearch7.6.*写入调优配置
https://www.cnblogs.com/MyOceansWeb/p/12653965.html