你的浏览器禁用了JavaScript, 请开启后刷新浏览器获得更好的体验!
发现
分享
文章
活动
登录
行动是治愈恐惧的良药,而犹豫、拖延将不断滋养恐惧。
请教下写入es的并发量.
Elasticsearch
| 作者
coolloves
| 发布于2016年04月05日 | 阅读数:
14939
分享到:
QQ空间
新浪微博
微信
QQ好友
印象笔记
有道云笔记
目前使用的rsyslog写入es,有些离线数据想导入es,就通过rsyslog的imfile读入后解析然后传给es,看了下,大约5k doc/s的速度导入,那么几百g的日志导入进去,貌似时间也挺久的,有什么其他的途径能更快点吗?
没有找到相关结果
已邀请:
与内容相关的链接
提交
1 个回复
helloes
赞同来自:
stab
、
coolloves
用SSD
多线程bulk
尽量设置每个bulk的大小在5~15M左右
增加节点、分片
设置多个path.data目录,或配置RAID 0阵列
如果用的是SSD,设置index.store.throttle.type:none
禁用_all
增大index.refresh_interval的值,默认1s
增大index.translog.flush_threshold_size的值
设置0副本,建完索引优化后再增加副本
增大indices.memory.index_buffer_size的值
用比较新版本的ES
要回复问题请先
登录
或
注册
发起人
coolloves
search...
活动推荐
Aug
15
2025 Zabbix 中国峰会
上海
·
8-15 周五
·
报名中
Oct
17
第27届 GOPS 全球运维大会暨研运数智化技术峰会 · 上海站
上海
·
10-17 周五
·
报名中
相关问题
请教elasticsearch出现unassigned shards根本原因
ES集群CPU、负载性能问题优化,请教各位!
query_string查询多值字段问题请教
聚合脚本请教
Elasticsearch写入速度越来越慢
elasticsearch集群高写入的问题?
大佬们,有一个疑惑,既然在写入文档时,有机会和时间去写translog到磁盘,为什么还要再费劲去写内存呢?
ES集群总是会发生熔断,且已经做过扩容,请教下大佬
来自不同输入源的日志(有不同的index名称),出现在一个index里,请教怎么处理
请教大佬,搜索结果按某个字段进行分类,每个分类第一条结果优先展示,同一分类其他结果进行减分降权(不是过滤掉),应该怎么做呢
es5.6.8写入性能没有es2.3.4好
问题状态
最新活动:
2016-04-05 10:25
浏览:
14939
关注:
3
人
1 个回复
helloes
赞同来自: stab 、coolloves