你的浏览器禁用了JavaScript, 请开启后刷新浏览器获得更好的体验!
输入关键字进行搜索
搜索:
发现
分享
文章
活动
登录
提问：布和纸怕什么？
logstash 写入ElasticSearch占用大量带宽
Logstash
| 作者
Jerakrs
| 发布于2016年11月04日 | 阅读数：
5193
分享到：
QQ空间
新浪微博
微信
QQ好友
印象笔记
有道云笔记
单个logstash，每秒从kafka中读取一万条日志数据，占用带宽6Mbps，不做任何处理，直接写入ES，却占用80Mbps的带宽，正常吗？该怎么解决
没有找到相关结果
已邀请:
与内容相关的链接
提交
1 个回复
y676360
赞同来自:
在logstash中做日志处理没？一般输出格式转为json都会有较大的数据膨胀，并且在logstash中是否有日志增强?都可可以确认下。
可以从kafka中取出原始日志，再抓取logstash中的输出，两者对比一下即可。
要回复问题请先
登录
或
注册
发起人
Jerakrs
活动推荐
Jun
17
搜索客 Meetup 讲师招募（长期有效）
线上
·
6-17 周一
·
进行中
Nov
30
【活动报名】ClickHouse Beijing User Group 第2届 Meetup
北京
·
11-30 周六
·
报名中
相关问题
elasticsearch scroll查询的原理没太懂
我来写第一个帖子-你们都是什么时候知道elasticsearch的？
怎么解决elasticsearch集群占用太多虚拟内存(VIRT)的问题？占用了几十个G，有什么可以对它进行限制的相关设置吗？
elasticsearch 设置 node.data: false 依然有数据
ES集群，进行大量删除操作时候，bulk队列溢出
ElasticSearch-Hadoop的目標是什麼呢??
elasticsearch functionScoreQuery scriptFunction效率问题
如何清理Elasticsearch特定时间段数据？
请教elasticsearch出现unassigned shards根本原因
Elasticsearch聚合操作的时间复杂度是O(n)吗？
如何设置分配给elasticsearch的内存大小？
问题状态
最新活动:
2016-12-12 11:36
浏览:
5193
关注:
3
人
1 个回复
y676360
赞同来自:
可以从kafka中取出原始日志，再抓取logstash中的输出，两者对比一下即可。