怎么又是你

关于filebeat采集数据问题

Beats | 作者 tyzuo | 发布于2018年11月02日 | 阅读数:2516

hi,我们使用filebeat采集数据送往es中,采集的数据是实时生成的,日志是按照日期存放。但是有的时候会出现某天的数据采集失败,应该是日志生产过程中还没完成,此时filebeat去解析导致失败,该问题如何解决?
已邀请:

wp13142025891 - es user

赞同来自: Jiehui Tang

一般不会使用filebeat 去解析,应该是filebeat采集 进入logstash,在logstash中解析,然后发送到ES,这中间通过他自己的ack机制可以保证数据不丢失

要回复问题请先登录注册