The requested URL was not found on this server. 不管你信不信，反正我是没找到

从filebeat到es，引起es服务器cpu超高问题

Elasticsearch | 作者 loveyang2012 | 发布于2018年09月26日 | 阅读数：4305
分享到：QQ空间新浪微博微信QQ好友印象笔记有道云笔记
日志收集流程就是就是从filebeat直接到es，es用的2台做的集群，在使用的时候发现2台es的服务器cpu超高，传送日志应该是io密集啊，怎么会占用大片时间cpu呢？下面2个图是2台服务器的cpu截图

111.png


112.png

 
2018-09-26 添加评论

没有找到相关结果

    已邀请:

    rochy - rochy_he

    赞同来自: loveyang2012

    CPU 高可能有以下原因：
    1. filebeat 频繁提交：你可以将 bulk_size 设置的稍微大一些；
    2. 你的日志中有一个或者多个字段建立索引时用到的分词器比较耗 CPU：根据需求调整 mapping；
    3. 你的日志就是特别多，2 台 ES 难以处理：增加节点或者在中间加入 kafka 做缓冲。
    2018-09-26 1 0
    分享

    aslan

    赞同来自:

    这个是正常的，你查下
     
    curl -X get /_cat/nodes/hot_threads
    看哪个线程占用cpu高
    网上有很多优化教程
    2018-09-27 0 0
    分享
    为什么被折叠? 0 个回复被折叠

    要回复问题请先登录或注册

    Copyright © 2024 · CC BY-NC-SA 3.0

    本站服务器及带宽由 提供赞助