橡皮、老虎皮、狮子皮哪一个最不好?

社区日报 第1111期 (2020-11-17)

1、微服务下使用 ELK 进行日志采集以及统一处理。
https://www.shangmayuan.com/a/ ... .html
2、如何将mysql数据同步到elasticsearch。
https://towardsdatascience.com ... 7b339
3、51个elasticsearch面试高频问题汇总。
https://www.softwaretestinghel ... ions/

编辑:叮咚光军
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
继续阅读 »
1、微服务下使用 ELK 进行日志采集以及统一处理。
https://www.shangmayuan.com/a/ ... .html
2、如何将mysql数据同步到elasticsearch。
https://towardsdatascience.com ... 7b339
3、51个elasticsearch面试高频问题汇总。
https://www.softwaretestinghel ... ions/

编辑:叮咚光军
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup 收起阅读 »

Elasticsearch:如何处理 ingest pipeline 中的异常

我详细地介绍了如何创建并使用一个 ingest pipeline。简单地说 pipeline 是一系列处理器的定义,这些处理器将按照声明的顺序执行。 pipeline 包含两个主要字段:描述和处理器列表:
 
pipeline.png


详细阅读 https://elasticstack.blog.csdn ... 49068
继续阅读 »
我详细地介绍了如何创建并使用一个 ingest pipeline。简单地说 pipeline 是一系列处理器的定义,这些处理器将按照声明的顺序执行。 pipeline 包含两个主要字段:描述和处理器列表:
 
pipeline.png


详细阅读 https://elasticstack.blog.csdn ... 49068 收起阅读 »

社区日报 第1110期 (2020-11-16)

1、 使用grafana监控elasticsearch
https://grafana.com/grafana/dashboards/2322

2、 es存储高可用方案:raid方案选择
http://m.gzmenghai.com/display ... 04608

3、 geo应用:附近的人搜索
https://www.cnblogs.com/kai-/p/13085809.html

编辑:cyberdak
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup 
继续阅读 »
1、 使用grafana监控elasticsearch
https://grafana.com/grafana/dashboards/2322

2、 es存储高可用方案:raid方案选择
http://m.gzmenghai.com/display ... 04608

3、 geo应用:附近的人搜索
https://www.cnblogs.com/kai-/p/13085809.html

编辑:cyberdak
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup  收起阅读 »

社区日报 第1109期 (2020-11-15)

1.Kibana的新架构。
https://www.elastic.co/cn/blog ... ibana
2.Splunk,Kibana和Graylog之间的差异。。
https://thehftguy.com/2020/08/ ... ylog/
3.(自备梯子)高通公司已获得美国许可以向华为出售一些4G智能手机芯片。
https://www.reuters.com/articl ... 7U0MW

编辑:至尊宝
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
继续阅读 »
1.Kibana的新架构。
https://www.elastic.co/cn/blog ... ibana
2.Splunk,Kibana和Graylog之间的差异。。
https://thehftguy.com/2020/08/ ... ylog/
3.(自备梯子)高通公司已获得美国许可以向华为出售一些4G智能手机芯片。
https://www.reuters.com/articl ... 7U0MW

编辑:至尊宝
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup 收起阅读 »

社区日报 第1108期 (2020-11-14)

1、基于 Elasticsearch 空间搜索的疫情追踪分析系统
https://mp.weixin.qq.com/s/K3cWG_NEPWU-21c59rKCKA
2、使用ELK和Logz.io收集consul指标
https://logz.io/blog/hashicorp-consul-metrics/
3、规划和压测指标型和日志型数据的ES集群
https://www.elastic.co/blog/be ... trics

 
编辑:wt
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup 
继续阅读 »
1、基于 Elasticsearch 空间搜索的疫情追踪分析系统
https://mp.weixin.qq.com/s/K3cWG_NEPWU-21c59rKCKA
2、使用ELK和Logz.io收集consul指标
https://logz.io/blog/hashicorp-consul-metrics/
3、规划和压测指标型和日志型数据的ES集群
https://www.elastic.co/blog/be ... trics

 
编辑:wt
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup  收起阅读 »

Elastic 7.10 发布了可搜索快照的公测版和 Kibana Lens 的正式版

我们非常高兴地宣布 Elastic 7.10 版正式发布。这一新版本为基于 Elastic Stack(包括 Elasticsearch、Kibana、Beats 和 Logstash)构建而成的 Elastic 企业搜索、可观测性和安全性等诸多解决方案带来了一系列的新功能。同时,7.10 版也为市场带来了意义非凡的新功能,改变了客户和用户通过可搜索快照在成本、性能和数据深度三者之间进行权衡的方式。通过 Elastic 企业搜索,可以轻松连接到 Slack 和 Salesforce 沙箱。Elastic 可观测性纳入了用户体验监测和合成等新功能。Elastic 安全通过使用公测版的事件查询语言 (EQL) 关联规则和指标匹配规则,实现了复杂威胁的自动检测及优先级排序。此外,7.10 版还将 Kibana Lens 正式版收入其中,这是一款功能强大的界面拖拽工具,可用于数据的可视化和分析。

而且,我们也在不断完善 Elastic Cloud 的功能,它是部署 Elastic Stack 和我们其他解决方案的理想空间。在过去的几个月当中,我们推出了一种解决方案专属的新入门体验,并增强了对审计日志访问的合规性。当然,Elastic 7.10 目前已在 Elastic Cloud 上提供,这是唯一一个包含 7.10 版本所有新功能的托管型 Elasticsearch 产品。或者,您也可以下载 Elastic Stack 以及我们的云编排产品 Elastic Cloud Enterprise 和 Elastic Cloud for Kubernetes,进行自管型部署。

这是一个打包发行版,我们将在下文中分享一些关键的版本亮点。如需了解全面的功能介绍,请详阅各个解决方案和产品的博文。现在,让我们先来以点概面地了解一下。
 
更多阅读,请参阅 https://elasticstack.blog.csdn ... 80461
继续阅读 »
我们非常高兴地宣布 Elastic 7.10 版正式发布。这一新版本为基于 Elastic Stack(包括 Elasticsearch、Kibana、Beats 和 Logstash)构建而成的 Elastic 企业搜索、可观测性和安全性等诸多解决方案带来了一系列的新功能。同时,7.10 版也为市场带来了意义非凡的新功能,改变了客户和用户通过可搜索快照在成本、性能和数据深度三者之间进行权衡的方式。通过 Elastic 企业搜索,可以轻松连接到 Slack 和 Salesforce 沙箱。Elastic 可观测性纳入了用户体验监测和合成等新功能。Elastic 安全通过使用公测版的事件查询语言 (EQL) 关联规则和指标匹配规则,实现了复杂威胁的自动检测及优先级排序。此外,7.10 版还将 Kibana Lens 正式版收入其中,这是一款功能强大的界面拖拽工具,可用于数据的可视化和分析。

而且,我们也在不断完善 Elastic Cloud 的功能,它是部署 Elastic Stack 和我们其他解决方案的理想空间。在过去的几个月当中,我们推出了一种解决方案专属的新入门体验,并增强了对审计日志访问的合规性。当然,Elastic 7.10 目前已在 Elastic Cloud 上提供,这是唯一一个包含 7.10 版本所有新功能的托管型 Elasticsearch 产品。或者,您也可以下载 Elastic Stack 以及我们的云编排产品 Elastic Cloud Enterprise 和 Elastic Cloud for Kubernetes,进行自管型部署。

这是一个打包发行版,我们将在下文中分享一些关键的版本亮点。如需了解全面的功能介绍,请详阅各个解决方案和产品的博文。现在,让我们先来以点概面地了解一下。
 
更多阅读,请参阅 https://elasticstack.blog.csdn ... 80461 收起阅读 »

社区日报 第1107期 (2020-11-13)

1、新特性:Elasticsearch 可搜索快照解读
https://www.elastic.co/cn/blog ... shots
2、markdow 博客快速集成Elasticsearch 开源实现
https://github.com/lakhansamani/md-to-es
3、Mysql 同步 Elasticsearch 最新开源实现
https://github.com/redouane-de ... mysql
 
编辑:铭毅天下
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup 
继续阅读 »
1、新特性:Elasticsearch 可搜索快照解读
https://www.elastic.co/cn/blog ... shots
2、markdow 博客快速集成Elasticsearch 开源实现
https://github.com/lakhansamani/md-to-es
3、Mysql 同步 Elasticsearch 最新开源实现
https://github.com/redouane-de ... mysql
 
编辑:铭毅天下
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup  收起阅读 »

社区日报 第1106期 (2020-11-12)

1.Elastic 7.10 版正式发布
https://www.elastic.co/cn/blog ... oring
2.通过pprof优化filebeat性能
https://segmentfault.com/a/1190000021307490
3.如何让匿名的用户访问受限的资源
https://elasticstack.blog.csdn ... 24574

编辑:金桥
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup 
继续阅读 »
1.Elastic 7.10 版正式发布
https://www.elastic.co/cn/blog ... oring
2.通过pprof优化filebeat性能
https://segmentfault.com/a/1190000021307490
3.如何让匿名的用户访问受限的资源
https://elasticstack.blog.csdn ... 24574

编辑:金桥
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup  收起阅读 »

社区日报 第1105期 (2020-11-11)

1.登录Kubernetes:EFK与PLG堆栈
https://www.infracloud.io/blog ... tack/
2.关于Elasticsearch的6件不太明显的事情
https://blog.softwaremill.com/ ... 94aa4
3.使用Kibana Advisor克服Kibana中的Lucene陷阱
https://logz.io/blog/kibana-ad ... alls/

编辑:寂寞的烟
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
继续阅读 »
1.登录Kubernetes:EFK与PLG堆栈
https://www.infracloud.io/blog ... tack/
2.关于Elasticsearch的6件不太明显的事情
https://blog.softwaremill.com/ ... 94aa4
3.使用Kibana Advisor克服Kibana中的Lucene陷阱
https://logz.io/blog/kibana-ad ... alls/

编辑:寂寞的烟
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup 收起阅读 »

社区日报 第1104期 (2020-11-10)

1.Beats+Logstash+Elasticsearch+Kibana基础整合
http://chaooo.github.io/article/20191123.html
2.Elasticsearch:常见索引异常
https://mincong.io/2020/09/13/es-index-exceptions/
3.使用ksqlDB和Elasticsearch构建Clickstream仪表板应用程序
https://www.confluent.io/blog/ ... nnect

编辑:寂寞的烟
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
继续阅读 »
1.Beats+Logstash+Elasticsearch+Kibana基础整合
http://chaooo.github.io/article/20191123.html
2.Elasticsearch:常见索引异常
https://mincong.io/2020/09/13/es-index-exceptions/
3.使用ksqlDB和Elasticsearch构建Clickstream仪表板应用程序
https://www.confluent.io/blog/ ... nnect

编辑:寂寞的烟
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup 收起阅读 »

社区日报 第1103期 (2020-11-09)

1.亿级数据检索优化,三秒返回数据
https://dbaplus.cn/news-73-2857-1.html

2.使用logstash的prune 功能进行字段白名单过滤
https://blog.csdn.net/UbuntuTo ... 94282

3.kibana cohort插件,帮助你快速进行留存率分析
https://github.com/elo7/cohort

编辑:cyberdak
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
继续阅读 »
1.亿级数据检索优化,三秒返回数据
https://dbaplus.cn/news-73-2857-1.html

2.使用logstash的prune 功能进行字段白名单过滤
https://blog.csdn.net/UbuntuTo ... 94282

3.kibana cohort插件,帮助你快速进行留存率分析
https://github.com/elo7/cohort

编辑:cyberdak
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup 收起阅读 »

Elasticsearch:如何在聚合时选择所需要的 bucket 并进行可视化

Elasticsearch 是一个针对大数据的强大搜索引擎,它也是一个强大的数据分析引擎。采集上来的数据如果不经过分析,并生产有意义的见解,就没有任何的价值。在之前的文章中,我们已经详细讲解了有关 Elasticsearch 的聚合(aggregation)。如果你对 Elasticsearch 的聚合还是不太很清楚的话,请参阅我之前的文章:


在我们生成聚合时,我们可以通过 Bucket aggregation 来对数据进行分组,并分别计算它们的指标。但是,在实际的使用中,我们可能面对有些 bucket 并不是我们想要的 bucket,比如有些 bucket 的数据只有一个或者两个,或者是0个,那么我们并不想这些数据展示在我们的结果中。还有一种情况,比如我们只想针对每周的一个特定的天来做一个聚合。针对这些情况,我们该如何来配置我们的聚合呢?

在今天的文章中,我们将使用两种方法来对 bucket 进行选择:
  • 通过使用 min_doc_count 来控制每个 bucket 的最低显示文档数
  • 通过 bucket_selector 来挑选我们想要的 bucket 

 
更多阅读,请参阅 https://elasticstack.blog.csdn ... 56524
继续阅读 »
Elasticsearch 是一个针对大数据的强大搜索引擎,它也是一个强大的数据分析引擎。采集上来的数据如果不经过分析,并生产有意义的见解,就没有任何的价值。在之前的文章中,我们已经详细讲解了有关 Elasticsearch 的聚合(aggregation)。如果你对 Elasticsearch 的聚合还是不太很清楚的话,请参阅我之前的文章:


在我们生成聚合时,我们可以通过 Bucket aggregation 来对数据进行分组,并分别计算它们的指标。但是,在实际的使用中,我们可能面对有些 bucket 并不是我们想要的 bucket,比如有些 bucket 的数据只有一个或者两个,或者是0个,那么我们并不想这些数据展示在我们的结果中。还有一种情况,比如我们只想针对每周的一个特定的天来做一个聚合。针对这些情况,我们该如何来配置我们的聚合呢?

在今天的文章中,我们将使用两种方法来对 bucket 进行选择:
  • 通过使用 min_doc_count 来控制每个 bucket 的最低显示文档数
  • 通过 bucket_selector 来挑选我们想要的 bucket 

 
更多阅读,请参阅 https://elasticstack.blog.csdn ... 56524 收起阅读 »

社区日报 第1102期 (2020-11-08)

1.Elasticsearch 和 BERT 用于高级文档搜索。
https://github.com/Hironsan/bertsearch
2.在超级计算机上运行Elasticsearch。
https://www.objectrocket.com/b ... know/
3.(自备梯子)苹果禁止游戏流媒体服务,除非单个游戏获得批准。
https://www.bbc.com/news/technology-53693581

编辑:至尊宝
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
继续阅读 »
1.Elasticsearch 和 BERT 用于高级文档搜索。
https://github.com/Hironsan/bertsearch
2.在超级计算机上运行Elasticsearch。
https://www.objectrocket.com/b ... know/
3.(自备梯子)苹果禁止游戏流媒体服务,除非单个游戏获得批准。
https://www.bbc.com/news/technology-53693581

编辑:至尊宝
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup 收起阅读 »

社区日报 第1100期 (2020-11-06)

1、给Node 开发者的 Elasticsearch 使用指南
https://livecodestream.dev/pos ... pers/
 
2、基于Elasticsearch、Kafka构建实时处理管道实践(梯子)
https://digitalmarketingfy.com ... rt-1/
 
3、使用Elastic监视Java应用程序:多服务跟踪和相关日志
https://www.elastic.co/cn/blog ... -logs
 
编辑:铭毅天下
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
继续阅读 »
1、给Node 开发者的 Elasticsearch 使用指南
https://livecodestream.dev/pos ... pers/
 
2、基于Elasticsearch、Kafka构建实时处理管道实践(梯子)
https://digitalmarketingfy.com ... rt-1/
 
3、使用Elastic监视Java应用程序:多服务跟踪和相关日志
https://www.elastic.co/cn/blog ... -logs
 
编辑:铭毅天下
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup 收起阅读 »