在 Mapping 里面,将 dynamic 参数设置成 strict 可以拒绝索引包含未知字段的文档。 此条 Tips 由 medcl 贡献。

社区日报 第244期 (2018-04-17)

1.一文告诉你为什么ELK如此流行与重要。
http://t.cn/RmQhDoR 
2.Elasticsearch全文搜索快速入门。
http://t.cn/RmQhFmc 
3.使用kafka与ElK收集并分析Log4j日志实战。
http://t.cn/RmQ7P4y 

编辑:叮咚光军
归档:https://elasticsearch.cn/article/578 
订阅:https://tinyletter.com/elastic-daily 
 
继续阅读 »
1.一文告诉你为什么ELK如此流行与重要。
http://t.cn/RmQhDoR 
2.Elasticsearch全文搜索快速入门。
http://t.cn/RmQhFmc 
3.使用kafka与ElK收集并分析Log4j日志实战。
http://t.cn/RmQ7P4y 

编辑:叮咚光军
归档:https://elasticsearch.cn/article/578 
订阅:https://tinyletter.com/elastic-daily 
  收起阅读 »

社区日报 第243期 (2018-04-16)

1.ES 5.4-5.5.2引起的Kibana性能问题。
https://elasticsearch.cn/article/269

2.ELK Stack最近在报表方面的改进和增强。
http://t.cn/RmYPe9t

3.使用kibana和Beats 来做安全分析。
http://t.cn/RmYhwEq 

编辑:cyberdak
归档:https://elasticsearch.cn/article/577
订阅:https://tinyletter.com/elastic-daily
 
继续阅读 »
1.ES 5.4-5.5.2引起的Kibana性能问题。
https://elasticsearch.cn/article/269

2.ELK Stack最近在报表方面的改进和增强。
http://t.cn/RmYPe9t

3.使用kibana和Beats 来做安全分析。
http://t.cn/RmYhwEq 

编辑:cyberdak
归档:https://elasticsearch.cn/article/577
订阅:https://tinyletter.com/elastic-daily
  收起阅读 »

社区日报 第242期 (2018-04-15)

1.Elasticsearch配置和性能调节。
http://t.cn/RmOXAb3
2.(自备梯子)AWS ElasticSearch索引快照。
http://t.cn/RmOa9o0
3.(自备梯子)是的,你应该删除Facebook。
http://t.cn/RmOa4DH

编辑:至尊宝
归档:https://elasticsearch.cn/article/576
订阅:https://tinyletter.com/elastic-daily
继续阅读 »
1.Elasticsearch配置和性能调节。
http://t.cn/RmOXAb3
2.(自备梯子)AWS ElasticSearch索引快照。
http://t.cn/RmOa9o0
3.(自备梯子)是的,你应该删除Facebook。
http://t.cn/RmOa4DH

编辑:至尊宝
归档:https://elasticsearch.cn/article/576
订阅:https://tinyletter.com/elastic-daily 收起阅读 »

社区日报 第241期 (2018-04-14)

  1. 使用ELK和AspectJ监控Spring应用(需翻墙) http://t.cn/RmCeqvP

  2. 视频:手把手教你在AWS平台部署基于容器的ES(需翻墙) http://t.cn/RmCkJze

  3. ES使用机器学习优化排序的插件。 http://t.cn/RJu5cw5
继续阅读 »
  1. 使用ELK和AspectJ监控Spring应用(需翻墙) http://t.cn/RmCeqvP

  2. 视频:手把手教你在AWS平台部署基于容器的ES(需翻墙) http://t.cn/RmCkJze

  3. ES使用机器学习优化排序的插件。 http://t.cn/RJu5cw5
收起阅读 »

6.x 复制片恢复引起flush操作死循环的BUG

⚠️ 截止目前最新的ES6版本6.2.3,存在一个复制片恢复过程中可能引起flush死循环的BUG。 我们近期一个ES6.2.2的集群触发了这个bug,导致了一些麻烦。对于写入量很高的集群,这个BUG可能会导致系统的文件描述符被耗尽,结点挂掉,并且重启后依然挂掉的情况。  
 
这个问题发生的时候,必须找到数据目录下,存在大量translog文件的索引目录(可能会有上万的translog文件),找到对应目录的索引名称,然后关闭复制片,待translog清理完毕以后,再打开复制片重新复制。 
 
该问题有人已经在GITHUB上汇报如下:
issues/29097
 
BUG已经被确认,修复代码已经进入6.2.4 pull/29125 ,但该版本还未正式release。
 
准备上6版本的同学先请稍待新版本发布以后再行动,已经在6版本的同学,注意监控结点的FD数量,持续升高的情况需要进行关注。
fds.jpg

 
 
继续阅读 »
⚠️ 截止目前最新的ES6版本6.2.3,存在一个复制片恢复过程中可能引起flush死循环的BUG。 我们近期一个ES6.2.2的集群触发了这个bug,导致了一些麻烦。对于写入量很高的集群,这个BUG可能会导致系统的文件描述符被耗尽,结点挂掉,并且重启后依然挂掉的情况。  
 
这个问题发生的时候,必须找到数据目录下,存在大量translog文件的索引目录(可能会有上万的translog文件),找到对应目录的索引名称,然后关闭复制片,待translog清理完毕以后,再打开复制片重新复制。 
 
该问题有人已经在GITHUB上汇报如下:
issues/29097
 
BUG已经被确认,修复代码已经进入6.2.4 pull/29125 ,但该版本还未正式release。
 
准备上6版本的同学先请稍待新版本发布以后再行动,已经在6版本的同学,注意监控结点的FD数量,持续升高的情况需要进行关注。
fds.jpg

 
  收起阅读 »

社区日报 第240期 (2018-04-13)

1、活久见 | 手机上查询Elasticsearch集群状态
http://t.cn/RmoY9w1
2、Elasticsearch高CPU消耗原因探究
http://t.cn/RmoYNPZ
3、Elasticsearch 写入速度优化到极限
http://t.cn/RWs8yvS

编辑:铭毅天下
归档:https://elasticsearch.cn/article/572
订阅:https://tinyletter.com/elastic-daily
 
继续阅读 »
1、活久见 | 手机上查询Elasticsearch集群状态
http://t.cn/RmoY9w1
2、Elasticsearch高CPU消耗原因探究
http://t.cn/RmoYNPZ
3、Elasticsearch 写入速度优化到极限
http://t.cn/RWs8yvS

编辑:铭毅天下
归档:https://elasticsearch.cn/article/572
订阅:https://tinyletter.com/elastic-daily
  收起阅读 »

终于把2升到6了,分享一下

https://jinleileiking.github.io/post/es6/
 
希望 wood 大佬能点评一下 @kennywu76
https://jinleileiking.github.io/post/es6/
 
希望 wood 大佬能点评一下 @kennywu76

社区日报 第239期 (2018-04-12)

  1. filebeat源码分析和grok feature新增。 http://t.cn/Rm6mJJ8

  2. Elasticsearch的轻量级http代理。 http://t.cn/Rm5F6eI

  3. Elasticsearch分布式一致性原理剖析(二)-Meta篇。 http://t.cn/Rm6mjla
继续阅读 »
  1. filebeat源码分析和grok feature新增。 http://t.cn/Rm6mJJ8

  2. Elasticsearch的轻量级http代理。 http://t.cn/Rm5F6eI

  3. Elasticsearch分布式一致性原理剖析(二)-Meta篇。 http://t.cn/Rm6mjla
收起阅读 »

社区日报 第238期 (2018-04-11)

1. 利用ELK处理Docker日志
http://t.cn/RmPvOG7 
2. 使用Elasticsearch的44条建议
http://t.cn/RmA5FAC 
3. 在Elasticsearch里面使用深度分页功能
http://t.cn/RmiNrdY 
 
编辑:江水
归档:https://elasticsearch.cn/article/569 
订阅:https://tinyletter.com/elastic-daily
 
继续阅读 »
1. 利用ELK处理Docker日志
http://t.cn/RmPvOG7 
2. 使用Elasticsearch的44条建议
http://t.cn/RmA5FAC 
3. 在Elasticsearch里面使用深度分页功能
http://t.cn/RmiNrdY 
 
编辑:江水
归档:https://elasticsearch.cn/article/569 
订阅:https://tinyletter.com/elastic-daily
  收起阅读 »

社区日报 第237期 (2018-04-10)

1.Elasticsearch分布式一致性原理剖析-节点篇。
http://t.cn/RmIN5RX 
2.ELK 系统在中小企业从0到1的落地实践。
http://t.cn/RmIN4C8 
3.ES查询流程剖析。
http://t.cn/RmIN2Pt 

编辑:叮咚光军
归档:https://elasticsearch.cn/article/568 
订阅:https://tinyletter.com/elastic-daily 
 
继续阅读 »
1.Elasticsearch分布式一致性原理剖析-节点篇。
http://t.cn/RmIN5RX 
2.ELK 系统在中小企业从0到1的落地实践。
http://t.cn/RmIN4C8 
3.ES查询流程剖析。
http://t.cn/RmIN2Pt 

编辑:叮咚光军
归档:https://elasticsearch.cn/article/568 
订阅:https://tinyletter.com/elastic-daily 
  收起阅读 »

苏州 同程艺龙 大数据开发工程师、大数据平台开发工程师、数据仓库开发工程师,内推啦,,,

有意向的小伙伴可以加我的微信,在其它平台上投过简历的就不要找我内推了。
 
 
 
 
 
 
 
有意向的小伙伴可以加我的微信,在其它平台上投过简历的就不要找我内推了。
 
 
 
 
 
 
 

社区日报 第236期 (2018-04-09)

1.(自备梯子)如何做到每秒一百万写入的es集群基准测试。
http://t.cn/Rm5uw5E

2.elasticsearch5.3.0 bulk index 性能调优实践
http://t.cn/Rm5uEYw

3.kibana 雷达图插件
http://t.cn/Rm5BvcW

编辑:cyberdak
归档:https://elasticsearch.cn/article/566
订阅:https://tinyletter.com/elastic-daily
 
继续阅读 »
1.(自备梯子)如何做到每秒一百万写入的es集群基准测试。
http://t.cn/Rm5uw5E

2.elasticsearch5.3.0 bulk index 性能调优实践
http://t.cn/Rm5uEYw

3.kibana 雷达图插件
http://t.cn/Rm5BvcW

编辑:cyberdak
归档:https://elasticsearch.cn/article/566
订阅:https://tinyletter.com/elastic-daily
  收起阅读 »

社区日报 第235期 (2018-04-08)

1.使用Logz.io和ELK进行AWS成本和使用情况报告分析 - 第2部分。
http://t.cn/RmGDHbc
2.(自备梯子)Logstash是否使用X-PACK。
http://t.cn/RmGezqS
3.(自备梯子)Facebook,告诉我该怎么做!
http://t.cn/RmGkTOQ

编辑:至尊宝
归档:https://elasticsearch.cn/article/565
订阅:https://tinyletter.com/elastic-daily
继续阅读 »
1.使用Logz.io和ELK进行AWS成本和使用情况报告分析 - 第2部分。
http://t.cn/RmGDHbc
2.(自备梯子)Logstash是否使用X-PACK。
http://t.cn/RmGezqS
3.(自备梯子)Facebook,告诉我该怎么做!
http://t.cn/RmGkTOQ

编辑:至尊宝
归档:https://elasticsearch.cn/article/565
订阅:https://tinyletter.com/elastic-daily 收起阅读 »

社区日报 第234期 (2018-04-06)

1. es同步分片策略解释
   http://t.cn/RmUe9yW
2. es深度分页方案
   http://t.cn/RmUDSI7
3. 关于为什么lucene在64位系统上要采用mmap的解释
   http://t.cn/zj8xz94
 
编辑: bsll
归档:https://elasticsearch.cn/article/564
订阅:https://tinyletter.com/elastic-daily
继续阅读 »
1. es同步分片策略解释
   http://t.cn/RmUe9yW
2. es深度分页方案
   http://t.cn/RmUDSI7
3. 关于为什么lucene在64位系统上要采用mmap的解释
   http://t.cn/zj8xz94
 
编辑: bsll
归档:https://elasticsearch.cn/article/564
订阅:https://tinyletter.com/elastic-daily 收起阅读 »