1.AWS 上有多少客户的 Elasticsearch 是裸奔的？（需要梯子）
https://medium.com/bugbountywr ... a7f32
2.基于 Golang 的 Elasticsearch DSL Query Builder
https://github.com/sdqri/effdsl
3.零停机迁移 Elasticsearch 集群（需要梯子）
https://medium.com/%40flavienb ... be674

编辑：Se7en
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup
B站： https://ela.st/bilibili

1.人人在用的微信支付，腾讯云大数据ES如何让它低成本高可用？
https://mp.weixin.qq.com/s/1kiqfw5Gvevibpx9FB7V-g
2.怎么在云服务之间不停机迁移 ES（需要梯子）
https://medium.com/%40sairanja ... 5aca9
3.Logstash：在 Logstash 管道中的定制的 Elasticsearch update by query
https://blog.csdn.net/UbuntuTo ... 55064

编辑：kin122
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup
B站：https://ela.st/bilibili
 

Elasticsearch 中的 ingest node 给开发者们带来了极大的方便。Ingest node 是 Elasticsearch 集群中的一部分。相比较 Logstash 而言，它易于扩展。同时它有大量的处理器供开发者使用。我们可以充分利用它多数据进行清洗，转换，丰富等等操作。在我们摄入数据的时候，由于数据格式的问题，往往会发生错误，那么我们该如何处理这些错误呢？在 Logstash 的实现中，我们可以利用 Dead Letter Queue 来记录失败的文档。那么我们可以在 ingest pipeline 里，实现同样的机制吗？请详细阅读文章 “如何正确处理 Elasticsearch 摄取管道故障” https://elasticstack.blog.csdn ... 73575 在文章中，我们实例了一种叫做 Dead Letter Index，它可以记录失败的文档，并可以回放让我们修正摄入文档中的错误。

1. 是谁在帮我自动补全？（需要梯子）
https://medium.com/building-in ... e055b
2. 拿ES当nosql 数据库可还行？（需要梯子）
https://medium.com/%40vsushko/ ... 0b2c8
3. 手把手教你在.Net里用ES好不好？（需要梯子）
https://yamannasser.medium.com ... 2ae15
编辑：斯蒂文
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup
B站： https://ela.st/bilibili
 

1. ES索引恢复流程解析
   https://blog.csdn.net/qq_27639 ... 76696
2. Elasticsearch 集群运维及故障排查
   https://blog.51cto.com/jiangxl/5570747
3. Elasticsearch内存那些事
   https://blog.51cto.com/ch3nnn/5483260
编辑：yuebancanghai
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup
B站：https://ela.st/bilibili


INFINI Labs 为大家又带来一波产品更新，包括 Gateway v1.10.0、Console v0.8.0、Loadgen v1.5.0、Loadrun v0.1.0，其中 Loadrun 是本次产品更新中首发亮相，它是一个用来批量运行 Loadgen 测试用例的工具。欢迎大家下载体验。

INFINI Gateway v1.10.0

极限网关本次更新如下：

Features

• 配置文件中支持环境变量
  
• 添加 ratio filter 选项操作，允许立即丢弃请求
  
• 添加 context_parser filter
  
• 添加 context_switch filter
  
• 添加 _sys.* 到请求上下文
  
  更多 Gateway 更新可参考【[Gateway 版本历史](https://www.infinilabs.com/doc ... -notes)】。
  
  

  INFINI Console v0.8.0
  

  
  本次极限 Console 版本更新主要新增了凭据管理功能，凭据敏感信息使用加密存储。凭据管理可以帮助我们将身份验证信息集中管理，需要用的地方直接引用，提高了身份验证信息的存储安全性。
  
  需要注意的是，如果您是初次安装部署，凭据敏感信息加密密钥在 INFINI Console 安装初始化是自动生成或用户自定义设置。该密钥需要用户妥善保存，如果密钥丢失，当升级 INFINI Console 并且重新初始化系统后，先前保存的凭据信息将无法解密。
  
  

  

  
  
  在【系统管理】-【凭据管理】列表中可以查询已创建的凭据信息，支持增删查改等基本操作。
  
  

  

  
  
  更多详情可参考文档（[https://www.infinilabs.com/doc ... ntial](https://www.infinilabs.com/doc ... ential)）。
  
  Console 其他功能优化如下：
  
  

  Improvements
  

• KV 内存占用优化
  
  

  Bug fix
  

• 修复了网关实例列表 CPU 数值显示问题
  
• 修复了系统服务健康监控错误提示
  
  更多 Console 更新可参考【[Console 版本历史](https://www.infinilabs.com/doc ... -notes)】。
  
  

  INFINI Loadgen v1.5.0
  

  
  Elasticsearch 性能压测工具 Loadgen 本次更新如下：
  
  

  Features
  

• 新增assert功能，支持对请求返回进行判断
  
• 新增register功能，支持测试过程中动态注册全局变量
  
• 新增环境变量功能，配置文件可以动态加载环境变量
  
• 请求头配置支持访问动态变量
  
  
  

  Improvements
  

• 优化 -l 参数的准确性
  
• 支持可选跳过 warm-up 阶段
  
  下载地址：[https://release.infinilabs.com/loadgen](https://release.infinilabs.com/loadgen)
  
  

  INFINI Loadrun v0.1.0
  

  
  Loadrun 是一个用来批量运行 Loadgen 测试用例的工具，不需要重复编写测试用例，通过切换套件配置来快速测试不同的环境配置。
  
  

  Features
  

• 支持配置测试套件，批量运行 Loadgen 测试样例并输出测试结果
  
• 支持测试套件配置 Loadgen 环境变量，快速切换测试环境
  
• 支持自动启动 INFINI Gateway，方便测试不同配置
  
  下载地址：[https://release.infinilabs.com/loadrun](https://release.infinilabs.com/loadrun)
  
  

  期待反馈
  

  
  欢迎下载体验使用，如果您在使用过程中遇到如何疑问或者问题，欢迎前往 INFINI Labs Github（[https://github.com/infinilabs](https://github.com/infinilabs)） 中的对应项目中提交 Feature Request 或提交 Bug。
  
  

• INFINI Gateway： [https://github.com/infinilabs/gateway/issues](https://github.com/infinilabs/gateway/issues)
  
• INFINI Console： [https://github.com/infinilabs/console/issues](https://github.com/infinilabs/console/issues)
  
• 官网： [https://www.infinilabs.com](https://www.infinilabs.com)
  
• 下载地址： [https://www.infinilabs.com/download](https://www.infinilabs.com/download)
  
  您还可以通过邮件联系我们：hello@infini.ltd
  
  或者拨打我们的热线电话：(+86) 400-139-9200
  
  也欢迎大家微信扫码添加小助手（INFINI-Labs），加入用户群讨论，或者扫码加入我们的知识星球一起学习交流。
  
  
  
  最后祝大家周末愉快！
  
  

  关于极限科技（INFINI Labs）
  

  
  

  

  
  
  极限科技，全称极限数据（北京）科技有限公司，是一家专注于实时搜索与数据分析的软件公司。旗下品牌极限实验室（INFINI Labs）致力于打造极致易用的数据探索与分析体验。
  
  极限科技是一支年轻的团队，采用天然分布式的方式来进行远程协作，员工分布在全球各地，希望通过努力成为中国乃至全球企业大数据实时搜索分析产品的首选，为中国技术品牌输出添砖加瓦。
  

大会简介

OpenI/O启智开发者大会是OpenI启智社区的年度盛会。大会立足于国际国内开源大环境和发展趋势，侧重AI领域前沿技术分享和自主AI开源项目的展示，汇聚专家学者碰撞思想火花，凝聚发展共识，既有院士级专家们高屋建瓴的点评与引导，又有行业专家最前沿技术的分享，同时也为普通开发者提供大量AI模型与应用开发的线上教学与实践机会。[图片]

大会亮点

• 专家主题演讲
• 北京智源人工智能研究院、北京大学、百度等启智社区核心成员单位各自的优秀开源项目分享
• 2022年度优秀开源项目团队及社区优秀开发者颁奖
• 设立八个国家级开放创新平台合作签约
• 启智社区分中心授牌
• 《中国城市人工智能发展指数报告》发布
• 为开发者分享各类前沿动态与实践学习的机会
• 直面各厂商技术专家，获取一线面试经验/机会，还可进入招聘内推面试群
• 有望于行业大咖合影
• 结识志同道合的行业伙伴，组织头脑风暴，产生更多思想碰撞

大会主题

• 算网筑基、开源启智、AI赋能

本届OpenI/O启智开发者大会计划以“算网筑基、开源启智、AI赋能”为主题，邀请国内人工智能开源领域领军院士亲自参与，汇聚学术界、产业界的技术专家，围绕中国算力网资源基座、开源社区服务支撑环境、国家级开放创新应用平台三大部分，探讨如何高效建设适合我国的人工智能开源生态体系，惠及广大开发者群体。

 

大会信息

时间：2023年2月24日-25日

地点：深圳人才研修院

主题：算网筑基、开源启智、AI赋能

参与方式：




 

日程安排

2月24日上午 OpenI/O启智开发者大会主论坛

1、领导致辞
2、院士、学者、专家大咖系列Keynotes
3、国家级开放创新平台签约仪式
4、启智分中心授牌仪式
5、CCF开源相关发布
6、《中国城市人工智能发展指数报告》发布
7、启智社区优秀开源项目与开发者颁奖
 
2月24日下午及25日 OpenI/O启智开发者大会专题分论

1、专场一（24日下午）：
NLP大模型论坛（开源集智创新探索中文NLP大模型生态发展）
2、专场二（24日下午）：
深度学习与大模型产业应用专场（引领前沿技术，推动产业升级）
3、专场三（24日下午）：
开源治理论坛（构建开源联合体，共建开源生态）
4、专场四（25日上午）：
昇腾人工智能应用专场（数智未来，因你而来）
5、专场五（25日上午）：
高校开源专场（因“AI”而“深”）
 
 

组织架构

主办单位：鹏城实验室、新一代人工智能产业技术创新战略联盟（AITISA）
承办单位：OpenI启智社区、中关村视听产业技术创新联盟（AVSA）
协办单位：华为技术有限公司、百度在线网络技术（北京）有限公司、CCF开源发展委员会
支持单位：广东省人工智能与机器人学会、国家超高清视频创新中心（深圳）
支持媒体：CSDN、InfoQ、雷峰网
合作机构：LF AI&DATA、OpenSSF基金会、开放原子开源基金会、开源科技OSTech、开源高校OSU、GDG广州、GDG东莞、开放群岛社区、开源中国、昇腾社区、飞桨社区、木兰开源社区、白玉兰开源社区、阿浦美股研究院
 
 

展望未来

希望OpenI/O启智开发者大会让更多怀揣着开源梦想的开发者加入到开源创新活动中来，让中国开源技术在万物互联的智慧时代爆发，培养更多高校开源人才，为他们搭建展示自身创造力的平台，形成良性可期的开源持续发展生态。

1、ElasticView ——一款用来监控ElasticSearch状态的web可视化工具
http://www.elastic-view.cn/index.html
https://github.com/1340691923/ElasticView
2、JMeter + ElasticSearch 性能测试（梯子）
https://medium.com/%40anthony. ... 3c51e
3、Elasticsearch 性能优化建议
https://blogs.jaiboom.com/elev ... 01e5a

编辑：铭毅天下
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup
B站： https://ela.st/bilibili

1.使用 Kafka、Connect、KSQL、Elasticsearch 和 Flask 进行实时数据处理和分析（需要梯子）
https://medium.com/%40stefenta ... 32d78
2.为什么 Fluentd 停止向 Elasticsearch 发送日志（需要梯子）
https://medium.com/uckey/why-f ... b9ced
3.将 ELK JSON 格式转换为 CEF 格式（需要梯子）
https://tamirsuliman.medium.co ... 67f36

编辑：Se7en  
归档：[https://ela.st/cn-daily-all](https://ela.st/cn-daily-all)  
订阅：[https://ela.st/cn-daily-sub](https://ela.st/cn-daily-sub)  
沙龙：[https://ela.st/cn-meetup](https://ela.st/cn-meetup)  
B站： [https://ela.st/bilibili](https://ela.st/bilibili)