搜索客，搜索人自己的社区

【搜索客社区日报】第1964期 (2025-01-03）

社区日报 • Fred2000 发表了文章 • 0 个评论 • 2212 次浏览 • 2025-01-03 14:34 • 来自相关话题

【搜索客社区日报】第1963期 (2024-12-31）

社区日报 • God_lockin 发表了文章 • 0 个评论 • 3401 次浏览 • 2025-01-01 10:09 • 来自相关话题

从 Elastic 迁移到 Easysearch 指引

Easysearch • yangmf2040 发表了文章 • 0 个评论 • 2715 次浏览 • 2024-12-30 16:44 • 来自相关话题

从 Elasticsearch 迁移到 [Easysearch](https://infinilabs.cn/products/easysearch/) 需要考虑多个方面，这取决于当前使用的 Elasticsearch 版本、能容忍的停机时间、应用需求等。在此背景下，我们梳理了一下通用的升级指引，方便大家进行迁移工作。

迁移路径

| Elasticsearch 版本 | 快照兼容 | 推荐升级方法 |
| ---------------------- | ------------ | ------------------------ |
| 5.x | ❌ | 使用 INFINI Console 迁移 |
| 6.x | ✅ | 快照恢复迁移 |
| 7.0.0 - 7.10.2 | ✅ | 快照恢复迁移 |
| >7.11.0 | ❌ | 使用 INFINI Console 迁移 |

之前有同事做过相关测试，详情请移步[这里](https://infinilabs.cn/blog/202 ... store/)。

快照恢复迁移

部署新的 Easysearch 集群，如果有使用插件（如 IK），也一并安装。
将备份仓库注册到 Easysearch 集群。
在 Easysearch 中设置需要使用的用户名和密码信息。
原 Elasticsearch 集群进行快照备份。
在 Easysearch 集群中进行备份还原。
另部署一套应用连接 Easysearch 集群，进行数据、功能验证。
停止应用写入新的数据到 Elasticsearch。
原 Elasticsearch 集群进行快照备份。
在 Easysearch 集群中进行备份还原。
再次使用应用验证数据、功能正常。
切换，老应用下线使用新应用或者老应用修改地址连接 Easysearch 集群。

INFINI Console 迁移
部署新的 Easysearch 集群及其插件（如 IK）。
部署 INFINI Console、Gateway 程序。
将 Elasticsearch 和 Easysearch 注册到 INFINI Console 中。
在 Easysearch 中设置需要使用的用户名和密码信息。
建立数据迁移任务，对业务索引进行迁移，建议启用压缩功能。
另部署一套应用连接 Easysearch 集群，进行数据、功能验证。
停止应用写入新的数据到 Elasticsearch。
再次建立数据迁移任务，设置条件，只迁移增量数据。
再次使用应用验证数据、功能正常。
切换，老应用下线使用新应用或者老应用修改地址连接 Easysearch 集群。

客户端调整

如果要继续使用 Java High Level REST Client，建议将版本调整到 7.10.2 。当然更建议的是使用 Easysearch 的[客户端](https://infinilabs.cn/blog/202 ... ent-1/)，更轻更快，构建查询，跟搭积木一样简单。

开源事业

[极限科技（INFINI Labs）](https://infinilabs.cn) 一直致力于为开发者和企业提供优质的开源工具，提升整个技术生态的活力。除了维护国内最流行的分词器 analysis-ik 和 analysis-pinyin ，也在不断推动更多高质量开源产品的诞生。

在极限科技成立三周年之际，公司宣布以下产品和工具已全面开源：
- [INFINI Framework](https://github.com/infinilabs/framework)
- [INFINI Gateway](https://github.com/infinilabs/gateway)
- [INFINI Console](https://github.com/infinilabs/console)
- [INFINI Agent](https://github.com/infinilabs/agent)
- [INFINI Loadgen](https://github.com/infinilabs/loadgen)
- [INFINI Coco AI](https://github.com/infinilabs/coco-app)
  
  以上开源软件都可以在 Github 上面找到：[https://github.com/infinilabs](https://github.com/infinilabs)
  
  欢迎大家一起参与到开源工具的维护、贡献当中来，别忘了 Star🌟 支持一下！！！
  
  如果您对迁移过程有任何疑问，欢迎与我讨论。
  
  ![](https://infinilabs.cn/img/blog ... gf.png)

Easysearch 可搜索快照功能，看这篇就够了

Easysearch • yangmf2040 发表了文章 • 0 个评论 • 2558 次浏览 • 2024-12-30 16:38 • 来自相关话题

可搜索快照功能改变了我们对备份数据的查询方式。以往要查询备份数据时，要先找到备份数据所在的快照，然后在一个合适的环境中恢复快照，最后再发起请求查询数据。这个处理路径很长，而且很消耗时间。可搜索快照功能将大大简化该处理路径，节约时间。

角色设置

相信你对节点角色的概念已经有所熟悉。要启用可搜索快照功能，[Easysearch](https://infinilabs.cn/products/easysearch/) 集群中必须至少有一个节点拥有 search 角色。参考设置如下。

plain node.roles: ["search"] node.search.cache.size: 500mb 

node.roles: 指定节点角色，只有 search 角色的节点才能去搜索快照中的数据。
node.search.cache.size: 执行快照搜索时，数据缓存大小。

混合角色设置，参考如下。

plain node.roles: ["master","data","search","ingest"] node.search.cache.size: 500mb 

创建快照

可搜索快照功能使用普通快照作为基础，创建快照命令不变。比如我创建且备份个 infini 索引。

```plain

创建 infini 索引

POST infini/_doc
{
"test":"Searchable snapshots"
}

创建快照备份 infini 索引

PUT _snapshot/my-fs-repository/1
{
"indices": "infini",
"include_global_state": false
}
```

![](https://infinilabs.cn/img/blog ... /1.png)

创建快照索引

可搜索快照功能的核心是搜索快照中的索引，这一步是通过快照索引实现的。为了和集群中的普通索引区别开来，我们将实际存储在快照中的索引称为快照索引。通过使用 Easysearch 的 _restore API 并指定 remote_snapshot 存储类型来创建快照索引。

创建快照索引时，注意名称不能与当前索引名称重复。通常我们备份完索引后，可删除索引释放节点磁盘空间，创建快照索引时默认使用原来的名称。

```plain

删除 infini 索引释放磁盘空间

DELETE infini

创建快照索引,使用原索引名称

POST /_snapshot/my-fs-repository/1/_restore
{
"indices": "infini",
"include_global_state": false,
"include_aliases": false,
"storage_type": "remote_snapshot"
}
 创建快照索引的命令和还原快照的命令非常相似，关键在于 storage_type 参数指定 remote_snapshot 存储类型。 如果要将快照中的全部索引都创建快照索引，可省略 indices 参数。 ![](<a href="https://infinilabs.cn/img/blog/2024/searchable-snapshot-read-this-article/2.pn" rel="nofollow" target="_blank">https://infinilabs.cn/img/blog ... /2.pn</a>g) 如果想在创建快照索引时指定不同的名字，参考下面的命令。 plain
POST /_snapshot/my-fs-repository/1/_restore
{
"indices": "infini",
"include_global_state": false,
"include_aliases": false,
"storage_type": "remote_snapshot",
"rename_pattern": "(infini)",
"rename_replacement": "snapshot-$1"
}
```
rename_pattern: 使用此选项指定索引匹配的正则表达式。使用捕获组重用索引名称的部分。
rename_replacement: 使用 $0 包括整个匹配索引名称，使用 $1 包括第一个捕获组的内容，等等。

上述命令创建出来的快照索引名称是 snapshot-infini 。

![](https://infinilabs.cn/img/blog ... /3.png)

经过上面一系列的操作，我已经拥有了两个快照索引。

搜索快照索引

我们通过搜索快照索引达到搜索快照数据的目的，令人开心的是搜索快照索引和搜索普通索引的语法完全一样。😀

![](https://infinilabs.cn/img/blog ... /4.png)

常见问题

如何区分普通索引和快照索引呢？

我们可以通过索引的 settings 信息区分，快照索引的 settings 信息中有 store.type: remote_snapshot 信息，普通索引没有此信息。

![](https://infinilabs.cn/img/blog ... /5.png)

快照索引能写入数据吗？

快照索引无法写入，数据仍然保持在快照格式中存储在存储库中，因此可搜索快照索引本质上是只读的。任何尝试写入可搜索快照索引的操作都会导致错误。

![](https://infinilabs.cn/img/blog ... /6.png)

快照索引不想要了怎么办？

直接删除，需要时再执行创建快照索引流程。此外快照在创建快照索引后，无法直接删除快照，要先删除快照索引。
![](https://infinilabs.cn/img/blog ... /7.png)

如果您对上述内容有任何疑问，欢迎与我讨论。

![](https://infinilabs.cn/img/blog ... gf.png)

【搜索客社区日报】第1962期 (2024-12-30）

社区日报 • Muses 发表了文章 • 0 个评论 • 2557 次浏览 • 2024-12-30 13:34 • 来自相关话题

Spring Boot 集成 Easysearch 完整指南

Easysearch • INFINI Labs 小助手发表了文章 • 0 个评论 • 2725 次浏览 • 2024-12-29 15:41 • 来自相关话题

[Easysearch](https://infinilabs.cn/products/easysearch/) 的很多用户都有这样的需要，之前是用的 ES，现在要迁移到 Easysearch，但是业务方使用的是 Spring Boot 集成的客户端，问是否能平滑迁移。

Easysearch 是完全兼容 Spring Boot 的，完全不用修改，本指南将探讨如何将 Spring Boot 和 ES 的 high-level 客户端与 Easysearch 进行集成，涵盖从基础设置到实现 CRUD 操作和测试的所有内容。

## 服务器设置

首先，需要修改 Easysearch 节点的 easysearch.yml 文件，打开并配置这 2 个配置项：

```yml
elasticsearch.api_compatibility: true

#根据客户端版本配置版本号，我这里配置成 7.17.18
elasticsearch.api_compatibility_version: "7.17.18"
```

## 项目设置

然后，让我们设置 Maven 依赖。以下是 `pom.xml` 中的基本配置：

```xml

11

4.4.18

7.17.18

org.springframework.boot
spring-boot-starter-web

org.springframework.data
spring-data-elasticsearch
${spring-data-elasticsearch.version}

org.elasticsearch
elasticsearch
${elasticsearch.version}

org.elasticsearch.client
elasticsearch-rest-high-level-client
${elasticsearch.version}

org.projectlombok
lombok
true

```

## 客户端连接配置

完全和连接 Elasticsearch 的方式一样，不用修改：

配置 src/main/resources/application.yml 文件

```yaml
spring:
elasticsearch:
rest:
uris: https://localhost:9202
username: admin
password: xxxxxxxxxxx
ssl:
verification-mode: none
```

连接配置类

```java
@Configuration
public class ElasticsearchConfig extends AbstractElasticsearchConfiguration {
@Value("${spring.elasticsearch.rest.uris}")
private String elasticsearchUrl;

@Value("${spring.elasticsearch.rest.username}")
private String username;

@Value("${spring.elasticsearch.rest.password}")
private String password;

@Override
@Bean
public RestHighLevelClient elasticsearchClient() {
final CredentialsProvider credentialsProvider = new BasicCredentialsProvider();
credentialsProvider.setCredentials(AuthScope.ANY,
new UsernamePasswordCredentials(username, password));

SSLContext sslContext = SSLContexts.custom()
.loadTrustMaterial(null, (x509Certificates, s) -> true)
.build();

RestClientBuilder builder = RestClient.builder(HttpHost.create(elasticsearchUrl))
.setHttpClientConfigCallback(httpClientBuilder -> httpClientBuilder
.setDefaultCredentialsProvider(credentialsProvider)
.setSSLContext(sslContext)
.setSSLHostnameVerifier(NoopHostnameVerifier.INSTANCE));

return new RestHighLevelClient(builder);
}
}
```

## 领域模型

使用 Spring 的 Elasticsearch 注解定义领域模型：

```java
@Data
@Document(indexName = "products")
public class Product {
@Id
private String id;

@Field(type = FieldType.Text, name = "name")
private String name;

@Field(type = FieldType.Double, name = "price")
private Double price;
}
```

## 仓库层

创建继承 ElasticsearchRepository 的仓库接口：

```java
@Repository
@EnableElasticsearchRepositories
public interface ProductRepository extends ElasticsearchRepository {
}
```

## 服务层

实现服务层来处理业务逻辑：

```java
@Service
public class ProductService {
private final ProductRepository productRepository;

@Autowired
public ProductService(ProductRepository productRepository) {
this.productRepository = productRepository;
}

public Product saveProduct(Product product) {
return productRepository.save(product);
}

public Product findProductById(String id) {
return productRepository.findById(id).orElse(null);
}
}
```

## 测试

编写集成测试类：

```java
@SpringBootTest
public class ProductServiceIntegrationTest {
@Autowired
private ElasticsearchOperations elasticsearchOperations;

@Autowired
private ProductService productService;

private static final String INDEX_NAME = "products";

@BeforeEach
public void setUp() {
IndexOperations indexOperations = elasticsearchOperations.indexOps(IndexCoordinates.of(INDEX_NAME));
if (indexOperations.exists()) {
indexOperations.delete();
}

// 定义 mapping
Document mapping = Document.create()
.append("properties", Document.create()
.append("name", Document.create()
.append("type", "text")
.append("analyzer", "standard"))
.append("price", Document.create()
.append("type", "double")));

// 创建索引并应用 mapping
indexOperations.create(Collections.EMPTY_MAP, mapping);
}

@Test
public void testSaveAndFindProduct() {
List products = Arrays.asList(
new Product("Test Product 1", 99.99),
new Product("Test Product 2", 199.99),
new Product("Test Product 3", 299.99)
);

List queries = products.stream()
.map(product -> new IndexQueryBuilder()
.withObject(product)
.withIndex(INDEX_NAME)
.build())
.collect(Collectors.toList());

List indexedInfos = elasticsearchOperations.bulkIndex(
queries,
IndexCoordinates.of(INDEX_NAME)
);

// 验证结果
List ids = indexedInfos.stream()
.map(IndexedObjectInformation::getId)
.collect(Collectors.toList());

assertFalse(ids.isEmpty());
assertEquals(products.size(), ids.size());
}
}
```

## 结论

本指南展示了 Easysearch 与 Elasticsearch 的高度兼容性：

1. 配置方式相同，仅需启用 Easysearch 的 API 兼容模式。
2. 可直接使用现有 Elasticsearch 客户端。
3. Maven 依赖无需更改。
4. API、注解和仓库接口完全兼容。
5. 现有测试代码可直接应用。

这种兼容性使得从 Elasticsearch 迁移到 Easysearch 成为一个简单、低风险的过程。Spring Boot 项目可以几乎无缝地切换到 Easysearch，同时获得其性能和资源利用方面的优势。

## 关于 Easysearch

![](https://infinilabs.cn/img/blog ... er.png)

INFINI Easysearch 是一个分布式的搜索型数据库，实现非结构化数据检索、全文检索、向量检索、地理位置信息查询、组合索引查询、多语种支持、聚合分析等。Easysearch 可以完美替代 Elasticsearch，同时添加和完善多项企业级功能。Easysearch 助您拥有简洁、高效、易用的搜索体验。

官网文档：<https://infinilabs.cn/docs/latest/easysearch>

> 作者：张磊，极限科技（INFINI Labs）搜索引擎研发负责人，对 Elasticsearch 和 Lucene 源码比较熟悉，目前主要负责公司的 Easysearch 产品的研发以及客户服务工作。
> 原文：https://infinilabs.cn/blog/202 ... tion/

INFINI Labs 产品更新 | Console/Gateway/Agent 等产品开源发布首个版本

资讯动态 • INFINI Labs 小助手发表了文章 • 1 个评论 • 2925 次浏览 • 2024-12-27 16:11 • 来自相关话题

![release](https://infinilabs.cn/img/blog/release/banner.png)

INFINI Labs 产品又更新啦~，包括 Easysearch v1.9.0、Gateway、Console、Agent、Loadgen v1.27.0。本次各产品更新了很多亮点功能，如 Easysearch 新增 rollup 功能，优化了多版本兼容配置；Console/Gateway/Agent/Loadgen 及 Framework 开源后，发布首个重大更新版本，支持过期元数据删除，指标图表懒加载，指标采集协程优化等等，欢迎大家下载体验。

## INFINI Easysearch v1.9.0

INFINI Easysearch 是一个分布式的搜索型数据库，实现非结构化数据检索、全文检索、向量检索、地理位置信息查询、组合索引查询、多语种支持、聚合分析等。Easysearch 可以完美替代 Elasticsearch，同时添加和完善多项企业级功能。Easysearch 助您拥有简洁、高效、易用的搜索体验。详情见：https://infinilabs.cn

Easysearch 本次更新如下：

### Improvements

- 发布 rollup 功能
- 支持自动对 rollup 索引进行滚动，无需外部触发
- 支持 avg sum max min value_count percentiles 指标类型的聚合
- 支持 terms 聚合
- 支持对指标聚合进行 Pipeline 聚合
- 支持聚合前先对数据进行过滤
- 进行聚合查询时支持直接搜索原始索引，不用更改搜索代码

- 增加适配 logstash 8.x 的请求 header
- _cat/templates 增加 lifecycle 和 rollover 列的展示

### Bug fix

- 修复 rest-api template 测试错误

## INFINI Console v1.27.0

INFINI Console 是一款非常轻量级的多集群、跨版本的搜索基础设施统一管控平台。通过对流行的搜索引擎基础设施进行跨版本、多集群的集中纳管，企业可以快速方便的统一管理企业内部的不同版本的多套搜索集群。开源地址：https://github.com/infinilabs/console

Console 在线体验： http://demo.infini.cloud (用户名/密码：readonly/readonly)。

Console 本次更新如下：

### Improvements

- 代码开源，统一采用 Github 仓库进行开发
- 指标采集优化，由原来的单一协程采集调整为每个注册的集群有单独的协程进行采集
- 指标监控页面图表展示采用懒加载、单个图表独立加载，增强用户体验
- 通用时间控件增加超时时间设置
- 集群选择控件增加注册、刷新功能
- 提供指标采集状态
- 表格控件排版优化

### Bug fix

- 修复集群元数据更新不及时问题
- 修复帮助文档等链接不正确问题
- 修复节点、索引数据因随机 id 出现重复记录问题
- 修复 Runtime、Agent 实例编辑页面出错问题
- 修复集群、节点、索引、分片元数据无 Loading 问题
- 修复索引健康状态指标采集失败问题
- 修复个别菜单列未国际化问题

## INFINI Gateway v1.27.0

INFINI Gateway 是一个面向搜索场景的高性能数据网关，所有请求都经过网关处理后再转发到后端的搜索业务集群。基于 INFINI Gateway 可以实现索引级别的限速限流、常见查询的缓存加速、查询请求的审计、查询结果的动态修改等等。开源地址：https://github.com/infinilabs/gateway

Gateway 本次更新如下：

### Improvements

- 调整队列消费者 slice 默认配置为 1

### Bug fix

- 修复缓存数据丢失导致队列无法消费问题
- 同步更新 Framework 修复的一些已知问题

## INFINI Agent v1.27.0

INFINI Agent 是 INFINI Console 的一个可选探针组件，负责采集和上传集群指标和日志等信息，并可通过 Console 管理。Agent 支持主流操作系统和平台，安装包轻量且无任何外部依赖，可以快速方便地安装。开源地址：https://github.com/infinilabs/agent

探针 Agent 本次更新如下：

### Improvements

- 与 INFINI Console 统一版本号
- 同步更新 Framework 修复的已知问题
- 支持 K8S 环境指标采集

## INFINI Loadgen v1.27.0

INFINI Loadgen 是一款轻量、无依赖的 Eaysearch/Elasticsearch/OpenSearch 性能压测工具，支持参数模板化配置，支持压测端均衡流量控制，可以模拟高并发请求。开源地址：https://github.com/infinilabs/loadgen

Loadgen 本次更新如下：

### Improvements

- 保持与 Console 相同版本
- 同步更新 Framework 修复的已知问题

### Bug fix

- 修复 API 接口测试逻辑异常问题

## INFINI Framework

INFINI Framework 是 INFINI Labs 各产品依赖的核心公共代码库。开源地址：https://github.com/infinilabs/framework

### Improvements

- [发布 1.0.0 Release 版本](https://docs.infinilabs.com/framework/main/)

## 期待反馈

欢迎下载体验使用，如果您在使用过程中遇到如何疑问或者问题，欢迎前往 INFINI Labs Github（<https://github.com/infinilabs>）中的对应项目中提交 Feature Request 或提交 Bug。

**下载地址：** <https://infinilabs.cn/download>

**邮件**：**hello@infini.ltd**

**电话**：**(+86) 400-139-9200**

**Discord**：<https://discord.gg/4tKTMkkvVX>

也欢迎大家微信扫码添加小助手（INFINI-Labs），加入用户群一起讨论交流。

![](https://infinilabs.com/img/blo ... ew.jpg)

## 关于极限科技（INFINI Labs）

![INFINI Labs](https://infinilabs.cn/img/blog ... bs.png)

极限科技，全称极限数据（北京）科技有限公司，是一家专注于实时搜索与数据分析的软件公司。旗下品牌极限实验室（INFINI Labs）致力于打造极致易用的数据探索与分析体验。

极限科技是一支年轻的团队，采用天然分布式的方式来进行远程协作，员工分布在全球各地，希望通过努力成为中国乃至全球企业大数据实时搜索分析产品的首选，为中国技术品牌输出添砖加瓦。

官网：<https://infinilabs.cn>

【搜索客社区日报】第1961期 (2024-12-27）

社区日报 • Fred2000 发表了文章 • 0 个评论 • 2768 次浏览 • 2024-12-27 12:16 • 来自相关话题

「玩转社区运营，实习先行」加入极限科技（INFINI Labs）开启成长之旅！

资讯动态 • INFINI Labs 小助手发表了文章 • 0 个评论 • 2424 次浏览 • 2024-12-27 12:15 • 来自相关话题

![](https://infinilabs.cn/img/blog ... ng.png)

极限科技诚招社区运营实习生！

我们为你提供全面参与国内外社区运营建设的机会，负责从内容策划到数据分析的多维度实践，与团队一起探索技术与产品的无限可能！

如果你还不了解 极限科技（INFINI Labs） 是谁，在做什么，需要什么样的小伙伴，那么请看下文：

我们是谁

![](https://infinilabs.cn/img/blog ... bs.png)

极限科技，全称极限数据（北京）科技有限公司，是一家专注于实时搜索与数据分析的软件公司。旗下品牌极限实验室（INFINI Labs）致力于打造极致易用的数据探索与分析体验。

极限科技是一支年轻的团队，采用天然分布式的方式来进行远程协作，员工分布在全球各地，希望通过努力成为中国乃至全球企业大数据实时搜索分析产品的首选，为中国技术品牌输出添砖加瓦。

官网：https://infinilabs.cn

我们在做什么

极限科技（INFINI Labs）正在致力于以下几个核心方向：

1、开发近实时搜索引擎 INFINI Easysearch
INFINI Easysearch 是一个分布式的搜索型数据库，实现非结构化数据检索、全文检索、向量检索、地理位置信息查询、组合索引查询、多语种支持、聚合分析等。Easysearch 可以完美替代 Elasticsearch，同时添加和完善多项企业级功能。Easysearch 助您拥有简洁、高效、易用的搜索体验。详情参见：https://infinilabs.cn

2、打造下一代实时搜索引擎 INFINI Pizza
INFINI Pizza 是一个分布式混合搜索数据库系统。我们的使命是充分利用现代硬件和人工智能的潜力，为企业提供量身定制的实时智能搜索体验。我们致力于满足具有挑战性的环境中高并发和高吞吐量的需求，同时提供无缝高效的搜索功能。详情参见：https://pizza.rs

3、打造 Coco AI — 搜索、连接、协作
Coco AI 是一个人工智能驱动的统一的搜索平台，将您的所有企业应用程序和数据（如 Google Workspace、Dropbox、Confluent Wiki、GitHub 等）整合到一个强大而简洁的搜索界面中。本项目包含适用于桌面和移动端的 COCO 应用，用户可以通过该应用在不同平台上搜索并与企业数据互动。详情参见：https://coco.rs

4、积极参与全球开源生态建设
通过开源 Coco AI、Console、Gateway、Agent、Loadgen 等搜索领域产品和社区贡献，推动全球开源技术的发展，提升中国在全球开源领域的影响力。INFINI Labs Github 主页：https://github.com/infinilabs

5、提供专业服务
为客户提供包括搜索技术支持、迁移服务、定制解决方案和培训在内的全方位服务。

6、提供国产化搜索解决方案
针对中国市场的特殊需求，提供符合国产化标准的搜索产品和解决方案，帮助客户解决使用 Elasticsearch 时遇到的挑战。

极限科技（INFINI Labs）通过这些努力，旨在成为全球领先的实时搜索和数据分析解决方案提供商。

我们期待有才华、有激情的你加入我们，一起探索数据搜索的未来，共同创造无限可能！

在招岗位介绍

岗位名称

社区运营实习生

岗位职责

全面参与公司旗下国内外社区运营和建设；
负责社区内容的策划、文案、编辑，围绕团队成果产出技术解读文章，通过公众号、博客、社区等形式进行内容运营，提升公司的影响力；
数据化运营，包括分析官网访问、下载等数据指标，根据数据反馈及时调整策略，提升运营效果；
与团队合作，维护更新产品技术相关介绍文档，帮助用户深入理解技术理念和技术优势；
定期与社区用户、媒体沟通，保持通畅的聆听反馈机制；
参与策划、组织及执行团队主办或承办的各类社区活动；

岗位要求
本科及以上学历在读，新闻、营销、传媒、计算机等相关专业优先；
具备协作意识和沟通能力，能跨职能、跨部门协调跟进问题；
具备较强的创意和策划能力、应变能力、语言和文字表达能力以及敏锐的市场触角；
对搜索技术、互联网产品及工具类信息怀有浓厚兴趣，具备快速学习并熟练掌握相关知识的能力，能够紧跟行业动态；
具有用户增长、数据分析、数据挖掘、信息检索经验者优先；
具有开源社区、开发者社区、开源媒体运营经验者优先；
英语听说写流畅优先；
熟悉 Github、Git、Markdown 优先；
至少实习 6 个月以上，城市不限，可接受远程办公；

我们提供
广阔的职业发展空间和晋升机会；
与一群充满激情和创造力的团队一起工作的机会；
不断学习和成长的机会，包括内部培训和外部学习资源；

简历投递
邮件：hello@infini.ltd（邮件标题请备注姓名+求职岗位）
微信：INFINI-Labs （加微请备注求职岗位）

![](https://infinilabs.cn/img/comp ... at.jpg)

如果你：
- 对互联网、搜索技术充满兴趣；
- 擅长创意策划与内容输出；
- 乐于跨部门协作，具备良好的沟通能力；
  
  那就快来加入我们吧！

【搜索客社区日报】第1960期 (2024-12-26）

社区日报 • Se7en 发表了文章 • 0 个评论 • 2513 次浏览 • 2024-12-26 14:46 • 来自相关话题

活动回顾 - 第5期搜索客 Meetup 线上直播活动圆满结束，附 PPT 下载和视频回放

资讯动态 • searchkit 发表了文章 • 0 个评论 • 2681 次浏览 • 2024-12-25 14:40 • 来自相关话题

2024 年 12 月 20 日，由搜索客社区和极限科技（INFINI Labs）联合举办的第 5 期线上 Meetup 技术交流直播活动圆满结束。本期 Meetup 直播活动吸引了超过 800+ 人次的技术爱好者观看参与，共同学习讨论了 Elasticsearch 多集群管理工具 INFINI Console 的使用和运维经验。

本期 Meetup 活动主题

本期 Meetup 活动由极限科技（INFINI Labs）技术专家罗厚付老师 为大家带来了主题为《最强开源 Elasticsearch 多集群管理工具 INFINI Console - 动手实战》精彩分享。

罗老师首先介绍了 INFINI Labs 最近开源的产品和基本情况。然后，详细讲解了 Agent 采集指标的配置方法，包括如何自动注册到平台、监控告警配置等。接着讲解了 INFINI Console 源码编译的步骤和要求，如创建编译路径、克隆代码等。最后回答了观众提的相关问题，并强调了开源建设的重要性。

以下为摘取 PPT 部分内容截图：

精选问答

分享过程中，直播间的小伙伴对分享内容非常感兴趣，纷纷在评论区留言提问，下面摘取部分问答：

问 1：Console 开源代码 web 模块没有跑起来 ‍‍‍
答：web 模块编译需要指定 node 版本 v16.20.2

问 2：开源后的 Console 所有功能都免费吗？哪些是收费功能
答：开源的代码所有功能都是免费的，收费功能后续将在企业版中提供。

问 3：Console 支持的 Elasticsearch 版本是多少？
答：支持多版本 Elasticsearch，包含 1.x、2.x、5.x、6.x、7.x、8.x；同时还支持 OpenSearch 和 Easysearch 多集群接入纳管

问 4：Console 自采与 Agent 采集监控指标有什么区别，对性能影响如何？
答：区别还是挺大的，Console 是直接从集群层面采集指标，而不是在每个节点上单独采集。这种方式可能会涉及到在整个集群中循环，收集所有节点的信息。Agent 采集方式即在每个节点上安装一个 Agent，每个 Agent 负责收集所在节点的指标，并将其推送到存储或 Gateway。这种方式可以减轻集群的压力，因为不需要在集群中循环收集数据，即使一个节点出现异常，其他节点的指标采集仍然可以正常进行。

问 5：Agent 可以采集日志吗？还是只采集指标呢？
答：都支持

问 6：生产环境是建议通过 Agent 方式采集吗？
答：是的，生产环境建议使用 Agent，稳定且内存占用低。‍‍‍‍‍‍‍‍‍‍‍ 我这边管理的一个集群的话大概是有 300 多个节点吧。大概是装 300 多个探针的样子，探针的资源消耗是有做一个限制的，内存是限制在这个 50M 以下。

问 7：如果是 k8s 的话， Agent 是怎么匹配的呢？安装在 pod 层面吗？
答：对，我们现在的打的镜像是包含了这个 Agent 的，然后可以环境变量去控制开关。

问 8：Console 后面会支持备份恢复吗？大概什么时候上线
答：‍‍‍‍‍‍‍‍ 这个目前还不支持，在计划中，没有那么快上线。如果说你只是运维的一个需求的话可以通过相关 API 命令去操作备份恢复。

问 9：Console 告警规则能多提供一些吗？
答：目前内置的告警规则主要是一些基础的通用的场景，欢迎大家提供一些实际的一些业务需求，然后提个 Issue，共同建设和维护。（https://github.com/infinilabs/console/issues）

问 10：Easysearch 的审计日志采集了哪些信息？
答：主要包含用户的操作记录，然后用户的一些登录时间 IP 相关的一些信息是都有的。

罗老师从专业的角度热情耐心的一一进行了解答，获得了在线观众的点赞好评。（如大家对以上问题有见解或提出其他 Console 相关问题，也欢迎在本文评论区留言讨论，我们将从评论区中挑选精彩评论给予礼品赠送 😄）

同时，在整个直播过程中，主持人进行了多轮激动人心的抽奖活动，为参会小伙伴带来了额外的惊喜。

最后感谢大家的参与和支持，让我们共同期待下一次搜索客 Meetup 活动带来更多的精彩内容！

本期 Meetup 的 PPT 下载

本期 PPT 下载的链接：https://searchkit.cn/slides/328

本期 Meetup 视频回放

扫码关注极限实验室视频号查看直播回放，或者扫码关注极限实验室 B 站账号，可查看本期 Meetup 活动视频。我们也会在视频号、B 站持续更新最新技术视频，欢迎通过点赞、投币，收藏，三连来支持我们。

Meetup 活动讲师招募

![讲师招募](https://infinilabs.cn/img/blog ... ng.png)

搜索客社区 Meetup 的成功举办，离不开社区小伙伴的热情参与。目前社区讲师招募计划也在持续进行中，我们诚挚邀请各位技术大咖、行业精英踊跃提交演讲议题，与大家分享您的经验。

讲师报名链接：[http://cfp.searchkit.cn](http://cfp.searchkit.cn)
或扫描下方二维码，立刻报名成为讲师！

![](https://elasticsearch.cn/uploa ... fe.png)

Meetup 活动聚焦 AI 与搜索领域的最新动态，以及数据实时搜索分析、向量检索、技术实践与案例分析、日志分析、安全等领域的深度探讨。

我们热切期待您的精彩分享！

关于搜索客（SearchKit）社区

搜索客社区由 Elasticsearch 中文社区进行全新的品牌升级，以新的 Slogan：“搜索人自己的社区” 为宣言。汇集搜索领域最新动态、精选干货文章、精华讨论、文档资料、翻译与版本发布等，为广大搜索领域从业者提供更为丰富便捷的学习和交流平台。社区官网：[https://searchkit.cn](https://searchkit.cn) 。

关于极限科技（INFINI Labs）

![INFINI Labs](https://infinilabs.cn/img/blog ... bs.png)

极限科技，全称极限数据（北京）科技有限公司，是一家专注于实时搜索与数据分析的软件公司。旗下品牌极限实验室（INFINI Labs）致力于打造极致易用的数据探索与分析体验。

极限科技是一支年轻的团队，采用天然分布式的方式来进行远程协作，员工分布在全球各地，希望通过努力成为中国乃至全球企业大数据实时搜索分析产品的首选，为中国技术品牌输出添砖加瓦。

官网：[https://infinilabs.cn](https://infinilabs.cn)

通知设置 新通知

发现

迁移路径

快照恢复迁移

INFINI Console 迁移

客户端调整

开源事业

角色设置

创建快照

创建 infini 索引

创建快照备份 infini 索引

创建快照索引

删除 infini 索引释放磁盘空间

创建快照索引,使用原索引名称

搜索快照索引

常见问题

我们是谁

我们在做什么

在招岗位介绍

岗位名称

岗位职责

岗位要求

我们提供

简历投递

本期 Meetup 活动主题

精选问答

本期 Meetup 的 PPT 下载

本期 Meetup 视频回放

Meetup 活动讲师招募

关于 搜索客（SearchKit）社区

关于极限科技（INFINI Labs）

0.Ingest 节点 概述

写单个文档的流程概述

1. 模块总体概述

2. Processor 实现机制

抽象工厂设计模式的应用

Processor接口设计

Processor.Factory的设计

Processor.Factory的集中管理

组合以及装饰器设计模式的应用

如何自定义Processor 插件

3. Pipeline设计

如何管理Pipeline

责任链设计模式的应用

4. Ingest实战建议

5. 漏洞&&修复分析

CVE-2021-22144

漏洞复现

修复逻辑

CVE-2023-46673

漏洞复现

修复逻辑

CVE-2024-23450

漏洞复现

修复逻辑

6. 总结

活动推荐

热门话题

通知设置新通知

关于搜索客（SearchKit）社区

0.Ingest 节点概述