兼容不同版本的查询响应结果的 Count 结构
medcl 发表了文章 • 0 个评论 • 3 次浏览 • 2022-02-21 16:08
Elasticsearch 在 7.0 之后的版本中，为了优化性能，搜索结果的命中数默认不进行精确的计数统计，同时对搜索结果的响应体进行了调整， 这样势必会造成已有代码的不兼容，如何快速修复呢？
Elasticsearch 在 7.0 之后的版本中，为了优化性能，搜索结果的命中数默认不进行精确的计数统计，同时对搜索结果的响应体进行了调整， 这样势必会造成已有代码的不兼容，如何快速修复呢？
Elasticsearch：创建多个节点的集群 - Elastic Stack 8.0
liuxg 发表了文章 • 0 个评论 • 1693 次浏览 • 2022-02-20 19:34
在我之前的文章：
我详细描述了如何安装单节点的 Elastic Stack。在今天的教程中，我详述如何安装3个节点的 Elasticsearch 集群。我将使用 Docker 来进行部署。
首先，我们使用如下的命令来创建第一个 Elasticsearch 节点：
docker network create elastic
docker pull docker.elastic.co/elasticsearch/elasticsearch:8.0.0
docker run -e ES_JAVA_OPTS="-Xms1g -Xmx1g" --name es-node01 --net elastic -p 9200:9200 -p 9300:9300 -it docker.elastic.co/elasticsearch/elasticsearch:8.0.0
原文链接：https://elasticstack.blog.csdn ... 27404
我详细描述了如何安装单节点的 Elastic Stack。在今天的教程中，我详述如何安装3个节点的 Elasticsearch 集群。我将使用 Docker 来进行部署。
首先，我们使用如下的命令来创建第一个 Elasticsearch 节点：
docker network create elastic
docker pull docker.elastic.co/elasticsearch/elasticsearch:8.0.0
docker run -e ES_JAVA_OPTS="-Xms1g -Xmx1g" --name es-node01 --net elastic -p 9200:9200 -p 9300:9300 -it docker.elastic.co/elasticsearch/elasticsearch:8.0.0
原文链接：https://elasticstack.blog.csdn ... 27404
同时查询不同的条件 查询出来的结果跟当前所输入的查询条件不一致
tongchuan1992 回复了问题 • 2 人关注 • 1 个回复 • 911 次浏览 • 2022-02-21 09:17
Elasticsearch8.0新特性概览
liujiacheng 发表了文章 • 1 个评论 • 12852 次浏览 • 2022-02-14 16:30
8.x 重要更新
- Rest API相比较7.x而言做了比较大的改动（比如彻底删除_type），为了降低用户的升级成本，8.x会暂时的兼容7.x的请求。兼容方式：
[REST API compatibility | Elasticsearch Guide [8.0] | Elastic](https://www.elastic.co/guide/e ... y.html) - 默认开启安全配置（三层安全），并极大简化了开启安全需要的工作量，可以这么说：7.x开启安全需要10步复杂的步骤比如CA、证书签发、yml添加多个配置等等，8.x只需要一步即可）。
[elasticsearch-create-enrollment-token | Elasticsearch Guide [8.0] | Elastic](https://www.elastic.co/guide/e ... n.html) - 存储空间优化：对倒排文件使用新的编码集，对于keyword、match_only_text、text类型字段有效，有3.5%的空间优化提升，对于新建索引和segment自动生效。
- 优化geo_point，geo_shape类型的索引（写入）效率：15%的提升。
- 新特性：支持上传pyTorch模型，在ingest的时候使用。比如在写入电影评论的时候，如果我们想要知道这个评论的感情正负得分，可以使用对应的AI感情模型对评论进行运算，将结果一并保存在ES中。
[Overview | Machine Learning in the Elastic Stack [8.0] | Elastic](https://www.elastic.co/guide/e ... w.html) - 技术预览版KNN API发布，（K邻近算法），跟推荐系统、自然语言排名相关。之前的KNN是精确搜索，在大数据集合的情况会比较慢，新的KNN提供近似KNN搜索，以提高速度。[https://www.elastic.co/guide/e ... .html](https://www.elastic.co/guide/e ... h.html)
- 对ES内置索引的保护加强了：elastic用户默认只能读，如果需要写权限的时候，需有allow_restrict_access权限。
- 其他更新
[Elasticsearch breaking changes | Elastic Installation and Upgrade Guide [8.0] | Elastic](https://www.elastic.co/guide/e ... s.html)
简直无语，升级到 Elasticsearch 8.0 之后，我的数据居然写不进去了
medcl 发表了文章 • 5 个评论 • 8988 次浏览 • 2022-02-11 19:45
我破防了，今天看到 8.0 发布的消息，这个版本真的是期待已久了，一激动就升级到了最新版，各种激动人心的新功能，简直是爽歪歪啊。
瞧！有图有真相。
体验了一把新的 8.0 正式版的 Kibana，啧啧，真不错。
还没从喜悦的心情平复，我的手机已然切到了震动模式，是谁在呼唤我？？
我的妈，各种服务器大量报错，我抓过日志，各位请看：
type 这厮在 8.0 里面已经被正式干掉了，而我还傻傻的等在原地。
怎么办，我几万个 agent、上千个 Filebeat 和 Logstash 大军总不能现在就升级吧，还不知道有没有幺蛾子在前方等待我，心里有点方。
恩，这个时候我想到了鲁迅说的，用 Elasitcsearch 之前先看看极限网关（文档地址：http://极限网关.com） ，所以我立马就去南山寺问了问极限网关，他说可以， O 了。
首先，从这里下载最新的极限网关 523 版本：http://release.elasticsearch.cn/gateway/snapshot/
然后，解压，可以看到立马有一个配置，佛祖显灵，居然有一个配置文件`sample-configs/v8-bulk-indexing-compatibility.yml` 在闪光，就是它：
恩，看来是这个 filter 可以帮我去掉了当前 whatever 版本生成的多余的不要的 type，修改配置我就试试看。
启动启动启动，如下：
没有报错！yes。
查看索引的统计指标：
O 了，数据都正常写入了，采集端啥都不用动，就能用上新版的 Elasticsearch，真是快哉。晚上自己加个卤蛋。
以上情节，纯属虚构，如有雷同，哪又咋地。
瞧！有图有真相。
体验了一把新的 8.0 正式版的 Kibana，啧啧，真不错。
还没从喜悦的心情平复，我的手机已然切到了震动模式，是谁在呼唤我？？
我的妈，各种服务器大量报错，我抓过日志，各位请看：
{
"error": {
"root_cause": [
{
"type": "illegal_argument_exception",
"reason": "Action/metadata line [1] contains an unknown parameter [_type]"
}
],
"type": "illegal_argument_exception",
"reason": "Action/metadata line [1] contains an unknown parameter [_type]"
},
"status": 400
}
type 这厮在 8.0 里面已经被正式干掉了，而我还傻傻的等在原地。
怎么办，我几万个 agent、上千个 Filebeat 和 Logstash 大军总不能现在就升级吧，还不知道有没有幺蛾子在前方等待我，心里有点方。
恩，这个时候我想到了鲁迅说的，用 Elasitcsearch 之前先看看极限网关（文档地址：http://极限网关.com） ，所以我立马就去南山寺问了问极限网关，他说可以， O 了。
首先，从这里下载最新的极限网关 523 版本：http://release.elasticsearch.cn/gateway/snapshot/
然后，解压，可以看到立马有一个配置，佛祖显灵，居然有一个配置文件`sample-configs/v8-bulk-indexing-compatibility.yml` 在闪光，就是它：
恩，看来是这个 filter 可以帮我去掉了当前 whatever 版本生成的多余的不要的 type，修改配置我就试试看。
启动启动启动，如下：
没有报错！yes。
查看索引的统计指标：
O 了，数据都正常写入了，采集端啥都不用动，就能用上新版的 Elasticsearch，真是快哉。晚上自己加个卤蛋。
以上情节，纯属虚构，如有雷同，哪又咋地。
Elastic Stack 8.0 安装 - 保护你的 Elastic Stack 现在比以往任何时候都简单
liuxg 发表了文章 • 0 个评论 • 1859 次浏览 • 2022-02-11 12:10
在 8.0 中，我们很高兴为所有用户带来简化的安全功能。 从 7.1 开始，我们向所有人免费提供了确保 Elastic Stack 安全所需的所有功能。
然而，我们知道设置安全性并不好玩，你需要专注于你的项目目标。 好消息给你！ 从 8.0 开始，自管理集群默认启用 Elastic Stack 安全性，配置工作几乎为零。 只需启动新的 Elasticsearch 和 Kibana 版本并继续充分利用 Elastic Stack，我们将为你提供支持！ 如果你使用的是 Elastic Cloud，请不要担心——我们已经为你解决了安全问题。
轻松获得所需的所有安全性
简化的安全性包括以下功能，这些功能跨越多个层和产品，默认启用：
用户认证
具有基于角色的访问控制的用户授权
Kibana Spaces 多租户
使用 TLS 的加密节点到节点通信
使用 HTTPS 与 Elasticsearch API 进行加密通信
原文链接：https://elasticstack.blog.csdn ... 74932
然而，我们知道设置安全性并不好玩，你需要专注于你的项目目标。 好消息给你！ 从 8.0 开始，自管理集群默认启用 Elastic Stack 安全性，配置工作几乎为零。 只需启动新的 Elasticsearch 和 Kibana 版本并继续充分利用 Elastic Stack，我们将为你提供支持！ 如果你使用的是 Elastic Cloud，请不要担心——我们已经为你解决了安全问题。
轻松获得所需的所有安全性
简化的安全性包括以下功能，这些功能跨越多个层和产品，默认启用：
用户认证
具有基于角色的访问控制的用户授权
Kibana Spaces 多租户
使用 TLS 的加密节点到节点通信
使用 HTTPS 与 Elasticsearch API 进行加密通信
原文链接：https://elasticstack.blog.csdn ... 74932
高亮关键字 去除html标签内的
yanyl 回复了问题 • 2 人关注 • 1 个回复 • 1546 次浏览 • 2022-02-18 14:51
elasticsearch IllegalArgumentException[Operation term is newer than the current term; current term[2
locatelli 回复了问题 • 2 人关注 • 1 个回复 • 2264 次浏览 • 2022-02-15 11:17
Elasticsearch 查询示例 - 动手练习（一）
liuxg 发表了文章 • 5 个评论 • 2697 次浏览 • 2022-02-07 14:29
Elasticsearch 提供了一组强大的选项来查询各种用例的文档，因此了解将哪个查询应用于特定案例很有用。 以下是一个动手教程，可帮助你利用 Elasticsearch 提供的最重要的查询。
在本指南中，你将学习许多 带有详细解释的流行查询示例。 此处涵盖的每个查询将分为 2 种类型：
原文链接：https://blog.csdn.net/UbuntuTo ... 53295
在本指南中，你将学习许多 带有详细解释的流行查询示例。 此处涵盖的每个查询将分为 2 种类型：
- 结构化查询：用于检索结构化数据的查询，例如日期、数字、密码等。
- 全文查询：用于查询纯文本的查询。
原文链接：https://blog.csdn.net/UbuntuTo ... 53295
Elasticsearch 提供了一组强大的选项来查询各种用例的文档，因此了解将哪个查询应用于特定案例很有用。 以下是一个动手教程，可帮助你利用 Elasticsearch 提供的最重要的查询。
在本指南中，你将学习许多 带有详细解释的流行查询示例。 此处涵盖的每个查询将分为 2 种类型：
原文链接：https://blog.csdn.net/UbuntuTo ... 53295
在本指南中，你将学习许多 带有详细解释的流行查询示例。 此处涵盖的每个查询将分为 2 种类型：
- 结构化查询：用于检索结构化数据的查询，例如日期、数字、密码等。
- 全文查询：用于查询纯文本的查询。
原文链接：https://blog.csdn.net/UbuntuTo ... 53295
copy_to字段内容如何清除
Charele 回复了问题 • 2 人关注 • 1 个回复 • 1099 次浏览 • 2022-02-21 16:12
欢迎您参加 Elastic 全球社区大会 - 2022年2月11日至12日线上直播
liuxg 发表了文章 • 0 个评论 • 1051 次浏览 • 2022-01-26 17:11
来自社区，面向社区的技术盛会 - 欢迎您参加 Elastic 全球社区大会
继2021年成功举办之后，第2届Elastic全球社区大会 #ElasticCC 将于2022年2月11日至12日隆重召开。大会继续秉承 “来自社区，面向社区” 的办会宗旨，采用多语言轮流线上直播的方式，面向全体开发者与技术人员、初级用户与资深玩家、行业客户与合作伙伴，提供横跨时间与空间的技术分享盛宴。详细阅读，请参阅 https://blog.csdn.net/UbuntuTo ... 98829
继2021年成功举办之后，第2届Elastic全球社区大会 #ElasticCC 将于2022年2月11日至12日隆重召开。大会继续秉承 “来自社区，面向社区” 的办会宗旨，采用多语言轮流线上直播的方式，面向全体开发者与技术人员、初级用户与资深玩家、行业客户与合作伙伴，提供横跨时间与空间的技术分享盛宴。详细阅读，请参阅 https://blog.csdn.net/UbuntuTo ... 98829
来自社区，面向社区的技术盛会 - 欢迎您参加 Elastic 全球社区大会
继2021年成功举办之后，第2届Elastic全球社区大会 #ElasticCC 将于2022年2月11日至12日隆重召开。大会继续秉承 “来自社区，面向社区” 的办会宗旨，采用多语言轮流线上直播的方式，面向全体开发者与技术人员、初级用户与资深玩家、行业客户与合作伙伴，提供横跨时间与空间的技术分享盛宴。详细阅读，请参阅 https://blog.csdn.net/UbuntuTo ... 98829
继2021年成功举办之后，第2届Elastic全球社区大会 #ElasticCC 将于2022年2月11日至12日隆重召开。大会继续秉承 “来自社区，面向社区” 的办会宗旨，采用多语言轮流线上直播的方式，面向全体开发者与技术人员、初级用户与资深玩家、行业客户与合作伙伴，提供横跨时间与空间的技术分享盛宴。详细阅读，请参阅 https://blog.csdn.net/UbuntuTo ... 98829
segments的version_map_memory指标具体表示什么
Charele 回复了问题 • 3 人关注 • 2 个回复 • 2384 次浏览 • 2022-02-21 16:43
Elasticsearch 的新 range 丰富策略使上下文数据分析更上一层楼 - 7.16
liuxg 发表了文章 • 0 个评论 • 1225 次浏览 • 2022-01-24 15:53
Elasticsearch 7.16 引入了一个新的丰富策略：range。 range 策略允许将传入文档中的数字、日期或 IP 地址与丰富索引中相同类型的范围相匹配。 能够与 IP 范围进行匹配在安全用例中特别有用，其中额外的元数据可用于进一步细化检测规则。 由于我们已经在文档中添加了一个使用 IP 范围的示例，因此我们将在此处使用 date_range 类型进行示例。
在之前我的文章 “Elasticsearch：enrich processor （7.5发行版新功能）” 已经详细描述了 geo_match 及 match 的丰富策略。详细使用，请阅读那篇文章。
更多阅读，请参阅 https://elasticstack.blog.csdn ... .5502
在之前我的文章 “Elasticsearch：enrich processor （7.5发行版新功能）” 已经详细描述了 geo_match 及 match 的丰富策略。详细使用，请阅读那篇文章。
更多阅读，请参阅 https://elasticstack.blog.csdn ... .5502
