Elasticsearch 迁移工具 ESM 更新 0.4.4
资料分享 • medcl 发表了文章 • 10 个评论 • 9157 次浏览 • 2020-05-14 16:07
ESM 0.4.4 修复一堆 bug,支持几个新的特性:
- 可用于生成测试数据,一般用于压力测试,基于源 ES 或者导入到本地的 JSON 数据,随机修改 ID,可以指定重复次数
- 修复 Routing 参数在不同 ES 版本下的参数差异,支持 1.x\2.x\3.x\5.x 到 6.x\7.x 的相互导入
- 修复终端下不能切换到后台执行的 bug,可以以 crontab 定时执行
- 支持指定 _source 字段导出
- 支持 _source 字段重命名
- 支持文档 _type 重命名
下载地址:
https://github.com/medcl/esm/releases/tag/v0.4.4
生成测试数据示例:
1.直接以来源 es 的 my_index1 的索引数据生成到目标 es 集群的索引 my_index2,产生 10 份一样的数据
./bin/esm -s http://localhost:9201 -d http://localhost:9200 -x my_index1 -y
my_index2
-n elastic:pass --regenerate_id --repeat_times=10
2.先导出索引文档到本地的文件 dump.json
./bin/esm -s http://localhost:9201 -x my_index1 -o dump.json
再基于这份样本,生成 10 份一样的数据到目标集群./bin/esm -i dunp.json -d http://localhost:9201 -y target-index1 --regenerate_id --repeat_times=10
更多使用示例参照项目 README
ES集群配置中,如果设置了协调节点,还需要再设置nginx反代处理吗
Elasticsearch • byx313 回复了问题 • 2 人关注 • 1 个回复 • 2145 次浏览 • 2020-05-15 17:56
Elasticesearch add host blacklist
Elasticsearch • trycatchfinal 回复了问题 • 2 人关注 • 1 个回复 • 2548 次浏览 • 2020-05-18 11:56
修改时没加版本号也会出现版本冲突吗?
回复Elasticsearch • myhyperion 发起了问题 • 1 人关注 • 0 个回复 • 2458 次浏览 • 2020-05-14 11:22
Elastic Stack 7.7.0 重磅发布
回复Elasticsearch • liuxg 发起了问题 • 1 人关注 • 0 个回复 • 1779 次浏览 • 2020-05-14 09:40
社区日报 第936期 (2020-05-13)
社区日报 • elk123 发表了文章 • 0 个评论 • 1182 次浏览 • 2020-05-13 23:37
https://t.cn/A6A1ClaH
2、 在k8s构建跨多可用区的高可用elasticsearch集群;
https://t.cn/A6PmG8t4
3、使用Elastic Workplace Search搜索confluence;
https://t.cn/A6A1CllE
编辑:wt
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
elasticsearch从6.5升级7.4后查询使用"fuzziness": "AUTO",高亮无返回结果
回复Elasticsearch • xixixixi 发起了问题 • 1 人关注 • 0 个回复 • 2779 次浏览 • 2020-05-13 21:52
bucket_selector中能否获得上一级的params?
回复Elasticsearch • cleverxiao 发起了问题 • 1 人关注 • 0 个回复 • 2021 次浏览 • 2020-05-13 21:01
求助!!!filebeat 内执行shell命令报错 operation not permitted
Beats • pillow_123 回复了问题 • 4 人关注 • 4 个回复 • 5583 次浏览 • 2020-11-25 21:16
如何使用 Elasticsearch ingest 节点来丰富日志和指标
回复Elasticsearch • liuxg 发起了问题 • 1 人关注 • 0 个回复 • 1717 次浏览 • 2020-05-13 16:03
大佬们,如何解决es的时区问题
Elasticsearch • caizhongao 回复了问题 • 3 人关注 • 2 个回复 • 5451 次浏览 • 2020-05-15 16:59
Elasticsearch:创建属于自己的Ingest processor
回复Elasticsearch • liuxg 发起了问题 • 1 人关注 • 0 个回复 • 2479 次浏览 • 2020-05-12 21:50
使用haproxy的tcp代理转发filebeat请求至kafka(logstash)失败
回复Beats • sec_master 发起了问题 • 1 人关注 • 0 个回复 • 6316 次浏览 • 2020-05-12 17:21