提问:布和纸怕什么?

Elasticsearch 迁移工具 ESM 更新 0.4.4

资料分享medcl 发表了文章 • 10 个评论 • 9157 次浏览 • 2020-05-14 16:07 • 来自相关话题

timg.jpeg

 ESM 0.4.4 修复一堆 bug,支持几个新的特性:
  • 可用于生成测试数据,一般用于压力测试,基于源 ES 或者导入到本地的 JSON 数据,随机修改 ID,可以指定重复次数
  • 修复 Routing 参数在不同 ES 版本下的参数差异,支持 1.x\2.x\3.x\5.x 到 6.x\7.x 的相互导入
  • 修复终端下不能切换到后台执行的 bug,可以以 crontab 定时执行
  • 支持指定 _source 字段导出
  • 支持 _source 字段重命名
  • 支持文档 _type 重命名

 
下载地址:
 
https://github.com/medcl/esm/releases/tag/v0.4.4
 
 
生成测试数据示例:
 
1.直接以来源 es 的 my_index1 的索引数据生成到目标 es 集群的索引 my_index2,产生 10 份一样的数据
./bin/esm -s http://localhost:9201 -d http://localhost:9200 -x my_index1 -y 
my_index2
-n elastic:pass --regenerate_id --repeat_times=10

2.先导出索引文档到本地的文件 dump.json
./bin/esm -s http://localhost:9201 -x my_index1 -o dump.json
再基于这份样本,生成 10 份一样的数据到目标集群
./bin/esm -i dunp.json -d  http://localhost:9201 -y target-index1  --regenerate_id  --repeat_times=10 


更多使用示例参照项目 README

ES集群配置中,如果设置了协调节点,还需要再设置nginx反代处理吗

Elasticsearchbyx313 回复了问题 • 2 人关注 • 1 个回复 • 2145 次浏览 • 2020-05-15 17:56 • 来自相关话题

Elasticesearch add host blacklist

Elasticsearchtrycatchfinal 回复了问题 • 2 人关注 • 1 个回复 • 2548 次浏览 • 2020-05-18 11:56 • 来自相关话题

kibana安装elastalert插件安装失败

回复

Kibanaranao 发起了问题 • 1 人关注 • 0 个回复 • 3670 次浏览 • 2020-05-14 11:40 • 来自相关话题

修改时没加版本号也会出现版本冲突吗?

回复

Elasticsearchmyhyperion 发起了问题 • 1 人关注 • 0 个回复 • 2458 次浏览 • 2020-05-14 11:22 • 来自相关话题

Elastic Stack 7.7.0 重磅发布

回复

Elasticsearchliuxg 发起了问题 • 1 人关注 • 0 个回复 • 1779 次浏览 • 2020-05-14 09:40 • 来自相关话题

社区日报 第936期 (2020-05-13)

社区日报elk123 发表了文章 • 0 个评论 • 1182 次浏览 • 2020-05-13 23:37 • 来自相关话题

1、Elastic在SRE和故障响应中的可观察能力;
https://t.cn/A6A1ClaH
2、 在k8s构建跨多可用区的高可用elasticsearch集群;
https://t.cn/A6PmG8t4
3、使用Elastic Workplace Search搜索confluence;
https://t.cn/A6A1CllE

编辑:wt
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup

elasticsearch从6.5升级7.4后查询使用"fuzziness": "AUTO",高亮无返回结果

回复

Elasticsearchxixixixi 发起了问题 • 1 人关注 • 0 个回复 • 2779 次浏览 • 2020-05-13 21:52 • 来自相关话题

bucket_selector中能否获得上一级的params?

回复

Elasticsearchcleverxiao 发起了问题 • 1 人关注 • 0 个回复 • 2021 次浏览 • 2020-05-13 21:01 • 来自相关话题

filebeat中work配置

回复

BeatsFatGirl_Spring 发起了问题 • 1 人关注 • 0 个回复 • 2547 次浏览 • 2020-05-13 21:01 • 来自相关话题

求助!!!filebeat 内执行shell命令报错 operation not permitted

Beatspillow_123 回复了问题 • 4 人关注 • 4 个回复 • 5583 次浏览 • 2020-11-25 21:16 • 来自相关话题

如何使用 Elasticsearch ingest 节点来丰富日志和指标

回复

Elasticsearchliuxg 发起了问题 • 1 人关注 • 0 个回复 • 1717 次浏览 • 2020-05-13 16:03 • 来自相关话题

大佬们,如何解决es的时区问题

Elasticsearchcaizhongao 回复了问题 • 3 人关注 • 2 个回复 • 5451 次浏览 • 2020-05-15 16:59 • 来自相关话题

Elasticsearch:创建属于自己的Ingest processor

回复

Elasticsearchliuxg 发起了问题 • 1 人关注 • 0 个回复 • 2479 次浏览 • 2020-05-12 21:50 • 来自相关话题

使用haproxy的tcp代理转发filebeat请求至kafka(logstash)失败

回复

Beatssec_master 发起了问题 • 1 人关注 • 0 个回复 • 6316 次浏览 • 2020-05-12 17:21 • 来自相关话题