你的浏览器禁用了JavaScript, 请开启后刷新浏览器获得更好的体验!
输入关键字进行搜索
搜索:
发现
分享
文章
活动
登录
用了Elasticsearch,一口气上5T
ES数据快照到HDFS
Elasticsearch
| 作者
qps_dskl332
| 发布于2018年12月10日 | 阅读数:
3220
分享到:
QQ空间
新浪微博
微信
QQ好友
印象笔记
有道云笔记
1、ES官网提供快照方式和es-hadoop,不知道哪位用过,实现备份用哪种方式比较快速,我自己测试了快照方式,效率不是很快,大概1G/分钟
2、快照方式,配置了压缩,但是存入hdfs的数据无压缩(比原来还稍微大一下),不知道有没有更好的方式进行压缩存储
没有找到相关结果
已邀请:
与内容相关的链接
提交
1 个回复
medcl
-
今晚打老虎。
赞同来自:
ES 做快照和使用 es-Hadoop 倒数据是完全的两种不同的方式,使用 ES-Hadoopp 后期导入的成本可能也不小。
如果要恢复快,当然是做快照和还原的方式最快,速度完全取决于网络和磁盘的速度。
如果为了节省磁盘,快照的时候,可以选择6.5最新支持的 source_only 模式,导出的快照要小很多,不过恢复的时候要进行重建,速度慢。
https://www.elastic.co/guide/e ... itory
要回复问题请先
登录
或
注册
发起人
qps_dskl332
活动推荐
Jun
17
搜索客 Meetup 讲师招募(长期有效)
线上
·
6-17 周一
·
进行中
Nov
30
【活动报名】ClickHouse Beijing User Group 第2届 Meetup
北京
·
11-30 周六
·
报名中
相关问题
3千万数据,如何设计集群
elasticsearch 设置 node.data: false 依然有数据
集群稳定性的一些问题(一定量数据后集群变得迟钝)
跨集群数据同步方案讨论
Elastic对类似枚举数据的搜索性能优化
5.X 版本多type 的 es 数据迁移到6.1
如何清理Elasticsearch特定时间段数据?
es scroll查询全部数据问题
新增节点数据均衡.
logstash导入mysql上亿级别数据的效率问题
添加了ik自定义分词,之前入库的数据不能搜索出来,这个有什么好的解决方法?
问题状态
最新活动:
2018-12-10 16:45
浏览:
3220
关注:
3
人
1 个回复
medcl - 今晚打老虎。
赞同来自:
如果要恢复快,当然是做快照和还原的方式最快,速度完全取决于网络和磁盘的速度。
如果为了节省磁盘,快照的时候,可以选择6.5最新支持的 source_only 模式,导出的快照要小很多,不过恢复的时候要进行重建,速度慢。
https://www.elastic.co/guide/e ... itory