嘿~ 今天天气不错嘛

基量导入 导致增量数据积压

Elasticsearch | 作者 zlg7788925 | 发布于2021年10月10日 | 阅读数:1154

进行表结构优化需要增量导入数据 同时增量也在进行 。增量用KAFKA 基量目前是MR做的 但是国庆前导入基量的时候发现 kafka数据有积压 大概看了一下是增量写入的时候时间很长 比如我们是1000条数据为一个BULK 但是发现一次写入需要4S中 基量导入5天多才完成 请求大神有什么优化方案 解决积压问题
已邀请:

要回复问题请先登录注册