doris 数据与服务迁移,希望提供多种迁移方案

Viewed 11

各位大佬:

我有一个旧集群 2fe 3be,版本是:doris-2.1.7-rc03, 现在要版本升级到doris-v3.1.4-rc02。 目前我已经新建了一个版本为:doris-v3.1.4-rc02的新集群2fe 3be,旧的集群数据量已经很大了,有什么好的方式可以让我尽快将数据迁移到新的集群呢

麻烦提供多种迁移方式,我综合考虑适合我的方式。

感谢!!!!

1 Answers
  1. 旧集群数据 export 导出到第三方存储,然后 hdfs/s3 load 到新集群,要求两套集群都能访问第三方存储。

  2. 旧集群 backup 新集群 resore 也是依赖第三方存储。

  3. 使用X2Doris 工具,底层走的spark ,如果有 yarn 集群性能会更好,如果没有,会在本地跑 standalone ,有断点续传的能力。x2doris