【公测】纵享丝滑!StarTran(星移)迁移工具发布

StarTran 是 StarRocks 社区打造的用于将各种异构数据库迁移至 StarRocks 的 Web 可视化迁移工具,中文名称:星移。

说明 :StarTran 工具一期以“选型实现方案”和“打磨产品框架”为主要目标,仅先实现了对 Apache Doris 的可视化迁移。在二期及后续开发中,将逐步支持 Apache Druid、ClickHouse、Kudu 等数据库产品,将 StarTran 稳步打造为对 StarRocks 的 一站式 数据集成工具。

StarTran 的操作非常简单,部署和上手都很容易,其核心能力为 Schema 自动改写 + 多引擎数据迁移

Schema 自动改写 :可以在 Web 页面灵活勾选源端数据库中的数据表来自动批量改写生成 StarRocks 中的建表语句,同时支持在编辑器内进行手动修改。

多引擎数据迁移 :在工具一期的开发中,StarTran 支持 Export+Broker Load 引擎(支持使用 HDFS 或 S3 作为数据中转)和 Spark 引擎,二期将考虑集成 Seatunnel/DataX 等来实现更广泛的数据源支持并逐步添加实时同步能力。

部署包及全套文档奉上:

部署文档:
StarTran管理手册.pdf (154.6 KB)

操作文档:
StarTran操作手册.pdf (1.7 MB)

下载地址:
StarTran-1.0.3.tar.gz (33.8 MB)

问题反馈:
若工具使用过程中有任何问题,或您对工具有非常好的建议,欢迎在任意社区群召唤@流木反馈交流。

6赞

不会是Fork Doris的吧?

至今没有这个想法

很相似,不过咱们支持

商战是残酷的

这个可以用来迁移starrocks-2.3到starrocks-3.2吗?

支持starrocks to starrocks 的迁移吗?

当前版本不行的,StarRocks 2 StarRocks的能力还没有做

暂时不行,社区近期会推出其他工具来做StarRocks之间的高效迁移

好吧,期待

集群间同步工具已经发布了

1赞

好东西!!

二维码过期了,能重新发一下吗,想进群

已私信你,加我微信,拉你进群

求拉下,进群

辛苦在社区群里 @流木 一下

有开源的仓可以看下转换逻辑吗?

现在使用starTran迁移数据, doris数据过亿, spark本地模式容易挂,请问是不是可以配置spark参数来控制?应该怎么配置