flink sql 读取 StarRocks维表,Task Heap占用太大崩了。

【详述】我们这边双流join 5张StarRocks维表。直接报错,资源消耗特别高。5张维表最大的数据量是900W。最小的是24条。



用的scan.url读取StarRocks维表。
【背景】join StarRocks维表,用的for system的写法
【业务影响】所有join多张维表数据都准确性不高。
【StarRocks版本】例如:2.3
【集群规模】例如:3fe(1 follower+2observer)+3be(fe与be混部)
【表模型】主键模型
【导入或者导出方式】例如:Flink
【写法】
select
A流
join B流
join S1 FOR SYSTEM_TIME
join S2 FOR SYSTEM_TIME
join S3 FOR SYSTEM_TIME
join S4 FOR SYSTEM_TIME
join S5 FOR SYSTEM_TIME

由于机制限制,当前不支持大维表,您那边大概是起了几个 task?

起了一个task。一个并发。
抱歉,因为这边是两套环境,所以版本写错了。
我关联的SR版本是2.1.1.

方便私信个联系方式吗,排查下问题