starrocks fe lock

【详述】日常的数据导入,查询,共4-5个库,每个库几十张表的样子;有50多个kafka routine load task
【业务影响】每当产生锁的时候,数据库查询效率会变低
【StarRocks版本】例如:2.3.16
【集群规模】例如:3fe(3 follower)+ 4be(fe与be分开部署)
【机器信息】be: 16C/64G;fe:8C/32G
【联系方式】社区群15-老张
【附件】

当前routine load 配置是什么样的,请您脱敏发下

您指的是参数还是?

是的,导入任务中您的参数设置,一共四台be是吧,kafka的topic是几个分区

有几十个导入任务,我是随便给您找一个吗?4个be,每个topic分区数不一样的

您发我一个比较普遍的就可以,相同配置的比较多的任务的配置,以及其消费的topic的分区数。还有导入高峰时您这边资源使用情况如何,有资源会达到瓶颈么?


导入高峰时be和fe内存及cpu都在正常范围内,不会达到瓶颈

大佬目前可有头绪?