【详述】日常的数据导入,查询,共4-5个库,每个库几十张表的样子;有50多个kafka routine load task
【业务影响】每当产生锁的时候,数据库查询效率会变低
【StarRocks版本】例如:2.3.16
【集群规模】例如:3fe(3 follower)+ 4be(fe与be分开部署)
【机器信息】be: 16C/64G;fe:8C/32G
【联系方式】社区群15-老张
【附件】
- fe.log报错详情:
【详述】日常的数据导入,查询,共4-5个库,每个库几十张表的样子;有50多个kafka routine load task
【业务影响】每当产生锁的时候,数据库查询效率会变低
【StarRocks版本】例如:2.3.16
【集群规模】例如:3fe(3 follower)+ 4be(fe与be分开部署)
【机器信息】be: 16C/64G;fe:8C/32G
【联系方式】社区群15-老张
【附件】
当前routine load 配置是什么样的,请您脱敏发下
您指的是参数还是?
是的,导入任务中您的参数设置,一共四台be是吧,kafka的topic是几个分区
有几十个导入任务,我是随便给您找一个吗?4个be,每个topic分区数不一样的
您发我一个比较普遍的就可以,相同配置的比较多的任务的配置,以及其消费的topic的分区数。还有导入高峰时您这边资源使用情况如何,有资源会达到瓶颈么?
大佬目前可有头绪?