【详述】每天早晨4点到9点是离线任务集中执行的时间,一般每月的前20天资源还可以,20号以后就会出现磁盘IO持续升高的情况,但是任务执行完就会回落,但是接近月底的时候就会出现某一个BE节点磁盘IO持续高,下不来,单独重启BE后,接着磁盘IO又上来了
【背景】每天定时任务进行读写计算
【业务影响】查询超时
【是否存算分离】否
【StarRocks版本】3.0.7
【集群规模】3fe(3follower)+4be(fe与be分开部)
问题:
1、只有一个BE节点磁盘IO高,可能下一次会是其他节点,查看监控确实达到了瓶颈,但是不知道为什么读写这么高,是不是Starrocks内部做合并操作之类的
2、最后是stop掉BE,等20分钟后再启动,进行负载均衡后才恢复的
(upload://nXb3T3gKP7wEHkCcAcRyrFepmuN.png)