be无法下线

【详述】有个 be节点有问题,需要做下线操作.但是一直无法下线.
【背景】
ALTER SYSTEM decommission BACKEND “xxx”
一直无法下线.
执行 SHOW PROC ‘/statistic’;发现有UnhealthyTabletNum的 tablet

image1340×318 15.4 KB

SHOW PROC ‘/dbs/11344/31703/partitions/43714/31704/43755’\G;
State都是NORMAL
IsBad都是 false
最终查询到是有一个表的分区状态是VERSION_ERROR

image2800×560 61.5 KB

be错误信息如下:

image2810×972 455 KB

【StarRocks版本】例如：2.0.1
【集群规模】例如：3fe（3 follower）+12be
【机器信息】和数仓机器混合部署,SR 使用内存 64G

使用ADMIN SET REPLICA STATUS PROPERTIES(“tablet_id” = “43755”, “backend_id” = “11339”, “status” = “bad”);
把有问题的三个修复后,节点还是下不掉.

image2840×422 89.9 KB

image2740×442 230 KB

ALTER SYSTEM drop BACKEND “”
强制下线,集群自己修复了.
不知道是DECOMMISSION的 bug 还是别的原因…

中间有去重启过fe master吗