为了更快的定位您的问题,请提供以下信息,谢谢
【详述】
现象:
1、StarRocks存算分离k8s集群上线后,cn节点的pvc磁盘一直在增加;
2、starlet_cache和persistent目录占用磁盘较大,因为配置了starlet_star_cache_disk_size_percent=50,starlet_cache目录磁盘占用确实得到了控制;
3、发现单个cn节点的persistent目录磁盘占用从上周刚迁移完的10-20G增长到了100多G,感觉还在一直增加。
发现的疑点:
同一个tablet 492234,在cn 0和cn 2节点的persistent目录下都有(cn 1没去看),且占用大小一样。
截图如下:
然后写了个Python脚本,对cn 0和cn 2节点的persistent目录下,都存在的tablet做了统计,
脚本代码和统计结果如下:
可以看到有139个tablet在cn 0和cn 2上都是存在的,数据存了2份,没有清理,这个情况正常吗?
今天确实cn 节点upgrade配置过几次,期间cn节点上下线,是导致不同cn节点persistent目录下,同一个tablet都有的原因吗?
【背景】从存算一体迁移到存算分离集群后,跑了不到一周发现persistent目录数据量持续增长。
【业务影响】否
【是否存算分离】是
【StarRocks版本】3.3.4
【集群规模】3fe + 3cn
【机器信息】fe(4c 8g), cn (16c 27g)
【联系方式】 微信手机同号18368891160