Fe 节点内存每日增长

为了更快的定位您的问题,请提供以下信息,谢谢
【详述】升到3.1.5版本后,fe 节点时不时突然上涨,然后稳定不掉落,但一直处于上升趋势。
【背景】有上了新的 MV 任务,上涨后停了 MV 任务,并没有好转,还是会往上上升。
【业务影响】Fe 内存使用率到达93~95%后,服务不稳定,经常报 :Handshake inactivity timeout, 通过内存升配到128G ,暂时解决
【是否存算分离】不
【StarRocks版本】例如:3.1.5
【集群规模】例如:1fe + 3be(fe与be不混部)
【机器信息】CPU虚拟核/内存/网卡,例如:16C/64G
【联系方式】rowland@footprint.network
【附件】

在jvm内存占用峰值的时候 打个 jmap 看看

发一下 show backends; 的结果,看下单节点多少 tablet


100多万,是不是元数据递增的原因

jvm没设置到 128G 之前,是设置的多大

52G

当前集群共300万+ tablet,按照jvm和tablet个数的关系,建议jvm在64G 以上
image

不过按照集群的数据量来看,建议优化一下当前集群 表的分桶数,单个tablet的数据量建议在 100M-1G。

所以这个参考值的 tablet 个数不是单节点算的是吧,是按所有副本集总数是吧

嗯嗯,正在往这个方向改造,谢谢

是的,整个集群的tablet个数