【详述】主键索引持续加载,无视内存限制,直到 BE OOM
【背景】
使用S3 LOAD CSV文件到主键模型表,约40亿行数据时,OOM
同时刷新了一个较大物化视图,失败。
现在BE启动后内存持续增长直到OOM。
【业务影响】一个BE节点无法启动。因无副本,数据无法恢复
【是否存算分离】否
【StarRocks版本】3.2.6
【集群规模】1fe+3be(fe与be混部)
【机器信息】CPU虚拟核/内存/网卡,80C/128G/千兆
【联系方式】754005439@qq.com
【附件】
- fe.log/beINFO/相应截图
- be节点cpu和内存使用率截图
- be.INFO-20240523 (76.7 KB) - fe.log-20240523 (349.4 KB)