[3.3.3] BE疑似内存泄露

💬 StarRocks 用户问答 日常运维
#1

【详述】个别BE节点的内存占用一直在增长，暂停集群的查询后，内存仍一直没有被回收，怀疑内存泄露
【是否存算分离】是
【StarRocks版本】3.3.0， docker部署、系统版本Ubuntu 22.04.4 LTS

image
image2534×760 71.2 KB

BE节点web页面显示的内存占用信息
Mem Limit: 36.45 GB
Mem Consumption: 36.26 GB

日志中关于内存的统计信息grep "Current memory statistics" be.INFO | sort -t "(" -k1 -nr | head -10
I1107 14:36:32.626266 187 daemon.cpp:199] Current memory statistics: process(38928731848), query_pool(26725265808), load(0), metadata(55862), compaction(0), schema_change(0), column_pool(0), page_cache(237189456), update(0), chunk_allocator(2147630272), clone(0), consistency(0), datacache(5653527450), jit(179576)

jemalloc statistics (41.4 KB)

@trueeyu @dongquan @丹尼尔007 麻烦帮忙看下

#2

升级到3.3的最新版本，应该是已经修了

#4

@trueeyu 感谢，我升级试试。请问下是哪个issue修复的呢

#5

可以看看query_pool 中是不是很多Fragment没有释放掉，我也遇上这个问题了，我也开了个帖子： 【CN内存】CN节点query_pool内存不释放 - :speech_balloon: StarRocks 用户问答 / 日常运维 - StarRocks中文社区论坛 (mirrorship.cn)

#6

@redscarf 谢谢，我升级到3.3.5后BE的query_pool内存被回收了，你们也可以尝试下

#7

我升级到 3.3.6版本依旧还是发现该问题了

京ICP备2022026421号-1