BE内存占用持续上升

💬 StarRocks 用户问答 日常运维
#1

【详述】BE内存占用持续上升，通过grafana以及http://BE_IP:8040/mem_tracker查看近7天常驻内存上涨了4G
【背景】集群有几个stream load任务，数据量不大，大查询较少。
【业务影响】可用内存越来越小，可能导致查询可用内存不足
【StarRocks版本】2.5.3
【集群规模】1fe + 3be
【机器信息】fe（4C16G）be（16C/64G）
【联系方式】为了在解决问题过程中能及时联系到您获取一些日志信息，请补充下您的联系方式，例如：社区群4-小李或者邮箱，谢谢
【附件】

BE的mem_tracker页面，level1的process内存占用持续上涨，并且level1的process内存占用和对比所有level2加起来多了10G

image
image2406×2126 235 KB

使用curl查看内存占用与mem_tracker页面展示一致，starrocks_be_process_mem_bytes比其他占用内存累加起来多了10G

curl -XGET -s http://be_ip:8040/metrics | grep "^starrocks_be_.*_mem_bytes\|^starrocks_be_tcmalloc_bytes_in_use"

image
image828×654 106 KB

grafana上看近7天常驻内存上升了4G

image
image1200×342 35.1 KB

image
image1132×286 27.3 KB

#2

已经修复了，升级到2.5.8

#3

@trueeyu3.1.1版本也遇到同样问题， BE内存持续上升， 7天增加了5GB， 还在上涨，请问如何处理

#4 
curl -XGET -s http://be_ip:8040/metrics | grep "^starrocks_be_.*_mem_bytes\|^starrocks_be_tcmalloc_bytes_in_use"

执行下这个

#6

@trueeyu

starrocks_be_bitmap_index_mem_bytes 0
starrocks_be_bloom_filter_index_mem_bytes 0
starrocks_be_chunk_allocator_mem_bytes 104944152
starrocks_be_clone_mem_bytes 0
starrocks_be_column_metadata_mem_bytes 1207511049
starrocks_be_column_pool_mem_bytes 0
starrocks_be_column_zonemap_index_mem_bytes 284130505
starrocks_be_compaction_mem_bytes 0
starrocks_be_consistency_mem_bytes 0
starrocks_be_load_mem_bytes 0
starrocks_be_metadata_mem_bytes 1405764827
starrocks_be_ordinal_index_mem_bytes 273650240
starrocks_be_process_mem_bytes 4310182312
starrocks_be_query_mem_bytes 0
starrocks_be_rowset_metadata_mem_bytes 0
starrocks_be_schema_change_mem_bytes 0
starrocks_be_segment_metadata_mem_bytes 198197290
starrocks_be_segment_zonemap_mem_bytes 149154106
starrocks_be_short_key_index_mem_bytes 1844581
starrocks_be_storage_page_cache_mem_bytes 0
starrocks_be_tablet_metadata_mem_bytes 56488
starrocks_be_tablet_schema_mem_bytes 56488
starrocks_be_update_mem_bytes 25739525

#7

看起来像是内存泄漏，升级到3.1的最新版本看下？

#8

show backends; 看下单机有多少Tablet

京ICP备2022026421号-1