be crash 节点不定时出现 starrocks::TabletMeta::_save_meta 和bthread::TaskGroup::run_main_task()

为了更快的定位您的问题,请提供以下信息,谢谢
【详述】be crash 节点不定时出现 starrocks::TabletMeta::_save_meta 和bthread::TaskGroup::run_main_task()
【背景】目前正在测试,还没有很多查询,但是有400多个routine load,做数据同步。max_routine_load_task_num_per_be 改成了16
【业务影响】偶发性be crash,导致查询会中断
【是否存算分离】 否
【StarRocks版本】例如:3.5.20
【集群规模】fe 和be 混部,单机
【机器信息】,32c64G
【联系方式】584158868@qq.com
【附件】
be.out (375.9 KB)

be.info 和 be.warning 等其他日志 以及 最近2次代表性的crash core dump (zstd压缩)我放百度网盘。

通过网盘分享的文件:starrocks_log
链接: https://pan.baidu.com/s/1JdkDkzVlYkzcLgjXoWUOrQ 提取码: eyvi

补充说明:

  1. 版本从从3.4.8->3.4.10->3.5.20, crash中如果看到目录是3.5.10,是因为我们路径改错了,实际是3.5.20版本。
  2. 当前操作系统是Rocky9, 内核版本 5.14.0-687.30.1.el9_8.x86_64
  3. 之前有一个贴子,说是5.14内核高版本兼容性问题,是否和这个有关?BE节点偶发性Crash
  4. 配置方面做了修改,担心是因为routine load和 并发compaction 的问题。max_routine_load_task_num_per_be= 16, max_compaction_concurrency=1