【2.5.11版本】FE节点磁盘IO占满,导致服务无法访问

【详述】streamload使用FE follower节点IP导入数据,发现该FE follower节点磁盘占用打满,对应服务器无法访问,磁盘占用如下:


故障期间fe leader节点warn日志如下:

故障期间fe follower节点warn日志如下:

最后调整streamload使用FE leader节点导入数据,故障节点恢复

【背景】streamload任务同步binlog,同步频率为15s,发生故障时steamload导入数据量较小,发生故障时间段没有大数据量定时任务
【业务影响】
【是否存算分离】
【StarRocks版本】例如:2.5.11
【集群规模】例如:3fe(1 leader+2follower)+3be(fe与be单独部署)
【机器信息】3fe:4C16G,3be:16C64G
【联系方式】社区群12-Pumbaa
【附件】

  • fe.log/beINFO/相应截图
  • 慢查询:
    • Profile信息
    • 并行度:show variables like ‘%parallel_fragment_exec_instance_num%’;
    • pipeline是否开启:show variables like ‘%pipeline%’;
    • be节点cpu和内存使用率截图
  • 查询报错:
  • be crash
    • be.out
  • 外表查询报错
    • be.out和fe.warn.log