为了更快的定位您的问题,请提供以下信息,谢谢
【详述】2.5.11版本磁盘IO在没有查询任务时也一直居高不下
通过iotop查看发现是manual_compact占用较大
通过 lsof -p 8678|grep ‘/data’|grep ‘w’|sort -k7 -rn|head 查询结果为
通过查询结果为lsof -p 8678|grep ‘/data’|grep ‘u’|sort -k7 -rn|head
be.conf 如下
be.conf (12.2 KB)
be.info 截取如下
be.info (7.4 MB)
【背景】有一些streamload导入任务,数据量较小,频率为15秒左右
【业务影响】
【是否存算分离】
【StarRocks版本】例如:2.5.11
【集群规模】例如:1fe + 3be(fe与be单独部署)
【机器信息】CPU虚拟核/内存/网卡,例如:16C/64G/万兆
【联系方式】为了在解决问题过程中能及时联系到您获取一些日志信息,请补充下您的联系方式,例如:社区群4-小李或者邮箱,谢谢
【附件】
- fe.log/beINFO/相应截图
- 慢查询:
- Profile信息,获取Profile,通过Profile分析查询瓶颈
- 并行度:show variables like ‘%parallel_fragment_exec_instance_num%’;
- pipeline是否开启:show variables like ‘%pipeline%’;
- be节点cpu和内存使用率截图
- 查询报错:
- query_dump,怎么获取query_dump文件
- be crash
- be.out
- coredump,如何获取coredump
- 外表查询报错
- be.out和fe.warn.log