为了更快的定位您的问题,请提供以下信息,谢谢
【详述】问题详细描述
使用了物化视图进行数据分层,用物化视图做宽表,但是在执行物化视图过程中,物化视图会一直执行失败,报错信息:com.starrocks.sql.common.DmlException: Memory of process exceed limit. Pipeline Backend: 10.10.94.89, fragment: 1fcbc86e-7246-11ee-a44d-e43d1aa26928 Used: 218600448088, Limit: 218598168821. Mem usage has exceed the limit of BE
【背景】做过哪些操作?物化视图为每半小时刷新
【业务影响】
【StarRocks版本】2.5.10
【集群规模】例如:3fe(1 follower+2observer)+5be(fe与be混部)
【机器信息】CPU虚拟核/内存/网卡, 48C/250G
【联系方式】为了在解决问题过程中能及时联系到您获取一些日志信息,请补充下您的联系方式,例如:社区群4-小李或者邮箱,谢谢
【附件】
- Profile信息,如何获取profile
- 并行度:show variables like ‘%parallel_fragment_exec_instance_num%’;
show variables like ‘%pipeline_dop%’; - pipeline是否开启:开启
- 执行计划:explain costs + sql
- be节点cpu和内存使用率截图