P99查询延迟每天固定时刻出现尖刺

【详述】连续一周发现每天有2个时刻,p99查询延迟显著升高,业务查询qps掉0
【业务影响】业务查询qps掉0,接口查询延迟升高,出现查询报错
【是否存算分离】存算一体
【StarRocks版本】3.3.20
【集群规模】3fe,5be,分开部署
【机器信息】云端部署,fe 2C16GB,be 8C32GB
【附件】
7月2日


7月1日

6月30日

7月2日的其他监控
尖刺发生在北京时间7:29和19:55
FE cpu使用率

BE cpu使用率

BE 磁盘读取速率

flink数据导入

各资源组使用cpu情况





FE Leader log日志
尖刺出现时间utc+0
7月1日23:30
7月2日11:55
问题排查.zip (3.2 MB)