【详述】问题详细描述
通过spark发送streamload的http请求,返回大量超时及cancel错误。
【导入/导出方式】
通过spark发送streamload的http请求
【背景】做过哪些操作?
【业务影响】
数据没有入进去
【StarRocks版本】例如:1.19
【集群规模】例如:3fe(1 follower+2observer)+5be(fe与be混部)
【机器信息】CPU虚拟核/内存/网卡,例如:48C/64G/万兆
【附件】
【详述】问题详细描述
通过spark发送streamload的http请求,返回大量超时及cancel错误。
【导入/导出方式】
通过spark发送streamload的http请求
【背景】做过哪些操作?
【业务影响】
数据没有入进去
【StarRocks版本】例如:1.19
【集群规模】例如:3fe(1 follower+2observer)+5be(fe与be混部)
【机器信息】CPU虚拟核/内存/网卡,例如:48C/64G/万兆
【附件】
导入频率太高了,建议可以增加单次导入条数,降低导入频率,starrocks适合微批导入,可以攒一个批次再调用stream load导入