BrokerLoad 导入本地文件失败,type:LOAD_RUN_FAIL,msg:No more data to read

【详述】通过BrokerLoad导入broker所在机器上的
【背景】
导入语句:
LOAD LABEL starrocks.lb11(
DATA INFILE (“file///data/csv/e3.csv”)
INTO TABLE reason
COLUMNS TERMINATED BY “,”
)
WITH BROKER “load broker”
PROPERTIES(
“timeout” = “3600”
)

e3.csv是一个6000w行,11G的文件
截取其中5w行,或者其他小表可导入成功
【业务影响】
【是否存算分离】否
【StarRocks版本】2.5.8
【集群规模】例如:1fe+9be(fe与be混部)
【机器信息】32C/64G
【表模型】例如:主键模型
【导入或者导出方式】例如:BROKERLOAD
【联系方式】120622016@qq.com
【附件】
show load 结果:状态为cancel,报错是’type:LOAD_RUN_FAIL;msg:No more data to read’
broker日志,大量报错 Broken pipe(Write failed)
be日志报错:Fail to open XXX,No more data to read

已经解决,FE动态配置:max_broker_concurrency:100->9
在于BrokerLoad导入本地文件时,只有文件所在的Broker在工作,而FE会根据max_broker_concurrency分派所有BE并发的去这个Broker读取文件,导致该Broker连接池打满,一旦丢失一个连接,因为BrokerLoad具有事务性,整个导入被判断失败。

您好 我想问下 这个参数是 max_broker_load_job_concurrency吗 数量应该越小越好吗