Broker Load 和pipe导入数据很慢

为了更快的定位您的问题,请提供以下信息,谢谢
【详述】问题详细描述
【是否存算分离】 是
【StarRocks版本】例如:3.2.3
【集群规模】例如:3fe+ 3cn+华为云OBS

【附件】

15G的数据,导入40分钟,才LOAD:35%,速度太慢了

什么格式的文件?

show variables like '%enable_adaptive_sink_dop%'


格式:parquet
lz4 压缩
语句
LOAD LABEL cloud_db.label5
(
DATA INFILE(“hdfs://”)
INTO TABLE iot_pile_charge_status
FORMAT AS “parquet”
(table_time,
table_pk1,
table_pk2,
table_pk,
table_source,
table_json)
)
WITH BROKER broker
(
“username” = “hdfs”,
“compression” = “lz4”
)PROPERTIES
(
“timeout” = “100000”,
“max_filter_ratio” = “0.1”
)
;

看下broker日志和一台be的日志

或者pipe的方式可以查看执行中的profile,EXPLAIN ANALYZE + sql

我们是cn的,存算分离的,没有be

broker日志:

cn日志:

看broker日志在正常导入,这需要拿到profile看慢在哪里了,

这个不是获取查询的概要信息吗


空的