txn 是怎么定义的阿

【StarRocks版本】例如:2.5.8
【集群规模】例如:3fe+3be(fe与be混部)

max_running_txn_num_per_db 已经调整为3000了,今天发现任务导入还是有报错。

看了一下监控数据每分钟提交的任务数在300左右,应该达不到3000才对。

starrocks_fe_txn_begin 监控指标,每分钟在120左右。

txn 除了上面的指标,还有其他指标可以监控吗?

该怎么去排查这个问题阿

是用的哪种导入方式?这个看起来应该是导入的频次太高了

stream load

现在一共多少个导入任务,导入任务的sink参数怎么设置的

45个任务,并发是3,最多135个并发

一个并发一次导入任务的提交就是一个txn。可以看下fe leader的日志,找一个典型的txn看下begin到publish version的时间大概需要多久。如果sink的interval比较小的话,可以调高下sink的间隔,另一方面集群的压力不大的话可以稍微调高点compaction的参数

好的,我们先排查下