存算分离部署架构 cn节点crash

采用的是存算分离部署架构一个fe节点,一个cn节点,版本使用的是3.2.6,
cn节点crash无法启动,报错如下
麻烦老师帮忙定位下问题

F0605 23:55:54.473024 523 vacuum.cpp:555] Duplicate files were returned from the remote storage. The most likely cause is an S3 or HDFS API compatibility issue with your remote storage implementation. duplicate file: staros://160749/meta/00000000000273ED_0000000000001A0E.meta

你好 这个是已知的问题 当前的解决方法是需要找到对应的tablet, 删表drop, 手动删obs上对应的文件. 问题的原因是:obs并行文件系统只支持listObjectsv1, 但aws sdk默认用的listObjectsV2, obs收到v2的API也不报错, 就一直错当v1处理, 导致超过1000时 (默认list max-keys), 分页机制失效, 不断返回第一页的数据. 这个问题 我们正在修复中

收到 感谢帮忙答疑

这个问题有临时规避的方法吗,我们现在是使用datax往starrocks里面同步数据,在数据量大的时候会触发,数据量小的时候不会, 我们现在环境有这个问题,想着有没有快速的规避措施先绕开/不触发这个报错