为了更快的定位您的问题,请提供以下信息,谢谢
【详述】问题详细描述
k8s部署模式下 starRocks集群如何定时备份fe元数据,如何恢复fe元数据
【背景】做过哪些操作?
【业务影响】
【是否存算分离】否
【StarRocks版本】3.2.6
【集群规模】3fe(3 follower)+ 3be(fe与be混部)
【机器信息】
【联系方式
【附件】
元数据定期备份,这个功能确实需要,我就有集群,元数据损坏,恢复不了,然后整个集群数据推倒重来
老师, 请教下你是怎么实现定期备份的?是云原生部署方式吗?
我是自己写了个小工具,走aws cli sync的方式,通过sideCar的方式注入,每10min启动一次同步meta信息到对象存储目录下。
这种热备方式,元数据不能保证有用吧
嗯,确实,一般而言如果集群安全性稳定性要求很高,还是建议fe HA,分布在不同的机器上,多几个fe,丢了一个的也没啥,还能恢复。我们是为了省成本,要求没那么高的集群就10min备份一次,保证大概率能解决问题。理论上走k8s部署,pvc的方式存元数据的话,fe崩溃重启不影响的,我也只是见过开发环境,fe宿主机机器宕机了,pvc和pv都丢了,才需要恢复。
我们遇到过FE全部不可用