为了更快的定位您的问题,请提供以下信息,谢谢
【详述】有个业务场景,需要汇总多个上游表数据通过userId作为关联提供多条件查询和数据聚合,上游存储介质均为mysql。其中有一类底表特征为更新不频繁,秒级别更新频率为20左右,全量数据为100w左右。请问这个场景该怎样同步存量和增量数据。
【背景】做过哪些操作?
【业务影响】
【是否存算分离】
【StarRocks版本】例如:2.5.12
【集群规模】例如:3fe(1 follower+2observer)+5be(fe与be混部)
【机器信息】CPU虚拟核/内存/网卡,例如:48C/64G/万兆
【表模型】例如:主键模型
【导入或者导出方式】例如:flink or hive
【联系方式】为了在解决问题过程中能及时联系到您获取一些日志信息,请补充下您的联系方式,例如:社区群4-小李或者邮箱,谢谢
【附件】
- fe.log/be.INFO/相应截图
- 完整的报错异常栈