为了更快的定位您的问题,请提供以下信息,谢谢
【详述】利用flink-cdc,写了yml文件,配置mysql数据同步到starrocks(用的是celerdata 的cloud服务,3fe ,3be),同步了4张表,单表的数据在6000w,目前出现的问题是,flink显示提交的4个任务都在运行中,但是subtask的日志文件已经10几个小时没有新增,日志中最后一条显示成功提交,无任何报错,flink也正常运行。mysql源表中的数据还在实时增加,但是starrocks这边已经无任何的数据更新了。感觉是任务没有在工作
【背景】检查下flink日记,flink-cdc日志,flink ui上的subtask log,均没有发现任何的报错
【业务影响】starrocks 更新不到任何的数据
【是否存算分离】 用的cloud服务,存算一体
【StarRocks版本】例如:celerData cloud,版本号 3.3.11-ee
【集群规模】例如:3fe(aws ec2 m6i.xlarge)+3be(aws ec2 m5.2xlarge)
【机器信息】CPU虚拟核/内存/网卡,例如:48C/64G/万兆
【表模型】 用的flink-cdc 3.3.0的版本,自动创建的表
【导入或者导出方式】例如:Flink-cdc
【联系方式】502308793jack@gmail.com
【附件】
- fe.log/be.INFO/相应截图
- 完整的报错异常栈 : 无任何报错