外表异步物化视图和基表数据不一致

💬 StarRocks 用户问答 功能使用相关
#1

【详述】在
外部RDS(5.7)上操作

  1. 创建多表视图view_client,view_product_info
    在StarRocks上操作如下：
  2. 创建External Catalog，
  3. CREATE EXTERNAL CATALOG mysql_rds_0
  4. CREATE MATERIALIZED VIEW IF NOT EXISTS dwd_client_info
    COMMENT “客户主数据”
  5. CREATE MATERIALIZED VIEW IF NOT EXISTS dwd_product_info
    COMMENT “产品主数据”
    【背景】
    发现外表异步物化视图和基表数据一致！
    查询tasks和task_runs，都正常。
    查询日志文件，也正常
    【业务影响】
    select count() from mysql_rds_0.xxx.view_client ;
    结果是2633.
    select count(    ) from dwd_client_info ;
    结果是0.

select count() from mysql_rds_0.xxx.view_product_info;
结果是20997.
select count() from dwd_client_info ;
结果是20932.

【StarRocks版本】3.1.3
【集群规模】1FE+1BE
【机器信息】4U/32G一台机器
【联系方式】社群11-数字化个体户
【附件】
基表视图的创建语句：
view_create_client.sql (9.7 KB)
view_product_info.sql (6.3 KB)
异步物化视图创建语句：
dwd_client_info.sql (1.9 KB)
dwd_product_info.sql (1.2 KB)

#2

手动刷新下物化视图后再查询，结果一致吗？
REFRESH MATERIALIZED VIEW dwd_client_info;
REFRESH MATERIALIZED VIEW dwd_product_info;

#3

另外物化视图的定义语句里，这块为什么是百分号

image
image906×432 15.4 KB

#4

REFRESH MATERIALIZED VIEW dwd_product_info;结果还是不一致

image
image1896×912 38.1 KB

#6

没有百分号，可能是编辑器粘贴的引起的

#7

做个参考，我遇到的情况，用query去创建表的时候，报长度错误，推测物化视图也有这个限制。
Error: String ‘高级JAVA工程师（（金融/财务/风控方向-金融事业部）’( length =70) is too long . The max length of ‘job_name’ is 50. Row :

Error: String ‘电源事业部副主任（电源模块/电源系统）’( length =55) is too long . The max length of ‘job_name’ is 50. Row :

Error: String ‘地产事业部总经理助理（项目总方向）’( length =51) is too long . The max length of ‘job_name’ is 50. Row :

京ICP备2022026421号-1