广告信息每秒入库180亿,能帮忙评估一下资源量吗?
💬 StarRocks 用户问答
导入与导出(flink-connector、spark-connector)
shijiewang_tencent
2025年03月4日 06:14
#1
如上,大宽表字段50左右,每秒入库大概82Mb. 表的数据存储7天,大约50个TB。
shijiewang_tencent
2025年03月4日 06:15
#2
目前直接使用stream_load应该是做不了的。考虑分钟级别数据写入hdfs再导入SR,这个策略可行么