StarRocks 12 月社区动态 (2023)

大家好:wave:,欢迎来到《StarRocks 12 月社区动态》!

2023年,StarRocks 在 300 多位贡献者的共同努力下,持续迈向新的里程碑。社区相继发布了 50 多个版本,并成功实现了从全场景 OLAP 到云原生湖仓的演进。

贡献者们的每一行代码、每一场布道,都推动着 StarRocks 社区的进步。为了感谢大家在 2023 年的贡献,我们在 2023 年 12 月 27 日 发布了 StarRocks 2023 年度贡献人物榜单。感谢大家在过去一年的支持,也期待在 2024 年继续携手前行!

此外,StarRocks 3.2 版本于2023年12月21日正式发布。新版本不仅夯实了一系列重要功能特性,还全面提升了易用性,使 StarRocks 更加顺畅好用。

这么多精彩的内容,不要错过了:point_down:

:new: 技术动态

:wrench: 版本发布

3.2.0

3.2.2

3.2.1

3.1.6

二进制包下载:

https://www.mirrorship.cn/zh-CN/download

:spiral_notepad: 文档动态

重要:

新文档站:https://docs.mirrorship.cn/zh/docs/introduction/StarRocks_intro/

中文文档仓库搬迁到:https://github.com/StarRocks/starrocks/tree/main/docs/zh,原有的仓库不可用。

文档贡献须知:欢迎在 https://github.com/StarRocks/starrocks/tree/main/docs 仓库下同时提交中英文文档 PR。

中文文档

  • 快速开始」:增加存算一体、存算分离、和对接 Iceberg 的快速部署教程。

  • 表设计」:增加 SR 中基本概念,重构「表概览」,优化数据分布

  • 导入

    • 增加单独的 GSC 和 Azure 导入页面。

    • 增加使用工具导入页面,包含 SMT/DataX/CloudCanal/Kettle connector。

  • 外部系统集成」:重构本章节,进行更详细的分类,补充更多集成方式。

  • 「管理手册 > 运维集群」:

    • 拆分 FE 和 BE 配置项到单独的页面,补充更多配置项。

    • 重构 Query Profile 文档。

  • 「SQL 参考」

    • 添加 SQL 命令的权限要求。

    • 优化 Routine Load 相关 SQL。

    • 新增函数:见各版本 release notes。

  • 系统限制」:更新系统内各种名称的命名规范。

:books: StarRocks 文章回顾

技术内幕:

StarRocks Primary Key:实时更新不可缺少的利器

StarRocks 通过在存储结构,索引方式方面的优化,实现了一个全新的可实时更新的 table format ,Primary Key 模型可以满足 OLTP数据库实时同步,Kafka 数据实时接入更新等大多数实时分析场景的需求。

用户案例: B 站基于 StarRocks 构建大数据元仓

B站大数据元仓是一款用来观测大数据引擎运行情况、推动大作业治理的系统诊断产品。经过调研和性能测试,大数据元仓最终以 StarRocks 为技术底座,从实际的应用效果来看,大部分查询都能在几百毫秒内返回结果。

原点安全× StarRocks : 助力某保险企业大数据分析场景下的数据安全治理

原点安全以“数据访问安全层”理念构建的一体化数据安全平台 uDSP,基于对 StarRocks 的良好兼容适配基础,实现了敏感数据目录、行级权限管控、免改造应用动态脱敏和全链路的安全审计,原点安全 uDSP 助力该保险企业建设的一体化数据安全平台为其他规模相同、场景类似的银行保险机构提供了行业案例标杆。

微信基于 StarRocks 的湖仓一体实践

微信作为国内活跃用户最多的社交软件,其数据平台建设经历了从 Hadoop 到 ClickHouse () 亚秒级实时数仓的阶段,但仍旧面临着数据体验割裂、存储冗余的问题。通过 StarRocks 的湖仓一体 () 方案,以及和社区密切配合开发的实时增量物化视图,微信解决了“实时、极速”背后的“统一”诉求。在直播业务场景中,通过湖上建仓的方案改造,使得数据开发同学需要运维的任务数减半,同时存储成本降低65%以上,离线任务产出时间缩短两小时。

当前,基于 StarRocks 的湖仓一体方案已经在微信的多个业务场景中上线使用,包括视频号直播、微信键盘、微信读书和公众号等,集群规模达到数百台机器,数据接入量近千亿,向理想化的湖仓一体形态不断演进。

存算分离降本增效,StarRocks 助力聚水潭 SaaS 业务服务化升级

聚水潭是中国领先的 SaaS 软件服务商,核心产品是电商 ERP,协同350余家电商平台,为商家提供综合的信息化、数字化解决方案。公司是偏线下商家侧的 toB 服务商,员工人数超过3500,线下网点超过100个,每天要承载大概2亿包裹量的 ERP 发货流程,产生的数据量超过10TP。

版本发布:

StarRocks 3.2 新鲜出炉,性能与易用性再上新台阶

2023年12月21日,StarRocks 3.2 版本正式发布,新版本不仅夯实了一系列重磅功能特性,还全面升级了易用性,让 StarRocks 更加顺滑好用。

其中,存算分离架构、数据湖分析、物化视图等重要特性都得到了进一步的优化和完善;易用性方面,从建表、表变更、数据导入、查询、到数据导出整条链路的运维操作都已变得更加简单。

随着 3.2 版本的发布,StarRocks 的优势不再限于性能卓越、功能全面,易用性也将成为一大特色。

:mailbox_with_mail: 来自社区小伙伴的文章

用户 /生态 案例:

白山云科技:白山云基于StarRocks数据库构建湖仓一体数仓的实践分享

汽车之家:StarRocks+Paimon 在汽车之家的业务实践

初探 StarRocks 明细模型(本文简要介绍了 StarRocks 明细模型是什么,以及如何通过 CloudDM 进行可视化建表及数据写入操作)

技术文章:

数仓选型之 StarRocks

StarRocks 面试常见问题(一)

StarRocks开发环境搭建

基于StarRocks的湖仓融合

资讯:

Bytebase 2.13.0 - 支持 StarRocks

:sparkles: 社区活动

:tv: 活动回顾

StarRocks Office Hours在线答疑– 物化视图 专场

:tv: 回放 可至B站查看:point_right:https://www.bilibili.com/video/BV1a94y1P7f4/

:arrow_double_down: PPT 下载: StarRocks Office Hours 线上问题-物化视图 12.06.23

StarRocks 3.2 全面解读:易用性和性能的双重提升

:tv: 回放 可至B站查看:point_right:https://www.bilibili.com/video/BV14C4y1u7H8/?vd_source=1cb452610138142d1300dd37a6162a88

:arrow_double_down: PPT 下载: (回放/PPT已更新)StarRocks 3.2 全面解读:易用性和性能的双重提升

:+1: StarRocks Awards 2023 年度人物

2023 年行将结束。这一年,StarRocks 继续全方位大步向前迈进,在 300+ 贡献者的辛勤建设下,社区先后发布了 50+ 版本,并完成了从全场景 OLAP 到云原生湖仓的进化。

这份榜单分为以代码贡献为主的 DEV 和以布道为主的 Advocacy 两大类别。颁奖典礼的仪式秉承着社区的传统,已于 11/17 峰会结束后的 社区之夜 隆重举行。现在让我们一同回顾完整的 StarRocks 年度贡献人物名单以及颁奖典礼的精彩瞬间。:point_right:StarRocks Awards 2023 年度贡献人物

:trophy: 奖项荣誉:

StarRocks 获评开放原子基金会「 2023 生态开源项目」

2023 年 12 月 16 日,以“一切为了开发者”为主题的 2023 开放原子开发者大会在江苏无锡成功举办,会程中公布了“2023 贡献者、开源项目评选”结果,根据产、学、研各领域的五位评委从社区治理、生态参与度、项目活跃度等多个维度的评估, StarRocks 荣获 2023 生态开源项目。

:hugs: 参与社区|Be A Rockstar!

:trophy: StarRocks GitHub Monthly Contributors

感谢这些小伙伴为 StarRocks 添砖加瓦,StarRocks 因你而伟大!:adult::rocket::heart:

@839224346 @ABingHuang @alberttwong @amber-create @AndyZiYe @Astralidea @banmoy @before-Sunrise@caneGuy @chaoyli @choury @creatstar @DanRoscigno @decster @dirtysalt @dujijun007 @EsoragotoSpirit @evelynzhaojie @FenFenGao @fzhedu @GavinMar @gengjun-git @HangyuanLiu @hellolilyliuyi @hongli-my @huoyue-git @jaogoy @Jin-H @kangkaisen @kevincai @leoyy0316 letian-jiang @lipenglin @LiShuMing @liuyehcf @lmagic233 @luohaha @meegoo @miomiocat @mofeiatwork @Moonm3n @nshangyiming @packy92 @qian0817 @QingdongZeng3 @qingfengyouchen @rickif @rubiesvelt @satanson @sduzh @Seaven @sevev @Shan-01 @silly-carbon @silver–bullet @smartlxh @Smith-Cruise @srlch @starrocks-xupeng @stdpain @stephen-shelby @stonechen111 @trueeyu @TszKitLo40 @wangsimo0 @WholeWorld- @Timothy @wxl24life @wyb @xiangguangyxg @yandongxiao @ymZhao1001 @Youngwb @zaorangyang @zdx19981006
@zenoyang @Zhangg7723 @zhangyifan27 @ZiheLiu @zombee0

新晋 Contributor :clap::clap:

@creatstar @Thearas @huoyue-git @zhangbutao @lmagic233 @qian0817 @ymZhao1001 @Zhangg7723

@zdx19981006

感谢你的阅读,有任何的问题欢迎在论坛下方与我们交流!

也欢迎你关注这些我们常出没的地方:point_down:t2:

:star: GitHubBilibili微信交流群:question:论坛| 公众号:StarRockslabs

@U_1705401383511_3942
@U_1672972471092_1054
请查收~

:clap: