岗位名称:计算引擎资深开发工程师
工作职责:
-
支撑 B 站的 Hadoop 技术栈(Hadoop, HDFS, Yarn, Spark, StarRocks, Presto, Kyuubi, Ranger, Hive, Alluxio, Ozone 等)的开发和管理,解决实际业务挑战
-
与开源社区保持交流,发现对业务场景有帮助的特性并引入生产环境,或将经内部验证的特性贡献到社区
-
熟悉 Hadoop/Spark 主流大数据系统原理及源码(不要求熟悉所有技术栈),对社区有贡献者加分
-
解决性能优化、容量规划等问题,保障集群高效稳定经济运行
-
良好的 Java/Scala/C++ 编程基础
-
具备大规模系统的故障诊断与性能优化能力
工作要求:
-
对 Hadoop/Spark/Flink/Presto/StarRocks 等开源大数据计算框架以及场景有深入研究或有实践经验
-
熟悉 SQL 引擎内核优化,如 codegen/vectorization 等
-
精通 Java/Scala/C++ 编程语言
-
具备大规模分布式系统的研发和优化能力
简历投递邮箱:zhangwei24@bilibili.com