OLAP资深研发工程师 (J250630006)
Didi
Hangzhou, Zhejiang, China
Posted on Jul 1, 2025
职位描述
1. 主导OLAP 平台的架构设计,结合业务需求制定技术方案,确保系统的高扩展性、高并发性能及稳定性。
2. 持续优化 OLAP 引擎(StarRocks、Trino、Druid等)源码,解决复杂性能问题,提升查询效率与资源利用率。
3. 探索湖仓一体架构下的数据分析模式,支持直接查询数据湖(如 Iceberg、Delta Lake)中的原始数据,实现存算分离与元数据统一管理
4. 分析 OLAP 引擎瓶颈,通过参数优化、索引设计、查询改写等手段提升响应速度,确保复杂查询延迟稳定在毫秒级至秒级
5. 参与开源社区贡献,提升团队整体技术水平
任职要求
1. 熟悉湖仓一体架构,掌握 Iceberg、Delta Lake 等开放格式,了解存算分离、批流一体的技术实现
2.具备大规模分布式系统开发经验,熟练使用 SR、Spark、Flink 等框架,理解 MPP 架构与向量化执行引擎原理
3.熟悉 Calcite、ANTLR 等查询优化框架,有 SQL 解析、执行计划生成等底层开发经验者优先
4.良好的跨团队沟通能力,能有效协调业务、产品及运维团队,推动技术方案落地
5.参与过开源项目贡献(如 Doris、StarRocks 社区),或发表过技术论文、专利者优先
6.五年及以上大数据从业经验