(资深)数据仓库研发工程师 (J241016009)
Didi
1. 深入理解滴滴海外业务模式、流程和系统架构,和相关产品技术、业务运营高效沟通,设计合理的数据仓库架构。
2. 充分利用滴滴现有的各种数据仓库及反作弊处理平台,设计、开发和维护高效、可扩展的大数据处理系统,以支持安全反作弊业务的数据驱动决策和业务发展。深度参与从数据收集、存储、处理到分析的全过程,利用先进的工具和技术,优化数据处理流程,提升数据质量和洞察力。
3. 跟踪大数据领域的新技术、新工具,不断探索并引入以提升团队的技术能力和项目效率。
4. 国际化安全反作弊技术团队其他开发工作。
任职要求
1. 统招本科及以上学历,计算机等相关专业;
2. 3年及以上的互联网后端技术开发及数据仓库开发工作经验,对业务和数据敏感
3. 熟悉大数据处理架构,包括数据仓库、数据流处理、实时分析系统等。熟悉数据集成解决方案,实现跨平台、跨系统的数据抽取、转换和加载(ETL)过程。具备持续优化大数据处理性能的能力,包括但不限于数据分区、索引优化、并行计算等。
4. 熟悉至少一种大数据处理框架(如Hadoop、Spark、Flink等)。
5. 熟悉NoSQL数据库(如MongoDB、HBase、Cassandra等)和关系型数据库(如MySQL、PostgreSQL)。
6. 有良好的数据结构和算法基础,熟悉分布式系统原理。熟练掌握Java语言分布式、低延迟、高并发、高可用的工程开发,熟练使用 SpringFramework、SpringBoot、SpringCloud,熟悉分布式系统原理,有分布式缓存(如Redis、Memcached)、分布式消息队列(如Kafka、RabbitMQ)使用经验。
【加分项】
1. 具备国际化风控业务经验
2. 有算法工程化经验,有和算法团队合作经验者优先
3. 因为会与国外同事交流,或有国外出差机会,英语水平流利者为佳。