滴滴
27届秋招-引擎研发工程师(Spark)
RESPONSIBILITIES
岗位职责
负责开发和维护业界领先的PB级别批计算引擎,支持滴滴大规模数据湖仓建设、业务数据挖掘、特征工程等复杂场景需求;
负责对接平台方和业务方相关计算任务需求,对开源Spark引擎进行二次开发,并在SQL优化器、执行引擎(Shuffle、内存管理、调度)、存储对接等方面持续挖掘性能瓶颈、进行专项优化;
参与分析和解决用户在作业运行效率、资源使用、稳定性等场景下的痛点,提供SQL调优、资源配置、参数诊断等综合解决方案;
开发计算引擎侧自动化运维、诊断与资源管控工具(如作业画像、资源治理、动态资源分配),配合监控告警系统,保障Spark集群日常稳定运行与资源高效利用
REQUIREMENTS
任职要求
1、2027届毕业生,本科以上学历,计算机及其相关专业优先;
至少掌握Java/Scala/C++编程语言的其中一种;
计算机基础扎实,熟悉常见的算法和数据结构,对操作系统、分布式系统、数据库系统(如SQL执行原理、存储引擎、查询优化)等知识有一定了解;
熟悉开源大数据生态,例如Spark、Flink、Hadoop、Hive等,了解Spark内核(DAG调度、Shuffle机制、内存管理、Catalyst优化器)者优先;
有以下经历(一种或多种)优先考虑:曾在ACM/ICPC等竞赛获奖;有大数据计算引擎、分布式系统内核开发经验;有参加实习、暑研等实践经历;
具备快速学习能力、沟通协调能力及团队精神,有较强的责任心和学习积极性
信息来自企业官方招聘渠道
OfferSeek 对公开岗位信息进行聚合、去重和结构化整理,最终申请以企业官方页面为准。
