拓达教育 Touchdown Education 拓达求职支持办公室Career Support Office touchdown.org.cn ↗
JobFinder为留学生筛选身份匹配的岗位

27届秋招-引擎研发工程师(Spark)

滴滴 · 北京 · 8月28日 · 6天前
评分
95
发布日期
8月28日 (6天前)
内推
有 CSO 内推渠道
公司规模
10k+
行业
汽车出行
投递编号
b0407471-9dfa-4f66-939c-5025587e71e2

岗位描述

岗位职责: 1、负责开发和维护业界领先的PB级别批计算引擎,支持滴滴大规模数据湖仓建设、业务数据挖掘、特征工程等复杂场景需求; 2、负责对接平台方和业务方相关计算任务需求,对开源Spark引擎进行二次开发,并在SQL优化器、执行引擎(Shuffle、内存管理、调度)、存储对接等方面持续挖掘性能瓶颈、进行专项优化; 3、参与分析和解决用户在作业运行效率、资源使用、稳定性等场景下的痛点,提供SQL调优、资源配置、参数诊断等综合解决方案; 4、开发计算引擎侧自动化运维、诊断与资源管控工具(如作业画像、资源治理、动态资源分配),配合监控告警系统,保障Spark集群日常稳定运行与资源高效利用。 任职要求: 1、2027届毕业生,本科以上学历,计算机及其相关专业优先; 2、至少掌握Java/Scala/C++编程语言的其中一种; 3、计算机基础扎实,熟悉常见的算法和数据结构,对操作系统、分布式系统、数据库系统(如SQL执行原理、存储引擎、查询优化)等知识有一定了解; 4、熟悉开源大数据生态,例如Spark、Flink、Hadoop、Hive等,了解Spark内核(DAG调度、Shuffle机制、内存管理、Catalyst优化器)者优先; 5、有以下经历(一种或多种)优先考虑:曾在ACM/ICPC等竞赛获奖;有大数据计算引擎、分布式系统内核开发经验;有参加实习、暑研等实践经历; 6、具备快速学习能力、沟通协调能力及团队精神,有较强的责任心和学习积极性。

加入我的投递 →