27届秋招-引擎研发工程师（Spark）

岗位职责

岗位职责：

1. 负责开发和维护业界领先的PB级别批计算引擎，支持滴滴大规模数据湖仓建设、业务数据挖掘、特征工程等复杂场景需求；
2. 负责对接平台方和业务方相关计算任务需求，对开源Spark引擎进行二次开发，并在SQL优化器、执行引擎（Shuffle、内存管理、调度）、存储对接等方面持续挖掘性能瓶颈、进行专项优化；
3. 参与分析和解决用户在作业运行效率、资源使用、稳定性等场景下的痛点，提供SQL调优、资源配置、参数诊断等综合解决方案；
4. 开发计算引擎侧自动化运维、诊断与资源管控工具（如作业画像、资源治理、动态资源分配），配合监控告警系统，保障Spark集群日常稳定运行与资源高效利用。任职要求：1、2027届毕业生，本科以上学历，计算机及其相关专业优先；
5. 至少掌握Java/Scala/C++编程语言的其中一种；
6. 计算机基础扎实，熟悉常见的算法和数据结构，对操作系统、分布式系统、数据库系统（如SQL执行原理、存储引擎、查询优化）等知识有一定了解；
7. 熟悉开源大数据生态，例如Spark、Flink、Hadoop、Hive等，了解Spark内核（DAG调度、Shuffle机制、内存管理、Catalyst优化器）者优先；
8. 有以下经历（一种或多种）优先考虑：曾在ACM/ICPC等竞赛获奖；有大数据计算引擎、分布式系统内核开发经验；有参加实习、暑研等实践经历；
9. 具备快速学习能力、沟通协调能力及团队精神，有较强的责任心和学习积极性。岗位职责：
10. 负责开发和维护业界领先的PB级别批计算引擎，支持滴滴大规模数据湖仓建设、业务数据挖掘、特征工程等复杂场景需求；
11. 负责对接平台方和业务方相关计算任务需求，对开源Spark引擎进行二次开发，并在SQL优化器、执行引擎（Shuffle、内存管理、调度）、存储对接等方面持续挖掘性能瓶颈、进行专项优化；
12. 参与分析和解决用户在作业运行效率、资源使用、稳定性等场景下的痛点，提供SQL调优、资源配置、参数诊断等综合解决方案；
13. 开发计算引擎侧自动化运维、诊断与资源管控工具（如作业画像、资源治理、动态资源分配），配合监控告警系统，保障Spark集群日常稳定运行与资源高效利用。任职要求：1、2027届毕业生，本科以上学历，计算机及其相关专业优先；
14. 至少掌握Java/Scala/C++编程语言的其中一种；
15. 计算机基础扎实，熟悉常见的算法和数据结构，对操作系统、分布式系统、数据库系统（如SQL执行原理、存储引擎、查询优化）等知识有一定了解；
16. 熟悉开源大数据生态，例如Spark、Flink、Hadoop、Hive等，了解Spark内核（DAG调度、Shuffle机制、内存管理、Catalyst优化器）者优先；
17. 有以下经历（一种或多种）优先考虑：曾在ACM/ICPC等竞赛获奖；有大数据计算引擎、分布式系统内核开发经验；有参加实习、暑研等实践经历；
18. 具备快速学习能力、沟通协调能力及团队精神，有较强的责任心和学习积极性。