蚂蚁集团-引擎研发工程师-杭州/北京/上海

岗位职责

负责计算引擎的架构设计、核心模块研发与性能优化，建设面向数据要素流通场景的计算底座，包括：

1. 负责计算引擎（数据引擎、机器学习引擎等）及配套 SDK/API/控制台的研发，支持复杂的查询、建模等任务；
2. 建设统一任务提交与调度能力，支持多租户、作业管理、资源调度、日志诊断等能力；
3. 建设数据全生命周期管理能力，包括数据读写、列级保护策略、数据血缘和审计日志等；
4. 对接可信执行环境、远程证明、身份认证和密钥管理等安全系统，保障数据在计算过程中的机密性、完整性和访问边界可验证；
5. 负责引擎的性能优化和稳定性建设工作。

任职要求

1. 精通 Java/Scala/Rust/C++/Python 中至少一种，具备扎实的后端研发、系统设计和性能优化能力；
2. 熟悉分布式计算或大数据系统，有Spark、Livy、Hive Metastore、Gravitino相关的工作经验优先；
3. 熟悉 Kubernetes、容器化部署、服务治理、日志/指标/Trace、故障诊断和稳定性建设；
4. 具备复杂系统排障和性能调优经验，有查询优化、存储优化相关的工作经验优先；
5. 熟练使用AI工具，具备完善的AI Coding能力。

特色标签

C++、Hadoop、Hive、Java、Linux开发/部署经验、Python、Spark、TEE、云原生、云计算、云计算经验、任务调度系统、作业调度、分布式经验、分布式计算、可信计算环境、基础设施、多租户架构、大数据、大数据经验、安全、密码、密钥服务、密钥生命周期管理、应用程序接口、数据 lineage、数据安全、数据库开发经验、数据引擎、数据治理、数据溯源、数据生命周期管理、机器学习引擎、架构设计经验、用户认证、租户隔离、管理控制台、统一调度平台、调度、身份验证、软件开发工具包、远程认证、远程验证、隐私计算