机器学习平台研发工程师

岗位职责

岗位详情

工作职责:

1. 负责大规模机器学习平台的设计、开发、运维；
2. 负责多云厂商、多种资源类型，多种任务类型下的资源管理，处理复杂场景下的任务调度；
3. 负责平台可观测性建设， 构建多角度、多维度的任务监控，最大程度保证平台稳定性和任务可见性；
4. 负责底层硬件资源、集群资源的运维管理，协助平台用户定位、解决使用种的各种问题；
5. 利用AI Agent 技术，自动化平台的日常管理工作，降低用户日志使用成本，减少平台日常运维工作； 工作要求: 工作要求：
6. 精通 Python/Go/Java 至少一种主流编程语言，具备良好的代码风格， 有Vibe Codingj经验更佳， 有Go编程经验更佳；
7. 熟悉 Kubernetes 架构和生态，熟悉k8s中的常用机制和原理； 有k8s集群运维管理经验；
8. 熟悉常见的资源调度原理， 有过调度系统，资源管理系统开发、运维经验者更佳；
9. 熟悉kubeflow, kuberay 等云上资源管理，了解TensorFlow、PyTorch、 Ray等任务框架； 加分项：
10. 参与或主导过大规模调度平台的建设或核心模块优化， 有千卡集群、万卡集群管理、运维经验；
11. 深入了解过Kubeflow/Argo/Volcano/KubeRay 等开源云原生调度项目，有二次开发或生产环境深度运维经验；
12. 深入参与过GPU机器的运维管理， 解决过RDMA网络问题、 NCCL通讯问题、GPU硬件故障、 存储性能问题；
13. 深入了解过 Meagtron、Verl、 vLLM 等大模型训推框架， 了解大规模训推任务中的细节和原理；

任职要求

（暂无）