AI推理平台-大模型工程链路测试开发专家/高级工程师-北京/杭州

岗位职责

1. 负责大模型训练、推理、评测、部署等核心链路的质量保障体系建设。
2. 设计并实现自动化评测框架，支持多维度（如准确性、一致性、安全性、推理速度等）的模型能力评估。
3. 构建高质量、可扩展的评测数据集，制定科学、可量化的评测标准与指标体系。
4. 推动CI/CD流程在大模型工程中的落地，保障模型迭代的稳定性与可回溯性。
5. 主导Bad Case分析闭环机制，联动算法、工程与业务团队优化模型表现。

任职要求

1. 计算机或相关专业硕士及以上学历，3年以上测试开发或质量保障经验，有大模型/AIGC项目经验者优先。
2. 精通Python/Java至少一种语言，熟悉主流测试框架（如PyTest、JUnit）及自动化工具链。
3. 熟悉大模型基本原理（如Transformer、Prompt Engineering、RLHF等），了解训练/推理/部署流程。
4. 具备数据驱动思维，能设计量化指标并基于数据驱动模型迭代与质量改进。
5. 具备良好的跨团队协作能力，能与算法、工程、产品高效对齐目标与方案。

加分项：

1. 有大模型自动化评测、COT（Chain-of-Thought）评测、对抗性测试等实践经验。
2. 参与过模型评测标准制定、开源评测基准（如HELM、MMLU）适配或自研评测体系构建。
3. 熟悉MLOps平台，有大模型CI/CD流水线建设经验。

岗位标签

NEW