晓天衡宇-大模型评测工程师-LLM
Company Alibaba
Focus Tech · Algorithm
Location 北京, 杭州
Published September 9, 2026
岗位职责
- 负责大模型训练及评测所需的数据标注任务全流程管理,包括需求拆解、规范制定、任务分发、进度监控及质量验收。
- 搭建并迭代标注质量评估体系,通过一致性检验、badcase复盘、难度分级抽检等手段,持续提升数据质量。
- 管理标注团队,制定培训计划与绩效考核方案,并负责项目结算。
- 与产品、算法团队对接,参与评测数据集构建及后续摸底报告产出。
- 梳理运营SOP,推动标注平台及自动化质检工具的需求设计与落地,提升运营效率与自动化水平。
任职要求
-
本科及以上学历
-
具备优秀的沟通协调能力和团队协作意识,有项目管理或团队负责人经验优先。
-
具备多任务并行及优先级处理经验,有一定抗压能力。
-
具备责任心和较强的团队意识,对互联网及大模型有较强的兴趣。