晓天衡宇-大模型评测工程师-AI应用Company AlibabaFocus Tech · BackendLocation 杭州Published August 27, 2026岗位职责 负责AI原生应用的数据构造及应用评测工作,主要聚焦在用户体验,端到端效果评测提升,与产品及算法团队密切合作,理解算法需求,提供满足算法研发需求的数据; 设计和实现各领域标注方向AI训练流程,并不断优化迭代,高效完成标注和内容生产项目; 统筹ai应用各领域评测方案及数据生产方案。依据多元数据集设计需求与应用场景,为数据集标准环节制定详实、完备且极具可操作性的标准。定期对数据集开展阶段性质量检测,持续迭代体系化标注标准,助力打造行业标杆级数据集。 构建并维护一套完善的各领域AI数据内容质量管理体系,积极推动组织流程及交付流程优化,全面把控内容质量并对结果负责,并不断进行优化迭代; 任职要求 硕士及以上学历,参与过竞品AI应用、垂类大模型数据及评测工作优先、领域数据标注管理、标注管理等工作经验者优先; 能准确理解业务诉求,对质量/数据变化敏锐,能通过独到的视角或科学的方法发现问题,推动业务指标达成和策略落地; 制定业务规划、目标管理以及团队人员管理工作,与上下游团队充分沟通协作,关注团队效果数据和目标达成; 积极主动,对AI有激情,具备较强的团队协作能力、组织协调能力、复杂问题解决能力。 岗位标签 NEW