蚂蚁集团-AI数据评测技术专家-杭州

岗位职责

1. 建立并迭代数据评测体系：针对数据效果与模型效果进行高质量验证与评价，设计科学的评测指标、流程与方法，输出可信的评测结论；
2. 深度分析评测结果，定位数据与模型的核心问题，将评测结论有效反哺数据供给与生产策略，形成"评测—反馈—优化"闭环。

任职要求

1. 本科及以上学历，计算机、人工智能、统计学等相关专业，3年以上数据评测、数据标注质量管理或模型评估相关经验；
2. 具备扎实的数据 know-how：熟悉数据采集、清洗、标注全链路，能快速判断数据质量与缺陷根因；
3. 具备模型 know-how：理解主流大模型/深度学习模型的训练与评测方法，有 Badcase 分析、模型效果归因的实战经验；
4. 掌握至少一种评测指标设计方法（如人工评估、自动评测、对抗评测），有搭建评测集或评测平台的经验者优先；
5. 逻辑清晰、自驱性强，具备跨团队推动能力，能将评测结论转化为可执行的改进方案。

岗位标签

NEW

特色标签

Python、Shell、SQL、主流模型、分布式训练、合规、团队管理经验、多模态算法、大数据、大数据处理工具(Spark/Hadoop/Hive)、大模型算法、大语言模型、持续改进、支付、效果归因、数据供给、数据净化、数据安全、数据收集、数据整理、数据标注管理、数据获取、数据质量评估、数据预处理、标注流程、标注质量、模型归因、模型效果评估、深度学习、深度学习模型、组织协同、自然语言处理算法、评价指标、评估工具、评估指标、评测体系、评测反馈、评测方法、评测框架、评测系统、跨部门协作、金融、错误案例分析、闭环优化、项目推进