Agent开发工程师（评测技术） - 抖音

岗位职责

团队介绍：抖音致力于打造一个开放、积极、多元、友善的平台，鼓励表达、沟通和记录，激发创造，丰富人们的精神世界，让现实生活更美好。我们通过AI算法驱动的个性化推荐与智能创作工具，满足用户表达、学习、娱乐、社交、消费等需求。回顾抖音一路走来的历程，我们在帮助亿万用户记录美好生活的过程中，努力变得更好。

1. 评测体系搭建：负责抖音互动场景下大模型应用效果的评测体系设计，覆盖内容生成、内容应用、3D模型等方向，制定评测方案、评测指标与Benchmark；
2. 自动化评测建设：参与自动化机评能力建设，缩短模型评测周期，提升评测效率与置信度；
3. 评估分析与策略输出：深入分析评测结果，识别模型在业务场景中的能力边界与缺陷，提出可落地的改进建议，协同算法团队驱动模型迭代；
4. 行业调研与前沿探索：追踪大模型评测领域的最新研究与行业动态，结合实际业务场景，持续迭代评测技术方案。

任职要求

1. 2027届获得本科及以上学历，计算机、软件工程等相关专业优先；
2. 熟练掌握Python/Java/Go至少一门编程语言；
3. 对大模型技术充满热情，对模型评测方法论、Prompt Engineering或数据集构建有浓厚兴趣；
4. 具备结构化数据分析能力与逻辑推理能力，能通过数据分析提炼问题本质，具备良好的判断能力；
5. 有模型策略/评测/数据产品相关经验，熟悉LLM/多模态/Agent产品评估者优先。