【实习】大模型评测实习生

岗位职责

1. 参与大模型评测体系的设计与优化，协助制定评测指标和测试方案。
2. 执行大模型在多个任务场景下的评测，并收集并分析评测数据，输出结构化报告并归因，为模型优化提供数据支持。
3. 协助搭建和维护评测工具链，提升评测效率与自动化水平。

任职要求

1. 大学本科及以上学历，应用统计、数据科学、计算机、人工智能等相关专业优先。
2. 对Agent/LLM应用原理有基本认知，乐于探索用AI方式解决工作问题；有LLM标注、评测实操经验者优先。
3. 具备良好的逻辑分析能力和数据敏感度，熟练使用Python进行数据处理。
4. 工作认真负责，具备良好的沟通能力和团队协作精神。