微信小程序-大模型评测工程师-智能体方向
Company Tencent
Focus Tech · Algorithm
Location 广州
Published September 20, 2026
岗位职责
- 设计微信小程序智能体(Agent)的质量评测方法学,建立可量化、可追踪的评测指标体系;
- 沉淀评测数据集与 benchmark,跟踪小程序智能体质量演进趋势,输出研究结论反哺评测规则与阈值设定。
任职要求
- 对大语言模型与智能体(Agent)的运作机制有深入理解,熟悉多轮交互、工具调用/MCP、规划与推理的常用范式;
- 熟悉 LLM/Agent 评测方法学,了解 LLM-as-Judge、人工评估对齐、评测一致性与显著性度量等,有评测脚手架或 benchmark 构建经验;
- 具备扎实的统计学与数据分析基础,能独立完成评测指标设计、误差分析与结论显著性验证;
- 大量阅读过 LLM/Agent 评测、对齐、可解释性等方向论文,熟悉学术界和业界主要进展;
- 优秀的逻辑思维能力和问题解决能力,良好的团队协作和沟通能力。
产品/项目
小程序
工作年限
一年以上工作经验