AI评测专家（办公场景）-集团信息系统

岗位描述

1. 负责办公场景AI评测体系的整体规划与建设，打通离线评测、在线实验、线上监控到问题归因的端到端质量闭环，作为智能助手、文档、会议、知识问答等产品的质量守门人；
2. 主导评测指标体系与评测集的设计与迭代，覆盖任务完成率、事实性、指令遵循、有用性、安全合规、鲁棒性、时延与成本等维度，制定评分规范与质量校验标准；
3. 设计与建设评测工程能力（批量评测流水线、评分服务、回归测试、数据版本管理、LLM-as-a-Jud…
4. 计算机、人工智能、数学、统计等相关专业硕士学位及以上；
5. 扎实的算法基础与工程实现能力，熟悉Python，具备系统开发经验，理解评测端到端工程；
6. 深入理解大模型原理与评测…