AI产品经理（模型评测方向） - 抖音运营

岗位描述

团队介绍：负责抖音知识，兴趣，消费，生活，娱乐等垂类的创作者运营，主要目标为提升抖音内容供给，探索多元化的作者变现和商业模式，促进多领域的创作者更好地在平台经营和成长。同时也包括抖音中长视频、演出相关业务。 1、负责Agent评测体系建设，将内容专家定义的理想效果、评估标准、人工标准答案及判断依据，转化为可规模化运行的机评方案，探索不同评测方法，持续提升机评与专家判断的一致性、覆盖率和稳定性； 2、建立Agen… 1、有大模型应用、大模型Judge或模型数据相关产品经验；熟悉工具调用及常见模型后训练方法，理解评测数据如何转化为训练信号和能力优化方向； 2、具备较强的产品抽象能力，能够将专家的…