AI产品经理-模型评测方向
岗位摘要
负责大模型评测平台的产品规划与设计，包括需求调研、用户场景分析、产品方案设计与优化；设计评测任务全链路产品方案，涵盖Benchmark管理、评测数据集管理、评测任务编排与执行、评测结果分析与可视化展示
岗位职责
- 负责大模型评测平台的产品规划与设计，包括需求调研、用户场景分析、产品方案设计与优化
- 设计评测任务全链路产品方案，涵盖Benchmark管理、评测数据集管理、评测任务编排与执行、评测结果分析与可视化展示
- 负责评测指标体系与Evaluator接入机制的产品化设计，支持自动评测与人工评测多种模式
- 与算法、研发团队紧密合作，深入理解用户需求和评测方法论，驱动平台能力持续迭代
- 负责评测相关运营工作，包括评测任务运营、资源调度、结果分析及用户沟通闭环
- 关注业界主流评测框架和评测方法，持续优化评测能力体系
任职要求
- 本科及以上学历，3年以上产品经理经验，有AI平台/数据平台/MLOps相关经验者优先
- 了解大模型评测基本概念，包括Benchmark、自动评测、人工评测、评测指标体系等
- 熟悉任务编排、Pipeline类产品的设计思路，能独立输出PRD和产品原型
- 具备良好的数据分析能力，能通过数据驱动产品决策
- 具有较强的自驱力和学习能力，能在从0到1阶段独立推动产品建设
- 具备良好的跨团队协作与沟通能力