AI评测产品专家
岗位摘要
参与AI评测体系的构建，从美团AI产品的需求场景出发，清晰定义“好的体验”，工作内容包括评测维度定义、评分标准设计、评测集构建等；建立自动化评测流程，优化LLM as Judge评测方案，通过优化提示词工程及工具调用，提升评测的效率、质量
登录后保留你的岗位线索
邮箱登录后可继续查看完整职责、任职要求和原岗位入口，并使用收藏与浏览记录沉淀适合自己的机会。
岗位职责
- 参与AI评测体系的构建，从美团AI产品的需求场景出发，清晰定义“好的体验”，工作内容包括评测维度定义、评分标准设计、评测集构建等
- 建立自动化评测流程，优化LLM as Judge评测方案，通过优化提示词工程及工具调用，提升评测的效率、质量
- 与产品、研发团队深度协同，基于评测结果及归因驱动AI产品的迭代
- 持续跟踪全球AI大模型、Agent和应用产品的发展，将外部先进评测经验转化为内部评测实践
任职要求
- 具备AI产品评测或相关领域经验，熟悉评测体系构建方法
- 了解大模型（LLM）原理及评测方法，有LLM as Judge实践者优先
- 具备良好的跨团队协作能力，能与算法、产品、研发高效沟通
- 对AI行业趋势有敏锐洞察，能主动学习并转化外部经验
福利待遇
- 核心战略价值：岗位直接影响公司大模型质量与效果、AI应用产品定位和迭代，具备战略意义
- 跨团队影响力：与算法负责人和产研团队协作，覆盖公司多条业务线，推动统一标准
- 成长空间：未来可成长为公司评测平台方向的产品负责人，或拓展至可信AI与评测方法论方向的专家型角色
登录后查看完整岗位详情
使用邮箱验证码登录后，可查看完整职责、任职要求、原岗位入口，并继续使用收藏和浏览记录。列表摘要保持公开，完整详情用于保护数据质量和降低恶意抓取。