返回岗位列表

大语言模型评估与产品策略专家

查看原岗位

地点：北京薪资：薪资未公开日期：2026-07-20

岗位摘要

构建LLM模型在多元应用场景下的全方位评估框架，创新评估方法论，建立涵盖功能性、用户体验等维度的自动化评测基准体系，确保评估结果的客观性与实用性；深度参与从数据制备到模型上线的完整技术链路，制定产品体验标准与数据质量基准，通过持续优化评估指标与反馈机制，驱动模型性能在实际应用中的稳步提升

岗位职责

构建LLM模型在多元应用场景下的全方位评估框架，创新评估方法论，建立涵盖功能性、用户体验等维度的自动化评测基准体系，确保评估结果的客观性与实用性
深度参与从数据制备到模型上线的完整技术链路，制定产品体验标准与数据质量基准，通过持续优化评估指标与反馈机制，驱动模型性能在实际应用中的稳步提升
与跨部门团队紧密协作，深入理解业务需求痛点，将基座模型核心能力有效转化为产品功能，探索并孵化具有商业价值的创新应用场景
建立完善的评估数据收集与分析体系，运用数据洞察指导模型优化方向，为产品迭代与技术决策提供有力的数据支撑

任职要求

本科及以上学历，计算机科学、人工智能、数学、统计学等相关专业背景优先
1年以上LLM策略产品或模型评估相关工作经验，对大模型技术发展趋势具备敏锐洞察力
理解LLM评估方法论与技术实现，具备独立设计评估方案的能力，熟悉主流评估工具与框架
理解机器学习与深度学习原理，熟悉模型训练、调优等关键环节，具备解决复杂问题的能力
具备优秀的数据处理与分析能力，能够从海量数据中提取有价值的业务洞察
具备出色的AI工具应用能力，能够灵活选择并运用各类前沿AI工具提升工作效率
对LLM产品与技术充满热忱，具备持续学习能力与自我驱动精神，能够快速适应技术变革
优秀的沟通协调与抽象思维能力，具备跨团队合作经验，能够将产品概念清晰传达给不同背景的合作伙伴
深刻理解AI产品的能力边界与应用局限，具备敏锐的用户需求洞察力与产品思维