Post train评测基建工程师
岗位摘要
跟进学术界和企业界前沿的评测基准，持续健全世界级SOTA模型的观测榜单，追踪OpenAI、Anthropic等发布的主流模型在AIME、GPQA、Codeforces等榜单上的表现
登录后保留你的岗位线索
邮箱登录后可继续查看完整职责、任职要求和原岗位入口，并使用收藏与浏览记录沉淀适合自己的机会。
岗位职责
- 跟进学术界和企业界前沿的评测基准，持续健全世界级SOTA模型的观测榜单，追踪OpenAI、Anthropic等发布的主流模型在AIME、GPQA、Codeforces等榜单上的表现
- 开发评测基建，联合模型训练框架共同开发评测体系，确保评测体系与开源社区和头部闭源模型可对比，具备完善的对点机制保障评测结果的可靠性
- 日常维护评测榜单，健全评测工程体系，提高评测效率
- 发现模型迭代中在榜单所反映的能力欠缺问题，分析主流SOTA模型在评测中的差异点
任职要求
- 熟悉大模型相关研究前沿进展，了解市面上主流benchmarks，具备大模型评测经验
- 对数据有较高的敏感度，熟知开源社区各数据渠道来源，具备数据处理的经验和认知
- 具有大模型各流程或全流程的研发、客观指标评测、Agent指标评测经验，或模型训练/推理框架工程经验者优先
- 具备扎实的编程基础和优秀的工程能力，具有NOI、ACM/ICPC等编程竞赛金牌获奖者优先
- 有一定的相关研究经历，发表过顶级会议论文者优先
福利待遇
- 具有竞争力的薪酬待遇：40-70K·16薪
- 参与头部大模型评测体系建设的宝贵机会
- 与顶尖技术团队合作，持续跟进大模型领域前沿进展
- 硕士学历要求，良好的职业发展空间
工作地址
北京海淀区大恒科技大厦00
登录后查看完整岗位详情
使用邮箱验证码登录后，可查看完整职责、任职要求、原岗位入口，并继续使用收藏和浏览记录。列表摘要保持公开，完整详情用于保护数据质量和降低恶意抓取。