模型评估工程师
岗位摘要
对模型进行全面评估；深入分析模型训练和数据，以识别评估中揭示的弱点；与建模和数据团队沟通，共同制定提升模型质量的计划；具备模型评估和评估任务开发经验（包括公共和内部基准测试）；能够为新评估收集和合成数据
岗位职责
- 对模型进行全面评估
- 深入分析模型训练和数据，以识别评估中揭示的弱点
- 与建模和数据团队沟通，共同制定提升模型质量的计划
任职要求
- 具备模型评估和评估任务开发经验（包括公共和内部基准测试）
- 能够为新评估收集和合成数据
- 构建易于使用的模型评估基础设施和框架，熟悉SGlang和vLLM等推理框架
- 具备出色的沟通能力，能够简洁准确地与团队成员分享知识
- 工作积极主动，展现出领导力，并始终追求卓越
- 具备良好的职业道德和强大的优先级排序能力
福利待遇
- 全面的医疗、视力和牙科保险
- 401(k)退休计划
- 短期和长期残疾保险
- 各种其他折扣和福利