模型评估工程师
岗位摘要
设计和实施超越传统基准的下一代评估套件,创建能够捕捉Grok在生产环境中实际效用和性能的框架;协调模型评估工作和协作,确保全面覆盖和快速迭代;将Grok集成到生产系统中,深入了解真实环境,并确保与用户需求和业务目标保持一致
岗位职责
- 设计和实施超越传统基准的下一代评估套件,创建能够捕捉Grok在生产环境中实际效用和性能的框架
- 协调模型评估工作和协作,确保全面覆盖和快速迭代
- 将Grok集成到生产系统中,深入了解真实环境,并确保与用户需求和业务目标保持一致
- 与研究团队合作,将尖端技术和Grok模型转化为生产就绪的实现,优化性能和影响力
任职要求
- 在设计与实施机器学习模型(尤其是LLM)的复杂评估框架方面拥有经过验证的专业知识
- 具备统计分析、实验设计以及在真实环境中对AI系统进行基准测试的经验