返回岗位列表

Cohere

技术团队成员(预训练评估)

地点:美国 薪资:薪资未公开 日期:2026-01-29

岗位摘要

深入理解基础模型评估套件中的每个独立评估任务,清楚每个任务的衡量内容及其优缺点;建议并实施对基础模型评估套件的改进,例如添加新任务以衡量未覆盖的模型能力,或移除冗余或低信号任务;提升对评估的统计理解,并提高评估套件的信噪比

岗位职责

  • 深入理解基础模型评估套件中的每个独立评估任务,清楚每个任务的衡量内容及其优缺点
  • 建议并实施对基础模型评估套件的改进,例如添加新任务以衡量未覆盖的模型能力,或移除冗余或低信号任务
  • 提升对评估的统计理解,并提高评估套件的信噪比

任职要求

  • 熟悉基础模型评估及其与后训练模型的区别
  • 具备强大的统计技能,并具有评估与数据收集和模型性能相关的科学实验的经验
  • 能够通过可视化和易于理解的数字,有效地向广泛受众传达统计信息
  • 具备极强的软件工程技能
  • 精通Python等编程语言以及PyTorch、TensorFlow、JAX等机器学习框架
  • 具备出色的沟通技巧,以便与跨职能团队有效协作并进行演示