Staff+ 研究工程师,强化学习数据平台
岗位摘要
设计、构建并运营供人类标注者、领域专家和内部研究员使用的反馈与数据采集界面;构建并维护后端服务、API 和流水线,将模型样本路由给人类,并把结构化反馈返回训练流程;负责持续运行于实时模型端点的系统的可靠性、延迟和可用性
岗位职责
- 设计、构建并运营供人类标注者、领域专家和内部研究员使用的反馈与数据采集界面
- 构建并维护后端服务、API 和流水线,将模型样本路由给人类,并把结构化反馈返回训练流程
- 负责持续运行于实时模型端点的系统的可靠性、延迟和可用性
- 与强化学习研究员合作,将模糊的数据需求转化为范围明确的采集活动及其运行工具
- 构建仪表盘、监控和检查工具,让研究员无需工程师协助即可查看数据质量与吞吐量
- 识别并消除从“我们想要这些数据”到“数据进入训练组合”之间的瓶颈
任职要求
- 具备扎实的全栈工程能力,拥有前端 TypeScript/React 与后端 Python 的生产经验
- 有设计和运营其他团队依赖的后端服务与数据管线的经验
- 有端到端负责项目的记录,能从模糊需求推进到人们实际使用的生产系统
- 能从容直接与技术利益相关者合作,其需求每周变化,并具备在项目不值得构建时提出反对的判断力
- 能在日常工作中有效使用 AI 工具
- 关心自己工作的社会影响
- 有构建标注、标签、评估或其他人在回路数据工具的经验
- 有 RLHF、偏好数据或其他面向机器学习系统的人类反馈流程经验
- 有交付研究人员或其他专家喜爱的内部工具的经验:访谈用户、发现摩擦点并可衡量地改进体验
- 有在数据采集界面上运行实验,并利用结果提升数据质量的经验
- 有与众包工作者或专家供应商平台大规模合作的经验
- 熟悉大语言模型的训练和评估方式