Staff+ 软件工程师,强化学习数据平台
岗位摘要
设计、构建并运营供人工标注者、领域专家和内部研究人员使用的反馈与数据采集界面;构建并维护后端服务、API 与数据管道,将模型样本路由给人工处理,并把结构化反馈返回训练流程;负责持续连接在线模型端点的系统在可靠性、延迟和可用性方面的表现
岗位职责
- 设计、构建并运营供人工标注者、领域专家和内部研究人员使用的反馈与数据采集界面
- 构建并维护后端服务、API 与数据管道,将模型样本路由给人工处理,并把结构化反馈返回训练流程
- 负责持续连接在线模型端点的系统在可靠性、延迟和可用性方面的表现
- 与强化学习研究员合作,将定义模糊的数据需求转化为范围明确的采集项目及其运行工具
- 构建仪表盘、监控与检查工具,让研究人员无需询问工程师即可查看数据质量与吞吐量
- 识别并消除从“我们想要这些数据”到“数据进入训练组合”之间的瓶颈
任职要求
- 具备扎实的全栈工程能力,拥有 TypeScript/React 前端和 Python 后端的生产经验
- 拥有设计并运维其他团队所依赖的后端服务和数据管道的经验
- 有端到端负责项目的成功记录,能从模糊需求推进到人们实际使用的生产系统
- 能够直接与技术利益相关者合作,适应其需求每周变化,并具备在某个项目不值得构建时提出反对意见的判断力
- 在自己的日常工作中有有效使用 AI 工具的经验
- 关心自己工作的社会影响
- 有构建标注、打标、评估或其他人类参与闭环数据工具的经验
- 有 RLHF、偏好数据或其他面向机器学习系统的人类反馈管道的经验
- 有交付研究人员或其他专家喜爱的内部工具的经验:访谈用户、发现摩擦点并可衡量地改善体验
- 有在数据采集界面上运行实验,并利用结果提升数据质量的经验
- 有大规模与众包工作者或专家供应商平台合作的经验
- 熟悉大语言模型的训练和评估方式