数据工程师
岗位摘要
设计和实施涉及CPU和GPU处理的PB级、高吞吐量数据处理系统；设计和实施用于编排复杂数据管道的工具；设计和实施创新工具，以大规模提高预训练和后训练中跨不同模态的数据可发现性和数据质量
岗位职责
- 设计和实施涉及CPU和GPU处理的PB级、高吞吐量数据处理系统
- 设计和实施用于编排复杂数据管道的工具
- 设计和实施创新工具，以大规模提高预训练和后训练中跨不同模态的数据可发现性和数据质量
- 构建、运行和管理用于创建高质量训练数据的创新数据管道
任职要求
- 在配置和故障排除复杂分布式数据处理系统以实现最大性能方面具备强大的系统技能
- 从头开始构建定制数据处理系统
- 为最先进的大型语言模型和生成模型准备预训练和后训练数据
- 跨多个云、多种模态和多个来源，精心组织和记录数据
福利待遇
- 全面的医疗、视力和牙科保险
- 401(k)退休计划
- 短期和长期残疾保险
- 各种其他折扣和福利