Helix AI 工程师,视频预训练
岗位摘要
设计并训练大规模视频基础模型,数据集涵盖互联网级视频与机器人采集数据;制定预训练策略,从原始视频序列中捕捉时间动态、运动与物体交互;构建能够学习可迁移表示的模型,服务于感知、跟踪、预测与控制等下游任务
岗位职责
- 设计并训练大规模视频基础模型,数据集涵盖互联网级视频与机器人采集数据
- 制定预训练策略,从原始视频序列中捕捉时间动态、运动与物体交互
- 构建能够学习可迁移表示的模型,服务于感知、跟踪、预测与控制等下游任务
- 探索视频理解与生成的模型架构,包括基于Transformer与基于扩散的方法
- 实现高效的数据管线与训练策略,支持高吞吐视频摄取与大规模分布式训练
- 在算力、内存与训练效率的约束下优化模型性能
- 与生成建模、智能体及机器人学习团队紧密协作,将预训练模型集成到自主性技术栈中
- 设计评估框架与基准,衡量模型的时间理解、预测质量与泛化能力
任职要求
- 具备在视频数据或其他高维序列模态上训练大规模模型的经验
- 深入理解视频、视觉或多模态系统所采用的现代深度学习架构
- 具备大规模预训练经验,包括数据集构建与筛选、训练动态与规模化规律
- 精通Python及PyTorch等深度学习框架
- 具备分布式训练系统与大规模GPU集群的使用经验
- 实验作风严谨,能够快速迭代模型设计与训练策略
- 具备扎实的软件工程能力,能够构建可扩展、可靠的系统
- 能够独立开展工作,推动方向不明确但影响重大的研究