多模态大模型数据处理工程师
岗位摘要
负责多模态数据pipeline建设、数据版本管理、数据处理及数据算子开发集成等工作；开发自动化数据处理工具与脚本，优化数据清洗、标注及质量评估的效率和规模化能力；参与多模态大模型训练数据的构建与管理，参与数据筛选、标注及质量评估工作，分析挖掘现有数据资源，设计有效的数据分布策略以支持模型持续迭代
岗位职责
- 负责多模态数据pipeline建设、数据版本管理、数据处理及数据算子开发集成等工作
- 开发自动化数据处理工具与脚本，优化数据清洗、标注及质量评估的效率和规模化能力
- 参与多模态大模型训练数据的构建与管理，参与数据筛选、标注及质量评估工作，分析挖掘现有数据资源，设计有效的数据分布策略以支持模型持续迭代
- 与算法团队紧密协作，根据模型训练需求定制数据策略，提升训练效果
- 参与模型推理与部署、模型蒸馏、推理服务化，支持tagging及服务优化工作
任职要求
- 具备数据处理、数据pipeline建设相关经验，熟悉数据版本管理与算子开发集成
- 能够开发自动化数据处理工具与脚本，提升数据清洗、标注及质量评估的效率和规模化能力
- 有多模态大模型训练数据构建与管理经验，熟悉数据筛选、标注及质量评估流程
- 具备数据分布策略设计能力，能够分析挖掘数据资源以支持模型迭代
- 具备与算法团队协作经验，能够根据模型训练需求定制数据策略
- 熟悉模型推理部署、模型蒸馏及推理服务化，能够支持tagging及服务优化