多模态数据工程师
岗位摘要
负责多模态数据pipeline建设、数据版本管理、数据处理、数据算子开发集成等工作;开发自动化数据处理工具与脚本,优化数据清洗、标注及质量评估的效率和规模化能力;参与多模态大模型训练数据的构建与管理,参与数据筛选、标注及质量评估工作
岗位职责
- 负责多模态数据pipeline建设、数据版本管理、数据处理、数据算子开发集成等工作
- 开发自动化数据处理工具与脚本,优化数据清洗、标注及质量评估的效率和规模化能力
- 参与多模态大模型训练数据的构建与管理,参与数据筛选、标注及质量评估工作
- 分析和挖掘现有数据资源,设计有效的数据分布策略,支持模型持续迭代
- 与算法团队紧密协作,根据模型训练需求定制数据策略,提升训练效果
- 参与模型推理与部署、模型蒸馏、推理服务服务化,能够支持tagging及服务优化工作