高级数据平台架构师（大模型方向）
岗位摘要
设计与构建支撑大模型研发的一站式数据平台，覆盖数据全生命周期管理；规划预训练、SFT、RLHF等阶段的数据采集、清洗、去重、标注、存储及版本管理架构；设计并实现支持高效操作的数据标签体系，赋能高质量数据集的高效构建、发现与复用
登录后保留你的岗位线索
邮箱登录后可继续查看完整职责、任职要求和原岗位入口，并使用收藏与浏览记录沉淀适合自己的机会。
岗位职责
- 设计与构建支撑大模型研发的一站式数据平台，覆盖数据全生命周期管理
- 规划预训练、SFT、RLHF等阶段的数据采集、清洗、去重、标注、存储及版本管理架构
- 设计并实现支持高效操作的数据标签体系，赋能高质量数据集的高效构建、发现与复用
- 构建高效、可扩展的数据处理Pipeline与数据湖/湖仓体系
- 主导数据存储格式的选型、设计与优化，确保系统架构的可扩展性与稳定性
- 探索并落地向量数据库、特征存储等关键技术，攻坚数据治理智能体在数据质量与效率提升中的应用
任职要求
- 计算机相关专业，具备扎实的数据架构基础和出色的工程实践能力
- 拥有设计高性能、可扩展数据系统的经验
- 保持高度的技术热情和好奇心，心态开放，乐于探索前沿技术
- 深入理解并能实践数据治理智能体，将其应用于复杂数据流
- 熟悉Spark等大数据技术栈及数据湖/湖仓架构
- 精通Parquet、ORC等数据存储格式，具备相关的性能调优经验
- 具备优秀的技术前瞻性、架构设计能力和跨团队沟通协作能力
登录后查看完整岗位详情
使用邮箱验证码登录后，可查看完整职责、任职要求、原岗位入口，并继续使用收藏和浏览记录。列表摘要保持公开，完整详情用于保护数据质量和降低恶意抓取。