数据工程师
岗位摘要
设计、构建和管理数据管道,确保所有用户事件数据无缝集成到数据仓库中;开发规范数据集,以跟踪关键产品指标,包括用户增长、参与度和收入;与基础设施、数据科学、产品、营销、财务和研究等多个团队协作,理解其数据需求并提供解决方案
登录后保留你的岗位线索
邮箱登录后可继续查看完整职责、任职要求和原岗位入口,并使用收藏与浏览记录沉淀适合自己的机会。
岗位职责
- 设计、构建和管理数据管道,确保所有用户事件数据无缝集成到数据仓库中
- 开发规范数据集,以跟踪关键产品指标,包括用户增长、参与度和收入
- 与基础设施、数据科学、产品、营销、财务和研究等多个团队协作,理解其数据需求并提供解决方案
- 实施稳健且容错的数据摄取和处理系统
- 参与数据架构和工程决策,运用丰富的经验和知识
- 确保数据的安全性、完整性和合规性,符合行业和公司标准
任职要求
- 拥有3年以上数据工程师经验和8年以上任何软件工程经验(包括数据工程)
- 精通至少一种数据工程常用编程语言,如Python、Scala或Java
- 具有分布式处理技术和框架的经验,如Hadoop、Flink和分布式存储系统(例如HDFS、S3)
- 精通任何ETL调度器,如Airflow、Dagster、Prefect或类似框架
- 扎实理解Spark,并能够编写、调试和优化Spark代码
福利待遇
- 提供搬迁援助
登录后查看完整岗位详情
使用邮箱验证码登录后,可查看完整职责、任职要求、原岗位入口,并继续使用收藏和浏览记录。列表摘要保持公开,完整详情用于保护数据质量和降低恶意抓取。