Data Engineer
岗位摘要
设计、开发和维护可扩展的数据管道和ETL工作流;为分析、报告和机器学习应用构建、自动化和优化数据基础设施;确保所有数据源和终端的数据质量、一致性和安全性;与工程、分析和产品团队合作,定义数据需求并交付可靠的数据集
岗位职责
- 设计、开发和维护可扩展的数据管道和ETL工作流
- 为分析、报告和机器学习应用构建、自动化和优化数据基础设施
- 确保所有数据源和终端的数据质量、一致性和安全性
- 与工程、分析和产品团队合作,定义数据需求并交付可靠的数据集
- 实施监控解决方案并主动解决数据管道问题
- 优化存储和数据处理性能,以支持增长和效率
- 参与数据建模工作和架构设计,满足分析和产品需求
- 帮助建立最佳实践,并在整个组织内推动数据驱动文化
任职要求
- 4年以上数据工程师或类似角色经验,设计、构建和维护数据基础设施
- 强大的软件工程背景,精通Python、SQL和/或其他类似语言
- 具有数据管道编排工具(Airflow、Prefect、Dagster等)的实践经验
- 具有云数据平台(AWS/GCP、Redshift、BigQuery、Snowflake等)经验
- 了解数据库系统、数据建模和数据仓库最佳实践
- 熟悉数据工作流的监控、日志记录和数据质量实践
- 出色的分析和解决问题的能力,注重细节
- 优秀的沟通技巧,能够在协作环境中跨职能工作
- 自我驱动、好奇心强,适应快节奏、高增长的初创公司
福利待遇
- AI行业有竞争力的薪资
- 在定义AI和创造力未来的高增长初创公司中获得大量股权
- 全面的健康福利、月度津贴和公司团建
- 协作、高增长的文化——每个人都能为成长和成功做出贡献