数据工程师,核心实验
岗位摘要
设计、构建和管理数据管道,确保所有用户事件数据无缝集成到数据仓库;开发规范数据集,以跟踪用户增长、参与度和收入等关键产品指标;与基础设施、数据科学、产品、营销、财务和研究等多个团队合作,理解其数据需求并提供解决方案
岗位职责
- 设计、构建和管理数据管道,确保所有用户事件数据无缝集成到数据仓库
- 开发规范数据集,以跟踪用户增长、参与度和收入等关键产品指标
- 与基础设施、数据科学、产品、营销、财务和研究等多个团队合作,理解其数据需求并提供解决方案
- 实现稳健且容错的数据摄取和处理系统
- 参与数据架构和工程决策,贡献丰富经验和知识
- 根据行业和公司标准,确保数据的安全、完整与合规
任职要求
- 3年以上数据工程师经验,以及8年以上软件工程经验(包括数据工程)
- 精通至少一种数据工程常用编程语言,如Python、Scala或Java
- 具有分布式处理技术和框架经验,如Hadoop、Flink以及分布式存储系统(如HDFS、S3)
- 精通Airflow、Dagster、Prefect或类似ETL调度框架中的任意一种
- 深入理解Spark,能够编写、调试和优化Spark代码
福利待遇
- 薪资范围为29.3万至32.5万美元
- 采用混合办公模式,重视面对面协作,以支持技术设计、迭代和跨职能合作
- 有机会与ChatGPT研究人员紧密合作,帮助训练新模型并交付给用户
- OpenAI是平等机会雇主,不因种族、宗教、肤色、国籍、性别、性取向、年龄、退伍军人身份、残疾、遗传信息或其他受法律保护特征而歧视