数据工程师，人才创新实验室
岗位摘要
设计、构建并管理人才数据管道，确保所有数据无缝集成到Databricks仓库中；开发规范数据集，以跟踪关键人才指标和人才创新实验室产品指标；与数据平台、数据科学、人才分析以及薪酬与股权等多个团队协作，理解其数据需求并提供解决方案
岗位职责
- 设计、构建并管理人才数据管道，确保所有数据无缝集成到Databricks仓库中
- 开发规范数据集，以跟踪关键人才指标和人才创新实验室产品指标
- 与数据平台、数据科学、人才分析以及薪酬与股权等多个团队协作，理解其数据需求并提供解决方案
- 实现稳健且容错的数据摄取与处理系统
- 参与数据架构和工程决策，作为团队主要数据工程专家贡献丰富经验与知识
- 按照行业和公司标准，确保数据的安全性、完整性与合规性
任职要求
- 拥有3年以上数据工程师经验，以及8年以上软件工程经验（包括数据工程）
- 精通至少一种数据工程常用编程语言，如Python、Scala或Java
- 熟悉Databricks、Snowflake等数据仓库技术，并精通Fivetran、Airflow、Dagster、Prefect或类似ETL调度器
- 具有Spark、Hadoop、Flink等分布式处理技术和框架，以及HDFS、S3等分布式存储系统的经验