高级数据工程师
岗位摘要
识别、设计和开发能够每日处理数百万甚至数十亿事件的基础数据基础设施组件;分析和改进现有数据处理基础设施的健壮性和可扩展性;与产品团队合作,理解功能需求并交付满足业务需求的解决方案;为新系统和现有系统编写清晰、经过良好测试且可维护的基础设施即代码和软件
登录后保留你的岗位线索
邮箱登录后可继续查看完整职责、任职要求和原岗位入口,并使用收藏与浏览记录沉淀适合自己的机会。
岗位职责
- 识别、设计和开发能够每日处理数百万甚至数十亿事件的基础数据基础设施组件
- 分析和改进现有数据处理基础设施的健壮性和可扩展性
- 与产品团队合作,理解功能需求并交付满足业务需求的解决方案
- 为新系统和现有系统编写清晰、经过良好测试且可维护的基础设施即代码和软件
- 进行设计和代码审查,创建开发者文档,并为健壮性和容错性制定测试策略
- 必要时参与待命轮换,以处理关键事件
任职要求
- 拥有5年以上构建大规模、容错、分布式数据平台、流处理管道、ETL等的经验
- 具备使用 AWS Kinesis、Apache Kafka 或 Redpanda 等服务设计、构建和运营流处理管道的专家级技能
- 具备使用 AWS TimeStream 或 Clickhouse 等服务构建面向客户的实时分析系统的专家级知识
- 熟练使用 Terraform、AWS CDK 或 Pulumi 等工具编写和维护基础设施即代码
- 精通版本控制实践,并能将基础设施即代码与 CI/CD 管道集成
- 熟练使用 ArgoCD、Github Actions、TeamCity 或类似工具实施和管理 GitOps 工作流
- 拥有计算机科学、计算机工程或相关技术领域的学士或硕士学位,或具备同等的实践经验
- 有 Kubernetes 或容器经验者优先
登录后查看完整岗位详情
使用邮箱验证码登录后,可查看完整职责、任职要求、原岗位入口,并继续使用收藏和浏览记录。列表摘要保持公开,完整详情用于保护数据质量和降低恶意抓取。