数据工程师 - Azure
岗位摘要
利用Azure Data Factory、Data Lake Storage及无服务器技术设计、开发和优化企业级ETL/ELT管道，确保跨平台可扩展性、安全性和可靠性；实现高效复杂的SQL解决方案，包括高级查询优化、分区和索引，以支撑复杂分析模型并支持实时数据处理
岗位职责
- 利用Azure Data Factory、Data Lake Storage及无服务器技术设计、开发和优化企业级ETL/ELT管道，确保跨平台可扩展性、安全性和可靠性
- 实现高效复杂的SQL解决方案，包括高级查询优化、分区和索引，以支撑复杂分析模型并支持实时数据处理
- 使用Python和API编排主导自动化框架的开发与集成，简化数据全生命周期并提升运营效率
- 全面负责生产管道可靠性，通过根因分析主动识别并解决关键问题，建立长期稳定性措施以保障持续运行
- 通过代码审查和技术审计建立、完善并执行严格的编码与架构标准，树立质量标杆
任职要求
- 精通Azure Data Factory、Azure Data Lake Storage及无服务器计算技术，具备企业级ETL/ELT管道设计与优化经验
- 具备复杂SQL开发与性能调优能力，包括高级查询优化、分区和索引策略，能支撑实时数据处理
- 熟练掌握Python编程及API编排，能够开发自动化框架以提升数据管道运维效率
- 具备生产数据管道运维经验，能通过根因分析解决关键问题并建立长期稳定性保障机制
- 能够在跨国多元文化团队中协作，与美欧亚团队高效沟通，推动高影响力数据解决方案落地