高级数据采集工程师

查看原岗位

地点：北京薪资：薪资未公开日期：2026-07-20

岗位摘要

参与数据团队数据采集平台的架构设计和开发工作；负责设计和开发分布式网络爬虫系统，并进行技术选型；持续对系统进行架构改造和优化，提升系统的稳定性与可扩展性，保障系统稳定、高效、安全运行；负责多平台信息（视频、音频、图片、文章等）的采集

本科及以上学历，计算机相关专业，3年及以上网络爬虫、采集平台或RPA相关开发经验
熟练掌握Python编程语言及常用采集框架，深入了解框架特性及实现原理，精通Web端逆向，能独立处理常见的人机验证等风控技术
研究爬虫策略和防屏蔽规则，解决封账号、封IP、验证码、混淆加密、页面跳转等难点，提升网页抓取的效率和质量
熟悉风控逆向相关技术，包括国内外验证码破解；熟悉TLS指纹、逆向、混淆、JS补环境等技术，以及各类加密算法（如AES、RSA、Base64、MD5、SHA系列等）
具有良好的沟通能力、学习能力、分析解决问题能力，有较强的责任心和自驱力
加分项：有长期规模化采集系统建设经验者优先；有国外人机验证码、Cloudflare等破解经验者优先