返回岗位列表

爬虫数据采集工程师

查看原岗位

地点：北京薪资：35-60K 日期：2026-06-26

岗位摘要

参与数据团队数据采集平台架构设计和开发工作；负责设计和开发分布式网络爬虫系统及技术选型；持续对系统进行架构改造和优化，提升稳定性与可扩展性，保障系统稳定、高效、安全；负责多平台信息（视频、音频、图片、文章等）爬取

岗位职责

参与数据团队数据采集平台架构设计和开发工作
负责设计和开发分布式网络爬虫系统及技术选型
持续对系统进行架构改造和优化，提升稳定性与可扩展性，保障系统稳定、高效、安全
负责多平台信息（视频、音频、图片、文章等）爬取
加分项：有APP端采集、Agent相关数据采集经验者优先

任职要求

本科及以上学历，计算机相关专业，3年及以上网络爬虫、采集平台或RPA相关开发经验
熟练掌握Python编程语言及常用采集框架，深入了解框架特性与实现原理，精通Web端逆向，能独立处理常见人机验证等风控技术
研究爬虫策略和防屏蔽规则，解决封账号、封IP、验证码、混淆加密、页面跳转等难点，提升网页抓取效率和质量
熟悉风控逆向相关技术，国内外验证码破解；熟悉TLS指纹、逆向、混淆、JS补环境等技术及各类加密算法（如AES、RSA、Base64、MD5、SHA系列等）
具有良好的沟通能力、学习能力、分析解决问题能力，有较强的责任心和自驱力
加分项：有长期规模化采集系统建设经验者优先；有国外人机验证码、Cloudflare等破解经验者优先

加分项

] 有APP端⾤集，agent相关数据采集相关经验者优先
] 有长期规模化采集系统建设经验者优先
有国外人机验证码、cloudflare等破解经验者优先

福利待遇

薪资范围：35-60K·16薪
工作地点：北京海淀区大恒科技大厦12F
提供在线沟通机会，可直接与招聘专员联系

工作地址

北京海淀区大恒科技大厦12F