爬虫工程师
岗位摘要
负责爬虫系统的架构设计与研发工作;负责WEB和移动APP的内容抓取、解析、存储等模块建设,构建统一的爬虫服务平台;负责建设爬虫的监控和报警子系统;本科及以上学历,计算机相关专业;1年以上爬虫开发经验;熟悉网络编程,理解爬虫原理及相关技术
岗位职责
- 负责爬虫系统的架构设计与研发工作
- 负责WEB和移动APP的内容抓取、解析、存储等模块建设,构建统一的爬虫服务平台
- 负责建设爬虫的监控和报警子系统
任职要求
- 本科及以上学历,计算机相关专业
- 1年以上爬虫开发经验;熟悉网络编程,理解爬虫原理及相关技术
- 熟悉Python/JavaScript/Java等语言,熟悉Linux开发环境和常用命令
- 熟悉Scrapy/Selenium+WebDriver等爬虫框架
- 熟悉HTML/CSS/XPath等常用Web技术,精通正则表达式
- 了解反爬技术,有逆向APP经验优先考虑
- 了解搜索技术,有Java开发经验者优先考虑
- 良好的学习能力,善于分析和独立解决问题
- 具备良好的团队协作意识
工作地址
北京海淀区蓟门壹号8楼