高级爬虫系统研发工程师
岗位摘要
负责大型爬虫系统的核心技术研究与开发，全面覆盖各种形态、载体和来源的优质资源；借助自然语言处理、大模型等技术，深入挖掘资源内容特征和潜在价值，迭代全网内容收录与更新策略和算法；以通用技术，从千亿量级网页中提取有价值的信息，对网页进行充分的结构理解
登录后保留你的岗位线索
邮箱登录后可继续查看完整职责、任职要求和原岗位入口，并使用收藏与浏览记录沉淀适合自己的机会。
岗位职责
- 负责大型爬虫系统的核心技术研究与开发，全面覆盖各种形态、载体和来源的优质资源
- 借助自然语言处理、大模型等技术，深入挖掘资源内容特征和潜在价值，迭代全网内容收录与更新策略和算法
- 以通用技术，从千亿量级网页中提取有价值的信息，对网页进行充分的结构理解
- 基于数据挖掘和数据分析，对于业务方向产出精准的洞察
任职要求
- 熟练使用C/C++/Python等至少一门语言，熟悉常用数据结构及算法，熟悉Linux平台
- 熟悉机器学习、模式识别等常用算法，有相关项目经验、有深度学习经验者优先
- 有搜索引擎离线策略（网页收录、分类、索引等）工作经验者优先
登录后查看完整岗位详情
使用邮箱验证码登录后，可查看完整职责、任职要求、原岗位入口，并继续使用收藏和浏览记录。列表摘要保持公开，完整详情用于保护数据质量和降低恶意抓取。