软件工程师,数据基础
岗位摘要
构建和扩展连接各种 SaaS 和本地系统的连接器,如 Google Workspace、Microsoft 365、Slack、Salesforce、Jira、ServiceNow、GitHub 等
岗位职责
- 构建和扩展连接各种 SaaS 和本地系统的连接器,如 Google Workspace、Microsoft 365、Slack、Salesforce、Jira、ServiceNow、GitHub 等
- 处理全量同步、通过 webhook/API 的低延迟增量更新、速率限制和复杂的认证流程
- 在数据源中构建高级功能,如操作、实时获取和查询语言支持
- 将原始的非结构化企业内容转换为丰富的、结构化的、权限感知的表示,优化用于搜索和 LLM 推理
- 设计文档模式和丰富管道(实体提取、访问图传播、编辑等)
- 通过深度集成扩展 AI 产品的能力,实现任务自动化、基于企业数据的复杂查询,并用实时数据增强索引语料库
- 负责 PB 级数据流的端到端正确性、新鲜度和性能
- 解决分布式队列、工作器和存储中的排序、幂等性、精确一次处理、背压和重试等难题
- 保留细粒度的 ACL、删除和敏感性约束,确保 AI 答案始终基于用户实际允许查看的内容
- 与搜索服务、产品、平台和安全团队紧密合作
任职要求
- 具备软件工程师相关经验,熟悉数据基础设施领域
- 具有构建和扩展连接器的经验,熟悉各种 SaaS 和本地系统
- 熟悉全量同步和增量更新机制,了解 webhook/API、速率限制和认证流程
- 具备数据处理和建模能力,能够设计文档模式和丰富管道
- 熟悉分布式系统,能够解决排序、幂等性、精确一次处理、背压和重试等问题
- 了解安全与权限管理,能够处理细粒度 ACL 和敏感性约束
- 具备跨职能协作能力,能够与搜索、产品、平台和安全团队合作
- 有处理 PB 级数据流的经验者优先
- 熟悉 LLM 推理和搜索优化者优先
福利待遇
- 具有竞争力的薪资和福利
- 加入被 Fast Company、CNBC、Bloomberg、Forbes 和 Gartner 认可的创新团队
- 在 25 个国家拥有 1000 多名员工的全球性公司工作
- 参与构建用于 Microsoft Teams、Zoom、ServiceNow、Zendesk、GitHub 等系统的日常使用系统
- 在开放、可扩展的平台上发布代理功能,赢得企业信任
- 帮助全球大型组织实现每位员工的 AI 流畅性,将超级智能企业从概念变为现实