软件工程师, 数据基础

岗位职责

• 构建和扩展与各种SaaS和本地系统的连接器（如Google Workspace、Microsoft 365、Slack、Salesforce等）
• 处理全量同步、低延迟增量更新（通过webhooks/APIs）、速率限制和复杂的认证流程
• 在数据源中构建高级功能，如操作、实时获取和查询语言支持
• 将原始、非结构化的企业内容转换为丰富、结构化、权限感知的表示，优化搜索和LLM推理
• 设计文档模式和数据丰富管道（如实体提取、访问图传播、数据脱敏等）
• 通过深度集成扩展AI产品的能力，实现任务自动化、基于企业数据的复杂查询，并通过实时数据增强索引库
• 负责PB级数据流的端到端正确性、新鲜度和性能
• 解决分布式队列、工作器和存储中的排序、幂等性、精确一次处理、背压和重试等难题
• 保护细粒度的ACL、删除和敏感性约束，确保AI回答始终基于用户实际可见的内容
• 与搜索服务、产品、平台和安全团队紧密合作