高级测试开发（AI智能体方向）
岗位摘要
负责AI智能体产品的质量保障工作，涵盖功能、接口、UI、自动化、性能及稳定性测试；负责Agent核心能力测试，包括任务规划、工具调用、多轮交互、上下文管理及复杂任务执行等场景；建设AI智能体效果评估体系，包括Benchmark数据集、评估指标、自动化评测及Badcase分析
岗位职责
- 负责AI智能体产品的质量保障工作，涵盖功能、接口、UI、自动化、性能及稳定性测试
- 负责Agent核心能力测试，包括任务规划、工具调用、多轮交互、上下文管理及复杂任务执行等场景
- 建设AI智能体效果评估体系，包括Benchmark数据集、评估指标、自动化评测及Badcase分析
- 设计和开发自动化测试插件及框架，提升测试效率和质量保障能力
- 深入分析Agent执行链路及Trace日志，定位复杂问题，推动产品质量持续优化
任职要求
- 计算机相关专业硕士及以上学历，3–5年测试开发经验，具备半年以上AI大模型或智能体产品测试经验
- 熟练掌握Python，熟悉Pytest、Playwright等自动化测试框架，具备独立开发测试工具的能力
- 熟悉主流Agent框架，理解任务规划、Tool Calling、MCP、RAG等核心技术
- 熟悉HTTP、WebSocket、SSE等协议，具备接口自动化、性能测试及复杂问题定位能力
- 了解大模型及Agent效果评估方法，熟悉任务完成率、结果准确性、工具调用准确率等评估指标
- 具备良好的沟通协作能力、问题分析能力及技术钻研精神
加分项
- 有 AI Agent、Copilot、办公智能体等产品测试经验
- 熟悉 LangSmith、Langfuse、Ragas、DeepEval 等评估或可观测工具
- 有 Agent 自动化评估平台、Benchmark 建设或 LLM-as-a-Judge 实践经验
福利待遇
- 有AI Agent、Copilot、办公智能体等产品测试经验者优先
- 熟悉LangSmith、Langfuse、Ragas、DeepEval等评估或可观测工具者优先
- 有Agent自动化评估平台、Benchmark建设或LLM-as-a-Judge实践经验者优先