AI jobs

高级测试开发(AI智能体方向)

Open posting
BeijingFull-timeChinese JD· Posted Oct 22, 2026

From SenseTime’s original posting

岗位职责: 1. 负责 AI 智能体产品的质量保障工作,涵盖功能、接口、UI、自动化、性能及稳定性测试。 2. 负责 Agent 核心能力测试,包括任务规划、工具调用、多轮交互、上下文管理及复杂任务执行等场景。 3. 建设 AI 智能体效果评估体系,包括 Benchmark 数据集、评估指标、自动化评测及 Badcase 分析。 4. 设计和开发自动化测试插件及框架,提升测试效率和质量保障能力。 5. 深入分析 Agent 执行链路及 Trace 日志,定位复杂问题,推动产品质量持续优化。

任职要求 1. 计算机相关专业硕士及以上学历,3–5 年测试开发经验,**具备半年以上 AI 大模型或智能体产品测试经验**。 2. 熟练掌握 Python,熟悉 Pytest、Playwright 等自动化测试框架,具备独立开发测试工具的能力。 3. 熟悉主流 Agent 框架,理解任务规划、Tool Calling、MCP、RAG 等核心技术。 4. 熟悉 HTTP、WebSocket、SSE 等协议,具备接口自动化、性能测试及复杂问题定位能力。 5. 了解大模型及 Agent 效果评估方法,熟悉任务完成率、结果准确性、工具调用准确率等评估指标。 6. 具备良好的沟通协作能力、问题分析能力及技术钻研精神。

加分项 1. 有 AI Agent、Copilot、办公智能体等产品测试经验。 2. 熟悉 LangSmith、Langfuse、Ragas、DeepEval 等评估或可观测工具。 3. 有 Agent 自动化评估平台、Benchmark 建设或 LLM-as-a-Judge 实践经验。