首页 / 课程模块 / 模块 09
质量守门 进阶

AI 产品测试 亮点

学会测试 AI 产品本身——功能、鲁棒性、安全、一致性,全方位把住 AI 质量关。

为什么学这一模块

AI 产品测试是当前测试人员最迫切需要的技能。这一模块让你从“传统测试”跃迁到“AI 测试”,聚焦 AI 产品业务侧的功能、安全与幻觉测试——评测指标体系与质量门禁已在模块 07 建立,这里把它们用到真实 AI 产品上。

核心技术栈

幻觉检测 Prompt 注入 越狱测试 对抗样本 MRR / NDCG 一致性测试 输出安全审查 多轮对话

技术亮点

Prompt 注入攻防
直接注入 / 间接注入 / 越狱三类攻击手法实测,给 AI 应用做“安全渗透”
幻觉与鲁棒性测试
对抗样本 / 拼写错误 / 同音词干扰,系统验证 AI 产品的稳定性边界
RAG 端到端评测
检索质量用 MRR / NDCG 量化,生成质量用忠实度评估,端到端闭环

核心内容

AI 产品测试方法论:AI 产品 vs 传统产品的测试差异、测试维度体系
功能与鲁棒性测试:功能准确性、噪声鲁棒性、边界处理、幻觉检测
RAG 系统专项测试:检索质量评估(MRR/NDCG)、生成质量、端到端测试(指标评测体系见模块 07)
安全与一致性测试:Prompt 注入防护、输出安全审查、多轮对话一致性

实战产出

  • AI 产品测试方案
  • 功能测试 Skill 库
  • RAG 测试系统
  • 安全测试 Skill 库