← AI学习中心 / 客服与售后
怎样测试客服FAQ的反例问法
文中企业场景、人物与业务数字为教学示例，不是客户成果记录。
直答：测试FAQ的反例问法，就是先列出客户可能不按标准说法提问的变体和无关问题，逐条投给FAQ检索或问答流程，记录每一条是命中正确、命中错误还是查不到，再按结果决定改写词条、补充同义词还是设置转人工。
业务场景（合成演示）：某办公设备服务商的FAQ维护得整齐，标准问法如『打印机卡纸怎么处理』都能命中。但客户实际提问常是『机器响得吓人』『出纸是歪的』这类口语说法，检索经常空手而归。负责人决定用反例问法给FAQ做一轮体检，再决定是改词条还是改流程。
具体做法： 1. 收集问法来源：从近一段时间的咨询记录里摘出真实问法，与FAQ标准问法并排列出，这一步必须用真实记录，不能凭印象编。 2. 设计四类反例：口语变体、含错别字、超出FAQ范围的问题、故意含混的说法（如『东西不行』）。 3. 逐条测试：每条反例单独投给FAQ流程，只记三种结果之一——命中正确答案、命中错误答案、查不到。 4. 分类处理：查不到的补词条或同义词；命中错误的先核对答案内容本身；超出范围的写成固定话术转人工，不硬答。
反例测试表（合成演示）：
| 反例问法 | 类型 | 测试结果 | 处理 |
|---|---|---|---|
| 机器响得像拖拉机 | 口语变体 | 查不到 | 词条增加同义词『异响』 |
| 打印几卡纸了 | 错别字 | 查不到 | 检索词补充错字写法 |
| 复印机能退吗 | 超出范围 | 命中无关答案 | 标注转人工，答案不外延 |
| 东西不行 | 含混 | 查不到 | 增加引导客户补充现象的话术 |
可复制空模板：
| 反例问法 | 类型 | 测试结果 | 处理 |
|---|---|---|---|
反例（合成演示）：某团队只拿FAQ里现成的标准问法回测，十条全部命中就宣布测试通过，客户真实问法一条没测，上线后照样大量查不到。测试有效的前提是问法来自真实咨询记录，而不是词条本身；用词条测词条，等于自己出题自己答。
FAQ： 问：反例要准备多少条？ 答：以覆盖四类反例为准，每类至少两三条；数量不是目标，四类都有才说明主要偏差方式被测到。
问：反例命中错误答案时，是改问法还是改答案？ 答：先核对答案本身是否正确。答案正确而检索错位，属于匹配问题，处理方向才是词条和同义词；答案本身有错，先改答案再重测。
讨论：你们客服咨询记录里，最常出现的一类问不到点子上的问法是什么？它属于本文四类反例中的哪一类？
来源说明：本文测试任务的组织方式受SBDC提出的小企业AI任务练习计划启发（https://openai.com/index/helping-small-businesses-put-ai-to-work/ ），该来源描述练习方法，不代表文中示例已被实现或验证。