← AI学习中心 / 企业知识库
怎样检查知识回答是否超出资料范围
文中企业场景、人物与业务数字为教学示例,不是客户成果记录。
直答:抽查时对每个回答标注三档判定:有出处、部分有出处、无出处。无出处的回答当场作废并登记成“资料缺口”,交回资料侧补写,而不是默认模型可以自由发挥。
业务场景(合成演示):一家工业耗材配送公司用内部资料库让新客服练习应答。主管抽查发现有的回答听着合理、资料里其实没写,比如把资料标注的“48小时送达”顺口说成了“次日达”,新员工自己都没察觉哪里来的说法。
具体做法: 1. 建一张抽查表,逐条登记:提问、回答要点、资料对应段落位置、判定结果。 2. 判定只分三档:有依据、部分有依据、无依据,不设“基本对”这种模糊档位。 3. 部分有依据的,把超出资料的部分单独列出,确认该补充内容是否有业务依据、该不该写进条目。 4. 无依据的回答当场作废,同时把这个问题登记成资料缺口,指派对应分区负责人补写条目。 5. 每轮抽十条左右,覆盖不同分区;连续几轮后看缺口集中在哪个分区,优先补那一块。
示例表(合成演示,问答与数据均为虚构):
| 提问 | 回答要点 | 资料出处位置 | 判定 |
|---|---|---|---|
| 合成耗材X起订量是多少 | 50件起订 | 《产品手册》参数表 | 有依据 |
| 合成耗材X多久送到 | 次日达 | 未找到对应段落 | 无依据 |
| 合成耗材X能不能退换 | 7天内可换、需原包装、运费由我方承担 | 《售后规则》第2节 | 部分有依据(“运费由我方承担”资料未写) |
空模板:
| 提问 | 回答要点 | 资料出处位置 | 判定 |
|---|---|---|---|
反例(合成演示):抽查时只问检查者“这个回答对不对”,凭印象打勾。检查者顺口认可了“次日达”,因为它和日常口头说法一致,而资料写的是48小时。表里少了“资料出处位置”一栏,检查就退化成个人经验判断,越熟练的人越容易放过偏差。
常见问题:
问:判定为“部分有依据”的补充内容,可以直接写进条目吗? 答:先核实补充内容确有业务依据,再由该分区维护负责人确认写入,并按变更记录留痕。
问:无依据的回答太多怎么办? 答:先集中列缺口清单再排期补写,优先补提问频次高的,不要边查边随手补,容易补出新的口径混乱。
讨论:如果只允许你抽查五条回答,你会先抽哪个分区、为什么是它?
来源与边界:本文方法为编辑设计;“用测试检验输出是否符合既定材料”的思路受Google Workspace Skills文章(https://workspace.google.com/blog/product-announcements/teach-gemini-your-teams-know-hows-with-skills-in-google-workspace)中测试思路的启发,不推断具体产品功能可用性;文中问答均为合成演示,未实际运行。
