← AI学习中心 / 结果核验与复用
怎样处理结构正确但事实错误的输出
文中企业场景、人物与业务数字为教学示例,不是客户成果记录。
直答
结构正确不等于事实正确。验收AI输出分两层:结构层看字段齐不齐、格式对不对、口径统一不统一;事实层看每个数字、参数、日期、名称有没有出处、对不对得上。两层分开打分、分开归因:结构层通过而事实层不过的,按事实错误退回,不因“格式漂亮”放行;事实层全对而结构有毛病的,改模板要求,不否定内容本身。
业务场景(合成演示)
一家汽车零部件出口商让AI生成月度客户跟进表。表格工整、字段齐全,助理准备直接分发。按两层验收一查:有两行把A客户的采购周期填成了B客户的,还有一行交期沿用了上月排期。结构层几乎满分,事实层三处错误——如果只看“做得规不规整”,这份表就带错发出去了。
具体做法
- 先写两层标准:结构层列必备字段、格式与命名口径;事实层规定“每个数字与名称须能指回出处文件”,写不出处视为错误。
- 结构层先验:缺字段、格式乱、命名不统一的直接退回重做,不进入事实核对,避免白做后面的逐项查证。
- 事实层逐项验:对外发出的字段全查数字类内容,每项在表内标注出处文件名;关键名称(客户、型号、港口)逐一比对档案。
- 分层归因记录:结构问题与事实问题分两栏,改进动作各对一层——结构问题改给AI的模板要求,事实问题加出处标注要求与抽查。
- 两层都过,由业务负责人确认后才能对外发送;本文不涉及自动群发,也不代替负责人判断。
示例表(合成演示)
| 输出条目 | 结构层判定 | 事实层判定 | 问题归属 | 处理 |
|---|---|---|---|---|
| 客户A采购周期=45天 | 字段齐全 | 与客户档案中该客户周期不符 | 事实层 | 退回,重查出处 |
| 列名与模板一致 | 通过 | 尚未核 | 无 | 转入事实层 |
| 某行交期=2026年8月排期 | 通过 | 与9月排期文件不符 | 事实层 | 改为9月值并标注出处 |
可复制两层验收卡
输出名称/结构层检查项与结果/事实层核对项(含出处)与结果/问题清单(按层分列)/结论(退回或通过)/确认人(业务负责人)/日期
反例(合成演示)
一次验收会上,大家围着一张排版精美的报价汇总表逐列夸格式,没人核对单价来源,发出后供应商指出其中两个单价是去年的旧价。另一次相反:有人因为一处错别字否掉整份事实上无误的汇总,改了半天格式。两个反例是同一类错误——两层没分开:前者被结构层的光鲜掩盖了事实层零核查,后者把结构层小问题当成了否定事实内容的理由。
常见问题
问:每个数字都找出处,范围会不会太大?答:范围先限定在会对外发出的字段,内部草稿可先查关键数字;范围划定后按同一口径执行,划多宽由业务负责人定。
问:AI能自己标注出处吗?答:可以要求它标注,但标注本身要抽查回原文核验;AI声称的出处不等于核对完成,这一点写进验收口径。
讨论问题
拿你最近一份“看起来很专业”的AI产出,只核对其中所有数字,你估计有几成经得起出处检查?
来源与边界说明
分层验收与按层归因的测试思路受 Google Workspace Skills 公开介绍启发(https://workspace.google.com/blog/product-announcements/teach-gemini-your-teams-know-hows-with-skills-in-google-workspace ,不推断相关功能在国内可用);两层标准、验收卡与示例均为编辑设计合成演示,未经实际运行验证,本文不声称与任何厂商存在合作或真实成果。
