3.1 基于一致性的检测
多数方法都基于同一个观察:多次采样的答案相互矛盾,往往意味着模型在编造。这类方法无需访问模型内部。
但它的计算成本较高,需要多次调用模型。
批量导入论文与讲座,AI 按研究问题、方法与结论归纳观点。每个论断都能回溯原文,新文献随时增量整合。
导入多篇论文 PDF、讲座视频、网页。
双语对照;转化为易懂版本;高亮、批注;拖拽内容至白板生成卡片笔记。
When a model is sampled several times on the same question, contradictory answers often indicate fabrication.
对同一问题多次采样时,若答案相互矛盾,往往说明模型在编造。
These methods need no access to model internals, but they require multiple calls per query.
这类方法无需访问模型内部,但每次查询都要多次调用模型。
Probes trained on hidden activations can flag many hallucinations before the answer is generated.
在隐藏层激活上训练的探针,能在答案生成之前识别出多数幻觉。
多数方法都基于同一个观察:多次采样的答案相互矛盾,往往意味着模型在编造。这类方法无需访问模型内部。
但它的计算成本较高,需要多次调用模型。
多次采样的答案相互矛盾,往往意味着模型在编造
方法综述p.12按问题、方法、结论、分歧,生成综述白板;每条论断都能回溯原文。
按研究问题、方法、结论、分歧整理这 5 份文献,标好出处。
不看模型内部,能否识别幻觉?
能否在答案生成前就预警?
自洽性检验:多次采样,看答案是否一致
内部探针:用隐藏层激活训练检测器
检索增强能减少幻觉,但不能根除
模型越大,幻觉越少
答案一致,是否就等于答对?
在同一组问答基准上,参数量越大的模型,幻觉率越低:从 7B 到 70B,幻觉率下降了一半。
新增文献,让 AI 整合至已有内容之上;每处改动,审批后才生效。
把新读的 3 篇论文整合进综述,标出和已有结论的分歧
不看模型内部,能否识别幻觉?
能否在答案生成前就预警?
自洽性检验:多次采样,看答案是否一致
内部探针:用隐藏层激活训练检测器
探针在多语言场景同样有效
检索增强能减少幻觉,但不能根除
检索增强能减少幻觉,但在长文本中效果有限
模型越大,幻觉越少
答案一致,是否就等于答对?
长文本中,自洽性检验可能失效