跳到主内容
快讯直播
AI智模界
AI 词典

CRoS:把思维链打乱,看模型到底靠什么答题

一句话定义:CRoS(打乱思维链的因果奖励)是一种围绕思维链(AI 词典:Chain-of-Thought">Chain-of-Thought, CoT)的训练与评估思路——把推理步骤随机重排,用“打乱之后答案变不变”作为奖励信号,逼模型只依赖真正决定答案的那几步。

为什么需要它。模型写出的思维链常常像“事后补写的作文”:十步推理里,可能只有两三步真正决定答案,其余是复述题目、换句话说的过渡句,甚至是为了显得严谨而凑出来的字数。如果只用最终答案的对错给奖励(结果奖励),模型完全可以先猜中答案、再补一段听起来合理的推理。答案是对的,推理却不忠实(faithfulness),这类推理不能用来做故障归因和可解释性分析。

CRoS 的做法是构造反事实(counterfactual)样本。先让模型对一个问题生成完整链条,再对步骤做干预:重排顺序、删掉某几步、或把某一步替换成另一道题里的步骤。然后看模型在这些被改过的链条上还能不能得出原答案。若打乱后答案照样对,说明被动的那些步骤其实没起作用;若破坏某一步答案立刻崩,说明它是关键步骤。奖励从这种“干预—结果”的差异里算出来,而不是只看最终对错。

打个比方:一锅汤好喝,你只尝成品,分不清是盐的功劳还是摆盘的功劳。对照实验的做法是换掉一味料再尝——味道变了,这味料才是真正起作用的。CRoS 就是把“换料再尝”搬到思维链上:打乱步骤顺序,看答案会不会跟着变。

方法奖励依据回答的问题局限
结果奖励(outcome reward)最终答案对不对答对了吗猜对也算对,推理可能是补写的
过程奖励(Process Reward Model, PRM)每一步是否“合理”这一步像不像对的像不等于有用,仍会奖励陪跑步骤
因果奖励(CRoS 这类做法)步骤被干预后答案是否改变这一步真的决定答案吗依赖干预样本能否构造,长链成本高

和相邻概念的区别,核心在于“相关”与“因果”。PRM 学的是“什么样的步骤看起来像好步骤”,本质是相关性;CRoS 学的是“去掉这一步答案会不会变”,这是因果性。忠实度与准确率也是两个指标:准确率问结果对不对,忠实度问模型是不是真的按它说出来的那套逻辑在答题,CRoS 主要盯后者。

对从业者的实际意义:筛选高质量的 CoT 训练数据、给 agent 的失败做归因(到底是哪一步把结果带偏了)、评估可解释性方法是否可信,都可以借用这个“打乱—对照”的框架,而且不依赖人工标注每一步。对普通职场人,它提供了一个判断标准:AI 说得头头是道,不等于它真在用那套逻辑;评估一个 AI 产品时,只看准确率容易高估它。

CRoS 目前更偏研究性质的方法,具体实现细节与评价指标以原始论文或官方页面为准。

AI 生成本文由 AI 基于公开信息自动生成,仅供参考。