Anthropic:大语言模型在回答前想了什么?

从意识问题退一步,

先问模型哪些想法可以被报告

如果把心灵想象成一片海洋,我们多数时候只漂浮在水面。真正庞大的计算发生在脚下:视觉系统解析面孔,运动系统维持姿势,语言、记忆和情绪也在后台运行。我们能觉察到的只是极小一部分,但正是这部分浮上海面的活动,让我们能够计划、推理、表达,并把一个念头……

本文来自微信公众号: 集智俱乐部 ,作者:王璇

从意识问题退一步,

先问模型哪些想法可以被报告

如果把心灵想象成一片海洋,我们多数时候只漂浮在水面。真正庞大的计算发生在脚下:视觉系统解析面孔,运动系统维持姿势,语言、记忆和情绪也在后台运行。我们能觉察到的只是极小一部分,但正是这部分浮上海面的活动,让我们能够计划、推理、表达,并把一个念头暂时保持在心里。认知科学中的全局工作空间理论正是用这种图景解释可访问意识:大量处理在后台并行进行,只有少量信息进入共享工作空间后,才会被报告、调控,并被更多系统调用。

Anthropic的这项研究没有直接证明Claude是否有意识。它退后一步,提出一个更可检验的问题:Claude内部是否存在一类可被报告、可被调控、可参与推理,并能在多种任务之间灵活转用的表征?这个问题很重要,因为LLMs的输出只是末端行为,模型在回答前是否已经形成了中间判断、隐藏意图或评估意识,外部观察者通常无法知道。J-lens 的作用,正是尝试读取这些尚未说出口的内部表征。

J-lens 如何看到模型尚未说出口的概念

J-lens的基本思想是:对于 Claude 词表中的每个词,寻找一种内部激活方向。如果模型激活沿这个方向增强,它在后续位置说出这个词的可能性就会上升。因此,J-lens读取的不是模型下一个必然输出的词,而是模型内部某些处于可言说状态的概念。研究者把这些被J-lens读出的表征集合称为J-space。

J-space的意义在于,它不是普通的文本复述。Claude阅读有bug的代码时,J-space中会出现与错误相关的信号;阅读蛋白质序列时,J-space可能浮现该序列的生物学功能;遇到提示注入攻击时,J-space中会出现 “injection” 或 “fake”;处理多步数学题时,中间步骤会按顺序进入J-space。也就是说,J-space读到的内容往往不是输入文本里已有的词,而是模型内部计算出的判断。

图1. J-lens 的方法示意图。

更关键的结论是,J-space不只是记录模型即将输出什么,而是会影响模型最终报告什么。当某个概念出现在J-space中时,模型往往会在后续回答中说出相应内容。而当研究者直接替换这一内部表征时,模型的回答也会随之改变。这说明 J-space不是一个被动的观察窗口,而是模型生成报告的因果环节之一。

这一点构成了全文证据链的核心。许多可解释性研究只能证明某个内部方向与某个概念相关,却无法证明模型是否真正使用它。J-space的特殊性在于,它既可被读取,也可被干预。一旦被编辑,模型行为会发生相应改变。因此,它更接近模型内部显性计算的一部分,而不是推理完成后留下的副产物。

J-space 像一个小型工作台

如果J-space真具有工作空间功能,它就不应只影响模型说出什么,还应参与模型怎么想。Anthropic 的实验显示,J-space具有三类性质:它可以被任务指令调控,即模型表面输出不变,内部仍会出现与隐藏任务相关的概念。它会参与推理,即替换某个中间概念后,模型后续答案也会改变。它还具有广播能力,即同一个概念进入J-space后,可以被多个不同任务共同调用,影响不同类型的问题回答。

这说明J-space不是输出前留下的局部痕迹,而更像一个写入一次、多处调用的内部工作台。模型会把少量关键概念提升到这里,使其暂时处于可报告、可操控、可推理使用的状态。这正是它类似全局工作空间的地方:它不负责所有计算,却让部分表征变成可被更多计算过程访问的共享内容。

图2. 全局工作空间的五个功能性质,以及测试它们的实验示例。

不过,J-space并不是Claude全部思想的所在地。它被删除或替换后,模型仍能流畅续写文本、完成简单分类和抽取直接信息。明显受损的是多步推理、摘要、押韵生成等需要高阶组织的任务。因此,J-space更像一个容量有限但连接广泛的显性计算接口,在内部报告、复杂推理和任务迁移中具有特殊作用。

J-space的实用价值体现在AI安全审计与模型可控训练两方面,它能够读取模型输出前潜藏的内部判断,在勒索类场景中提前捕获风险概念与测试感知表征,以此区分模型真实稳定的安全表现和仅在测试环境下伪装合规的行为。同时它也可作为模型对齐优化的载体,依托反事实反思训练生成诚实、守原则的内部表征,有效减少模型不实输出,一旦移除这类正向表征,训练带来的行为改善就会明显弱化。但该工具存在明确局限,仅能识别可匹配词表token、带有清晰语言标签的内部表征,难以捕捉无文字标识的隐性规划与自动化危险行为,更关键的是,相关观测只能证明模型具备类全局工作空间的信息调取、推理、对外播报功能,并不能证实AI拥有主观体验与现象意识。

总结展望

长远来看,该研究的核心意义并非证实AI具备意识,而是证明大模型会自发演化出类全局工作空间的功能架构。少量信息进入可操控、可汇报的前台,海量运算隐匿于后台。对领域发展而言,它为可解释AI开辟了观测模型隐性思考的窗口,为AI安全提供了监控隐藏风险的工具,也给认知科学提供新论据。工作空间式计算或是复杂智能系统处理多步推理、灵活决策时,自然演化出的通用架构。

  • Related Posts

    月产能目标1000台,三菱汽车要在京都工厂造人形机器人

    7月9日,三菱汽车宣布与日本机器人初创公司Highlande…

    表演嚼槟榔成直播流量密码,抽象到我看不懂

    “表演吃槟榔”,也能成为流量密码? 几个月前,全球顶流网红“…

    发表回复

    您的邮箱地址不会被公开。 必填项已用 * 标注

    bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak bokep anak
    xnxx porn xnxx porn xnxx porn xnxx porn xnxx porn xnxx porn xnxx porn xnxx porn xnxx porn xnxx porn xnxx porn