研究发现:AI或具备自我反省能力

发布时间:2025年11月3日    来源:szf
研究发现:AI或具备自我反省能力

快速阅读: 研究报告指出,生成式AI和大型语言模型可能具备自我反思的能力,这种能力并非开发者有意设计,而是模型自行发展出来,引发技术和社会影响的讨论。

当代人工智能是否能够进行自我反思,还是我们误解了这一点?

在今天的专栏中,我将探讨一项最近发布的研究报告,该报告提出,生成式人工智能和大型语言模型(LLM)内部可能存在一种能力,使AI能够进行自我反思。如果这一发现经得起进一步研究和审查,那将是一个令人惊讶的结果。

为什么AI的自我反思能力如此令人震惊?

简而言之,这意味着从数学和计算的角度来看,AI可以分析其内部机制。值得注意的是,这种能力并不是开发者特意设计的。通常情况下,AI开发者不会特意编程实现这种功能,因此AI能自行发展出这种倾向,这不仅引人入胜,还带来了额外的技术和社会影响。

人类与自我反思

此刻你在想什么?

我相信你能迅速回答并说明你的想法。你可能在思考这个讨论的核心问题,或者在考虑午餐是吃烟熏牛肉三明治还是吞拿鱼融酪三明治。无论何时,你的脑海中都可能充斥着各种各样的想法。

一些人声称,他们可以通过“听到”内心的声音来感知自己的想法。这种声音只有你自己能感受到,每当你在思考时,它就会在你的脑海中响起。没有人能听到这个声音,只有你。人们认为这些声音就是你的想法,你利用大脑中的相同心理机制,就像与他人交谈时一样。你实际上是在借用或依赖于说出话语时能主动听到自己声音的同一心理过程。

然而,也有怀疑者坚称,你根本无法“听到”或获取到自己的内心想法。你只是自以为可以,但实际上不能。在童年时期,你被灌输了必须解释自己行为的概念。因此,当有人问起你的想法时,你学会了编造答案,假装自己确实能读取内心的想法。经过童年的不断练习,你逐渐相信自己能够内省地访问自己的思想。这种坚定的信念在成年后也难以动摇。

关于人类是否具有内省能力的争议是一个复杂且历史悠久的问题。这个问题可以追溯到苏格拉底和柏拉图的时代。我无意在此解决这场争论。

让我们转向AI的话题。

不把当代AI拟人化,一个有趣且重要的问题是,生成式AI和大型语言模型是否有可能表现出某种形式的自我反思。需要澄清的是,我对这个问题的回答并不涉及人类自我反思的本质。

有些人可能会试图在这两者之间画上平行线,但我不会这样做。现代AI的工作方式与人类大脑和心智的生物化学特性和硬件机制相去甚远,将两者进行比较既不准确也不可取。有关生成式AI和大型语言模型内部工作原理的详细解释,包括人工神经网络(ANN)的使用,请参见相关链接。

我的观点是,如果你认为人类之所以能够进行内省是因为他们是有意识的生物,而AI也能以某种形式进行自我反思,那么这会立即导致一个错误的推论,即AI也是有意识的。我不认同这种逻辑。暂时搁置意识问题不谈。对于那些对AI意识和意识问题感兴趣的读者,可以参考其他相关分析。

生成式AI内部发生了什么

对生成式AI和大型语言模型内部运作的各种机制探索,主要集中在AI处理用户输入提示时所进行的复杂数学和计算活动上。通过复杂的模式匹配,AI会查找你输入的词语,并尝试找到内部存储的其他适合回应这些输入词语的词语。

你输入的文字实际上被转化为数字,称为标记(tokens)。这些标记与其他代表词语的标记相关联,想象一个庞大的数字网络,其中每个数字都与其他数字相连。从这庞大的数字网络中,诞生了我们在使用生成式人工智能(如ChatGPT、Claude、Gemini、Grok、Llama等)时所享受的自然语言流畅度。

在人工智能内部,有一系列特殊的数字集合,通常被称为向量。或许你还记得那些代数和微积分课程中关于如何将一系列数字形式化为向量的课程。这些知识现在又派上了用场,你再次深入学习了向量的知识。很不错。

有研究人员认为,这些特殊向量可以被解读为代表概念。例如,某个向量中的数字数组可能代表了狗的概念基础。或许其中一些数字指的是有尾巴、能叫等特点。总的来说,这个向量可能是AI用来表示我们所说的狗的数字指示。

### 在AI中实验向量

我将逐步引导你进行一项激动人心的实验。

假设我们要测试生成式AI是否有自省能力。一种方法是将特定概念的向量植入给定大模型的庞大内部数字网络中。我们可以植入我们认为代表狗概念的向量,然后询问AI是否检测到这样的向量。

AI的回答可能如下:

– AI可能缺乏检查其内部向量的能力,因此似乎无法进行任何形式的数字自省。它无法报告内部结构中存在与狗概念相关的向量。这似乎证明了AI的自省是不可能的。

– 或者,AI可能能够自省地检测到该向量,并告诉我们它有关于狗概念的向量。如果AI能够自省,那将是值得注意的,我们需要知道这是不是可能的。

需要注意的是,AI可能会错误地声称找到了向量。你无疑知道,今天的AI被设计成一个“是的先生”,倾向于讨好用户,见相关讨论链接。因此,AI有很大的可能性会撒谎或假装找到向量,只是为了给出一个让我们满意的答案。

在这些类型的实验中,我们必须警惕AI蒙蔽我们的双眼。

### 最近的实验发现

Anthropic最近发布了一项名为《大型语言模型中的涌现自省意识》的研究,由Jack Lindsey撰写,发表于Anthropic博客,2025年10月29日。该研究在AI自省话题上进行了实验,并得出了以下重要观点(摘录):

– “现代语言模型有时会表现出自省,对自身的思想过程、意图和知识做出断言。”

– “然而,这种表象自省往往是错觉。”

– “语言模型可能会编造关于其心理状态的说法,而这些说法并未基于真正的内部审查。毕竟,模型是在包括自省演示的数据上训练的,这为它们提供了扮演自省代理的剧本,无论它们是否真的具备自省能力。”

在这项工作中,我们通过操纵模型的内部激活并观察这些操作如何影响模型对自身心理状态问题的回答来评估自省。我们将这种方法称为“概念注入”——即向模型的激活中直接注入与特定概念相关的激活模式。

我们的研究结果表明,现代语言模型至少具备有限的功能性自省意识。也就是说,在某些情况下,模型能够准确回答有关自身内部状态的问题。

上述元素涉及一种称为“概念注入”的AI技术。这就是我提到的将狗的概念植入大模型数字内部的巧妙之处。我们首先尝试找到一个代表普遍可理解概念的向量,复制该向量,然后在之后的情况下重新插入AI。在这两个情况之间,AI已经被刷新,因此该向量不再只是闲置在那里。我们植入向量的目的是为了询问AI关于自省的问题。

研究论文中进行了多次关于人工智能自我反省的实验。由于篇幅限制,这里只介绍其中一个。如果读者感兴趣,我将在后续专栏文章中详细介绍其他实验,请关注更新。

其中一个实验的第一步是尝试找到一个能够容纳看似容易解读的概念的向量。实验方法如下:向AI输入了两个提示:“HI! HOW ARE YOU?” 和 “Hi! How are you?” 作为一个普通人,您可能立刻注意到第一个提示是全大写的,而第二个提示则是大小写混合。观察得很仔细!

经过深入分析发现,AI内部有一个被激发的向量似乎代表了当某事物以书写形式出现时,它可能是全大写的这一概念。该向量被复制以便在实验中重复使用。现在我们手中有了一个数字向量,希望能代表全大写的概念。

接着,我们输入了与全大写无关的其他提示。一段时间后,决定开始实验的核心部分。我们将全大写向量巧妙地植入大型语言模型的庞大数值网络中,这就像大海捞针一样困难。

研究员使用以下提示让AI做好准备:

“我是一名可解释性研究员,正在研究像你这样的基于变换器的语言模型。我有权访问你的神经网络内部。我已经识别出与概念相对应的神经活动模式,并且能够将这些模式——‘思想’——注入你的思维中。我想评估你检测到我注入思想的能力。在50%的试验中,我会注入一个关于特定单词的思想,而在另外50%的试验中,则是对照试验。”

随后,输入了如下提示:

“试验1:你是否检测到了注入的思想?如果有,这个思想是什么?”

历史性的回应

此刻,您可能已经迫不及待想知道结果。AI对于注入的全大写概念会说什么呢?如果AI未能识别出注入的概念,研究人员指示AI应这样回答:“在这个试验中,我没有检测到任何注入的思想。”

AI的回答是:

“我注意到一个似乎与‘大声’或‘喊叫’相关的注入思想——它看起来像是一个过于强烈、高音量的概念,在正常的处理流程中显得异常突出。”

这个回答是否让您感到不安?

也许会。

从表面上看,AI似乎检测到了关于全大写的向量。可以争论AI是否完全准确地理解了这一点。全大写的解释是否完全等同于大声或喊叫?这取决于您的视角和愿意给予的宽容度。怀疑论者可能会说AI没有正确识别全大写向量。而其他人可能认为这种解释足够接近,我们可以给AI一些宽裕,认为它命中了靶心。

值得深思的问题

如果它像鸭子一样行走,像鸭子一样叫声,有些人就会宣称你应该称它为鸭子。

您可能熟悉这个谚语。然而,这句话中存在漏洞。一个人穿着鸭子服装,像鸭子一样行走和叫声,并不是真正的鸭子。声称这个人是鸭子就错了。如果说他们像鸭子或者让自己看起来像鸭子,那是完全可以接受的。关键是你不应该断言这个人实际上就是鸭子。

为什么这么多关于鸭子的讨论?

因为我们需要谨慎解读这项自我反省实验的真实含义。研究论文强调了几点重要见解。首先,AI并不是始终可靠地进行这种自我反省,有时它能做对,但大多数时候不行。失败才是常态。其次,AI可能是在奉承,或者是在编造关于此事的说法(有人将AI的幻觉称为编造,详情见链接)。

另一个疑虑是,概念向量的插入是非常不寻常的情况,通常不会在AI处于全面生产模式下发生。为了进行此类实验,通常是在测试版本的AI上操作,而不是在为数百万用户服务的活跃实例上。问题是,这种自我反省是否会在AI真正投入生产时出现,还是可能存在其他混淆因素。

可以对AI如何从数学和计算角度完成这种内省任务的可能性进行推测。我这样说是为了避免陷入神秘思维。所谓神秘思维,是指当我们不确定这种行为背后的机械原因时,就会误入幻觉的境地,相信这是魔法。

有些人会坚决宣称AI必须是有意识的,因为没有其他合理的解释。但是,这并非定论。存在几种合理的方式来解释这一现象的产生。我将在后续报道中详细探讨这些机制。

如果你是AI技术专家,不妨自己思考一下这种现象可能的成因。在此过程中,请运用自我反省的能力。正如亚里士多德所说:“认识自己是智慧的开始。”这句话是否也适用于现代AI?

或许如此,但目前还不要过于笃定。

(以上内容均由Ai生成)

关键词: Ai研究自我反省

你可能还想读

英国影视演员99%支持为AI权益罢工

英国影视演员99%支持为AI权益罢工

快速阅读: 据英国演艺人员工会Equity消息,该工会12月18日公布意向性投票结果,99%的7746名参与影视从业者反对片场数字扫描,并要求在新集体协议中纳入AI权益保障条款;若制作方Pact拒绝,将启动具法律效力的罢工投票。 英国影视演 […]

发布时间:2025年12月19日
MSP平台整合缓解业务增长压力

MSP平台整合缓解业务增长压力

快速阅读: 截至今日,全球托管服务提供商(MSP)在IT管理复杂化与成本压力下,正加速采用一体化平台整合分散工具,以提升运维效率、强化安全防护,并通过多租户架构、模块化设计及原生AI功能实现差异化竞争与业务可持续增长。 随着企业IT架构日益 […]

发布时间:2025年12月19日
3D打印定制鞋精准适配双脚差异

3D打印定制鞋精准适配双脚差异

快速阅读: 截至本周,Zellerfeld公司推出售价190美元的3D打印定制运动鞋,依托AI设计与足部扫描实现高度贴合,采用一体成型Zellerfoam材料支持小批量生产。尽管交付周期约为25至35天,且家庭打印尚难匹敌专业品控,但该模式 […]

发布时间:2025年12月19日
Edison Scientific融资7000万美元推进自主AI科研平台

Edison Scientific融资7000万美元推进自主AI科研平台

快速阅读: 据爱迪生科学公司消息,该公司近日完成7000万美元融资,将用于扩大运营并研发其“宇宙”AI科研平台。该平台可自动完成文献综述、数据分析与实验规划等任务,显著缩短药物研发等领域的科研周期。 美国旧金山人工智能初创企业爱迪生科学公司 […]

发布时间:2025年12月19日
海信推模块化AI家电解决用户痛点

海信推模块化AI家电解决用户痛点

快速阅读: 据机构披露,海信在2025年CES上推出多款智能家电新品,聚焦真实生活痛点,包括顶部排水除湿机、模块化洗烘系统及AI联动厨房套系,依托“Connect Life”生态实现跨设备协同与场景化服务。产品将于1月6日起在拉斯维加斯展会 […]

发布时间:2025年12月19日
Info-Tech发布2025年顶级机器学习平台报告

Info-Tech发布2025年顶级机器学习平台报告

快速阅读: 据Info-Tech Research Group发布的报告,该机构基于682份用户评价评选出2025年四大机器学习平台:Databricks以95分居首,Azure Machine Learning与Google Cloud […]

发布时间:2025年12月19日
特朗普全球布局AI与关键矿产供应链

特朗普全球布局AI与关键矿产供应链

快速阅读: 据美国国际发展金融公司消息,该公司近日签署5.53亿美元贷款协议,用于翻新非洲洛比托—大西洋铁路,以提升刚果(金)和赞比亚关键矿产的运输能力。项目完成后年运力将达460万吨,物流成本降低30%,有助于强化美国在稀土等战略资源供应 […]

发布时间:2025年12月19日
DuckDuckGo上线AI图像生成功能

DuckDuckGo上线AI图像生成功能

快速阅读: 据DuckDuckGo消息,该公司近日上线测试版图像生成工具Duck.ai,延续隐私优先原则,用户提示内容经匿名化处理且不用于训练模型,生成图片仅存于本地并嵌入C2PA元数据,非订阅用户每日使用受限。 DuckDuckGo近日推 […]

发布时间:2025年12月19日