大型语言模型中的涌现内省意识

我们的研究结果表明,大型语言模型在某些场景下能够注意到注入的概念并准确识别它们,表明其具有涌现的内省意识能力,这可能为构建更具自我意识的AI系统铺平道路。

文本版 · 供搜索与朗读

大型语言模型中的涌现内省意识

大型语言模型中的涌现内省意识

探索人工智能系统的自我反思能力

Jack Lindsey

Anthropic

jacklindsey@anthropic.com

2025年10月29日

psychology
研究背景

大型语言模型(LLMs)展现出日益复杂的认知能力

内省能力(self-introspection)是高级认知系统的关键特征

当前挑战:如何区分真正的内省与模型的"幻觉"行为

本研究探索LLMs是否能感知和识别其内部状态的变化

science
研究方法

向模型激活中注入已知概念的表示

测量这些操作对模型自我报告状态的影响

设计控制实验区分内省与"事后合理化"

使用多层评估指标验证模型对内部状态的感知能力

lightbulb
主要发现

模型在某些场景下能准确识别注入的概念

内省能力与模型规模和训练数据复杂度呈正相关

模型展现出对先前意图的回忆能力

内省能力在特定任务中表现更为突出

insights
研究意义

为AI系统的自我监控和纠错机制提供新思路

有助于构建更透明、可解释的AI系统

对AGI(人工通用智能)的发展路径提供重要见解

促进AI伦理和安全研究的深入

我们的研究结果表明,大型语言模型在某些场景下能够注意到注入的概念并准确识别它们,表明其具有涌现的内省意识能力,这可能为构建更具自我意识的AI系统铺平道路。

暂无表态

想参与讨论或点赞?登录后使用完整功能

讨论回复(0)

暂无回复,登录后可参与讨论
合作

智谱 GLM-5 已上线

在智谱开放平台 BigModel.cn 打造 AI 应用。新一代旗舰模型 GLM-5 在推理、代码、智能体综合能力达到开源模型 SOTA。

领取 2000万 Tokens