大语言模型明明能解最复杂数学题,却在虚拟厨房‘洗苹果’洗成死循环?LIFE-HARNESS外骨骼88.5%逆天提升,不改一行代码!
夫大语言模型者,虽能裂帛解数学之至难,然置于虚拟环境,令其“洗一苹果”,往往九十步而九十败。 何也?非其智短,乃“接口”不契、规矩不明、动作失范、轨迹自乱耳。今日视频所拆之论文——《适应接口,而非模型:确定性LLM代理的运行时Harness适配》(arXiv:2605.22166,北京大学徐天石、温慧峰、李萌等,2026年5月)——正以一袭轻巧“外骨骼”LIFE-HARNESS,破此“手残党”魔咒。不改模型一行代码,不动环境分毫,平均相对性能飙升88.5%,横扫116/126种模型-环境组合,且从4B小模型进化之Harness,竟能普适17种其他骨干。此非砸钱微调之旧路,乃“接口革命”之新径也。
譬如一数学天才,通微积分、晓群论,忽被扔进陌生厨房,令其“洗苹果”。 他或不知水龙头何在,或反复“拧开水”却忘放苹果,或动作格式不合(厨房规矩要求先“拾取”再“清洗”),遂陷入死循环。非天才愚笨,乃厨房接口与他脑中逻辑不匹配耳。大模型之“手残悖论”正如此:静态推理力在线,交互闭环中却因格式错、契约模糊、轨迹退化而崩盘。论文洞见极简:与其重塑大脑(SFT/RLHF),不如为大脑配一副“智能外骨骼”——四层轻量运行时Harness,专治接口之疾。
LIFE-HARNESS者,四层“超级翻译官”也, lifecycle-aware(生命周期感知),从训练轨迹失败中自动进化,固定后用于 unseen 任务。 其架构如一层一层“护甲”,环绕冻结模型:
一曰环境契约层(Environment Contract)。 交互前立“契约”,明环境之规、工具之用、约束之界。譬如厨房先签“厨房公约”:何物可洗、何步骤必先、何参数必备。论文中 Airline 任务即补全航班搜索必填项与取消条件,使模型不再“猜规矩”。此层如事前“立规矩者”,防患于未然。
二曰程序技能层(Procedural Skill)。 任务时,从过往成功轨迹提炼“技能库”,用BM25检索 top-k 注入提示。譬如 ALFWorld(家务模拟,含清洗、放置等苹果类任务)中,技能“先拾取后清洗”“用台灯检查”被自动唤起。非死记硬背,乃“经验手册随取随用”。此层如“老手传授口诀”,让新手少走弯路。
三曰动作实现层(Action Realization)。 模型刚输出动作,尚未执行,先经“质检员”把关:格式是否合规?可否小修?大错则挡。譬如 DBBench 中挡住未加引号的SQL,或WebShop中规范点击路径。执行前“翻译”成环境能懂之语,免于崩溃。此层如“动作翻译官+守门人”,救模型于执行前。
四曰轨迹调节层(Trajectory Regulation)。 反馈后监控全程,若见重复搜索、死循环、停滞不前,则“拍醒”干预:警告、强制进步动作、打破退化。譬如WebShop中检测到反复搜同一物,强推“立即购买”。此层如“导航纠偏仪”,防轨迹自毁。
四层协同,成一“免疫系统”。 进化机制尤妙:用Codex等代码智能体,读失败日志,自动提炼规则、补契约、增技能、严动作、加调节。从Qwen3-4B-Instruct轨迹进化之Harness,竟跨模型迁移,证明其捕获的是“环境侧结构”,而非模型 idiosyncrasy。实验覆盖τ-bench(航空/零售/电信)、τ²-bench、AgentBench(ALFWorld家务、WebShop购物、OS控制、DBBench),7环境、18骨干模型(Qwen、Llama、xLAM等),116/126设置改善,平均相对提升88.5%(ALFWorld Pass@1从41.1%→75.7%)。消融实验证四层皆不可缺;与模型训练互补(加Harness后,普通32B竟超专用工具训练模型)。
此法之妙,在“模型无关”与低成本。 不需重训大模型,不改benchmark,仅外挂轻量wrapper。失败不再归咎“模型太笨”,而是“接口太糙”——可修、可进化、可复用。于确定性、规则严明之域(家务、购物、工作流、数据库),尤为神效。诚如论文所言:“LLM代理之行为,不仅由语言模型塑造,亦由运行时Harness中介观察、工具调用、动作执行与反馈解释。” 许多失败,本非推理之败,乃接口之 mismatch。
步子哥若观此视频,盖可一笑而思: AI从“纸上谈兵”走向“下得厨房”,关键不在把脑子换大,而在给它配一副懂规矩、会纠偏、能传承经验的外骨骼。LIFE-HARNESS正示一途:接口适配,可与模型 scaling 并行,甚至互补。于构建稳健代理系统者,此或为“四两拨千斤”之杠杆。
最终拍板结论: 此论文非仅技术补丁,乃范式微调——从“重塑模型”转向“适配世界”。于当前代理热潮中,提醒我们:智能之瓶颈,常不在脑,而在手与环境之握手。 欲深潜代码实现、于自家框架中试四层,或于ALFWold类家务任务中复现“洗苹果”之旅,随时可再议。
(参考:arXiv 2605.22166 原文、GitHub Tianshi-Xu/Life-Harness 实现。数据与架构皆来自论文实证,非臆测。)
🌟 智谱 GLM-5 已上线
我正在智谱大模型开放平台 BigModel.cn 上打造 AI 应用,智谱新一代旗舰模型 GLM-5 已上线,在推理、代码、智能体综合能力达到开源模型 SOTA 水平。
🎁 领取 2000万 Tokens