论文信息
原标题: Position: agentic AI orchestration should be Bayes-consistent 作者: Pierre Alquier, Matthias Bauer, Wray Buntine, Andrew Davison, Gintare Karolina Dziugaite, Maurizio Filippone, Andrew Y. K. Foong, Vincent Fortuin, Dimitris Fouskakis, Jes Frellsen, Eyke Hüllermeier, Theofanis Karaletsos, Mohammad Emtiyaz Khan, Nikita Kotelevskii, Salem Lahlou, Yingzhen Li, Fang Liu, Clare Lyle, Thomas Möllenhoff, Konstantina Palla, Maxim Panov, Yusuf Sale, Kajetan Schweighofe, Artem Shelmanov, Siddharth Swaroop, Martin Trapp, Willem Waegeman, Andrew Gordon Wilson, Alexey Zaytsev 发布时间: 2026-05-01 arXiv: 2605.00323 分类: Artificial Intelligence, Machine Learning
---
🎭 开场:一场关于确定性的幻觉
想象你是一位急诊室医生。深夜,一位病人被推进来,胸痛、呼吸急促。你的大脑立即开始运转:可能是心脏病发作,可能是肺栓塞,可能是焦虑引起的过度换气。你不能确定——不确定性是医学诊断的常态。
但你知道什么?你知道每种症状对应不同疾病的概率。你知道应该先做心电图排除最危险的心脏病。你知道在获得更多检查结果后,这些概率会更新。
这就是贝叶斯思维——不是假装 certainty,而是在不确定中做出最优决策。
现在,让我们把目光转向AI系统。今天的LLM在回答问题时,往往表现得像一位"过度自信的专家"——它会给出一个确定的答案,即使答案基于不充分的信息。当你问它"我应该投资哪家公司?"它会毫不犹豫地给出建议,而不是说"基于现有信息,A公司的成功概率是60%,B公司是40%"
这篇由28位作者(包括多位贝叶斯机器学习领域的顶尖学者)联名发表的立场论文,提出了一个激进的观点:Agentic AI系统的编排层(orchestration layer)必须是贝叶斯一致的。不是LLM本身,而是编排LLM和工具的那一层控制系统。
---
🎰 贝叶斯决策理论:一场三百年前的赌局
托马斯·贝叶斯(Thomas Bayes)是一位18世纪的英国牧师。他从未发表过关于概率的论文——那篇著名的《论机会游戏中的一个问题》是在他去世后由朋友整理发表的。
贝叶斯的核心洞察可以概括为一个简单的公式:
P(H|E) = P(E|H) × P(H) / P(E)
翻译成中文:在观察到证据E后,假设H的概率 = 如果H为真,观察到E的可能性 × 最初相信H的程度 / 观察到E的总可能性。
想象你在玩一个猜硬币游戏。你面前有两个信封,一个装着公平硬币(正反面各50%),一个装着总是正面的作弊硬币。你随机选一个信封,抛一次,看到正面。现在——你选的是作弊硬币的概率是多少?
直觉可能说"50%",因为你还没看到反面。但贝叶斯计算告诉我们:
P(作弊|正面) = P(正面|作弊) × P(作弊) / P(正面) = 1 × 0.5 / 0.75 = 2/3 ≈ 66.7%
因为你看到了正面,作弊硬币的可能性上升了。这就是贝叶斯更新——用新证据不断修正信念。
---
🤖 Agentic AI:从聊天到行动
传统的大语言模型(LLM)是"聊天机器"——你给输入,它给输出。对话结束。
但Agentic AI是一个更雄心勃勃的范式。想象一个AI助手,它不仅能回答问题,还能:
- 调用搜索引擎获取最新信息
- 使用计算器验证数学推导
- 编写并执行代码来测试假设
- 与其他专家AI协作
- 在多轮交互中逐步实现一个复杂目标
问题来了:谁来决定调用哪个工具?什么时候调用?什么时候停止?
这就是编排层(orchestration layer)的工作。它是Agentic AI的"大脑皮层"——协调一切,做出高层决策。
---
⚠️ 当前Agentic系统的"确定性幻觉"
今天的Agentic系统(如ReAct框架、AutoGPT等)在编排层通常使用确定性启发式:
- "如果用户问了关于天气的问题 → 调用天气API"
- "如果代码执行出错 → 尝试修复代码"
- "如果回答超过500字 → 调用摘要工具"
现实情况是:
- 用户问"今天适合出去吗?"可能想要天气信息,也可能想要空气质量,也可能只是闲聊
- 代码出错可能是因为bug,也可能是因为环境问题,也可能是因为需求本身矛盾
- 回答长短不一定与质量相关
---
🧠 贝叶斯编排:把AI变成"理性赌徒"
这篇论文的核心论点可以概括为:编排层应该维护对任务相关隐藏变量的信念(beliefs),并用贝叶斯方式更新这些信念,最终基于期望效用选择行动。
---
🎯 维护信念(Belief Maintenance)
在贝叶斯编排框架中,系统不会说"用户想要天气信息"——它会说:
- "用户想要天气信息的概率是60%"
- "用户想要空气质量的概率是25%"
- "用户只是在闲聊的概率是15%"
关键是:系统同时考虑多种可能性,而不是武断地选择一种。
这就像一位优秀的扑克玩家。他不会假设"对手一定是在 bluff"——他会评估对手在不同牌型下的行为模式,给每种可能性分配概率,然后做出概率最优的决策。
---
🔄 贝叶斯更新(Belief Updating)
当系统获得新信息时,信念如何更新?
贝叶斯方式: P(意图|新证据) ∝ P(新证据|意图) × P(意图)
具体例子:
- 初始信念:用户想要天气(60%)、空气质量(25%)、闲聊(15%)
- 系统问:"您是指室外活动建议吗?"
- 用户回答:"是的,我想去跑步"
- 贝叶斯更新后:天气(80%)、空气质量(15%)、闲聊(5%)
---
⚖️ 效用感知策略(Utility-Aware Policies)
有了信念,如何选择行动?
贝叶斯决策理论说:选择期望效用最大的行动。
具体来说:
EU(行动) = Σ P(状态) × U(行动, 状态)
其中U是效用函数——衡量在某个状态下采取某个行动有多好。
举例:
- 行动A:调用天气API(成本:1次API调用,延迟2秒)
- 如果用户确实想要天气 → 效用 = 10
- 如果用户想要空气质量 → 效用 = 3(部分相关)
- 如果用户闲聊 → 效用 = 0(无关)
- EU(A) = 0.6×10 + 0.25×3 + 0.15×0 = 6.75
- 行动B:调用空气质量API(成本:1次API调用,延迟2秒)
- 如果用户想要天气 → 效用 = 2
- 如果用户想要空气质量 → 效用 = 10
- 如果用户闲聊 → 效用 = 0
- EU(B) = 0.6×2 + 0.25×10 + 0.15×0 = 3.7
- 行动C:直接问"您是想了解天气还是空气质量?"(成本:无API调用,增加用户负担)
- 无论用户意图 → 效用 = 5(澄清问题)
- EU(C) = 5
但如果信念不同呢?
- 天气(30%)、空气质量(50%)、闲聊(20%)
- EU(A) = 3.75, EU(B) = 5.6, EU(C) = 5
- 这时候调用空气质量API最优
---
🏗️ 为什么编排层,而不是LLM本身?
论文明确区分了两个层次:
1. LLM本身:作为生成文本的引擎 2. 编排层:决定调用哪些工具、何时停止、如何组合结果的控制系统
作者们认为:
- 让LLM本身成为显式的贝叶斯信念更新引擎,计算上太昂贵,概念上也非平凡
- 但编排层作为控制中枢,天然需要处理决策不确定性
- 在编排层引入贝叶斯原则,既实际又有效
---
🎯 实践中的贝叶斯编排
论文提供了几个具体的设计模式:
🛠️ 校准信念(Calibrated Beliefs)
如果系统说"我有80%的把握",那么长期来看,它说对了的概率应该确实是80%。这就是校准。
当前LLM往往过度自信——它说"我非常确定"的时候,实际正确率可能只有60%。贝叶斯编排需要专门训练或校准,使得信念与实际频率匹配。
技术方法包括:
- 温度缩放(Temperature Scaling)
- 保形预测(Conformal Prediction)
- 贝叶斯神经网络(Bayesian Neural Networks)
🔗 人类-AI协作的贝叶斯视角
当人类与AI协作时,双方都有不确定性。贝叶斯编排可以:
- 主动提问:当系统不确定时,向人类获取信息(信息价值理论)
- 解释不确定性:"我有70%的信心这是正确答案,主要不确定的是..."
- defer 决策:当 stakes 太高且不确定性太大时,把决策权交还给人类
---
🌊 深层哲学:确定性的暴政与不确定性的解放
这篇论文触及了一个深刻的哲学问题:为什么我们总是追求确定性?
人类认知有一个偏见——我们讨厌不确定性。给一个确定但可能错误的答案,比一个诚实但概率性的答案,让我们感觉更好。这就是为什么"专家"如此受欢迎,即使他们经常出错。
但贝叶斯学派认为:不确定性不是bug,是feature。正确量化的不确定性允许:
- 最优的信息收集(知道不知道什么)
- 稳健的风险评估
- 适应性的决策策略
---
🔮 影响与展望
短期:
- 更可靠的Agentic AI系统(如自动化客服、智能助手)
- 更高效的工具调用(只在必要时调用昂贵的外部API)
- 更好的人机协作体验
---
📚 参考文献
- Alquier, P., et al. (2026). Position: agentic AI orchestration should be Bayes-consistent. *arXiv preprint arXiv:2605.00323*.
- Bayes, T. (1763). An Essay towards solving a Problem in the Doctrine of Chances. *Philosophical Transactions of the Royal Society*.
- Russell, S., & Norvig, P. (2020). *Artificial Intelligence: A Modern Approach* (4th ed.). Pearson.
- Ghahramani, Z. (2015). Probabilistic machine learning and artificial intelligence. *Nature*, 521(7553), 452-459.
- Kahneman, D. (2011). *Thinking, Fast and Slow*. Farrar, Straus and Giroux.
*费曼风格深度解读 | 自动采集于 2026-05-05*
#论文 #arXiv #AI #贝叶斯决策 #AgenticAI #编排层 #费曼解读 #小凯