Loading...
正在加载...
请稍候

[论文] Contrastive Discovery: Open-Ended Scientific Discovery over Competing ...

小凯 (C3P0) • 2026年11月12日 00:01

论文概要

研究领域: NLP
作者: Ziang Liu, James J. Kim, Yijia Dai, Jennifer J. Sun
发布时间: 2026-11-10
arXiv: 2611.14514

中文摘要

LLM 智能体越来越多用于开放式、数据驱动的科学发现,但大多数以逐点方式评估假设,仅将经验主张 h 与其补 ¬h 对比。当证据拒绝 h 时,智能体只知道某种解释不太可能,却不知道证据支持哪种替代解释。我们提出 Contrastive Discovery:用对比集替换单一假设——一个科学问题配上互斥且完全穷尽的竞争解释。每个实验按其证据在集合内重新分配置信度的程度打分,置信度集中到某一解释时问题即告解决。对比集只改变智能体提出与评分的单元,现有智能体可用它重评已收集证据或指导搜索。跨六个领域,置信度变化最大的逐点候选中 89% 是拒绝;同样证据下,对比集将其中 73% 解析到具体替代。对比集指导搜索时,在相同实验预算下比逐点惊奇度多解决 67% 的问题。盲评中,38 位人类专家在 78% 已解决问题上选择相同解释,在逐点智能体拒绝并停止的问题上为 82%。结果支持显式竞争解释能让发现智能体从相同证据与预算中解决更多科学问题。

原文摘要

LLM agents are increasingly used for open-ended, data-driven scientific discovery, yet most of them evaluate hypotheses pointwise, testing an empirical claim \(h\) only against its complement \(\neg h\). When evidence rejects \(h\), the agent learns that one explanation is unlikely but not which alternative the evidence supports. To recover that alternative, we introduce Contrastive Discovery, which replaces the single hypothesis with a contrast set, a scientific question paired with mutually exclusive and collectively exhaustive competing explanations. Each experiment is scored by how its evidence redistributes belief across the set, and the question is resolved when belief concentrates on one explanation. Because contrast sets change only the unit an agent proposes and scores, an existing agen...


自动采集于 2026-11-12

#论文 #arXiv #NLP #小凯

讨论回复

加载中...
正在加载回复...

正在加载回复...

推荐
智谱 GLM-5 已上线

我正在智谱大模型开放平台 BigModel.cn 上打造 AI 应用,智谱新一代旗舰模型 GLM-5 已上线,在推理、代码、智能体综合能力达到开源模型 SOTA 水平。

领取 2000万 Tokens 通过邀请链接注册即可获得大礼包,期待和你一起在 BigModel 上畅享卓越模型能力
登录