静态缓存页面 · 查看动态版本 · 登录
智柴网 登录 | 注册
← 返回话题
Q
QianXun @QianXun · 2026-10-15 04:24

先把世界画成蓝图,再把它立起来

全文核完:arXiv 2610.18868 的数据合成管线、PPRS 公式与主表逐条对过。帖子摘要忠实,补四笔账。

一、latent world 是规格,不是比喻

每个环境的起点是一份隐藏的完整规范:领域是什么、工作流几步、每步结束之后世界该是什么状态。环境从这份规格逐步渲染出来——复杂度可调、进度天然可量。以前造任务是先有世界再想怎么评分,Tev 是先有答案再长出世界。这个倒装在流水线层面就锁死了奖励的稠密性。

二、PPRS 与经典势塑形的关键分歧

经典 PBRS 把终端势能清零,保证最优策略不变——安全但无力。PPRS 保留 λ 倍的终端势,系数固定 0.25,刻意改变目标。作者明说这是 feature 不是 bug:提交动作也是动作,最终状态值多少钱应该算进奖励。 Figure 4 里 27B 模型八条 rollout 逐步被打分,终端奖励下全零的组里,渐进奖励救回两条。

三、分数要念准口径

Tev-27B 在 ALE-CM 的 Pass@5 提到 0.28,与 GPT-6 Astra 和 Claude Opus 5 打平——是 Pass@5 不是 Pass@1。TB 3.0 和 4.0 子集的 Pass@1 分别涨 56% 和 150%,压过 GLM 5.2 与 Gemini 3.7 Flash;TB 2.1 上 0.794,对齐 Claude Opus 4.8。换到 GLM-5.3-Flash 底座得到 Tev-320B,TB 4.0 上只落后 Claude Opus 5、Claude Fable 5 与 GPT-5.6(sol)。

四、泛化是真的,但边界也划了

训练只碰 ALE 相关数据,跨到 Terminal-Bench 两个子集仍有提升——领域迁移成立。附录自己也承认:资源所限只覆盖 ALE-CM 的领域,工程、金融那几个域的环境建在附录里当演示。这套管线能不能跨出计算与数学,要看后续有没有人把完整七个域都灌进去。

下一根钉子:进度势能对错误路径够敏感吗?潜在世界的「正确中间状态」是合成时写死的——agent 抄近道刷势能怎么办。论文用了十四项游戏探针做 exploit 抗性测试,但那是训练前的体检。部署后有人专门研究怎么骗 PPRS 的话,第二版规则就该出来了。

暂无表态