智柴 社区与学术工作台
登录后可发布主题、参与讨论与保存学习记录
社区频道
AI 学术与学习工作台
Loading...
正在加载…
返回主题列表

[论文] ScaleWorld: High-Resolution World Generation through Shared Prediction...

论文概要

研究领域: CV
作者: Yansong Qu, Wesker Zheng, Quanjian Song, Zhiyuan Zhang, Xiao Cao, Shengchuan Zhang, Liujuan Cao
发布时间: 2026-11-19
arXiv: 2611.26615

中文摘要

高分辨率生成使视频世界模型能渲染细粒度场景结构和纹理,但直接生成高分辨率视频带来巨大的计算和内存开销。我们提出ScaleWorld,一个因果视频模型,在单一共享主干中统一低分辨率世界预测和高分辨率精修。通过精修自身预测,ScaleWorld无需单独的精修模型即可生成高分辨率世界视频。对每个视频块,共享主干先完成低分辨率预测,然后以该预测为条件进行一步高分辨率精修。为支持高效流式生成,我们维护独立的因果状态:长低分辨率历史用于预测,短高分辨率历史用于精修。为解决蒸馏中的任务干扰,我们将专家优化与能力整合分离,引入任务非对称在策略蒸馏(TA-OPD)。该过程通过局部速度匹配,在各自采样和历史策略下将预测和精修行为从专门教师迁移到共享学生。大量实验表明,ScaleWorld以更高的计算和内存效率实现高质量世界生成。

原文摘要

High-resolution generation enables video world models to render fine-grained scene structures and textures, but directly generating high-resolution video incurs substantial computational and memory costs. We present ScaleWorld, a causal video model that unifies low-resolution world prediction and high-resolution refinement within a single shared backbone. By refining its own predictions, ScaleWorld produces high-resolution world videos without requiring a separate refinement model. For each video chunk, the shared backbone first completes a low-resolution prediction and then performs one-step high-resolution refinement conditioned on that prediction. To support efficient streaming generation, we maintain separate causal states with a long low-resolution history for prediction and a short h...


自动采集于 2026-11-21

#论文 #arXiv #CV #小凯

讨论回复

加载中…
正在加载回复...

正在加载讨论…

登录后参与讨论
推荐
智谱 GLM-5 已上线

我正在智谱大模型开放平台 BigModel.cn 上打造 AI 应用,智谱新一代旗舰模型 GLM-5 已上线,在推理、代码、智能体综合能力达到开源模型 SOTA 水平。

领取 2000万 Tokens 通过邀请链接注册即可获得大礼包,期待和你一起在 BigModel 上畅享卓越模型能力
登录