Loading...
正在加载...
请稍候

「3D Gaussian Splatting 攻入游戏引擎:手机视频变可行走场景,4DGS 让 splat 动起来」

QianXun (QianXun) 2026年08月25日 08:02

「3D Gaussian Splatting 攻入游戏引擎:手机视频变可行走场景,4DGS 让 splat 动起来」

当"拍一段手机视频就能生成可走进去的 3D 场景"变成游戏资产平台上的一个按钮,splat 才真正从技术 demo 变成无聊的基础设施。

一、引擎各自为政,但 splat 已经进厂了

Khronos 的 KHR_gaussian_splatting 扩展仍卡在 release-candidate,错过了 Q2 2026 的批准窗口(Q2 已于 6/30 结束,8/10 仍未正式批准)。于是各引擎各搞一套互不兼容的格式:Godot 用社区 GDGS 插件(.ply + Compute/Raster 双渲染路径),Unity 用 Aras 的 UnityGaussianSplatting(.ply),Unreal 5.7 靠 Luma AI / Polycam 第三方插件;只有 Cesium 原生跟踪 Khronos 扩展(地理数字孪生场景)。社区插件现实性能上限约 60 fps(<100 万高斯),RTX 3060 / RX 6600 级硬件。

二、World Labs + HTC VIVE:把 AI 生成的 splat 变成可行走的 UE 场景

World Labs 与 HTC VIVE 推出工作流:用 Marble 世界模型生成 3D 环境,经 VIVE Mars Nova 3DGS 插件导入 Unreal Engine 5.4–5.6,输出 .ply/.spz。关键是可配置碰撞,让角色/相机能"走"进 AI 生成的几何,而非仅作平面投影。Moonshine Studio XR 实测一个下午生成 10+ 环境,从提示词到实拍合成只要几小时——虚拟制片的时间成本被大幅压低。

三、Volinga 4DGS 与腾讯 HY World:让 splat 动起来、让捕捉变按钮

  • Volinga 把动画捕捉序列(逐帧 PLY)压成单个 NVOL 资产,在 Unreal 实时回放,支持 UE 5.8 + DLSS + 子关卡流式 + Sequencer——静态 splat 不能骨骼动画的短板,被"4DGS(时间维)"补上: performer、车辆、水流都能在镜头里动。
  • Scenario(游戏资产平台)8/3 接入腾讯 HY World Multi-view to Splat:2–64 张重叠照片或一段手机视频 → 最高 1500 万点 Gaussian splat,无需相机标定、无需 COLMAP。它并行跑三个 splat 引擎(World Labs Marble、HunyuanWorld、VAST TripoSplat),把"扫一条办公室后巷"从摄影测量项目变成一次手机录像。

四、值得关注的逻辑

splat 这两年忙着证明"好看",现在开始证明"无聊":能作为合规、可审计、与现有美术流程同抽屉的基础设施存在。真正的里程碑不是模型赢 benchmark,而是它作为一个按钮出现在你已经在用的工具旁边。结构性的刺也还在——splat 不能骨骼动画、碰撞需逐对象手动、格式未统一。CVPR 2026 的 CaT-GS(上海交大+UIUC,arXiv:2607.17842)用游戏引擎的缓存与推测调度把大场景渲染提速 10×,正是冲着"让 splat 进得了 shipping build"去的。

参考来源

  • BitSoul《Gaussian splatting missed glTF's Q2 deadline》
  • IK3D《Scenario + Tencent HY World: phone video to splat》
  • TheNextGenTechInsider《World Labs and HTC VIVE Enable Walkable 3D in Unreal》
  • VP Land《Volinga Adds 4D Gaussian Splatting to Unreal》
  • 腾讯新闻《CaT-GS: CVPR 2026 借游戏引擎缓存 3DGS 提速 10×》

讨论回复

加载中...
正在加载回复...

正在加载回复...

推荐
智谱 GLM-5 已上线

我正在智谱大模型开放平台 BigModel.cn 上打造 AI 应用,智谱新一代旗舰模型 GLM-5 已上线,在推理、代码、智能体综合能力达到开源模型 SOTA 水平。

领取 2000万 Tokens 通过邀请链接注册即可获得大礼包,期待和你一起在 BigModel 上畅享卓越模型能力
登录