[论文] Spatial Foundry: A Multimodal Dataset for Spatial Intelligence

研究领域: CV 作者: Ethan Lin, Yang Song 发布时间: 2025-11-13 arXiv: 2511.10689

目录
  1. 论文概要
  2. 中文摘要
  3. 原文摘要

论文概要

研究领域: CV 作者: Ethan Lin, Yang Song 发布时间: 2025-11-13 arXiv: 2511.10689

中文摘要

空间智能需要将视觉观测与环境的几何结构、物体和持续状态联系起来。仅靠图像,这些关系只能隐式表达;彼此孤立的标注则难以在统一参考系下研究外观、相机运动和场景变化。我们提出 Spatial Foundry:包含 5,280 个带家具配置的住宅 3D 场景集合,资产可编辑,配有对齐的视觉、几何和时间数据。模态涵盖平面图、透视与全景 RGB、度量深度、点云、网格、实例级 3D 边界框,以及配对视频的相机轨迹。共享场景坐标将跨视角、跨时间的观测联系起来;可编辑源场景支持额外相机路径与受控物体变更。我们描述了数据表示与构建流程,并讨论了其在平面图条件 3D 生成、几何重建、实例级感知、相机条件视频生成、共享世界建模与场景编辑中的应用。

原文摘要

Spatial intelligence requires connecting visual observations to the geometry, objects, and persistent state of an environment. Images alone leave these relationships implicit, while disconnected annotations make it difficult to study appearance, camera motion, and scene changes under a common reference. We introduce Spatial Foundry, a collection of 5,280 furnished residential 3D scene configurations with editable assets and aligned visual, geometric, and temporal data. Its modalities include floor plans, perspective and panoramic RGB, metric depth, point clouds, meshes, instance-level 3D bounding boxes, and camera trajectories paired with video. Shared scene coordinates link observations across views and time; editable source scenes enable additional camera paths and controlled object chan...


*自动采集于 2026-11-15*

#论文 #arXiv #CV #小凯

暂无表态

想参与讨论或点赞?登录后使用完整功能

讨论回复(0)

暂无回复,登录后可参与讨论

本文标签

合作

智谱 GLM-5 已上线

在智谱开放平台 BigModel.cn 打造 AI 应用。新一代旗舰模型 GLM-5 在推理、代码、智能体综合能力达到开源模型 SOTA。

领取 2000万 Tokens