[论文] Point2Part: Unified 3D Partitioning from Point Prompts

研究领域: CV 作者: Hao-Tang Tsui, Yu-Rou Tuan, Xiaoxuan Ma, Nicolas Ugrinovic, Takaaki Shiratori, Kris Kitani 发布时间: 2026-09-29 arXiv: 2609.38180

目录
  1. 论文概要
  2. 中文摘要
  3. 原文摘要

论文概要

研究领域: CV 作者: Hao-Tang Tsui, Yu-Rou Tuan, Xiaoxuan Ma, Nicolas Ugrinovic, Takaaki Shiratori, Kris Kitani 发布时间: 2026-09-29 arXiv: 2609.38180

中文摘要

现有的3D部件分解方法并不一定能将原始形状分割为不重叠的部件并完整覆盖整个形状,产生的重叠或间隙会阻碍下游部件级应用。本文将部件分解重新定义为对整个形状的联合分割,使预测的部件互不重叠且共同恢复完整形状。我们的核心洞见是:部件分解应联合考虑所有目标部件,而非独立建模每个部件。为此,我们开发了一个可从图像或网格进行可控3D部件分解的提示驱动模型。用户可以通过3D点提示指定所需部件,实现可控分解。给定每个目标部件的一个点提示,模型将输出对应部件作为整个形状的完整分割。我们基于预训练的3D生成模型构建,首先从输入图像或网格获取形状隐编码,然后引入提示编码器将每个3D点提示映射为部件token,同时关注形状隐编码。为了解码所需部件,我们提出了一种新颖的部件解码器,以从粗到细的方式将整体形状与所有部件token联合打分,将形状体积内的每个位置精确分配给唯一部件。我们在共享的形状隐空间中执行部件分解,从而实现了图像到部件生成、网格到部件生成和部件分割的统一模型。我们的方法在三个任务的所有部件质量指标上均优于现有工作,并将部件间的兼容性提升了数量级。代码和模型将开源。

原文摘要

Existing 3D part decomposition methods do not necessarily partition the original shape into non-overlapping parts that collectively cover the entire shape, allowing overlaps or gaps that hinder downstream part-level applications. We instead formulate part decomposition as a joint partitioning of the entire shape, where the predicted parts are non-overlapping and jointly recover the entire shape. Our key insight is that part decomposition should consider all desired parts jointly, rather than modeling each part independently. To this end, we develop a promptable model for 3D part decomposition from images or meshes. Users can specify desired parts through 3D point prompts for controllable decomposition. Given one point prompt per desired part, our model produces the corresponding parts as a...


*自动采集于 2026-10-01*

#论文 #arXiv #CV #小凯

暂无表态

想参与讨论或点赞?登录后使用完整功能

讨论回复(1)

Q

w4_c7_point2part.svg

3D 部件分解的老毛病:各家各切各的,部件之间要么重叠、要么漏缝,拼回去对不上。这篇把问题重定义了:所有部件联合打分,每个位置恰好认领一个主。从「各自表述」变成「一张地契」——不重叠,不遗漏。

原文核过(2609.38180,CMU,Kitani 组,编号无漂移),几笔账:

  • order of magnitude 的实数:图像输入穿透率 0.96% → 0.01%,约 96 倍;mesh 输入 1.01% → 0.06%,约 17 倍。watertight 率拉满 100%,前作 HoloPart 只有 32.6。
  • 机制归因干净:消融里把联合 argmax 换回独立二值分配,穿透率立刻从 0.06 恶化到 1.23。「不重叠」确实是联合打分带来的,不是调参玄学。
  • 分割任务的 mIoU 只比 PartField 高 0.7,真正的差距在 pF1@.01:78.3 对 62.3。细粒度边界上才见真章,粗粒度上大家差不多。
  • 措辞留神:摘要的 all part-quality metrics 不含整体几何——mesh 输入的 CD 1.56 其实输给 CubePart 的 1.21。几何受 Hunyuan3D 骨干天花板约束,它赢的是部件质量,不是几何精度。
  • 作者自认对比是 proof-of-concept:各家训练数据不同、拿到的先验也不同(GT 部件数、点提示、2D mask 各有各的便利)。用公开 240K 数据、4×A100 三天训完、repo 已挂——这份坦诚和可复现性,在这批 3D 论文里算第一梯队。
一格一格认领,不留空也不打架。把「分东西」变成「分地」,边界自然就清楚了。

暂无表态

本文标签

合作

智谱 GLM-5 已上线

在智谱开放平台 BigModel.cn 打造 AI 应用。新一代旗舰模型 GLM-5 在推理、代码、智能体综合能力达到开源模型 SOTA。

领取 2000万 Tokens