现有的神经 3D 表示方法通常分别处理连续表面建模、高效图像合成或针对特定对象的压缩。它们无法同时提供光线追踪所需的显式表面查询,以及能够跨对象预测的结构化输出空间。 我们提出 NeuOctree,这是一种神经显式表示方法,可直接预测光线是否与表面相交及其交点位置,并同步输出法向量与反照率(albedo)。NeuOctree 在稀疏八叉体素(octree voxel)的角点上存储共享特征,并将其插值至连续的局部场中。一个带有循环相交引导采样机制的轻量级解码器会对预测表面附近的每个查询进行细化,从而实现无需网格提取或纹理烘焙的直接表面渲染,并支持开放且非封闭(non-watertight)的几何结构。 相同的八叉树结构既支持紧凑的逐对象优化,也支持共享的八叉树 CNN,后者可直接从彩色点云构建可渲染资产,而无需逐对象拟合。 在七种网格与四种存储预算下,NeuOctree 在 28 次对比中的 24 次取得了最低的位置误差,同时保持了具有竞争力的法向精度,并在联合几何-外观重建方面显著优于 N-BVH 和 VQAD。该前馈模型仅需 0.05 秒即可构建表示,并能在无需重新训练的情况下实现从 Objaverse 到 ShapeNet 的迁移。 我们进一步展示了光线追踪渲染与图像条件生成能力,证明 NeuOctree 为神经推理与直接表面渲染提供了一个统一的输出空间。代码开源地址:this https URL。
NeuOctree:基于稀疏八叉树的神经显式3D表面表示
文章来源:arXiv Graphics
【本文结束】
如需转载,请务必注明出处:glTFs
相关阅读
《戴帽子的猫》CG动画导演谈视觉设计与故事扩展
DNEG Animation负责制作,Erica Rivinoja与Alessandro Carloni联合执导。两位导演阐述了如何将原著短篇扩展为长片,通过原创角色和全新视觉风格,为现代观众呈现充满童趣与想象力的改编作品。
# Trajeform:人群数据嵌入
人群仿真旨在生成丰富、自然且与周围环境相适应的智能体行为。机器学习的最新进展使得此类行为模式能够直接从轨迹数据中学习,从而使仿真模型能够捕捉日益复杂的人群动力学特征。然而,这些系统的能力仍然高度依赖于训练阶段所使用的数据类型及其多样性。 在评估人群仿真器对真实数据集的泛化能力时,大多数现有指标主要关注轨迹层面
UniffordInteractor:基于统一功能推理的人机与多物体交互生成
针对现有方法在复杂多物体交互场景中的局限,提出UniffordInteractor框架。该框架利用微调的3D多模态大模型进行统一物体中心的功能预测,并通过分层自回归生成实现逼真的长时序人机与多物体交互,实验表明其性能超越当前最先进方法。
MG-CD-MPM:基于强化学习的多态材料灵巧操作物理模拟
提出 MG-CD-MPM 模拟器,通过局部化损伤求解与双向工具耦合,实现软体、脆性及粘塑性等多态材料的实时大变形模拟。该 Gym 兼容环境支持在线强化学习,成功演示了切割、挖掘等操作任务。
基于视觉语言模型与优化的城市3D植被布局生成方法
该研究提出一种在3D城市场景中自动放置植被的新方法。利用条件视觉语言模型生成俯视图,结合CMA-ES优化算法调整植物尺度与资产替换,并通过阴影和声学代理模型评估目标函数,实现兼具美学与功能性的城市景观布局生成。
HairDeck:从单图生成可动画化风格化发卡的扩散模型
HairDeck提出基于集合扩散Transformer,将发卡视为独立Token并行去噪,从单张图像直接生成发卡几何与弹簧骨骼链。该方法在CHaRM测试集上Chamfer距离降低44%,速度提升33倍,显著优于现有自回归及串状方法,输出可直接用于下游流程的可动画资产。
暂无评论,快来抢沙发吧~
