三维物体生成与编辑
论文地址: Controllable Mesh Generation Through Sparse Latent Point Diffusion Models
背景
数据是目前数字化和AI领域最宝贵的财富之一,但是对于目前的开发者来说,收集数据都意味着极大的成本。所以建立一个高效的生成模型能极大的提高开发者的效率降低生产成本。
生成模型简单来说就是一个概率模型,其学习真实世界的数据分布从而去生成新的数据样本。其中目前主流的图像的生成模型包括stable difussion模型, 其原理主要可以分成两个过程
- 扩散过程: 将原本清晰的数据(可以是声音/图片/点云等)逐步添加高斯噪声,直至其最终成为一个完全的高斯噪声
- 逆扩散: 也就是步骤一的反向过程,也就是将步骤一得到的高斯噪声逐步重新回溯成清晰的数据

而根据stable diffusion的思想的三维物体生成模型主要也分成了两个流派:
- 建立一个2D的扩散生模型,然后融合成3D模型。eg: Dreamfusion, Mag

本文介绍了一种新的三维物体生成模型ControllableMeshGenerationThroughSparseLatentPointDiffusionModels,通过稀疏latent点和扩散过程实现细粒度可控生成,包括位置和特征的扩散,以及Autoencoder的使用。模型允许用户交互式调整形状,甚至进行物体融合,未来方向将拓展到更灵活和精细的结构控制。
最低0.47元/天 解锁文章
24万+





