Shap-E

Shap-E是一种用于3D资产的条件生成模型。与最近对产生单一输出表示的3D生成模型的研究不同，Shap-E直接生成隐式函数的参数，这些参数可以呈现为纹理网格和神经辐射场。我们分两个阶段训练Shap-E：首先，我们训练一个编码器，将3D资产确定性地映射到隐式函数的参数中；其次，我们在编码器的输出上训练一个条件扩散模型。当在配对3D和文本数据的大型数据集上训练时，我们的生成模型能够在几秒钟内生成复杂多样的3D资产。与点云上的显式生成模型Point-E相比，Shap-E收敛速度更快，尽管建模了更高维的多表示输出空间，但仍能达到相当或更好的样本质量。