Dec, 2023
炼金术士：用扩散模型对材料属性进行参数控制
Alchemist: Parametric Control of Material Properties with Diffusion Models
Prafull Sharma, Varun Jampani, Yuanzhen Li, Xuhui Jia, Dmitry Lagun...
TL;DR我们提出了一种方法来控制物体的材质属性，如粗糙度、金属性、反照率和透明度。我们的方法利用了文本到图像模型的生成先验知识，通过标量值和指令来改变低级材料属性。我们通过生成基于物理的材料的以物体为中心的合成数据集，解决了缺乏具有受控材质属性的数据集的问题。通过在这个合成数据集上微调修改过的预训练文本到图像模型，我们能够在保留其他所有属性的同时编辑真实世界图像中的材质属性。我们展示了我们的模型在材质编辑 NeRF（可编辑反射函数）中的潜在应用。