Jan, 2024
SpecRef: 一种快速训练免费的特定参考条件下的真实图像编辑基准
SpecRef: A Fast Training-free Baseline of Specific Reference-Condition Real Image Editing
Songyan Chen, Jiancheng Huang
TL;DR基于大规模扩散生成模型的文本条件图像编辑引起了工业界和研究界的关注。现有方法大多是非参考编辑，用户只能提供源图像和文本提示，然而这限制了用户对编辑结果特征的控制。为增加用户的自由度，我们提出了一个名为特定参考条件的真实图像编辑任务，使用户能够提供参考图像进一步控制结果，例如用特定物体替换对象。为了实现这一目标，我们提出了一种名为 SpecRef 的快速基准方法。具体而言，我们设计了一个特定参考注意控制器来融合参考图像的特征，并采用掩码机制来防止编辑和非编辑区域的干扰。我们在典型的编辑任务上对 SpecRef 进行评估，并展示其能够达到令人满意的性能。源代码可在此 https URL 获取。