基于再生的无需训练的文本图像生成模型伪造图像的归因
为了识别最具影响力的训练图像以生成新图像,我们提出了一种新的方法,通过模拟反学习合成图像、增加输出图像上的训练损失,并通过代理遗忘方式找出在反学习过程中具有显著损失偏差的训练图像,并将其标记为有影响力的图像。通过与从头开始重新训练的计算密集但 “黄金标准” 的方法进行评估,我们展示了我们的方法相比之前的方法的优势。
Jun, 2024
对现代文本到图像 (T2I) 扩散模型进行了研究,这些模型可以生成非常逼真和具有创造力的图像。我们提供了广泛的分析,关于哪些推理阶段的超参数和图像修改是可辨认的。我们进一步调查了图像归属所依赖的视觉痕迹,通过扰乱高频细节和使用图像风格和结构的中级表示。我们的分析强调,与以前探索的视觉粒度相比,伪造图像在各个层面上都是可检测且可归属的。
Mar, 2024
本文提出了一种无需更改且与模型无关的图像源头归属方法,该方法通过对图像生成模型进行输入反向工程,即对特定图像的特定模型的输入进行反转来实现。利用逆向工程的重构损失确定图像来源的方法有效地区分了特定生成模型的生成图像和其他图像,包括不同模型生成的图像和真实图像。
May, 2023
本文提出了一种在仅有图像数据集的情况下预训练文本到图像生成模型的新方法,通过检索和优化过程综合生成伪文本特征,可以灵活应用于各种情境和模型,并在实验中表现出显著的效果,GAN 模型在完全监督的情况下得到了 6.78 的 FID,是 GAN 最新的 SoTA 结果。
Oct, 2022
我们通过嵌入人工指纹到生成对抗网络的训练数据中,展示了指纹从训练数据中转移到生成模型的惊人传递性,并证明此解决方案对多种诸如深度伪造检测和归属等任务都有效,且鲁棒性强。
Jul, 2020
通过学习真实图像的自然特征,利用监督对比学习的方法,我们的研究提出了一种探测器,针对虚假图像中的伪像纹理的变化进行检测,并在广泛的实验证明了其在未知伪造技术的泛化和对不同变换的鲁棒性方面的显著优势。
Mar, 2024
通过度量学习的方法,我们提出了一种用于实现开放集场景下合成图像源追溯的技术,该技术通过学习可区分不同生成器的可转移嵌入向量,并通过与已知生成器的学习参考点在嵌入空间中的距离来判定图像的真实性。实验结果表明,我们的方法能够在开放集场景下成功追溯合成图像的源。
Aug, 2023