本文提出了一种基于 3D 模型合成无限数量的训练图像的方法,以提升目标检测的分类性能。通过估计渲染参数,生成的图像不仅要外观与真实图像相似,而且要在训练目标检测器时使用相同的特征。结果表明,与传统方法不同的是,此方法可显著提高无人机、飞机和汽车检测的性能。
Nov, 2014
本文探讨了使用合成图像训练最先进的对象检测器,特别是针对对象实例检测。我们在实际环境的图像中将纹理对象模型的 2D 图像叠加在一起,以便在各种位置和比例上进行训练。通过这些实验,我们证明了利用现有的对象模型仓库为新对象训练检测器的新机会。
Feb, 2017
本篇论文提出 SyntheticP3D 数据集和 CC3D 方法,结合这两种方法可以实现在只用 10% 的真实数据的情况下,与当前最先进的模型在物体位姿估计方面取得了可与之媲美结果,在采用 50% 的真实数据时还超越了 SOTA 模型 10.4%。
May, 2023
本文提出了一种增强合成图像逼真度的方法,通过卷积网络利用常规渲染流水线产生的中间表示来增强图像。
May, 2021
本研究介绍了一个大规模的合成数据集,该数据集包括来自 4.5k 个室内场景的 40 万张基于物理的渲染图像,研究了不同的渲染方法和场景照明对深度学习算法在表面法线预测、语义分割和物体边界检测三个计算机视觉任务中的影响,并表明,使用这个新的合成数据集进行预训练可以提高所有三个任务的结果。
Dec, 2016
该研究利用领域随机化和对抗生成网络在模拟环境中训练工业电器零件的近实时目标检测器。结果显示,使用合成图像和 GAN 翻译的图像进行训练可以在检测和分类一组工业电器零件中达到超过 0.95 的平均精度。
May, 2018
本文提出一种简单的方法,通过数据合成技术来生成大规模、带注释的数据集,从而避免因缺乏原始数据而导致检测模型性能下降的问题,并表明该方法的使用可以提高模型的性能和泛化能力。
Aug, 2017
通过增加合成训练数据,使得含有 3D CAD 模型的深度卷积神经网络(DCNN)训练数据可以更好地适应目标领域,本文详细分析了在没有低级线索(纹理,姿态和背景)的情况下 DCNN 的学习能力,并表明我们的合成 DCNN 训练方法在几乎没有真实数据的情况下可以在 PASCAL VOC2007 数据集上获得更好的性能,并且可以在 Office 基准测试中的域偏移场景中提高性能。
Dec, 2014
本文提出了一种全新的方法来创造纯合成训练数据,通过利用大量的 3D 背景模型和完全领域随机化的方法得到逼真的背景图像,并使用 “课程策略” 来生成所有前景模型,从而得到最佳的训练样本。使用 64 个商品对象进行实验,表明我们的简单方法可以训练出优于实际数据的检测器。
Feb, 2019
通过结合领域随机化和领域知识,我们创建了一种图像合成流程,用于自动生成训练数据,并在工业应用中对端子条对象检测的综合泛化性能进行研究。结果表明,在经过优化的尺度条件下,RetinaNet 的模型的模拟到现实平均精度的性能差异为 2.69%,而 Faster R-CNN 的性能差异为 0.98%,从而验证了此方法符合工业要求。
Mar, 2024