利用图像增强技术提升神经渲染方法
这篇论文对合成数据增强技术进行了广泛评估,包括基于真实 3D 图形建模、神经风格迁移、差分神经渲染、生成对抗网络和变分自编码器等生成人工智能技术。对于每一种方法类别,我们关注重要的数据生成和增强技术、广泛的应用范围和具体的用例,以及现有限制和可能的解决方法。此外,我们总结了用于训练计算机视觉模型的常见合成数据集,强调主要特点、应用领域和支持的任务。最后,我们讨论了合成数据增强方法的有效性,并希望通过这篇详细的论文为读者提供必要的背景信息和深入了解现有方法及相关问题。
Mar, 2024
使用不同的数据增强策略对视频进行数据增强,结合现有的半监督学习框架,能够在低标签模式下提高 Kinetics-100/400, Mini-Something-v2, UCF-101 和 HMDB-51 数据集的性能,并在完全监督的情况下证明提高了性能。
Mar, 2021
本文提出了一组图像转换,用作对模型鲁棒性的评估,以及训练神经网络的数据增强机制。这些转换具有现实世界中更可能出现的损坏方式和语义,可以有效提高模型的鲁棒性,并为鲁棒性研究开辟了有前途的方向。
Mar, 2022
本研究提出了一种名为 Aug-NeRF 的增强型神经辐射场模型,它利用鲁棒的数据增强技术来加强 NeRF 的训练,从而提高其在新视角合成和几何重建方面的表现,并且可以从严重受损的图像中恢复场景。
Jul, 2022
本文提出了一种从稀疏多视角图像重建三维场景和对象的新方法,通过利用嵌入在多视角输入中的场景属性,创建精确的伪标签进行优化,而无需任何先验训练。我们的方法通过利用球谐函数来预测场景中点的新辐射,综合考虑所有颜色观察结果,从而提高稀疏视图的表面重建准确性。同时,我们的方法通过代理几何和正确处理遮挡来生成辐射的伪标签,避免了以往的图像变形方法的问题。我们的方法在 DTU 和 Blender 数据集上取得了优越的结果,而无需先前的训练,展示了其在解决稀疏视图重建问题方面的有效性。我们的流程灵活且可集成到其他稀疏视图的隐式神经重建方法中。
Oct, 2023
本研究使用经典方法和现代隐式生成模型对神经影像数据集进行了合成增广,能够 “改善预测 fMRI 模型的质量”,并且在预测认知和行为结果方面得到了较好的性能提升。
Jul, 2019
我们使用深度图像先验网络(DIP)和鲁棒特征提取网络,通过只使用两个图像在目标环境中以一致的方式渲染源片段,实现了在需求背景下插入所需对象的方法。与基准方法(如剪切和粘贴、剪切和粘贴神经渲染、图像协调等)相比,我们的方法不需要配对标记的数据和大量训练数据,通过定性指标进行了比较。
Jan, 2024
本文技术为使用生成模型并结合任务驱动数据增强方法,显式地建模变形场和强化蒙版,用于为监督型深度学习模型训练新的 MRI 心脏分割训练数据,实验结果表明该方法在小样本数据的分割任务中表现优异。
Feb, 2019
本研究探讨了结合实际图片和虚拟对象的增量学习方法,通过少量用户交互的方式,将虚拟对象添加到实际图片中,从而提高物体实例分割模型的性能。通过在 KITTI 2015 和 Cityscapes 数据集上的实验结果表明,增量学习方法可以显著提高实例分割和物体检测模型的泛化能力。
Aug, 2017
通过模拟分布退化,探究数据增强对模型性能的提升作用,研究发现数据增强方法显著改善了模型的性能,但仍存在明显的泛化差距,强调训练集中的特征多样性对于增强模型泛化能力的关键作用。
Apr, 2024