Jun, 2023

CVPR 2023 UG$^2$+ Challenge Track 2.2：大气湍流下编码目标恢复的第一种解决方案

PDF
TL;DR本文介绍了 VIELab-HUST 团队在 CVPR 2023 UG2+ Track 2.2 中，对经过大气湍流干扰后的编码目标进行图像恢复的高效多阶段框架，并在最终排行榜上获得第一名。
coded target restorationatmospheric turbulenceimage registrationframe selectionlearning-based deblurring
发现论文，激发创造
  • CVPR 2023 UG$^{extbf {2}}$+ 挑战赛 2.1 解决方案：大气湍流下的文本识别

    我们团队 VIELab-HUST 在 CVPR 2023 UG$^{2}$+ 比赛的 2.1 赛道中，通过大气湍流识别文本，使用多级框架、基于清晰度的帧选择算法、区域图像融合和学习性去除伪影方法，成功地恢复了高质量的图像，并获得了第一名的准确度。

    Jun, 2023

  • 利用不确定性学习修复大气湍流下受损图像

    本文提出了基于深度学习的方法，利用蒙特卡罗实验退出的认知不确定性来恢复大气湍流影响下的退化单张图像，并利用估计的不确定性图来指导网络获取恢复图像。

    Jul, 2022

  • 单帧大气湍流抑制：基准研究与一种新的物理启示 Transformers 模型

    本研究提出了一种基于物理启发的转换器模型来处理大气湍流引起的图像失真，利用该模型可以提取动态湍流失真图并恢复无失真图像，并收集了两个现实世界的湍流数据集，用经典数据和一种新的任务驱动度量来进行评估。

    Jul, 2022

  • Turb-Seg-Res：用于大气湍流动态视频的分割 - 恢复流程

    本文介绍了一种用于恢复湍流环境中动态场景视频的首个先分割再恢复的流程。我们利用均值光流和无监督的运动分割方法，在恢复之前对动态和静态场景组件进行分离。经过相机抖动补偿和分割后，我们利用湍流强度统计和基于噪声的程序化湍流生成器上训练的转换模型进行前景 / 背景增强，以实现快速数据集增强。与现有的恢复方法相比，在视频中恢复了大部分几何失真并提高了清晰度。我们公开提供我们的代码、模拟器和数据，以推进从湍流中恢复视频的领域：ripponcs.github.io/TurbSegRes。

    Apr, 2024

  • 可变深度扩散的大气湍流校正

    本文提出了一种基于变分推断框架下的新型深度条件扩散模型来解决大气湍流校正问题，并在综合合成的 AT 数据集上进行了实验，结果表明该提议的框架取得了良好的定量和定性结果。

    May, 2023

  • RPCA 和拟保形映射恢复大气湍流畸变图像

    本文提出了一种新颖的算法来降低由大气湍流引起的几何失真以及时空变化的模糊，该算法首先利用适当的能量函数得到一个清晰度较高的参考图像以及一个包含参考图像的清晰和略微失真图像帧的子采样图像序列，然后通过稳定变形场来稳定子采样图像序列，最后应用鲁棒主成分分析和盲反卷积技术去模糊，融合图像帧，实验表明该方法在恢复图像细节和提高视觉质量方面有效。

    Apr, 2017

  • 一种用于 GT-RAIN 挑战赛 CVPR 2023 Workshop UG$^{extbf {2}}$+ Track 3 的两阶段真实图像去雨方法

    本文介绍了我们团队在 CVPR 2023 UG$^{2}$+ Track 3 GT-Rain Challenge 中的解决方案，提出了一种高效的两阶段框架，利用低秩视频去雨方法生成伪 GT，再加以改进，使用大规模真实雨数据集进行预训练并在伪 GT 上进行微调，最终采用全面的图像处理器模块，我们的整体框架设计精心并能够处理在测试阶段提供的重雨和雾气序列。在平均结构相似性 (SSIM) 上获得第一名，在平均峰值信噪比 (PSNR) 上获得第二名。

    May, 2023

  • 靠各向异性湍流重构静态和动态场景的图像

    本文介绍了一种统一的大气湍流衰减方法，在静态和动态序列中均可使用，并且通过利用一种新的时空非局部平均方法来构建可靠的参考帧，利用几何一致性和锐度度量来生成幸运帧，并通过对盲变焦点扩散函数进行物理约束的先验模型。通过合成和真实长距离湍流序列基于实验结果验证了所提出方法的性能。

    Aug, 2020

  • ConVRT: 在测试时间优化神经视频表征间通过湍流的连贯视频修复

    通过在 CLIP 潜空间中优化自监督方法 ConVRT，结合真实世界湍流条件下的训练模型，提供了一个有效的解决方案来减轻动态视频中的大气湍流挑战。

    Dec, 2023

  • 大气湍流抑制的等变模板配准

    通过模拟光流和引入隐函数模板，我们提出了一种强大的方法来恢复受大气湍流影响的图像的辐照度，该方法在注册中没有使用模板，避免了与模板初始化相关的伪影，并取得了最先进的性能。

    May, 2024