基于扩散模型的 HEVC 压缩视频质量增强方法
使用扩散模型的预测能力,在解码器中将多个神经压缩帧转换为连续的视频帧,以实现极端视频压缩,同时考虑感知质量指标,从低比特率下的位每像素(bpp)为 0.02 开始实现视觉上令人满意的重构,结果表明该方案比 H.264 和 H.265 等标准编解码器在低比特率领域具有更好的效果。
Feb, 2024
本研究提出了一种 QE-CNN 方法来增强 HEVC 视频的质量,该方法通过学习 QE-CNN-I 和 QE-CNN-P 模型分别降低 I 和 P 帧的失真,同时进一步提出了 TQEO 方案来控制 QE-CNN 的计算时间以满足时限要求并最大化质量增强效果。
Sep, 2017
通过设计自信度基于的特征重建方法和周期性补偿损失,本文提出了一种新颖的高视觉保真度学习视频压缩框架 (HVFVC),以解决学习视频压缩中的重建问题和优化缺陷,实现了出色的感知质量,并仅需占最新 VVC 标准的 50% 比特率。
Oct, 2023
本文提出了一种分层学习视频压缩(HLVC)方法,其具有三个分层质量层和一种重复增强网络。我们通过一种图像压缩方法压缩第一层帧,并使用这些帧作为参考来压缩相对高质量的第二层。然后,使用提出的单运动深度压缩(SMDC)网络压缩具有最低质量的第三层。在我们的 HLVC 方法中,分层质量有助于编解码效率,并且最终结果在 PSNR 和 MS-SSIM 方面优于 x265 的 “低延迟 P(LDP)非常快” 模式。
Mar, 2020
我们提出了一种 ML-based 的视频编码算法,通过评估不同分辨率和基于商业编解码器的标准视频压缩测试集发现,在低延迟模式下相对于 HEVC/H.265, AVC/H.264 和 VP9,我们的算法通常产生更小的代码。并且,我们的方法不会出现图块失真和像素化,可以产生更加视觉上令人愉悦的视频。
Nov, 2018
利用扩散模型在图像压缩领域具有潜力,能够在极低码率下产生逼真且详细的重建结果。本研究提出了一种将扩散用于去除量化误差,以恢复传输图像潜在信息的去噪方法,相较于之前的方法,我们的方案只需要进行不到 10% 的扩散生成过程,并且无需对扩散模型进行架构更改,能够有效利用基础模型作为强大的先验,并在定量写实度指标上优于之前的方法,同时经验证明我们的重建结果在质量上也得到了最终用户的认可,并且即使其他方法使用两倍的比特率,我们的方案依然具备优势。
Apr, 2024
基于实时深度学习的 H.264 控制器通过动态估算最优的编码器参数来维持视频质量,并在最小化压缩视频的平均比特率的同时实现高达 2.5 倍的带宽使用改善,且非符合概率低于 10^-2。
Nov, 2023
本文提出了一种新的框架,利用视频压缩的低延迟配置和上下文自适应视频融合方法,提高 BasicVSR ++ 方法的质量,已在 NTIRE22 挑战中得到验证,并在定量指标和视觉质量方面与之前的方法相比均有所提高。
Feb, 2023
本文提出了一种基于卷积神经网络的后处理算法用于高效视频编码,相较于 HEVC 基线平均比特率减少了 4.6%,并在实现更高的比特率降低,更低的内存成本和更快的计算速度方面优于以前研究的网络。
Aug, 2016
通过使用条件扩散模型,本文展示了它作为解码器时在生成式压缩任务中的良好结果,同时通过采样方法,它们还允许在解码器端基于压缩表示创建新的失真和感知之间的权衡点。
Mar, 2024