本文介绍一种基于自动编码器和潜变量表示的神经压缩方法,并探讨了在训练后适应单个视频、发送模型更新以及重新调整参数等方面的改进措施。结果表明,相较于仅调整编码器的方式,对整个模型进行调整可以提高图像在视频中的压缩性能约 1 dB。
Jan, 2021
本文研究深度神经网络在领域迁移后的压缩问题,提出一种基于低秩矩阵分解的压缩算法,结合目标域的激活统计信息,在不降低模型性能的情况下将模型参数量压缩至传统技术的 5-20%。
Sep, 2017
本文提出一种基于学习的压缩域分类框架,可以在不同比特率下利用压缩域潜在表示执行视觉识别,包括引入轻量级注意模型的新型特征适应模块,它可以自适应地强调和增强提取的逐通道信息的关键特征;还介绍了一种适配训练策略,使用预训练的像素域权重。与使用像素域完全解码的压缩图像以及未压缩图像相比,研究结果表明,提出的压缩域分类模型不仅可以显著优于现有的压缩域分类模型,而且在计算效率方面也可以获得与使用完全解码图像的像素域模型相似的精确度结果。
May, 2023
用基于深度神经网络的质量敏感位速率自适应算法取代传统神经网络的定长空间位速率压缩算法,通过切块神经网络结构实现空间上下文预测,最终量化定量(PSNR)与定性(主观评估)评价得分优于其他基准模型。
Feb, 2018
本研究探讨了内容自适应优化对神经图像压缩表现的影响,介绍了一种迭代过程,该过程使得潜在表示适应特定内容,同时保持网络和预测模型的参数固定。实验结果表明,与特定结构的模型相比,这种方法能够增加速率 - 失真性能,同时不需要额外传输模型参数更新数据,可用于改进预先训练的网络在不同视觉外观或分辨率的不同内容上的表现。
Jun, 2019
通过在解码器中插入适配器模块,我们解决了将预先训练的模型适应于多个目标领域的问题,并使用门网络从适配器中优化地融合贡献,实现了在目标领域上改进的码率失真和编码效率,同时在源领域上没有额外代价。
Apr, 2024
通过我们的速率 - 失真计算(RDC)研究,我们展示了虽然浮点运算(FLOPs)和运行时间对于准确地比较神经压缩方法都是不足够的,但我们还是找到了一种新型神经压缩架构,其在计算要求和 RD 性能之间具有最佳的实证权衡。
Sep, 2023
本文提出了一种选择性压缩方法来进行基于深度学习的可变速率图像压缩,该方法通过生成 3D 重要性映射并调整该映射来确定不同目标质量水平的压缩所需的基本表示元素。实验结果表明,该方法可以获得与单独训练的参考压缩模型相当的压缩效率,并可以减少解码时间。
Nov, 2022
通过使用条件扩散模型,本文展示了它作为解码器时在生成式压缩任务中的良好结果,同时通过采样方法,它们还允许在解码器端基于压缩表示创建新的失真和感知之间的权衡点。
Mar, 2024
通过使用迭代扩散模型进行解码,同时结合全局文本图像描述来提供额外的上下文,我们的模型在极低比特率下能够重建逼真的图像,其视觉质量不仅与以往方法相媲美,而且对比特率的依赖性更低。
Oct, 2023