Sep, 2023

高感知质量的无线图像传输与去噪扩散模型

PDF
TL;DR通过深度学习的联合源信道编码（DeepJSCC）和接收端的去噪扩散概率模型（DDPM），我们考虑在噪声无线信道上的图像传输问题，并在实际有限块长度范围内关注感知失真权衡，其中独立的源编码和信道编码可能高度亚最优。我们引入了一种利用目标图像的范围 - 零空间分解的新方案。我们经过编码传输图像的范围空间，并采用 DDPM 逐步改进其零空间内容。通过大量实验，我们证明与标准 DeepJSCC 和最先进的生成学习方法相比，重建图像的失真和感知质量有显着改进。我们将公开共享我们的源代码以促进进一步的研究和可重复性。
image transmissionnoisy wireless channeldeep learning-based joint source-channel codingdenoising diffusion probabilistic modelperception-distortion trade-off
发现论文，激发创造
  • 基于扩散辅助的高逼真无线图像传输的联合源信道编码

    利用预训练的文本到图像扩散模型，提出了一种名为 DiffJSCC 的新框架，用于增强信道传输的图像的逼真度，通过利用空间和文本特征以及信道状态信息（如信噪比）对预先训练的稳定扩散模型进行微调，实验证明该方法在感知度量方面显著优于常规方法和以往的深度联合源信道编码方法，尤其在信道条件差和带宽有限的情况下表现出色，即使在 1dB 信噪比下，DiffJSCC 也能以每像素不到 0.008 个符号的速度对 768x512 像素的 Kodak 图像进行高度逼真的重建。

    Apr, 2024

  • 深度联合源通道编码的带宽灵活图像传输

    通过使用基于深度学习的通信方法，我们提出了一个用于适应带宽传输图像的方案，并考虑由接收器聚合以提高重建质量的图像逐层传输的情形。我们提出了 DeepJSCC-l，这是第一个为实际信息源和信道开发和测试的多描述 JSCC 方案，并具有与数字渐进传输方案相媲美的性能。

    Sep, 2020

  • 语义图像传输的生成联合源 - 信道编码

    本文提出了两种基于深度生成 (deng) 模型的联合源信号编码方案，分别是 InverseJSCC 和 GenerativeJSCC。通过介绍一种基于修改 DeepJSCC 的逆问题方法和一种端到 dalou 训练的 JSCC 方法，本文显示了这些方法在视觉感知质量方面的改进。

    Nov, 2022

  • 无线图像传输的深度联合源通道编码

    该研究提出了一种基于卷积神经网络的自编码器的无线图像传输联合源和信道编码技术，可提高信噪比和信道带宽性能，在慢 Rayleigh 衰落信道中具有噪声鲁棒特性。

    Sep, 2018

  • 深度联合源通道编码的图像逐步完善

    本文提出了基于深度学习的通信方法，用于通过无线信道逐步改进图像质量。结果表明，相对于现有数字通信技术，该方法在低信噪比和低带宽情况下具有更好的性能，且可以成功学习分层表示，达到接近单层方案的性能。

    Mar, 2019

  • 无线图像检索的深度联合源通道编码

    该研究使用深度神经网络对图像进行压缩，提出了基于特征向量直接映射信道输入的联合源通道编码方法，提高了端到端准确性，加快编码操作，适用于受电力和时延限制的物联网应用。

    Oct, 2019

  • 深度联合源 - 通道编码与反馈的图像编码

    通过自编码机（autoencoder）我们提出了一种新的 JSCC 方案，将无噪声或有噪声的信道输出反馈引入到传输系统中，以提高接收端的重建质量或平均延迟，并展示了现代机器学习技术在通信领域中的应用。

    Nov, 2019

  • 硬件受损通信系统的去噪扩散概率模型：朝着无线生成 AI

    本文提出了基于去噪扩散概率模型的无线通信方案，旨在解决实际应用中的硬件损伤、信道失真和量化误差等非理想因素，提供低信噪比下的网络韧性、对不同硬件损伤水平和量化误差的近不变重建性能，以及抵抗非高斯噪声的强大分布外表现，并通过余弦相似度和均方误差（MSE）评估与传统深度神经网络（DNN）接收机相比的超过 25 dB 改进的重建性能。

    Oct, 2023

  • 自适应速率控制下的无线图像传输深度联合源通道编码

    本文提出了一种新的适应性深度联合源通信信道编码方案，支持多速率传输，使用单个深度神经网络模型，并通过政策网络动态控制速率，该方案是首个能够使用单个网络模型自动调整速率的深度联合源通信信道编码方案。

    Oct, 2021

  • 多用户信道下的分布式深度联合源信号与信道编码

    本研究研究了在噪声的多信道上使用深度联合源频道编码进行分布式图像传输。研究表明，在有限块长度制度下，我们引入了一种新型的联合图像压缩和传输方案，其中设备以非正交方式发送其压缩图像表示。在实验中，相比于使用现有深度联合源频道编码方法的正交传输，特别是在低带宽比下，我们展示了重构图像质量方面的显著改进。

    Nov, 2022