MMAug, 2023

大都会中的异构 360 度视频：差异化强化学习除法

PDF
TL;DR该论文提出了一个新颖的服务质量模型，用于具有不同帧率和晕动感要求的异构 360 度视频。我们使用自设计的差异化深度强化学习算法，采用帧槽结构和逐帧优化的方法进行研究。我们设计了两种结构 SIDO 和 MIDO，在这种异构场景中进行了广泛的实验以证明其有效性。
advanced video technologiesmetaverse360-degree videosquality of service modeldeep reinforcement learning algorithms
发现论文，激发创造
  • 面向用户的异构行为深度强化学习在无线网络下的元宇宙虚拟现实中的应用

    本文基于虚拟现实技术和 Metaverse 的背景，针对多用户场景下，提出了一种基于 DRL 算法的用户中心多通道帧生成和传输的方法 UCHA，以提升用户体验。

    Feb, 2023

  • 元宇宙中基于联邦多视图综合的研究

    基于边缘智能和深度学习的多视角合成框架，实现了在元宇宙中无线内容传输的高效计算、存储和通信资源，并通过联邦学习和转移学习，提供了有效的学习过程和快速领域适应性。

    Dec, 2023

  • 适应视口的 360 度可导航视频传递

    本文介绍了一种针对头戴显示器的多视点自适应 360 度视频流系统，实现了在提供沉浸式体验的同时降低带宽的浪费。研究表明铰接映射的布局是比较适合这种技术的。

    Sep, 2016

  • 基于 MADRL 的 360° 视频流媒体自适应与多视点预测

    提出了一种多模态时空注意力转换器来生成多个视点轨迹，基于多视点预测的多智能体深度强化学习 (MADRL) 的自适应比特率流媒体算法，用于在不同的网络条件下最大化不同的体验质量 (QoE) 目标，实验结果显示与现有的自适应比特率方法相比，提出的方法可将定义的 QoE 度量改善高达 85.5%。

    May, 2024

  • 用户中心深度强化学习在无线网络元宇宙中的虚拟现实应用

    本文介绍了一种基于多用户虚拟现实计算卸载的深度强化学习方法，可在符合多种要求和约束条件下找到近乎最优解，以此来探索 Metaverse 等虚拟世界的社交互动特点。

    Mar, 2023

  • 基于瓦片的全景视频流适应性流媒体技术在虚拟现实中的视区感知应用

    本文介紹了一個從編碼到顯示的新型端到端流媒體系統，用於傳輸 8K 分辨率的 360 度視頻，並使用頭戴顯示器提供增強的虛擬現實體驗，其主要貢獻在於瓷磚、MPEG-DASH 標準的集成和視口感知的比特率級選擇。

    Nov, 2017

  • 基于深度强化学习的 6G 无线通信下移动边缘计算与 AI 启用的 Web3 Metaverse

    该研究提出了一种全新的质量服务（Quality-of-Service）模型，利用深度强化学习方法来找到多用户社交中接近最优的信道资源分配。全面的实验证明采用该质量服务模型可以提升整体社交体验。

    Dec, 2023

  • 虚拟现实视口预测中的鲁棒和资源有效的机器学习辅助

    本文提出了一种基于元学习和机器学习的视口预测范式，旨在减少 360 度全景视频的资源消耗，提高视口预测的鲁棒性，该模型通过迅速适应每个用户，可以显着提高预测准确性。

    Dec, 2022

  • 学习短片制作：如何将 360 度视频转为 2D 格式进行无缝浏览

    在 360 度视频中，虚拟电影技术被用于自动控制镜头，改善手动控制的体验，并通过提出的更高效的算法，使得推广虚拟电影成为可能。

    Mar, 2017

  • 三维感知视频生成

    本文探讨了生成对抗网络 (GANs)，将神经隐式表示与时间感知区别器相结合，发展了一种 GAN 框架，仅用单目视频合成了 3D 视频，能够学习可分解的 3D 结构和运动的丰富嵌入，实现了新的时空渲染视觉效果，同时也能产生与现有 3D 或视频 GANs 相媲美的图像质量。

    Jun, 2022