spatial audio | BriefGPT - AI 论文速递

关键词spatial audio

搜索结果 - 7

SEE-2-SOUND：零射击空间环境到空间音效
通过 SEE-2-SOUND 引入的零样本方法，将多模式内容生成、神经生成模型和空间音频相结合，可以为高质量视频、图像和互联网动态图像生成空间音频，实现沉浸式体验。
PDFa month ago
基于位置引导的视听空间音频分离
现有的机器学习研究在单声道视听分离方面取得了令人期待的结果。然而，大多数视听分离方法只考虑声源是什么而不考虑其位置。这在虚拟实境 / 增强实境场景中可能成为一个问题，因为用户需要能够区分不同方向上的相似音频源。为解决这一限制，我们将视听分离
PDF8 months ago
AAAIAudioEar：针对个性化空间音频的单视图耳重建
本研究提出了通过单视图图像重建 3D 人类耳形来实现个性化空间音频渲染的方法，并开发了 AudioEar3D 和 AudioEar2D 两个公开数据集，最后通过将重建后的耳形与现成的 3D 人体模型集成，来模拟人的听觉传递函数，从而实现了基
PDFa year ago
CVPR左右分辨：学习视听的空间对应关系
使用自监督学习的方法，提出在音频流和视觉流中，通过匹配空间信息识别声源位置，通过实验得到能够有效训练的模型并通过大规模视频数据集 YouTube-ASMR-300K 进行评估，在音视频任务中得到比监督学习和其他自监督方法更高的性能，并证明了
PDF4 years ago
具有对应分类器的自监督音频空间定位
本文介绍了一种使用自监督网络进行音频空间化的方法，并使用辅助分类器和大规模视频数据集来提高性能，取得了较好的实验结果。
PDF5 years ago
NIPS360° 视频自监督空间音频生成
通过使用端到端可训练的神经网络，我们的方法根据音频和 360 度视频帧的多模态分析，将由 360 度视频相机记录的单声道音频转换为空间音频，并从中分离和定位单独的声源于观看球上，因此通过我们的方法，仅使用 360 度视频和单声道音轨就可以推
PDF6 years ago
频域奇异值分解用于高效空间音频编码
本文提出了一种用于在虚拟现实中更准确地复制和存储高阶环绕声的框架，其中采用了奇异值分解和噪声替代技术，使得频率跨度更大，能实现数据块之间的平滑过渡，并增强了在抛弃高阶环绕声通道时的感知质量，其效果在客观和主观评估中得到了证实。
PDF7 years ago