MMDec, 2023

基于语言的元宇宙检索解决方案

PDF
TL;DR为了解决 Metaverse 搜索困难的问题，本研究提出使用语言来自然描述用户希望发现的 Metaverse 内容，创建了一个名为 Text-to-Metaverse retrieval 的新任务，并收集了一个由 33000 个 Metaverse 组成的数据集。最后，基于对比学习设计和实现了一个深度学习框架，形成了一套完整的实验方案。
metaversesearch enginelanguagetext-to-metaverse retrievaldeep learning
发现论文，激发创造
  • 一个带有阅读理解的大型跨模态视频检索数据集

    提出了一种新的跨模态视频检索数据集 TextVR，它包含了八个场景领域的 10.5k 个视频和 42.2k 个查询语句，并介绍了一种统一的跨模态模型，有效地将文本和视觉语义信息融合来实现视频检索任务。该数据集和我们提出的跨模态检索方法为视频和语言研究领域提供了许多新的技术挑战和洞见。

    May, 2023

  • 元宇宙：可伸缩实时虚拟世界的愿景、架构要素与未来发展方向

    该论文探讨了 Metaverse 的发展和要求，以及构建可扩展、可靠、高效的 Metaverse 系统的技术和未来研究方向。

    Aug, 2023

  • 元宇宙中基于联邦多视图综合的研究

    基于边缘智能和深度学习的多视角合成框架，实现了在元宇宙中无线内容传输的高效计算、存储和通信资源，并通过联邦学习和转移学习，提供了有效的学习过程和快速领域适应性。

    Dec, 2023

  • 元宇宙人工智能：调查

    本文调查了 AI 在元宇宙（metaverse）的基础和发展中所扮演的角色，从自然语言处理，机器视觉，区块链，网络，数字孪生和神经接口等六个技术方面探索了 AI 在元宇宙中的潜力，并介绍了几个使用人工智能的应用，包括医疗保健，制造业，智慧城市和游戏等。

    Feb, 2022

  • 实现边缘计算元宇宙的全面探索：愿景、技术支持和挑战

    该研究综述了基于边缘计算的元宇宙的体系结构，以及如何解决通信和计算的问题，使互操作和沉浸式的体验成为可能，同时探讨了区块链技术对于元宇宙互操作性的作用。

    Mar, 2022

  • 自然语言驱动的车辆检索中连接语言与视觉

    本研究使用基于语言描述的车辆搜索来探索其在实际场景中的潜力，结合最先进的视觉模型和基于 Transformer 的语言模型，重新审视了网络结构设计、训练策略和优化目标，实验结果显示出了优越的性能，并希望为未来车辆检索系统的研究铺平道路。

    May, 2021

  • 语言辅助下的场景检索：我在哪里？

    使用自然语言接口和语境 AI 的研究，探索以自然语言查询来识别 3D 场景图的场景检索方法，并介绍了 Text2SceneGraphMatcher 的学习框架和数据集。

    Apr, 2024

  • 走向普及的语义元宇宙：挑战、方法和机遇

    本次调查重点研究了延续现实（AR）和虚拟现实（VR）用户的无处不在的语义元宇宙的智能和时空特征，包括人工智能（AI），时空数据表示（STDR），语义物联网（SIoT）和语义增强数字孪生（SDT），并详细调查了这四个基本系统组件的代表性技术，以及典型应用案例等。未来无处不在的语义元宇宙的机会包括可扩展性和互操作性，隐私和安全，性能测量和标准化以及伦理考虑和负责任的人工智能。

    Jul, 2023

  • 基于视觉的元宇宙服务语义传播：竞赛理论方法

    建议使用语义通信框架和深度 Q 网络优化资源分配，以实现虚拟现实环境中的角色关联的资源分配，确保用户在 Metaverse 中获得流畅而沉浸的体验。

    Aug, 2023

  • 野外文本生成三维内容调查

    文献调查了最新的文本生成三维内容的方法，并详细介绍了该领域的背景、数据集、评估指标以及不同的三维表示方法。通过对生成流程的分类和优劣势的分析，为进一步探索基于文本的三维内容创建提供了启示，并指出了未来研究的几个有希望的方向。

    May, 2024