异质协作体现出的紧急沟通解释

Oct, 2021

Interpretation of Emergent Communication in Heterogeneous Collaborative Embodied Agents

Shivansh Patel, Saim Wani, Unnat Jain, Alexander Schwing, Svetlana Lazebnik...

TL;DR本论文通过介绍一个协作的多物体导航任务 CoMON，并研究不同通信机制，分析它们的通信模式，证明了学习出来的通信可以落实于 Agent 观察和环境的 3D 结构。

Abstract

Communication between embodied ai agents has received increasing attention in recent years. Despite its use, it is still unclear whether the learned communication is interpretable and grounded in perception. To study the grounding of emergent forms of communication, we first introduce

embodied ai agents learned communication grounded perception multi-object navigation task heterogeneous agents

发现论文，激发创造

学习合作：多智能体导航中的新兴通信

本研究探讨了人工智能代理的紧急沟通现象以了解其语言演化，发展出能够与人类有效沟通的人工智能系统，发现代理人在不同网格环境下进行合作导航任务时，学习了解释性的沟通协议，使其能够高效地解决任务，分析了代理人的策略，发现紧急信号在空间上聚集在一起，信号指向特定的位置和空间方向，如 “左”，“上” 或 “左上房间”，使用代理人群体，我们展示了出现的协议具有基本组合结构，从而表现出自然语言的核心属性。

Apr, 2020

探索具有体现多智能体的零射击新兴通信

本研究探讨在多智能体环境中，利用关节执行通信的新型通信模式，解决现有符号通信模式不能够解决的一些问题，提出具体的训练改进方案，实现了对新伙伴的协议推广。

Oct, 2020

通过协商实现的新兴沟通

通过研究 negotiation environment 中不同类型 agent 之间的交互过程，以及不同类型 agent 是否会进行 cheap talk，作者探讨了 cooperation 在语言产生中的必要性问题。

Apr, 2018

多智能体通信中的突现式翻译

本文提出了一种基于多模态视觉的交互式语言学习模型，无需平行语料库即可实现语言的相互理解和翻译，并表明使用该模型的多语言社区实现了更好和更快的翻译结果。

Oct, 2017

关于新兴沟通在多智能体强化学习中的社会学习作用

本文提出了一种基于信息瓶颈的无监督方法，用于探索非常稀疏的多智能体增强学习中的社交通信情境，该方法可以捕捉引用复杂性和任务特定效用，并开发出一种自然语言灵感的信息组成的词汇表，该词汇表独立于一组紧急概念，使其具有极小的位数，同时可以使用社交影子的观测构成，并通过社交影子来学习通信策略。

Feb, 2023

工具小姐和水果先生：智能体对物体可供性学习中的紧急交流

从人的语言进化角度出发，研究深度网络代理在共同任务中的交流方式，发现当存在自然物体特征和参与者之间存在全对称关系时，代理可以通过真正的双边引用通信解决共同任务，但代理之间会有多重表达方式，导致全对称并不足以促使共同语言的形成。

May, 2019

多模态多步骤指代博弈中的紧急对话

通过使用多模式和多步骤的指示性游戏，探讨了 AI 与 AI 之间的内部通信方式的变化，研究发现，较为逐渐的信息交换可以促进更好的预测和提高产生的通信协议的效率。

May, 2017

走向更贴近人类的 AI 交流：紧急交流研究综述

发展人机互动中准确使用自然语言的机器，重要性愈发突显。本文回顾了近年来涉及新兴交流（Emergent communication）的文献，分析了其公共特性、两个子类别和挑战，并强调了多元视角和专业知识在领域中的重要性，主张研究者们共同努力以寻找共同问题的多种解决方案，加深对人类交流的理解，从而发展出更能准确使用自然语言的机器。

Aug, 2023

以您的语言沟通：可解释性新兴交流中的空间关系

该论文展示了代理可以在其观察中进行空间关系的沟通，结果表明代理能够发展出能够表达其观察各部分之间关系的语言，并在需要这种沟通的参考游戏中实现 90% 以上的准确性。该论文还展示了这种新兴语言是可解释的，而且与人类的交流和解释成功完成的测试结果证实了这一点。

Jun, 2024

增强现实中的紧急沟通

通过训练两个代理器，我们提出了一种紧跟数字孪生和元宇宙潮流的移动增强现实系统，并在其中嵌入一种新型的语义通信框架，可以通过极小数据量的消息进行抽象视觉数据的传达和交流，从而在增强现实中提高通信效率。

Aug, 2023