- 多模态大型语言模型中信息存储和传递的理解
理解变压器模型中的信息存储和传输机制对推进模型理解的进展至关重要,最近的研究关注了大型语言模型(LLMs)中的这些机制,揭示了信息存储在模型参数中的方式以及特定提示下信息如何流入和流出这些参数,然而,这些研究尚未扩展到多模态大型语言模型(M - 面向基于人群的 SHM 的信息传输策略选择决策框架
提出了一个基于期望信息传递价值的决策框架,通过优化信息传递策略,避免负面影响,以降低运营成本并提高安全性,以解决结构健康监测系统中标记训练数据有限的问题。
- 文图信息传输消化效率的成分因子提取
本研究提出了 “信息消化” 的概念,并设计了一种评估模型,使用分层因子分析提取了构成消化能力的因子。
- ICLR基于相关信息最大化的仿生神经网络进行相关源分离
提出一种基于神经网络的生物学可行模型,它通过利用源域信息提取相关的潜在因素。该模型采用最大相关信息转移作为分离目标,遵循输出限制约束,从而具有本地学习规则。使用不同的源域选择,可灵活地建模复杂的潜在结构,从而具有出色的相关源分离能力。
- 在复杂系统中量化信息传递和调节沿因果路径的方式
本文通过 Tigramite 方法重构多变量因果网络,开发了不同意义信息传递强度的新型度量,同时量化了由因果路径上的不同中间过程对交互机制的影响程度来确定因果信息传递的路径,并在气候学实例中进行了演示。
- MM能量收集的无线通信:近期进展综述
能量收集无线通信的最新研究成果,包括无线网络的信息论性能极限、传输调度策略、资源分配、介质访问和网络问题等方面,并考虑了能源合作、同时能源和信息传输等方面的自维持能量收集无线网络的新领域。
- 静态与动态高斯系统中协同和冗余信息共享的探索
本文首次深入分析了高斯系统的 PID,并提出了适用于连续时间序列数据的协同信息和冗余信息独立公式,进一步揭示了高斯系统的协同和冗余信息量的特点及其量化方法,并讨论了这些发现在信息转移和信息复杂度测量中的应用。
- 非均匀状态空间重构与耦合检测
研究多维时间序列的状态空间重建,提出一种使用信息度量准则逐步构建嵌入向量的方法,并以头皮癫痫 EEG 记录为例,探究了耦合系统中的信息流。
- 本地信息传输作为复杂系统的时空滤波器
本文提出了一种评估局部信息传递的方法,并应用到了细胞自动机中,证实了粒子结构是细胞自动机中传递信息的主要机制。