BriefGPT.xyz
Ask
alpha
关键词
information-theoretic tools
搜索结果 - 4
上下文学习的信息论分析
通过引入新的信息论工具,我们在序列元学习上建立了一种优雅且非常通用的误差分解方法,分为三个组成部分:不可降低误差、元学习误差和任务内误差。我们应用这些工具对基于变压器的上下文学习进行分析,阐明了误差在训练序列数量和序列长度上的衰减规律。这一
→
PDF
5 months ago
ICLR
无监督领域自适应的信息论分析
本文使用信息理论工具来分析无监督域适应(UDA)中的泛化误差。 为两种泛化误差提供新的上界,第一种措施评估目标域和源域的总体风险之间的差距,第二种措施评估目标领域的总体风险和源域的经验风险之间的差距。 本文提出两种简单的技术来改善 UDA
→
PDF
2 years ago
基于信息论的部分监控极小后悔策略
本研究证明了一个新的 minimax 定理,将贝叶斯最坏情况遗憾和没有对手信号或决策的 minimax 遗憾联系起来。进而推广 Russo 和 Van Roy (2016) 的信息论工具,证明了多种部分监视设置的 minimax 遗憾边界。
→
PDF
5 years ago
用于复杂网络比较的信息理论工具:光谱熵
本文运用量子统计力学的技术来定义复杂网络的熵度量,并开发了一组基于网络谱属性的信息理论工具,可以用于最大似然估计和模型选择。通过将这个框架应用于人体微生物组的网络,我们通过层次聚类分析高精度地恢复出现有的社区关联。
PDF
8 years ago
Prev
Next