Jun, 2024

HyperSIGMA:高光谱智能理解基础模型

TL;DR对于富含光谱信息的高光谱图像(HSI),我们引入了基于 Vision Transformer 的基础模型 HyperSIGMA,通过一种新颖的稀疏采样注意力机制 (SSA) 有效地解决了光谱和空间冗余的挑战,并使用特别设计的光谱增强模块,将空间和光谱特征进行整合。 HyperSIGMA 在各种高级和低级 HSI 任务上的广泛实验证明了其多功能性和优越的代表能力,同时显示出在可扩展性、健壮性、跨模态传输能力和实际应用性方面的显著优势。