Oct, 2023
基于 Transformer 的多模态变化检测与多任务一致性约束
Transformer-based Multimodal Change Detection with Multitask Consistency Constraints
Biyuan Liu, Huaixin Chen, Kun Li, Michael Ying Yang
TL;DR基于跨维度输入的一种有效的基于 Transformer 的网络用于改变检测，通过交叉关注学习了跨维度输入之间的共享表示，采用一致性约束建立了多模态关系，并通过高度改变阈值和最小化语义与伪改变之间的不同来解决语义和高度改变检测任务之间的多任务冲突。该模型在荷兰的三个城市构建了包含 DSM 到影像的多模态数据集，相对于其他五种先进的改变检测方法，表现出了一致的多任务优势，同时该一致性策略也可以无缝地适用于其他方法，取得了可喜的改进。