可见光 - 红外人物重新识别的补丁混合交叉模态学习
本文提出一种基于 Aligned Grayscale Modality (AGM) 的跨模态人员重识别方法,通过生成灰度可见光图像和风格迁移转换红外图像得到一致的数据,再结合多颗粒度特征提取网络在特征级别进行对齐,能够显著提高跨模态检索表现。
Apr, 2022
本研究提出了一种新颖的特征学习框架,通过利用密集对应的交叉模态人物图像,像素级地抑制与模态相关的特征,从而更有效地促进交叉模态本地特征的判别式特征学习,从而解决了可见 - 红外人物重识别的问题。
Aug, 2021
通过互信息和模态一致性网络,提取具有代表性信息的模态不变身份特征,减少冗余,消除模态差异,并对关键部分进行全局 - 局部特征提取,以实现可见 - 红外人物重识别任务。
Aug, 2023
提出了一种名为多层交叉模态联合对齐(MCJA)的简单而有效的方法,它通过模态对齐增强和跨模态检索损失来缩小可见光和红外图像之间的差距,从而实现人员再识别任务的跨模态图像检索。
Jul, 2023
本论文提出了一种四流框架,通过深度卷积神经网络中不同的输入图像表示来学习不同的特征,从而改善可见光 - 红外人员重识别系统的性能。实验结果表明,该框架在多个数据集上优于当前最先进的方法。
Jul, 2019
本文提出了一种名为 PMT 的深度学习框架,它采用渐进式共享模态转换器来解决 VI-ReID 任务中复杂的模态变化问题,并对模态共享特征进行可靠度和共性分析;同时提出了一种 Discriminative Center Loss (DCL),结合 Modality-Shared Enhancement Loss (MSEL) 来缓解大内部差异和小类间差异问题,从而更好地区分共享特征,该框架在 SYSU-MM01 和 RegDB 数据集上的表现优于现有的大多数最新状态 - of-the-art 方法。
Dec, 2022
通过引入一个新的模态统一网络(MUN),本研究针对可见光 - 红外人员重识别(VI-ReID)中的大量跨模态差异和类内变异问题,通过动态建模模态特定和模态共享表示来提取判别特征表达,从而使所提出的方法在多个公共数据集上明显超过当前最先进的方法。
Sep, 2023
本文提出了一种新的模态自适应 Mixup 和不变分解方法(MID),以学习模态不变和具有鉴别力的表征,以应对 RGB - 红外人物再识别中由于 RGB 和红外图像之间的显着模态差异而产生的挑战,并在两个具有挑战性的基准测试上展示出了优越的性能。
Mar, 2022
通过引入区域数据增强和轻量级混合补偿模块的转移感知行人关注学习 (TMPA) 模型,以有效补偿缺失的特定模态特征,并完全探索具有最小计算开销的判别模块完整特征,我们提出了一种新颖的可见 - 红外行人再识别方法。在 SYSU-MM01 和 RegDB 数据集上进行的广泛实验证明了我们提出的 TMPA 模型的有效性。
Dec, 2023
本篇论文提出了一种基于 Hierarchical Cross-Modality Disentanglement 的方法,该方法使用 ID-discriminative factors 用于跨模式匹配,并使用 ID-preserving person image generation network 和 hierarchical feature learning module 生成一个新的跨模态图像来学习可见 - 红外图像的共同 ID 判别特征。
Dec, 2019