Sep, 2023
TransferDoc: 一种自监督可转移的文档表示学习模型,统一视觉和语言
TransferDoc: A Self-Supervised Transferable Document Representation Learning Model Unifying Vision and Language
Souhail Bakkali, Sanket Biswas, Zuheng Ming, Mickael Coustaty, Marçal Rusiñol...
TL;DRTransferDoc 是跨模态 transformer 架构,通过在自我监督学习中使用三个新颖的预训练目标,实现更丰富的语义概念的学习,从而在工业评估场景中胜过其他最先进的方法。