M3D-VTON: 单目至3D虚拟试穿网络
本文提出了一种基于图像的虚拟试衣系统,使用全新的几何匹配模块进行形变和修补,在保留衣物特征的同时,同时处理衣物和图像之间的边界问题和计算拟合度,实现了真实感和模拟性能的完美融合。
Jul, 2018
本文提出了首个多姿态影响下的虚拟试衣系统,使用三阶段的网络包括合成期望的解剖结构映射,将解剖结构的映射和服装特征整合起来,以及使用多姿态合成蒙版进行修复,成功地解决了虚拟试衣中的多种问题,实验结果表明,该虚拟试衣系统和该多姿态影响下的虚拟试衣技术显著优于现有技术。
Feb, 2019
本文提出了一个在电子商务场景下紧迫需要的基于图形注意力网络(SC-VTON)的形状可控虚拟试衣网络,以更精确地虚拟试衣。 通过将控制点融入SC-VTON中,我们可以使用服装/模型对数据来帮助优化变形模块,并将任务推广到典型的虚拟试衣任务。实验表明,该方法可以实现准确的形状控制,并且生成具有详细纹理的高分辨率结果。
Jul, 2021
提出了一种无监督的图像虚拟试穿系统 PASTA-GAN,通过创新的贴片路由 module 成功保留服装的纹理和形状特征,引入新的空间自适应残差块来指导生成器合成更真实的服装细节。
Nov, 2021
提出了一种通用的虚拟试穿框架,称为GP-VTON,该框架通过开发创新的LFGP变形模块和DGT训练策略来解决图像中虚拟试穿的各种问题,如人体姿势变换和衣服变形,从而在具有挑战性的输入情况下保留语义信息,并避免出现纹理畸变。经过在两个高分辨率基准上的大量实验,表明该方法明显优于现有的相应方法。
Mar, 2023
提出一种基于渐进式推理范式的新型虚拟试衣方法(PGVTON),通过自上而下的推理管道和一般服装试穿策略实现,包括鲁棒的试穿解析推断方法和通过变形-映射-合成实施的服装试穿。同时使用StyleGAN2实现了针对目标肌肤形状的去光皮肤修复。在两个有挑战性的场景下展示了该方法具有最先进的性能。
Apr, 2023
本研究提出了一种名为ClothFit的虚拟试衣方法,通过考虑衣服的实际尺寸和人体属性,能够在目标身体上预测衣服的覆盖形状,该方法结合了U-Net网络结构和Auto-encoder技术,相比现有技术实现更加真实、高效的虚拟试衣效果。
Jun, 2023
3D虚拟试穿是一个具有广泛潜力且备受关注的挑战性任务,本文提出了一种基于分解的隐式服装转换网络(DI-Net),通过像素对齐的隐式函数构建方法,实现了从任意视角重建3D人体网格和保留其纹理恢复的能力,在3D虚拟试穿任务中展现出优异的性能和效果。
Nov, 2023
本文提出了一种自适应掩码训练范式,通过破解试穿区域与原始服装之间的关联,并让模型学习正确的信息进行修补,从而在非配对虚拟试穿情况下提高服装的对齐度和适应性,显著提升虚拟试穿体验的真实感;并首次提出两种用于非配对试穿评估的指标,Semantic-Densepose-Ratio (SDR) 和 Skeleton-LPIPS (S-LPIPS),用于评估服装类型的正确性和纹理的准确性;并构建了一个全面的跨试穿基准测试集(Cross-27),涵盖了多种不同的服装项目和模特身材,用于验证非配对试穿,实验证明了所提方法的有效性,为虚拟试穿技术的发展做出贡献,为该领域的未来研究提供新的洞察和工具。代码、模型和基准测试集将公开发布。
Mar, 2024