FP-VTON:基于注意力机制的特征保持虚拟试衣网络 |
| |
作者姓名: | 谭泽霖 白静 陈冉 张少敏 秦飞巍 |
| |
作者单位: | 1.北方民族大学 计算机科学与工程学院,银川 750021 2.国家民委图像图形智能处理实验室,银川 7500213.杭州电子科技大学 计算机学院,杭州 310018 |
| |
基金项目: | 国家自然科学基金(61762003,61972121);;中国科学院“西部之光”人才培养引进计划(JF2012c016-2); |
| |
摘 要: | 随着互联网经济和人工智能技术的飞速发展,越来越多的消费者选择在网上购买衣服,虚拟试衣技术可以为消费者提供方便、快捷的试衣服务,为消费者提供更好的网上购物体验。当前,基于二维图像的虚拟试衣方法可以摒弃三维虚拟试衣所需昂贵的硬件成本和时间代价,但是仍然存在无法有效适应模特的不同体型及大姿态动作的问题,无法充分保留目标服装复杂纹理特征和局部细节特征的问题。为此,提出一种基于注意力机制的特征保持虚拟试衣网络FP-VTON,通过服装变形和服装融合两阶段网络生成虚拟试穿结果。针对传统卷积难以适应非刚性物体大尺寸变形的问题在两阶段网络中引入了捕捉全局特征的特征注意力机制,针对TPS变换翘曲严重的问题提出了服装保真损失函数对网格上点间的距离和斜率进行约束。通过与相关工作的定量和可视化定性实验对比,充分验证了FP-VTON在大姿态形变、复杂纹理服装和特殊体型的情况下可以生成更加逼真的图像,更加有效地保留服装的复杂纹理细节和用户的身份信息。
|
关 键 词: | 深度学习 虚拟试衣 非刚性变换 注意力机制 薄板样条变换 |
|
| 点击此处可从《计算机工程与应用》浏览原始摘要信息 |
|
点击此处可从《计算机工程与应用》下载免费的PDF全文 |