发明

虚拟试穿视频生成方法、模型训练方法及电子设备2025

2025-03-22 12:43:58 发布于四川 0
  • 申请专利号:CN202411505695.9
  • 公开(公告)日:2025-03-21
  • 公开(公告)号:CN119672591A
  • 申请人:淘宝(中国)软件有限公司
摘要:本申请公开了一种虚拟试穿视频生成方法、模型训练方法、电子设备及计算机可读存储介质,视频生成方法包括:获取人体视频以及目标服饰对应的服饰图片;提取目标服饰特征以及各视频帧分别对应的人体特征;将目标服饰特征分别与各人体特征在空间维度上进行融合;基于各人体特征对目标服饰特征进行特征调整,得到与各视频帧中的人体匹配的各人体匹配服饰特征;将各空间融合特征与各人体匹配服饰特征在时间维度进行融合,得到时间融合特征,根据时间融合特征得到试穿有目标服饰的各人体试穿视频帧。通过本申请提供的方案能够使得生成的虚拟试穿视频具有更好的帧间连续性和流畅性,从而提高了最终的虚拟试穿视频的真实性,虚拟试穿效果更好。

专利内容

本申请公开了一种虚拟试穿视频生成方法、模型训练方法、电子设备及计算机可读存储介质,视频生成方法包括:获取人体视频以及目标服饰对应的服饰图片;提取目标服饰特征以及各视频帧分别对应的人体特征;将目标服饰特征分别与各人体特征在空间维度上进行融合;基于各人体特征对目标服饰特征进行特征调整,得到与各视频帧中的人体匹配的各人体匹配服饰特征;将各空间融合特征与各人体匹配服饰特征在时间维度进行融合,得到时间融合特征,根据时间融合特征得到试穿有目标服饰的各人体试穿视频帧。通过本申请提供的方案能够使得生成的虚拟试穿视频具有更好的帧间连续性和流畅性,从而提高了最终的虚拟试穿视频的真实性,虚拟试穿效果更好。G06V20/40(2022.01);G06V10/40(2022.01);G06V10/80(2022.01);G06V10/74(2022.01);G06V40/10(2022.01);G06T3/4038(2024.01);G06Q30/0601(2023.01);G06V10/774(2022.01);H04N21/854(2011.01);H04N21/44(2011.01);H04N5/265(2006.01)

最新专利