基于扩散模型的多阶段一致可控虚拟试衣OA北大核心

为解决现有扩散模型在虚拟试衣任务中难以保持服装纹理和色彩一致性的问题,提出了一种新的多阶段虚拟试衣方法。该方法包括两个阶段:在第一阶段,设计了一个基于多尺度特征注意力模块的服装形变网络,以抑制参考服装在形变过程中出现的纹理不自然现象,确保服装纹理和色彩的准确传递。在第二阶段,通过结合ControlNet和边缘与角落区域掩码,构建了一个局部修复网络,该网络可以在保持服装纹理细节的同时,专注于修复服装与人体的边界区域。结果表明:服装形变网络能够保持服装主干区域的色彩和纹理特征,局部修复网络能够填补人体和服装边界区域的纹理,从而提高虚拟试衣的真实感。相比现有虚拟试衣方法,该多阶段虚拟试衣方法在视觉一致性方面表现出优越的效果,提升了虚拟试衣体验。