基于扩散模型的ControlNet网络虚拟试衣研究

来源：现代纺织技术杂志2024年第3期北京时间：

作者：郭宇轩, 孙 林

单位：大连工业大学服装学院，辽宁大连 116034

摘要：为快速生成特定服装款式的成衣效果图，采用扩散模型，应用ControlNet网络实现虚拟试衣。首先将人体的关键点检测图与深度图作为扩散模型的控制条件，生成姿态可控的虚拟模特；再通过Canny边缘图生成虚拟试衣效果图。以三款连衣裙为例进行虚拟试衣实验，并优化扩散模型控制条件的参数设置；最后将生成结果与三维建模虚拟试衣结果进行对比和评价。结果表明：结合ControlNet网络的扩散模型能够控制虚拟模特的姿态特征，通过服装Canny边缘图可以生成特定服装款式的虚拟试衣效果。该方法生成的虚拟试衣相较三维建模技术实现的虚拟试衣方法更具表现力，操作更加直观快捷，能够为设计师提供款式图的成衣效果可视化参考，从而提高服装设计效率。

关键词：虚拟试衣,扩散模型,ControlNet网络,虚拟模特,人体关键点检测,服装设计

基金资助：辽宁省教育厅科研项目(LJKFR20220220)