第二十二届中国虚拟现实大会 (ChinaVR 2022)

73 / 2022-09-30 18:12:06

基于3D人脸对齐的移动实时虚拟试发

虚拟试发为假发线上销售、发型远程设计等应用提供了便利。现有大多为静态试发，不具互动性，牺牲了用户体验；其余实时试发系统基于高性能专业设备，很大程度上限制了虚拟试发的应用。本文提出了一个基于3D人脸对齐的可在移动设备进行实时虚拟试发系统，主要包括三个核心方法：（1）使用知识蒸馏技术将大模型的知识迁移到轻量级模型（2）使用模型量化技术加速模型在移动设备上的运行速度。（3）使用曲面简化技术对标准的3DMM人脸模型进行简化加快计算。最后通过在室内室外复杂背景环境的一系列真人虚拟试发实验，验证了本文所提出的移动实时虚拟试发系统的有效性和实时性。