面向元宇宙的高真实感虚拟人驱动技术

项目将语音驱动说话人脸视频生成最新科研成果进行转化与落地，通过提供一段语音和一张人脸图片，生成嘴型与语音同步并具有自然稳定头部动作和眨眼动作的说话人脸视频。项目自研技术包含三项关键技术，包括基于语音生成高精度三维表情参数技术，基于语音生成自然稳定的三维头部动作参数技术，基于三维头部动作参数和三维表情参数驱动人脸图像生成说话视频技术。通过对这三大模块进行结合，可以获得一个直接通过语音驱动说话人脸视频生成的系统。目前该系统已基本实现。

【产品关键技术】项目自研技术包含三项关键技术，包括基于语音生成高精度三维表情参数技术，基于语音生成自然稳定的三维头部动作参数技术，基于三维头部动作参数和三维表情参数驱动人脸图像生成说话视频技术。通过对这三大模块进行结合，可以获得一个直接通过语音驱动说话人脸视频生成的系统。目前该系统已基本实现。