一种基于超短视频样本快速生成虚拟人动态名片的方法技术

本发明专利技术公开了一种基于超短视频样本快速生成虚拟人动态名片的方法，包括基于自我介绍文本进行自我介绍音频合成，得到语音流文件；从超短视频样本文件路径中读取人像视频素材流并进行处理，得到人脸视频单元文件；对人脸视频单元文件进行五官特征向量萃取，得到人脸面部五官特征向量；根据语音流文件、人脸视频单元文件和人脸面部五官特征向量生成嘴型与声音一致的完整自我介绍视频；将完整自我介绍视频按照名片模板进行调整，获得与名片模板同尺寸的自我介绍底版视频；对自我介绍底版视频采用名片模板进行遮盖，生成最终的虚拟人动态名片。本发明专利技术降低了虚拟人动态名片的成本与制作时间，使动态名片的制作过程趋向标准化和便捷化。捷化。捷化。

【技术实现步骤摘要】
一种基于超短视频样本快速生成虚拟人动态名片的方法


[0001]本专利技术属于数字人视频应用
，具体涉及一种基于超短视频样本快速生成虚拟人动态名片的方法。

技术介绍

[0002]随着5G通信网络与视频通信技术的不断发展，社交网络、各类短视频平台所提供的服务更为智能，使得交流通信从扁平的文字向信息量更为丰富的视频过渡，视频作为一种通信媒介逐渐成为了交流通信的主流方式。与此同时，数字人合成与动作捕捉技术日益发展，虚拟主播、视频客服逐渐成为新的业界形态。在5G视频化的趋势中，比起静态名片，能传递更多信息的动态名片自然成为商务交流展示的新兴选择。
[0003]动态名片在公司logo、个人信息展示等功能上与纸质名片一致，但相比于纸质名片，动态名片中的身份照片可以替换成动态的自我展示视频。真人出演的动态名片的制作需要用户自主拍摄视频，对用户的表达能力、语言标准程度以及镜头展示能力有较高的要求，一段自我介绍视频往往需要多次录制，需要专业摄影团队进行拍摄，耗时许久才能完成。对于进行动态名片制作的商家而言，有限的人力和时间使得动态名片的制作不能像普通本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于超短视频样本快速生成虚拟人动态名片的方法，其特征在于，包括：步骤1：基于自我介绍文本进行自我介绍音频合成，得到语音流文件；步骤2：从超短视频样本文件路径中读取人像视频素材流并进行处理，得到人脸视频单元文件；步骤3：对人脸视频单元文件进行五官特征向量萃取，得到人脸面部五官特征向量；步骤4：根据语音流文件、人脸视频单元文件和人脸面部五官特征向量生成嘴型与声音一致的完整自我介绍视频；步骤5：将完整自我介绍视频按照名片模板进行调整，获得与名片模板同尺寸的自我介绍底版视频；步骤6：对自我介绍底版视频采用名片模板进行遮盖，生成最终的虚拟人动态名片。2.根据权利要求1所述的一种基于超短视频样本快速生成虚拟人动态名片的方法，其特征在于，所述步骤1根据用户提交的自我介绍文本，选择好发声人音色ID、输入声音音量、语速，调用TTS语音合成引擎接口，合成动态名片的自我介绍音频文件。3.根据权利要求1所述的一种基于超短视频样本快速生成虚拟人动态名片的方法，其特征在于，所述步骤2从输入的超短视频样本文件路径中逐帧读取人像视频素材的流，读取结束后将获取的流信息做倒置处理，拼接到原本正向流文件末尾，形成先正放再倒放的视频流素材单元，合成视频文件后，保存到人脸视频单元文件路径下。4.根据权利要求1所述的一种基于超短视频样本快速生成虚拟人动态名片的方法，其特征在于，所述步骤3读取步骤2中得到的人脸视频单元文件，截取其中一帧进行人脸检测，调用预训练的五官特征向量萃取模型，判断当前图片中是否检测到人脸五官，如果没有检测到，则提前终止虚拟人视频生成过程，如果检测到，则输出当前图片中检测到的人脸面部五官的关键特征点构成的向量特征。5.根据权利要求4所述的一种基于超短视频样本快速生成虚拟人动态名片的方法，其特征在于，所述五官特征向量萃取模型为卷积神经网络模型。6.根据权利要求1所述的一种基于超短视频样本快...

【专利技术属性】
技术研发人员：陈萍，高培培，王小玲，王峰，
申请(专利权)人：江苏号百科技有限公司，
类型：发明
国别省市：