【技术实现步骤摘要】
本申请各实施例属于互联网,尤其涉及一种数字人系统应用方法及装置。
技术介绍
1、数字人系统是通过深度学习和先进算法构建的虚拟人物系统。数字人系统具备高度仿真的外观、声音和动作,能够像人类一样进行自然语言交互、理解复杂情境并作出相应反应。
2、然而,现有的数字人系统往往高度依赖于大型计算设备,特别是那些配置了高性能显卡的服务器,服务器虽然能提供强大的数据处理和图形渲染能力,但其固有的庞大体积以及复杂的部署环境,限制了数字人系统的使用场景和自由度,因为复杂的部署环境往往会显著增加用户的手动设置和部署步骤,因此如何简化数字人系统的应用过程,是一个亟需解决的问题。
技术实现思路
1、本申请提供一种数字人系统应用方法及装置,以解决上述现有如何简化数字人系统的应用过程的技术问题。
2、第一方面,本申请实施例提供了一种数字人系统应用方法,应用于便携式设备,所述数字人系统应用方法包括:
3、连接显示设备,通过启动脚本,启动预存储的数字人系统;
4、获取所述数字人系统中数字人的三维模型数据和人体动作数据;
5、通过渲染引擎将所述三维模型数据和所述人体动作数据分解为多个处理任务,将多个所述处理任务传输至预设的图形处理器;
6、获取所述图形处理器基于多个所述处理任务生成的数字人画面,将所述数字人画面发送到所述显示设备。
7、本申请实施例有益效果在于两方面,一方面,连接显示设备,通过启动脚本,启动预存储的数字人系统,由于连
8、在第一方面的一种可能的实现方式中,连接显示设备,通过启动脚本,启动预存储的数字人系统,包括:
9、通过输入输出接口,获取显示设备发送的热插拔信号,所述输入输出接口包括hdmi接口、usb接口和以太网接口中的其中一种或其组合;
10、当所述热插拔信号为高电平信号时,建立便携式设备与显示设备之间的数据传输通道;
11、当所述数据传输通道满足预设条件时,通过启动脚本,启动预存储的数字人系统。
12、在本申请实施例中,建立便携式设备与显示设备之间的数据传输通道,确保便携式设备能向显示设备稳定传输数字人画面,提升了数字人画面传输的效率和稳定性。
13、在第一方面的一种可能的实现方式中,所述当所述数据传输通道满足预设条件时,通过启动脚本,启动预存储的数字人系统,包括:
14、获取所述数据传输通道的传输延迟时长,当所述传输延迟时长小于所述预设条件中的预设延迟时长时,通过启动脚本,启动预存储的数字人系统;
15、或者,获取所述数据传输通道的传输速率,当所述传输速率大于所述预设条件中的预设速率时,通过启动脚本,启动预存储的数字人系统。
16、在本申请实施例中,当所述数据传输通道满足预设条件时,通过启动脚本,启动预存储的数字人系统,数字人系统能够自动避开网络拥堵或不稳定时段,有效减少因网络问题导致的启动失败、数据传输中断或延迟等不利情况,增强了数字人系统的稳定性和可靠性。从用户体验的角度来看,传输延迟时长小于预设延迟时长或当所述传输速率大于预设速率,能够为用户提供更加流畅、快速的数据交互体验,增强了用户满意度和忠诚度。
17、在第一方面的一种可能的实现方式中,所述获取所述数字人系统中数字人的三维模型数据和人体动作数据,包括:
18、获取所述数字人系统的第一文件和第二文件;
19、在所述第一文件中,获取所述数字人的三维模型数据,在所述第二文件中,获取所述数字人的人体动作数据。
20、在本申请实施例中,通过三维模型数据和人体动作数据,可以重构数字人,确保数字人的动作表现与数字人系统的完全一致,这种即时的反馈机制不仅提升了用户体验,还增强了数字人的交互性和沉浸感。
21、在第一方面的一种可能的实现方式中,所述通过渲染引擎将所述三维模型数据和所述人体动作数据分解为多个处理任务,将多个所述处理任务传输至预设的图形处理器,包括:
22、将所述三维模型数据和所述人体动作数据组成渲染数据;
23、通过所述渲染引擎,将所述渲染数据的渲染任务分解为多个处理任务,将多个所述处理任务传输至预设的图形处理器。
24、在本申请实施例中,图形处理器具备强大的并行计算能力,其内部包含大量的处理单元和多个流处理器。当多个处理任务被同时发送到图形处理器时,这些处理任务可以在图形处理器的多个处理单元上并行执行。这种并行处理方式显著提高了计算效率,使得原本需要较长时间才能完成的处理任务能够在更短的时间内得到处理,从而加快了整体工作流程。
25、在第一方面的一种可能的实现方式中,在所述获取所述图形处理器基于多个所述处理任务生成的数字人画面,将所述数字人画面发送到所述显示设备之后,所述数字人系统应用方法,还包括:
26、采集用户语音,将所述用户语音转换成第一文本信息;
27、将所述第一文本信息输入深度学习模型,获取所述深度学习模型基于所述第一文本信息输出的第二文本信息;
28、将所述第二文本信息转换成应答语音,将所述应答语音发送到所述显示设备。
29、在本申请实施例中,在数字化时代,用户期望与显示设备的交互能够更加自然、流畅,通过显示设备播报应答语音,不仅响应了用户语音,还以更加人性化的方式进行了反馈,增强了用户的参与感和沉浸感。
30、在第一方面的一种可能的实现方式中,将所述第一文本信息输入深度学习模型,获取所述深度学习模型基于所述第一文本信息输出的第二文本信息,包括:
31、获取所述深度学习模型的模型文件,通过加载脚本从所述模型文件中加载所述深度学习模型;
32、将所述第一文本信息输入所述深度学习模型,获取所述深度学习模型基于所述第一文本信息输出的第二文本信息。在本申请实施例中,模型文件作为深度学习模型的载体,包含了深度学习模型在训练过程中优化得到的网络参数和结构信息。这些参数和结构信息是深度学习模型进行预测和推理的基础,通过加载模型文件,深度学习模型可以迅速恢复模型的完整状态,无需重新进行耗时的训练过程,这样提高了深度学习模型应用的便捷性和效率。
33、在第一方面的一种可能的实现方式中,在所述获取所述图形处理器基于多个所述处理任务生成的数字人画面,将所述数字人画面发送到所述显示设备之后,所述数字人系统应用方法,还本文档来自技高网...
【技术保护点】
1.一种数字人系统应用方法,其特征在于,所述数字人系统应用方法包括:
2.根据权利要求1所述的数字人系统应用方法,其特征在于,连接显示设备,通过启动脚本,启动预存储的数字人系统,包括:
3.根据权利要求2所述的数字人系统应用方法,其特征在于,所述当所述数据传输通道满足预设条件时,通过启动脚本,启动预存储的数字人系统,包括:
4.根据权利要求1所述的数字人系统应用方法,其特征在于,所述获取所述数字人系统中数字人的三维模型数据和人体动作数据,包括:
5.根据权利要求1所述的数字人系统应用方法,其特征在于,所述通过渲染引擎将所述三维模型数据和所述人体动作数据分解为多个处理任务,将多个所述处理任务传输至预设的图形处理器,包括:
6.根据权利要求1所述的数字人系统应用方法,其特征在于,在所述获取所述图形处理器基于多个所述处理任务生成的数字人画面,将所述数字人画面发送到所述显示设备之后,还包括:
7.根据权利要求6所述的数字人系统应用方法,其特征在于,将所述第一文本信息输入深度学习模型,获取所述深度学习模型基于所述第一文
8.根据权利要求1所述的数字人系统应用方法,其特征在于,在所述获取所述图形处理器基于多个所述处理任务生成的数字人画面,将所述数字人画面发送到所述显示设备之后,还包括:
9.根据权利要求1所述的数字人系统应用方法,其特征在于,在所述获取所述图形处理器基于多个所述处理任务生成的数字人画面,将所述数字人画面发送到所述显示设备之后,还包括:
10.一种数字人系统应用装置,其特征在于,包括:
...【技术特征摘要】
1.一种数字人系统应用方法,其特征在于,所述数字人系统应用方法包括:
2.根据权利要求1所述的数字人系统应用方法,其特征在于,连接显示设备,通过启动脚本,启动预存储的数字人系统,包括:
3.根据权利要求2所述的数字人系统应用方法,其特征在于,所述当所述数据传输通道满足预设条件时,通过启动脚本,启动预存储的数字人系统,包括:
4.根据权利要求1所述的数字人系统应用方法,其特征在于,所述获取所述数字人系统中数字人的三维模型数据和人体动作数据,包括:
5.根据权利要求1所述的数字人系统应用方法,其特征在于,所述通过渲染引擎将所述三维模型数据和所述人体动作数据分解为多个处理任务,将多个所述处理任务传输至预设的图形处理器,包括:
6.根据权利要求1所述的数字人系统应...
【专利技术属性】
技术研发人员:罗志平,周建国,
申请(专利权)人:南昌虚拟现实研究院股份有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。