一种全息数字人安全建模方法及系统技术方案

本发明专利技术涉及同态加密和隐私计算技术领域，具体提供了一种全息数字人安全建模方法及系统，基于AIGC预训练模型，具有如下步骤：S1、形成PreTrainG

【技术实现步骤摘要】
一种全息数字人安全建模方法及系统


[0001]本专利技术涉及同态加密和隐私计算
，具体提供一种全息数字人安全建模方法及装置。

技术介绍

[0002]随着人工智能和计算机图形学的快速发展，全息数字人作为一种具有逼真外貌和交互能力的虚拟人物形象，已经成为多领域应用的关键技术。全息数字人是一个虚拟的人物形象，能够通过人工智能技术实现语音对话、自然语言理解、情感分析等能力，使得人机交互更加自然和智能化。在技术层面上，全息数字人通常是基于机器学习和深度学习技术开发出来的，包括语音识别、语音合成、自然语言处理等，全息数字人已经在虚拟现实、增强现实、电影制作、游戏开发、教育培训等领域得到广泛应用。
[0003]近年来，AIGC(Artificial Intelligence Generated Content)大模型技术的不断发展，已经带来了大量的预训练模型，这些模型能够生成让全息数字人形象更加逼真、互动性更强，以及更加贴合实际情况和用户需求。同时，AIGC技术还可以帮助减少制作数字人形象所需的时间和成本，提高效率。
[0004]然而，利用AIGC预训练大模型进行全息数字人建模的过程中，也面临着隐私安全的问题和挑战，全息数字人的使用场景通常涉及用户隐私和安全问题，因此需要确保用户数据的安全性和隐私保护。在这种情况下，如何有效利用AIGC预训练大模型实现全息数字人的个性化安全建模，以提供高质量的全息数字人形象同时满足用户对数据隐私保护的需求，成为亟需解决的问题。

技术实现思路

[0005]本专利技术是针对上述现有技术的不足，提供一种实用性强的全息数字人安全建模方法。
[0006]本专利技术进一步的技术任务是提供一种设计合理，安全适用的全息数字人安全建模系统。
[0007]本专利技术解决其技术问题所采用的技术方案是：
[0008]一种全息数字人安全建模方法，基于AIGC预训练模型，具有如下步骤：
[0009]S1、根据全息数字人系统实际需求，形成形象生成模块的明文推理预训练模型PreTrainG
‑
PTM以及对话生成模块的明文推理预训练模型PreTrainD
‑
PTM；
[0010]S2、用户客户端生成同态加密密钥，并将密钥保存在本地安全空间；
[0011]S3、所述的用户客户端进行敏感数据识别，分成非敏感数据和敏感数据；
[0012]S4、所述的用户客户端将明文数据序列PD和密文数据序列CD通过可信信道传输到云数据中心的全息数字人系统；
[0013]S5、将所有的密文数据序列CD经过密文推理预训练模型PreTrainG
‑
CTM，生成全息数字人形象上下文上向量序列GPCV；
[0014]S6、将所有的密文数据序列CD经过密文推理预训练模型PreTrainD
‑
CTM，生成全息数字人对话互动上下文上向量序列DPCV；
[0015]S7、所述的全息数字人形象上下文上向量序列GPCV和所述的全息数字人对话互动上下文上向量序列DPCV作为全息数字人模型，存储到所述的云数据中心。
[0016]进一步的，在步骤S1中，根据全息数字人系统实际需求，获取公开预训练模型，并基于真实数据进行AIGC预训练模型的参数微调，形成所述的形象生成模块的明文推理预训练模型PreTrainG
‑
PTM以及所述的对话生成模块的明文推理预训练模型PreTrainD
‑
PTM；
[0017]根据所述的形象生成模块的明文推理预训练模型PreTrainG
‑
PTM以及所述的对话生成模块的明文推理预训练模型PreTrainD
‑
PTM设计形象生成模块的密文推理预训练模型PreTrainG
‑
CTM以及对话生成模块的密文推理预训练模型PreTrainD
‑
CTM，推理过程采用同态加密进行密文计算；
[0018]根据所述的形象生成模块的明文推理预训练模型PreTrainG
‑
PTM和所述的形象生成模块的密文推理预训练模型PreTrainG
‑
CTM，设计提示判断G
‑
Prompt模块的神经网络结构以及提示信息，满足PreTrainG
‑
PTM和PreTrainG
‑
CTM推理预训练模型的输入要求。
[0019]进一步的，在步骤S3中，将非敏感数据进行处理，经过数据混淆模块，与明文提示信息生成器PPrompt
‑
Gen生成的提示数据进行聚合，生成明文数据序列PD，并将混淆数据提示数据S记录在本地；
[0020]将敏感数据进行处理，根据密文推理的输入要求进行数据处理，形成特征向量，采用同态加密公钥对特征向量进行加密，并由密文提示信息生成器CPrompt
‑
Gen构建提示信息，最后组装成生成密文数据序列CD。
[0021]进一步的，在步骤S4中，AIGC生成形象模块通过提示判断模块G
‑
Prompt模块对所述的明文数据序列PD和所述的密文数据序列CD进行分别处理；
[0022]将所有的明文数据PD经过所述的明文推理预训练模型PreTrainG
‑
PTM，并将上下文状态共享给所述的密文推理预训练模型PreTrainG
‑
CTM。
[0023]进一步的，在步骤S5中，AIGC生成对话模块通过提示判断模块D
‑
Prompt模块对所述的明文数据序列PD和所述的密文数据序列CD进行分别处理；
[0024]将所有的明文数据PD经过所述的明文推理预训练模型PreTrainD
‑
PTM，并将上下文状态共享给所述的密文推理预训练模型PreTrainD
‑
CTM。
[0025]进一步的，全息数字人展示和互动的步骤如下：
[0026](1)用户客户端利用云数据中心的资源为全息数字人互动创建TEE可信执行环境；
[0027](2)用户客户端与可信执行环境建立安全通道；
[0028](3)用户客户端将存储在云数据中心的全息数字人形象上下文上向量序列GPCV和全息数字人对话互动上下文上向量序列DPCV下载到本地，利用本地同态加密密钥进行加密，并将解密后的模型上下文向量通过安全信道上传到可信执行环境；
[0029](4)用户客户端将本地混淆数据提示数据以及动态加密密钥传输通过安全信道至可信执行环境；
[0030](5)在所述的可信执行环境中，加载存储在云数据中心的全息数字人形象上下文上向量序列GPCV和全息数字人对话互动上下文上向量序列DPCV利用同态加密密钥进行解密；
[0031](6)将混淆数据提示数据S、解密后全息数字人形象上下文上向量序列GPCV和解密后的全息数字人对话互动上下文上向量序列DPCV加载到所述本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种全息数字人安全建模方法，其特征在于，基于AIGC预训练模型，具有如下步骤：S1、根据全息数字人系统实际需求，形成形象生成模块的明文推理预训练模型PreTrainG
‑
PTM以及对话生成模块的明文推理预训练模型PreTrainD
‑
PTM；S2、用户客户端生成同态加密密钥，并将密钥保存在本地安全空间；S3、所述的用户客户端进行敏感数据识别，分成非敏感数据和敏感数据；S4、所述的用户客户端将明文数据序列PD和密文数据序列CD通过可信信道传输到云数据中心的全息数字人系统；S5、将所有的密文数据序列CD经过密文推理预训练模型PreTrainG
‑
CTM，生成全息数字人形象上下文上向量序列GPCV；S6、将所有的密文数据序列CD经过密文推理预训练模型PreTrainD
‑
CTM，生成全息数字人对话互动上下文上向量序列DPCV；S7、所述的全息数字人形象上下文上向量序列GPCV和所述的全息数字人对话互动上下文上向量序列DPCV作为全息数字人模型，存储到所述的云数据中心。2.根据权利要求1所述的一种全息数字人安全建模方法，其特征在于，在步骤S1中，根据全息数字人系统实际需求，获取公开预训练模型，并基于真实数据进行AIGC预训练模型的参数微调，形成所述的形象生成模块的明文推理预训练模型PreTrainG
‑
PTM以及所述的对话生成模块的明文推理预训练模型PreTrainD
‑
PTM；根据所述的形象生成模块的明文推理预训练模型PreTrainG
‑
PTM以及所述的对话生成模块的明文推理预训练模型PreTrainD
‑
PTM设计形象生成模块的密文推理预训练模型PreTrainG
‑
CTM以及对话生成模块的密文推理预训练模型PreTrainD
‑
CTM，推理过程采用同态加密进行密文计算；根据所述的形象生成模块的明文推理预训练模型PreTrainG
‑
PTM和所述的形象生成模块的密文推理预训练模型PreTrainG
‑
CTM，设计提示判断G
‑
Prompt模块的神经网络结构以及提示信息，满足PreTrainG
‑
PTM和PreTrainG
‑
CTM推理预训练模型的输入要求。3.根据权利要求2所述的一种全息数字人安全建模方法，其特征在于，在步骤S3中，将非敏感数据进行处理，经过数据混淆模块，与明文提示信息生成器PPrompt
‑
Gen生成的提示数据进行聚合，生成明文数据序列PD，并将混淆数据提示数据S记录在本地；将敏感数据进行处理，根据密文推理的输入要求进行数据处理，形成特征向量，采用同态加密公钥对特征向量进行加密，并由密文提示信息生成器CPrompt
‑
Gen构建提示信息，最后组装成生成密文数据序列CD。4.根据权利要求3所述的一种全息数字人安全建模方法，其特征在于，在步骤S4中，AIGC生成形象模块通过提示判断模块G
‑
Prompt模块对所述的明文数据序列PD和所述的密文数据序列CD进行分别处理；将所有的明文数据PD经过所述的明文推理预训练模型PreTrainG
‑
PTM，并将上下文状态共享给所述的密文推理预训练模型PreTrainG
‑
CTM。5.根据权利要求4所述的一种全息数字人安全建模方法，其特征在于，在步骤S5中，AIGC生成对话模块通过提示判断模块D
‑
Prompt模块对所述的明文数据序列PD和所述的密文数据序列CD进行分别处理；将所有的明文数据PD经过所述的明文推理预训练模型PreTrainD
‑
PTM，并将上下文状
态共享给所述的密文推理预训练模型PreTrainD
‑
CTM。6.根据权利要求5所述的一种全息数字人安全建模方法，其特征在于，全息数字人展示和互动的步骤如下：(1)用户客户端利用云数据中心的资源为全息数字人互动创建TEE可信执行环境；(2)用户客户端与可信执行环境建立安全通道；(3)用户客户端将存储在云数据中心的全息数字人形象上下文上向量序列GPCV和全息数字人对话互动上下文上向量序列DPCV下载到本地，利用本地同态加密密钥进行加密，并将解密后的模型上下文向量通过安全信道上传到可信执行环境；(4)用户客户端将本地混淆数据提示数据以及动态加密密钥传输通过安全信道至可信执行环境；(5)在所述的可信执行环境中，加载存储在云数据中心的全息...

【专利技术属性】
技术研发人员：孙善宝，解萌，罗清彩，王启正，张鑫，
申请(专利权)人：山东浪潮科学研究院有限公司，
类型：发明
国别省市：