一种实现数字永生的人机交互系统及其方法技术方案

本发明专利技术公开了一种实现数字永生的人机交互系统及其方法，所述系统包括记录和分析单元、交互单元以及回复和播放单元，所述记录和分析单元用于采集、分析、整理和储存用户A的个人信息，并形成个人数据库；所述交互单元主要用于当用户A不在线时，基于个人数据库和其它信息，通过回复和播放单元与用户B进行交互；所述回复和播放单元用于生成和播放相关的语音和视频。本系统可以实现用户A的数字永生，系统地记录和分析用户A的个人信息并自动生成其自传，并且通过7个交互模块给用户B提供信息问答、安慰协助、场景聊天、成功和幸福建议、健康建议和祭拜祈福等功能体验。建议和祭拜祈福等功能体验。建议和祭拜祈福等功能体验。

【技术实现步骤摘要】
一种实现数字永生的人机交互系统及其方法


[0001]本专利技术涉及一种人机交互系统，特别是一种实现数字永生的人机交互系统及其方法。

技术介绍

[0002]现有的聊天机器人和用户对话时基于大数据的训练结果，但是回答是千人一面，而不是特定人物的回答。因为每个人的个人经历偏好健康情况等个不相投，尚没有现有技术可以模拟从用户的角度以某个特定人来和用户进行交互，包括回答个人问题，从亲友的角度给用户提供人生建议和健康建议等，交互范围较为受限。
[0003]从数字永生的角度看，现实中普通人不能永生，也不能与去世的亲人进行对话。现在尚没有一个系统能够记录人的记忆和态度，包括个人的生活事件、喜好和态度等，并且以本人的角度(包括该人的部分原始声音和视频)和其他用户进行语言交互，实现一个人的数字永生；也没有系统能自动生成一个人的自传，所有的自传都是人工编写的，并且和读者无法进行对话和交互，功能单一。
[0004]另外，根据中华人民共和国教育部的统计，中国目前仍有大约30％的人口不会说普通话，另外的70％中只有10％可以用比较标准的普通话顺畅沟通。加上我国有非常多的方言，而且每一种方言在各个地方的发音都不一样，再加上每一个人的音调和说话速度都不一样。因此用语音合成普通话技术去替代一个人的声音是不能达到逼真的效果，即用户会觉得这个数字用户A不像真实的用户A。中国的方言有很多种而且男女老少有不同的音质音色和语速，而计算机模拟(合成)一个人的声音存在交互体验感差或者成本高的问题。
[0005]因此，现有的数字交互系统存在无法实现数字永生、功能单一、交互体验感差的问题。

技术实现思路

[0006]本专利技术的目的在于，提供一种实现数字永生的人机交互系统及其方法。本系统可以实现用户A的数字永生，系统地记录和分析用户A的个人信息并自动生成其自传，并且通过7个交互模块给用户B提供信息问答、安慰协助、场景聊天、成功和幸福建议、健康建议和祭拜祈福等功能体验。
[0007]本专利技术的技术方案：一种实现数字永生的人机交互系统，所述系统包括记录和分析单元、交互单元以及回复和播放单元，所述记录和分析单元用于采集、分析、整理和储存用户A的个人信息，并形成个人数据库；所述交互单元，除了其中的在线聊天模块以外，用于当用户 A不在线时，基于个人数据库和其它信息，通过不同的交互单元，利用回复和播放单元与用户B进行交互；所述回复和播放单元用于生成和播放相关的语音和视频。
[0008]前述的一种实现数字永生的人机交互系统中，所述记录和分析单元包括个人信息采集模块，个人信息采集模块包括问答式采集子模块、社交媒体信息采集子模块以及社交媒体以外的信息采集子模块；所述社交媒体以外的信息采集子模块包括以时间、重要生活
事件和经历、生活内容为线索的第一回忆和交互单元以及以照片和视频为线索的第二回忆和交互单元。个人信息采集模块是在用户A允许的前提下对其个人的信息进行了系统的收集。
[0009]前述的一种实现数字永生的人机交互系统中，所述问答式采集子模块包括问答式信息收集子子模块、原始声音采集子子模块和原始影像采集子子模块；问答式信息收集子子模块通过硬件终端上的软件或者人工询问相关个人信息问题，在用户同意的前提下对用户A的个人信息和原始语音进行采集；所述原始声音采集子子模块创新性地解决了文化忌讳和用户A的不同实际情况的问题，在采集过程中以字词为主对用户A的原始语音进行分开录音，然后在播放时按照回复内容对采集的语音进行拼接播放；所述原始影像采集子子模块用于采集用户 A的原始影像，包括用户A在不同表情下说话和不说话的原始影像以及其它生活工作的原始影像。
[0010]前述的一种实现数字永生的人机交互系统中，所述记录和分析单元还包括个人信息分析模块和自传生成模块，个人信息分析模块将采集到的个人信息进行分析和整理，形成比较完整的个人数据库并储存；所述自传生成模块用于根据个人信息分析模块的个人数据库，自动生成用户A的自传。
[0011]前述的一种实现数字永生的人机交互系统中，所述交互单元包括信息问答模块、安慰协助模块、场景聊天模块、成功和幸福建议模块、健康建议模块、祭拜祈福模块和在线聊天模块，所述信息问答模块，用于根据记录和分析单元的个人信息和已有数据库，回答用户B提出的关于用户A的个人信息问题和非个人信息问题；所述安慰协助模块，用于根据检测到用户B需要安慰时，模拟用户A给予用户B语言安慰；所述场景聊天模块，用于根据不同的场景，模拟用户A和用户B进行聊天交互；所述成功和幸福建议模块，用于给予用户B积极建议；所述健康建议模块，用于根据收集到的用户B和及其亲友的死因、疾病、习惯和爱好，给予用户B健康建议；所述祭拜祈福模块，用于向用户B提供电子智能祭拜功能；所述在线聊天模块可以让用户B和在线的用户A进行文字、语音、或者视频交流。
[0012]前述的一种实现数字永生的人机交互系统中，所述回复和播放单元包括回复生成模块、主动播放模块、短视频分析和调用模块、语音合成模块和视频合成模块；所述回复生成模块用于采用原始语音、原始短视频、混合原始语音短视频和合成语音中的任意一种或多种方式进行回答；主动播放模块用于系统自动播放用户A的个人信息；短视频分析和调用模块用于根据用户B的问题和用户A的回答的文字内容，分析其中的情感并调用用户A的相关短视频；语音合成模块和视频合成模块用于使用用户A的原始语音和原始视频用人工智能技术合成接近用户A的语音和视频。
[0013]前述的一种实现数字永生的人机交互系统中，所述系统还包括登录单元、用户个人隐私保护单元以及整个系统的实物载体。
[0014]一种实现数字永生的人机交互系统的交互方法，包括以下步骤：
[0015]步骤一、用户B登录系统，选择交互单元中不同的和用户交互的模块；
[0016]步骤二、如果用户B选择祭拜祈福模块，则根据对应模块的交互方法进行交互；如果用户B选择其它交互模块，则系统将检查用户A是否当前在线：如果用户A当前在线，则进入在线聊天模块；如果用户A当前不在线，则进入被用户B选择的模块进行交互；
[0017]步骤三、回复和播放单元通过回复生成模块、主动播放模块、短视频分析和调用模
块、语音合成模块或者视频合成模块，进行回复。
[0018]前述的一种实现数字永生的人机交互系统的交互方法中，如果用户B选择信息问答模块，所述信息问答模块的交互方法包括以下步骤：
[0019]S1、读取用户B的名字，在用户A的亲友列表中寻找这个人并确定用户A和用户B之间的人物关系；
[0020]S2、通过人物关系得出相应的称呼词+语句；
[0021]S3、用户B提出问题，系统判断用户B提出的问题是个人问题还是非个人问题，如果是个人问题，则执行步骤S4，否则，执行步骤S5；
[0022]S4、提取个人问题中有关个人信息的关键词，如果没有提取到关键词，则请求用户B再说一遍、换一种问法或者换一个问题；如果提取到关键词而且根据关键词能够在个人数据库中找到相关信息，则根据这本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种实现数字永生的人机交互系统，其特征在于：所述系统包括记录和分析单元、交互单元以及回复和播放单元，所述记录和分析单元用于采集、分析、整理和储存用户A的个人信息，并形成个人数据库；所述交互单元，除了其在线聊天模块以外，用于当用户A不在线时，基于个人数据库和其它信息，通过回复和播放单元与用户B进行交互；所述回复和播放单元用于生成和播放相关的语音和视频。2.根据权利要求1所述的一种实现数字永生的人机交互系统，其特征在于：所述记录和分析单元包括个人信息采集模块，个人信息采集模块包括问答式采集子模块、社交媒体信息采集子模块以及社交媒体以外的信息采集子模块。3.根据权利要求2所述的一种实现数字永生的人机交互系统，其特征在于：所述问答式采集子模块包括问答式信息收集子子模块、原始声音采集子子模块和原始影像采集子子模块；问答式信息收集子子模块用于对用户A的个人信息和原始语音进行采集；所述原始声音采集子子模块用于以字词为主对用户A的原始语音进行分开录音；所述原始影像采集子子模块用于采集用户A的原始影像，包括用户A在不同表情下说话和不说话的原始影像以及其它生活工作的原始影像。4.根据权利要求1所述的一种实现数字永生的人机交互系统，其特征在于：所述记录和分析单元还包括个人信息分析模块和自传生成模块，个人信息分析模块将采集到的个人信息进行分析和整理，形成比较完整的个人数据库并储存；所述自传生成模块用于根据个人信息分析模块的个人数据库，自动生成用户A的自传。5.根据权利要求1所述的一种实现数字永生的人机交互系统，其特征在于：所述交互单元包括信息问答模块、安慰协助模块、场景聊天模块、成功和幸福建议模块、健康建议模块、祭拜祈福模块和在线聊天模块；所述信息问答模块，用于根据个人数据库和已有数据库，回答用户B提出的关于用户A的个人信息问题和非个人信息问题；所述安慰协助模块，用于根据检测到用户B需要安慰时，模拟用户A给予用户B语言安慰；所述场景聊天模块，用于根据不同的场景，模拟用户A和用户B进行聊天交互；所述成功和幸福建议模块，用于给予用户B积极建议；所述健康建议模块，用于根据收集到的用户B和及其亲友的死因、疾病、习惯和爱好，给予用户B健康建议；所述祭拜祈福模块，用于向用户B提供电子智能祭拜功能；所述在线聊天模块可以让用户B和在线的用户A进行文字、语音、或者视频交流。6.根据权利要求1所述的一种实现数字永生的人机交互系统，其特征在于：所述回复和播放单元包括回复生成模块、主动播放模块、短视频分析和调用模块、语音合成模块和视频合成模块；所述回复生成模块用于采用原始语音、原始短视频、混合原始语音短视频和合成语音中的任意一种或多种方式进行回答；主动播放模块用于系统自动播放用户A的个人信息；短视频分析和调用模块用于根据用户B的问题和用户A的回答的文字内容，分析其中的情感并调用用户A的相关短视频；语音合成模块和视频合成模块用于使用用户A的原始语音和原始视频用人工智能技术合成接近用户A的语音和视频。7.根据权利要求1
‑
6任意一项所述的一种实现数字永生的人机交互系统的交互方法，其特征在于：包括以下步骤：步骤一、用户B登录系统，选择交互单元中不同的和用户交互的模块；步骤二、如果用户B选择祭拜祈福模块，则根据对应模块的交互方法进行交互；如果用户B选择其它交互模块，则系统将检查用户A是否当前在线：如果用户A当前在线，则进入在
线聊天模块；如果用户A当前不在线，则进入被用户B选择的模块进行交互；步骤三、回复和播放单元通过回复生成模块、主动播放模块、短视频分析和调用模块、语音合成模块或者视频合成模块，进行回复。8.根据权利要求7所述的一种实现数字永生的人机交互系统的交互方法，其特征在于：如果用户B选择信息问答模块，所述信息问答模块的交互方法包括以下步骤：S1、读取用户B的名字，在用户A的亲友列表中寻找这个人并确定用户A和用户B之间的人物关系；S2、通过人物关系得出相应的称呼词+语句；S3、用户B提出问题，系统判断用户B提出的问题是个人问题还是非个人问题，如果是个人问题，则执行步骤S4，否则，执行步骤S5；S4、提取个人问题中有关个人信息的关键词，如果没有提取到关键词，则请求用户B再说一遍、换一种问法或者换一个问题；如果提取到关键词而且根据关键词能够在个人数据库中找到相关信息，则根据这些找到的信息做出相应的回答；如果提取到关键词但是根据关键词在个人数据库中找不到相关信息，则系统生成关键...

【专利技术属性】
技术研发人员：潘晓明，
申请(专利权)人：心行者科技杭州有限责任公司，
类型：发明
国别省市：