基于AI人工智能技术的元宇宙虚拟人图书自动播报方法技术

技术编号:37595963 阅读:14 留言:0更新日期:2023-05-18 11:42
本发明专利技术公开了基于AI人工智能技术的元宇宙虚拟人图书自动播报方法,包括以下步骤,S1.图书对象识别:按照图书的页面,通过摄像头选取图书中的完整页面或某一章节的篇幅,摄像头所拍摄的图像和文字信息传输至计算机,将图书中选取的图像和文字进行识别,且计算机连接大数据库,图书还包括电子书;S2.文字语音转换:经计算机中的光学字符识别技术识别图书中文字,得到的文字文本通过文字语音转换技术转成语音信息,而电子书中的文字文本直接通过文字语音转换技术转成语音信息,本发明专利技术通过AI人工智能技术将图书中的图像和文字信息识别、处理和转换,结合元宇宙虚拟人物作出表情和文字的播报,使图书自动播报的过程中更赋有情感。使图书自动播报的过程中更赋有情感。使图书自动播报的过程中更赋有情感。

【技术实现步骤摘要】
基于AI人工智能技术的元宇宙虚拟人图书自动播报方法


[0001]本专利技术涉及图书播报
,具体涉及基于AI人工智能技术的元宇宙虚拟人图书自动播报方法。

技术介绍

[0002]图书是用来记录一切成就的主要工具,也是交融感情、取得知识和传承经验的重要媒介,一直以来对于图书总是给予最高的肯定与特别的关怀,图书播报通常是通过广播等传播介质来完成的,而随着社会经济的发展,元宇宙虚拟人的出现为图书播报提供另一种播报形式,元宇宙通过虚拟增强的物理现实,呈现收敛性和物理持久性特征的,基于未来互联网,具有链接感知和共享特征的3D虚拟空间展现出构建与传统物理世界平行的全息数字世界的可能性,虚拟人是元宇宙的重要组成部分,虚拟人指由CG技术构建、以代码形式运行的拟人化形象,人工智能技术简写为AI。是科学研究、开发设计用以仿真模拟、拓宽和拓展人的智能化的基本知识、方式、专业能力及系统的一门新的专业能力科学研究,人工智能技术技术性专业性能够对人的意识、逻辑思维的信息内容全部全过程的仿真模拟。
[0003]如授权公告号为CN201910342941.6,授权公告日为20190726的一种电子书语音播报设备及方法,该电子书语音播报设备包括指示装置、处理装置和扬声器,指示装置和扬声器分别与处理装置连接,指示装置用于获取待播报电子书的指示信息,并将指示信息发送至处理装置,处理装置用于获得与指示信息对应的文本数据,将文本数据转换为音频数据,并发送至扬声器,扬声器用于将音频数据转换为声音信号,并对声音信号进行播报。
[0004]图书上的文字内容需要进行播报时,图书中的图像和文字转换,并通过播放器等设备播出,但是通过播放器等设备播报,其播报内容死板不够赋有情感,并且播报时所传达的表情信息也不易接收到,智能化程度较低,因此,亟需设计基于AI人工智能技术的元宇宙虚拟人图书自动播报方法来解决上述问题。

技术实现思路

[0005]本专利技术的目的是提供基于AI人工智能技术的元宇宙虚拟人图书自动播报方法,以解决现有技术中的上述不足之处。
[0006]为了实现上述目的,本专利技术提供如下技术方案:
[0007]基于AI人工智能技术的元宇宙虚拟人图书自动播报方法,包括以下步骤:
[0008]S1.图书对象识别:按照图书的页面,通过摄像头选取图书中的完整页面或某一章节的篇幅,摄像头所拍摄的图像和文字信息传输至计算机,将图书中选取的图像和文字进行识别,且计算机连接大数据库,图书还包括电子书;
[0009]S2.文字语音转换:经计算机中的光学字符识别技术识别图书中文字,得到的文字文本通过文字语音转换技术转成语音信息,而电子书中的文字文本直接通过文字语音转换技术转成语音信息;
[0010]S3.语音信息处理:文字转换后得到的语音信息数据传输到计算机的处理器,计算
机的处理器将语音信息数据按照特定情绪的词条处理划分;
[0011]S4.图像情感拾取:图像拾取后依据图书中内容在适当的时候播放,并在虚拟空间中进行展示;
[0012]S5.元宇宙虚拟人物形象建立:通过模型重建方法,虚拟人会通过扫描生成和三维建模的方式制作生成,得到虚拟人物模型;
[0013]S6.对照待播报内容:人脸面部信息尤其是情绪信息预先设置好并放在虚拟人表情动画库中,图书中的文字通过AI引擎识别情绪并分类,然后和表情动画库中的预设情绪动画做匹配;
[0014]S7.播报信息传输:人脸面部表情信息尤其是情绪信息与语音信息输入到元宇宙虚拟人的系统中,虚拟人在播报时会体现情绪;
[0015]S8.元宇宙虚拟人播报:元宇宙虚拟人接收到播报指令后,根据图书中的文字播报语音内容;
[0016]S9.播报检阅:元宇宙虚拟人播报语音内容后,内容管理员听取播报内容,如对播报内容的语音音调或宇宙虚拟人播报表情不满意,重新选取语音音调或宇宙虚拟人播报表情,并对语音音调或宇宙虚拟人播报表情进行检阅和调整。
[0017]进一步地,所述大数据库中包括图像标签模块,所述计算机获取的图像和文字通过图像标签模块提取重要的特征,将图像和文字区分。
[0018]进一步地,所述S2中,光学字符识别技术将图书中的文本资料扫描分析,得到文字文本资料,所述光学字符识别技术和文字语音转换技术均为计算机自带技术功能。
[0019]进一步地,所述S3中,语音信息数据按照特定情绪的词条处理划分,其中特定情绪的词条为“开心”、“愤怒”、“伤心”、“恐惧”的常用情绪词条。
[0020]进一步地,所述大数据库内包括虚拟人的动作表情库,在识别书中文字的情绪后,匹配至虚拟人的动作表情库。
[0021]进一步地,在将文字的情绪识别后,内容管理员通过宇宙虚拟人观察,宇宙虚拟人在播放的时候输出对应的情绪动作表情。
[0022]进一步地,所述S5中,所述模型重建方法通过大数据库中的模型、材质、纹理和光照信息进行建立。
[0023]进一步地,所述S7中,虚拟人的动作表情依照语音信息内容匹配,也就是语音信息内容能对应相应的表情。
[0024]进一步地,所述S7中,语音信息分成多个时间段,一个时间段即为一帧,虚拟人的动作表情信息对照不同语音信息帧,并按播报的顺序整理。
[0025]进一步地,所述S9中,播报内容的语音音调或宇宙虚拟人播报表情不满意,返回到S3和S6中,重新选取语音音调或宇宙虚拟人播报表情。
[0026]在上述技术方案中,本专利技术提供的基于AI人工智能技术的元宇宙虚拟人图书自动播报方法,本专利技术通过AI人工智能技术将图书中的图像和文字信息识别、处理和转换,结合元宇宙虚拟人物作出表情和文字的播报,使图书自动播报的过程中更赋有情感;本专利技术连接大数据库,利用大数据库中的数据信息,来提取语音数据的重要特征,使播报方法的智能化程度提高;本专利技术在语音内容播报后还能返回播报方法中再次对语音及人脸面部表情进行选取,适合不同用户人群的多种需求。
附图说明
[0027]为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本专利技术中记载的一些实施例,对于本领域普通技术人员来讲,还可以根据这些附图获得其他的附图。
[0028]图1为本专利技术基于AI人工智能技术的元宇宙虚拟人图书自动播报方法实施例提供的方法流程示意图一。
[0029]图2为本专利技术基于AI人工智能技术的元宇宙虚拟人图书自动播报方法实施例提供的方法流程示意图二。
[0030]图3为本专利技术基于AI人工智能技术的元宇宙虚拟人图书自动播报方法实施例提供的方法流程示意图三。
具体实施方式
[0031]为了使本领域的技术人员更好地理解本专利技术的技术方案,下面将结合附图对本专利技术作进一步的详细介绍。
[0032]如图1

3所示,本专利技术实施例提供的基于AI人工智能技术的元宇宙虚拟人图书自动播报方法,包括以下步骤:
[0033]S1本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.基于AI人工智能技术的元宇宙虚拟人图书自动播报方法,其特征在于,包括以下步骤:S1.图书对象识别:按照图书的页面,通过摄像头选取图书中的完整页面或某一章节的篇幅,摄像头所拍摄的图像和文字信息传输至计算机,将图书中选取的图像和文字进行识别,且计算机连接大数据库,图书还包括电子书;S2.文字语音转换:经计算机中的光学字符识别技术识别图书中文字,得到的文字文本通过文字语音转换技术转成语音信息,而电子书中的文字文本直接通过文字语音转换技术转成语音信息;S3.语音信息处理:文字转换后得到的语音信息数据传输到计算机的处理器,计算机的处理器将语音信息数据按照特定情绪的词条处理划分;S4.图像情感拾取:图像拾取后依据图书中内容在适当的时候播放,并在虚拟空间中进行展示;S5.元宇宙虚拟人物形象建立:通过模型重建方法,虚拟人会通过扫描生成和三维建模的方式制作生成,得到虚拟人物模型;S6.对照待播报内容:人脸面部信息尤其是情绪信息预先设置好并放在虚拟人表情动画库中,图书中的文字通过AI引擎识别情绪并分类,然后和表情动画库中的预设情绪动画做匹配;S7.播报信息传输:人脸面部表情信息尤其是情绪信息与语音信息输入到元宇宙虚拟人的系统中,虚拟人在播报时会体现情绪;S8.元宇宙虚拟人播报:元宇宙虚拟人接收到播报指令后,根据图书中的文字播报语音内容;S9.播报检阅:元宇宙虚拟人播报语音内容后,内容管理员听取播报内容,如对播报内容的语音音调或宇宙虚拟人播报表情不满意,重新选取语音音调或宇宙虚拟人播报表情,并对语音音调或宇宙虚拟人播报表情进行检阅和调整。2.根据权利要求1所述的基于AI人工智能技术的元宇宙虚拟人图书自动播报方法,其特征在于,所述大数据库中包括图像标签模块,所述计算机获取的图像和文字通过图像标签模块提取重要的特征,将图像和文字区分。3.根据权利要求1所...

【专利技术属性】
技术研发人员:邵丹孙明
申请(专利权)人:中图云创智能科技北京有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1