虚拟现实及AI识别英语学习系统技术方案

技术编号:29756614 阅读:20 留言:0更新日期:2021-08-20 21:09
本发明专利技术涉及一种虚拟现实及AI识别英语学习系统,包括虚拟现实再现部和内容提供部,虚拟现实再现部包括:语音扬声器,其向使用者输出内容的语音;麦克风,其感知使用者的语音;使用者终端,使用者终端控制语音扬声器和显示器;显示器,其以视觉表现内容提供部通过使用者终端提供的内容的影像;内容提供部包括:学习课题选择部,其提供课题选择菜单,或以使用者的学习信息为基础推荐课题选择菜单;学习等级选择部,其针对在学习课题选择部选择的学习课题提供菜单,或根据使用者的学习等级自动指定等级;学习进行部,其根据前步骤选择或指定的学习课题及学习等级进行英语学习;学习数据管理部,其对借助于学习进行部进行的英语学习课题的评价结果。

【技术实现步骤摘要】
虚拟现实及AI识别英语学习系统
本专利技术涉及一种使用者可以在虚拟现实中进行如同实际的体验并学习英语的虚拟现实及AI识别英语学习系统。
技术介绍
韩国专利第10-1770220号涉及一种外语学习服务系统,包括提供虚拟现实影像的服务提供服务器,所述服务提供服务器包括:通信部,所述通信部与要接受外语学习服务的使用者佩戴的至少一个第一使用者终端及讲师使用的第二使用者终端进行网络;模拟选择部,所述模拟选择部从所述第一使用者终端接受选择在多个模拟场景中要学习的模拟场景;影像提供部,所述影像提供部将与所述使用者及所述讲师对应的角色分别反映于在数据库存储的多个模拟场景的虚拟现实影像中与所述选择的模拟场景对应的虚拟现实影像,分别提供给所述第一使用者终端及第二使用者终端;语音提供部,所述语音提供部从所述第一使用者终端接受语音输入并传输给所述第二使用者终端;及控制部,所述控制部在设置时间以上未从所述第一使用者终端输入语音,或捕捉随着使用者视线而变化的所述第一使用者终端的角色的表情及视线时,使得通过所述第一使用者终端输出警告音或警告画面,在多个第一使用者终端进行网络连接的情况下,如果从某一个第一使用者终端连续输入语音超过设置次数以上,则将在从另一个第一使用者终端输入语音之前所输入的语音进行静音处理;模拟场景由多个阶段场景构成,如果从所述第二使用者终端接收对相应阶段场景的学习完成信息,则所述影像提供部将与下个阶段场景对应的虚拟现实影像分别提供给所述第一使用者终端及第二使用者终端。以往的英语学习作为利用远程通信的1:1学习或初期阶段的虚拟现实学习方法,在激发学习者兴趣方面不足,学习效果微乎其微,几乎没有成功的产品。
技术实现思路
本专利技术旨在提供一种虚拟现实及AI识别英语学习系统技术,摆脱诸如原有1:1对话等的枯燥的英语学习方法,使用者选择置身异国虚拟空间(例如机场、地铁、加油站、住宿设施、饭店)环境的执行课题,在该虚拟空间内,在与NPC(对方角色)互致对话或表情的同时,如同游戏及旅行般进行英语学习及提高对话能力。本专利技术旨在提供一种虚拟现实及AI识别英语学习系统技术,评价基于使用者虚拟体验的学习结果并存储管理,从而能够以此为基础向使用者推荐课题并进行评价,可以在系统地管理使用者的英语学习过程的同时,诱导发展方向。另外,本专利技术旨在提供一种虚拟现实及AI识别英语学习系统技术,不仅是使用者的语音识别,还能够实现基于表情动作识别的使用者化身的动画,能够增大虚拟空间的现实感和与化身的一体感。另外,旨在提供一种虚拟现实及AI识别英语学习系统技术,通过人工智能手段捕获单词句子的感情并反映于使用者化身或NPC的表情,从而更具现实感。另外,旨在提供一种虚拟现实及AI识别英语学习系统技术,当使用者英语沟通困难时,如果英语不足的使用者用韩语请求帮助,则英语用字幕表现,即使在使用者英语不足的情况下,也可以在继续体检的同时提高英语实力。本专利技术的虚拟现实及AI识别英语学习系统涉及利用虚拟现实的英语学习系统,其特征在于,包括虚拟现实再现部和内容提供部构成,其中,所述虚拟现实再现部包括:语音扬声器,所述语音扬声器向使用者输出内容的语音;麦克风,所述麦克风感知使用者的语音;使用者终端,所述使用者终端将所述麦克风的语音信号提供给内容提供部,控制所述语音扬声器和显示器;显示器,所述显示器以视觉方式表现内容提供部通过所述使用者终端提供的内容的影像;所述内容提供部包括:学习课题选择部,所述学习课题选择部提供课题选择菜单以便使用者能够选择学习课题,或以学习数据管理部存储的使用者的学习信息为基础推荐课题选择菜单;学习等级选择部,所述学习等级选择部针对在所述学习课题选择部选择的学习课题提供菜单以便使用者能够选择等级(难易度),或根据学习数据管理部存储的使用者的学习等级,自动指定使用者的等级(难易度);学习进行部,所述学习进行部根据前步骤选择或指定的学习课题及学习等级进行英语学习;学习数据管理部,所述学习数据管理部存储管理对借助于所述学习进行部进行的使用者的英语学习课题的评价结果。根据本专利技术,提供一种虚拟现实及AI识别英语学习系统技术,摆脱诸如原有1:1对话等的枯燥的英语学习方法,使用者选择置身异国虚拟空间(例如机场、地铁、加油站、住宿设施、饭店)环境的执行课题,在该虚拟空间内,在与NPC(对方角色)互致对话或表情的同时,如同游戏及旅行般进行英语学习及提高对话能力。另外,根据本专利技术,提供一种虚拟现实及AI识别英语学习系统技术,评价基于使用者虚拟体验的学习结果并存储管理,从而能够以此为基础向使用者推荐课题并进行评价,可以在系统地管理使用者的英语学习过程的同时,诱导发展方向。另外,根据本专利技术,提供一种虚拟现实及AI识别英语学习系统技术,不仅是使用者的语音识别,还能够实现基于表情动作识别的使用者化身的动画,能够增大虚拟空间的现实感和与化身的一体感。另外,旨在提供一种虚拟现实及AI识别英语学习系统技术,通过人工智能手段捕获单词句子的感情并反映于使用者化身或NPC的表情,从而更具现实感。另外,提供一种虚拟现实及AI识别英语学习系统技术,当使用者英语沟通困难时,如果英语欠佳的使用者用韩语请求帮助,则英语用字幕表现,即使在使用者英语不足的情况下,也可以在继续体验的同时提高英语实力。附图说明图1是本专利技术一个实施例的虚拟现实及AI识别英语学习系统整体构成图。图2是本专利技术一个实施例的虚拟现实及AI识别英语学习系统内容提供部详细构成图。附图标记100:虚拟现实再现部110:语音扬声器120:麦克风130:使用者终端140:显示器150:摄像机200:内容提供部210:学习课题选择部270:学习数据管理部230:学习等级选择部300:学习进行部310:库320:化身及NPC影像生成部330:使用者语音识别部331:英语识别部335:韩语识别部340:使用者语音回答评价部350:NPC语音应答生成部360:句子单词感情推定部370:化身及NPC表情影像生成部380:AI使用者动作表情识别部390:使用者表情及动作影像反映部410:英语变换部420:英语字幕影像生成部430:修订句子建议部具体实施方式下面参照附图,对本专利技术的虚拟现实及AI识别英语学习系统进行详细说明。图1是本专利技术一个实施例的虚拟现实及AI识别英语学习系统整体构成图,图2是本专利技术一个实施例的虚拟现实及AI识别英语学习系统内容提供部详细构成图。如图1、图2所示,本专利技术的虚拟现实及AI识别英语学习系统包括虚拟现实再现部100和内容提供部200构成。在利用虚拟现实的英语学习系统中,虚拟现实再现部100包括:语音扬声器110,所述语音扬声器110向使用者输出内容的语音;麦克风120,所述麦克风120感知使用者的语音;使用者终端130,所述使用者终端130将所述麦克风120的语音信号提供给内本文档来自技高网
...

【技术保护点】
1.一种虚拟现实及AI识别英语学习系统,在利用虚拟现实的英语学习系统中,其特征在于,/n包括虚拟现实再现部(100)和内容提供部(200)构成,其中,/n所述虚拟现实再现部(100)包括:/n语音扬声器(110),所述语音扬声器(110)向使用者输出内容的语音;/n麦克风(120),所述麦克风(120)感知使用者的语音;/n使用者终端(130),所述使用者终端(130)将所述麦克风(120)的语音信号提供给内容提供部(100),控制所述语音扬声器(110)和显示器(140);/n显示器(140),所述显示器(140)以视觉方式表现内容提供部(200)通过所述使用者终端(130)提供的内容的影像;/n所述内容提供部(200)包括:/n学习课题选择部(210),所述学习课题选择部(210)提供课题选择菜单以便使用者能够选择学习课题,或以学习数据管理部(270)存储的使用者的学习信息为基础推荐课题选择菜单;/n学习等级选择部(230),所述学习等级选择部(230)针对在所述学习课题选择部(210)选择的学习课题提供菜单以便使用者能够选择等级(难易度),或根据学习数据管理部(270)存储的使用者的学习等级,自动指定使用者的等级(难易度);/n学习进行部(300),所述学习进行部(300)根据前步骤选择或指定的学习课题及学习等级进行英语学习;/n学习数据管理部(270),所述学习数据管理部(270)存储管理对借助于所述学习进行部(300)进行的使用者的英语学习课题的评价结果。/n...

【技术特征摘要】
1.一种虚拟现实及AI识别英语学习系统,在利用虚拟现实的英语学习系统中,其特征在于,
包括虚拟现实再现部(100)和内容提供部(200)构成,其中,
所述虚拟现实再现部(100)包括:
语音扬声器(110),所述语音扬声器(110)向使用者输出内容的语音;
麦克风(120),所述麦克风(120)感知使用者的语音;
使用者终端(130),所述使用者终端(130)将所述麦克风(120)的语音信号提供给内容提供部(100),控制所述语音扬声器(110)和显示器(140);
显示器(140),所述显示器(140)以视觉方式表现内容提供部(200)通过所述使用者终端(130)提供的内容的影像;
所述内容提供部(200)包括:
学习课题选择部(210),所述学习课题选择部(210)提供课题选择菜单以便使用者能够选择学习课题,或以学习数据管理部(270)存储的使用者的学习信息为基础推荐课题选择菜单;
学习等级选择部(230),所述学习等级选择部(230)针对在所述学习课题选择部(210)选择的学习课题提供菜单以便使用者能够选择等级(难易度),或根据学习数据管理部(270)存储的使用者的学习等级,自动指定使用者的等级(难易度);
学习进行部(300),所述学习进行部(300)根据前步骤选择或指定的学习课题及学习等级进行英语学习;
学习数据管理部(270),所述学习数据管理部(270)存储管理对借助于所述学习进行部(300)进行的使用者的英语学习课题的评价结果。


2.根据权利要求1所述的虚拟现实及AI识别英语学习系统,其特征在于,
所述学习进行部(300)包括:
库(310),所述库(310)存储化身及NPC角色影像、按学习课题等级构成的三维背景及空间影像、NPC英语台词信息;
化身及NPC影像生成部(320),所述化身及NPC影像生成部(320)将从所述库(310)导入的化身及NPC影像形成动画;
使用者语音识别部(330),所述使用者语音识别部(330)感知所述麦克风(120)感知的使用者的语音,利用人工智能手段变换成语言;
使用者语音回答评价部(340),所述使用者语音回答评价部(340)利用所述使用者语音识别部(330)的使用者语音识别结果,判断回答或各场景内容的适合性;
NPC语音应答生成部(350),所述NPC语音应答生成部(350)以所述使用者语音识别部(330)与使用者语音回答评价部(340)的评价结果为基础,生成NPC的应答英语语音。


3.根据权利要求2所述的虚拟现实及AI识别英语学习系统,其特征在于,
所述学习进行部(300)还包括:
句子单词感情推定部(360),所述句子单词感情推定部(360)以NPC...

【专利技术属性】
技术研发人员:郑成勤
申请(专利权)人:可视光有限公司
类型:发明
国别省市:韩国;KR

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1