一种结合肢体语言的口语训练方法及系统技术方案

本发明专利技术适用计算机技术领域，提供了一种结合肢体语言的口语训练方法及系统，所述方法包括：发送口语训练文本后，开启摄像头及麦克风分别获取目标人物的影像数据及语音数据；分别提取所述影像数据中的动作特征及语音数据中的语音特征；将所述动作特征及所述语音特征依次与口语训练范例进行比对，得到训练成绩。本发明专利技术在向用户发送口语训练文本，将用户对口语训练文本做出的肢体语言以及发出的语音数据进行采集，通过分别提取动作特征和语音特征，与口语训练范例进行比对，不仅对音准方面进行训练，而且结合肢体语言进行训练，结合两个方向进行训练，帮助用户提高口语水平。

【技术实现步骤摘要】
一种结合肢体语言的口语训练方法及系统
本专利技术属于计算机
，尤其涉及一种结合肢体语言的口语训练方法及系统。
技术介绍
目前口语训练一般都是通过检测学习者的发音状况，通过语音识别和分析系统来判断用户是否发音标准。但是用户在发音的过程中，只是掌握了语音的读法还远远不够，很多情况下语言交流需要一些其他的辅助手段来理解，同一句话在各种表情和肢体动作的配合下表达出来的意思也不尽相同，所以传统的口语训练方法只能针对口语的语音数据进行判断和打分，无法解决语言学习过程中的肢体语言部分的训练与检测。
技术实现思路
本专利技术的目的在于提供一种结合肢体语言的口语训练方法及系统，旨在解决现有技术中的口语训练只针对语音数据进行训练，没有结合肢体语言进行训练，无法从发音和肢体语言两个方面同时提升口语训练效果。一方面，本专利技术提供了一种结合肢体语言的口语训练方法，所述方法包括下述步骤：发送口语训练文本后，开启摄像头及麦克风分别获取目标人物的影像数据及语音数据；分别提取所述影像数据中的动作特征及语音数据中的语音特征；将所述动作特征及所述语音特征依次与口语训练范例进行比对，得到训练成绩。另一方面，本专利技术提本文档来自技高网...

【技术保护点】
一种结合肢体语言的口语训练方法，其特征在于，所述方法包括下述步骤：发送口语训练文本后，开启摄像头及麦克风分别获取目标人物的影像数据及语音数据；分别提取所述影像数据中的动作特征及语音数据中的语音特征；将所述动作特征及所述语音特征依次与口语训练范例进行比对，得到训练成绩。

【技术特征摘要】
1.一种结合肢体语言的口语训练方法，其特征在于，所述方法包括下述步骤：发送口语训练文本后，开启摄像头及麦克风分别获取目标人物的影像数据及语音数据；分别提取所述影像数据中的动作特征及语音数据中的语音特征；将所述动作特征及所述语音特征依次与口语训练范例进行比对，得到训练成绩。2.如权利要求1所述的方法，其特征在于，提取所述影像数据中的动作特征的步骤，包括：按照预设时间间隔，依次提取所述影像数据中的关键点的坐标位置，形成动作特征。3.如权利要求2所述的方法，其特征在于，按照预设时间间隔，依次提取所述影像数据中的关键点的坐标位置，形成动作特征的步骤，包括：对每个关键点的坐标位置依次进行连接，得到运动轨迹。4.如权利要求1所述的方法，其特征在于，将所述动作特征与口语训练范例进行比对的步骤，包括：将所述动作特征与所述口语训练范例中的动作特征范例进行比对，计算出所述动作特征与所述动作特征范例的偏差值。5.如权利要求1所述的方法，其特征在于，所述训练成绩包括肢体语言成绩以及口语成绩，所述肢体语言成绩为所述动作特征与所述口语训练范例中的动作特征范例的偏差值，所述口语成绩为所述语音特征与所述口语训练范例中的语音特征范例的相似度...

【专利技术属性】
技术研发人员：张浩，
申请(专利权)人：广东小天才科技有限公司，
类型：发明
国别省市：广东,44