一种基于手机互联和语音识别的车载环视显示系统及方法技术方案

本发明专利技术公开了一种基于手机互联和语音识别的车载环视显示系统，包括360

【技术实现步骤摘要】
一种基于手机互联和语音识别的车载环视显示系统及方法


[0001]本专利技术属于汽车电子领域，具体涉及一种基于手机互联和语音识别的车载环视显示系统，还涉及一种基于手机互联和语音识别的车载环视显示方法。

技术介绍

[0002]随着我国汽车工业的快速发展和居民生活水平的显著提高，汽车普及率也越来越高，安全行车与人车交互体验成为用户越来越关注的问题。通过在汽车前、后、左、右视场范围内安装4个广角摄像头来采集多路视频，再将视频处理合成为360
°
的视图，可协助驾驶员获取车辆周围环境，实现安全行车。
[0003]随着驾驶场景的改变，驾驶员需要切换不同的视角来辅助驾驶，但是驾驶时又需要较高的专注度，不便动手操作显示屏来进行切换，通过语音控制来代替手动操作是解决上述问题的一个思路。
[0004]目前车载环境中的语音识别主要通过车载终端来完成，但是市场上现有车载终端的功能都有局限性，语音识别效率不高，车载终端本身升级更新的周期也较长，无法满足实际使用中不断更新的用户需求。

技术实现思路

[0005]本专利技术的目的是针对现有技术存在的上述问题，提供一种基于手机互联和语音识别的车载环视显示系统，还涉及一种基于手机互联和语音识别的车载环视显示方法。
[0006]为实现以上目的，本专利技术提供了以下技术方案：
[0007]一种基于手机互联和语音识别的车载环视显示系统，包括360
°
环视摄像头，还包括智能手机端和车载终端，
[0008]车载终端包括语音收集模块、通信模块、图像采集模块、图像处理模块和图像显示模块，
[0009]所述语音收集模块，通过麦克风采集音频，并将音频数据发送到通信模块；
[0010]所述通信模块，采用USB或蓝牙或WIFI方式来实现与智能手机端互联，向智能手机端发送音频数据，并接受智能手机端反馈的语音识别结果并反馈至图像显示模块；
[0011]所述图像采集模块，获取到360
°
环视摄像头拍摄的各个视角的环境图像，并将各个视角的环境图像传送至图像处理模块；
[0012]所述图像处理模块，对采集到的各个视角的环境图像进行处理后发送到图像显示模块；
[0013]所述图像显示模块，根据语音识别结果显示经过图像处理模块处理的环境图像。
[0014]一种基于手机互联和语音识别的车载环视显示方法，包括以下步骤：
[0015]步骤S101：用户发出语音指令，车载终端的语音收集模块采集音频数据，语音收集模块对音频数据进行降噪处理；
[0016]步骤S102：语音收集模块经过车载终端的通信模块将降噪处理后的音频数据传输
到智能手机端；
[0017]步骤S103：智能手机端接收音频数据，通过音频识别应用软件或将音频数据传至云端对音频数据进行识别处理获得语音识别结果，并将语音识别结果通过车载终端的通信模块发送至车载终端的图像显示模块；
[0018]步骤S104：车载终端的图像显示模块接收语音识别结果；
[0019]步骤S105：车载终端的图像采集模块获取360
°
环视摄像头拍摄到的不同视角的环境图像并传输到图像处理模块；
[0020]步骤S106：图像处理模块对采集到的不同视角的环境图像进行解析、格式转换、合并、缩放；
[0021]步骤S107：车载终端的图像显示模块根据语音识别结果显示经过图像处理模块处理的环境图像。
[0022]所述步骤S101中降噪处理包括以下步骤：
[0023]采集不同行驶速度、不同开关窗状态、不同空调档位构成的噪音条件下的车内噪声，
[0024]获取当前行驶速度、当前开关窗状态、当前空调档位，找到对应的噪音条件下的车内噪音，将语音收集模块采集音频数据中去除车内噪音。
[0025]所述智能手机端对音频数据的识别处理包括以下步骤：
[0026]步骤S401：智能手机端通过音频识别应用软件对音频数据进行解析、识别，得到第一语音识别结果S1，第一语音识别结果S1对应的第一置信度T1由音频识别应用软件自动生成；
[0027]步骤S402：在进行步骤S401的同时，智能手机端将音频数据上传至普强千语语音云平台，普强千语语音云平台对音频数据进行解析、识别后，将第二语音识别结果S2返回至智能手机端，第二语音识别结果S2对应的第二置信度T2由普强千语语音云平台自动生成；
[0028]步骤S403：比较第一置信度T1与第二置信度T2，以置信度高的语音识别结果作为最终的语音识别结果。
[0029]所述图像处理模块对采集到的不同视角的环境图像进行解析、格式转换、合并、缩放包括以下步骤：
[0030]步骤S501：图像采集模块通过360
°
环视摄像头实时采集车周的不同视角的YUV格式的环境图像；
[0031]步骤S502：图像处理模块将采集到的YUV格式的环境图像转化为RGB格式的环境图像；
[0032]步骤S503：将车前、车后、车左、车右四路环境图像进行拼接，并合并成360
°
环境图像；
[0033]步骤S504：进一步对合并后的360
°
环境图像进行裁剪、压缩、缩放，使360
°
环境图像适应图像显示模块的显示屏尺寸；
[0034]步骤S505：在车载终端的图像显示模块上显示处理后的360
°
环境图像。
[0035]本专利技术提供的技术方案带来的有益效果为：
[0036]第一、本专利技术将语音识别和智能手机端互联相结合，加快了语音识别的速度，也大大提高了准确率；
[0037]第二、驾驶员通过语音就可以控制车载终端的图像显示模块进行画面切换，实时获取车辆周围环境的同时，也保障了行车安全。
附图说明
[0038]图1为一种基于手机互联和语音识别的车载环视显示系统的结构图。
具体实施方式
[0039]为使本专利技术的目的、技术方案和优点更加清楚，下面将结合具体实例和附图对本专利技术实施方式作进一步地描述。需要强调的是，虽然本专利技术将结合实例进行阐述，这并非指本专利技术限定于这些实例，这些实例仅仅用于表明本专利技术的技术方案的可实施性。
[0040]本专利技术提供一种基于手机互联和语音识别的车载环视显示系统，如图1所示，它包括车载终端、智能手机端以及360
°
环视摄像头。
[0041]所述车载终端通过内置麦克风收集用户的音频数据，并将音频数据发送至智能手机端，然后接收智能手机端返回的语音识别结果，提取语音识别结果中的视角显示信息，根据视角显示信息切换显示对应视角的环境图像；
[0042]所述智能手机端，接收音频数据，并通过应用软件对音频数据进行识别获得语音识别结果，再将语音识别结果发送至车载终端；
[0043]所述360
°
环视摄像头，分别安装在车辆的前、后、左、右方，实时本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于手机互联和语音识别的车载环视显示系统，包括360
°
环视摄像头，其特征在于，还包括智能手机端和车载终端，车载终端包括语音收集模块、通信模块、图像采集模块、图像处理模块和图像显示模块，所述语音收集模块，通过麦克风采集音频，并将音频数据发送到通信模块；所述通信模块，采用USB或蓝牙或WIFI方式来实现与智能手机端互联，向智能手机端发送音频数据，并接受智能手机端反馈的语音识别结果并反馈至图像显示模块；所述图像采集模块，获取到360
°
环视摄像头拍摄的各个视角的环境图像，并将各个视角的环境图像传送至图像处理模块；所述图像处理模块，对采集到的各个视角的环境图像进行处理后发送到图像显示模块；所述图像显示模块，根据语音识别结果显示经过图像处理模块处理的环境图像。2.一种基于手机互联和语音识别的车载环视显示方法，包括以下步骤：步骤S101：用户发出语音指令，车载终端的语音收集模块采集音频数据，语音收集模块对音频数据进行降噪处理；步骤S102：语音收集模块经过车载终端的通信模块将降噪处理后的音频数据传输到智能手机端；步骤S103：智能手机端接收音频数据，通过音频识别应用软件或将音频数据传至云端对音频数据进行识别处理获得语音识别结果，并将语音识别结果通过车载终端的通信模块发送至车载终端的图像显示模块；步骤S104：车载终端的图像显示模块接收语音识别结果；步骤S105：车载终端的图像采集模块获取360
°
环视摄像头拍摄到的不同视角的环境图像并传输到图像处理模块；步骤S106：图像处理模块对采集到的不同视角的环境图像进行解析、格式转换、合并、缩放；步骤S107：车载终端的图像显示模块根据语音识别结果显示经过图像处理模块处理的环境图像。3.根据权利要求2所述的一种基于手机互联和语音识别的车载环视显示方法，其特征在于，所述步骤S101中降噪处理...

【专利技术属性】
技术研发人员：张东华，代志强，李冬青，欧阳雪，
申请(专利权)人：中电科创智联武汉有限责任公司，
类型：发明
国别省市：