车辆及其基于物品显示信息的语音交互方法和系统技术方案

本申请涉及车辆技术领域，提供一种车辆及其基于物品显示信息的语音交互方法和系统，提供车机设备、一屏显装置和摄像头，屏显装置判断是否获取到目标物品，若获取到目标物品，判断所述目标物品是否进入指定的识别区域，若进入指定的识别区域，所述摄像头识别所述目标物品的特征信息，获取所述目标物品的详细信息提示给用户；获取用户根据所述详细信息所作的语音反馈，根据所述语音反馈切换详细信息、关闭所述详细信息和/或显示更多的详细信息。本申请能够对用户的随身携带物品或车载摆件进行识别，能够获取其详细信息并显示给用户，以供用户即时了解，进而可以实现人机交互。

Vehicle and its voice interaction method and system based on object display information

【技术实现步骤摘要】
车辆及其基于物品显示信息的语音交互方法和系统
本申请涉及车辆
，具体涉及一种基于物品显示信息的语音交互方法，以及应用所述基于物品显示信息的语音交互方法的系统和车辆。
技术介绍
随着生活水平的不断改善，汽车在人们的生活中越来越普遍，逐步成为城市和乡村的人们生活中不可或缺的交通工具之一。同时，人们不再简单的定义汽车为交通运输工具与代步工具，汽车的安全性、环保性、舒适性以及娱乐性等方面的需求越来越大。特别是在车辆使用过程中，用户希望用车体验能够更加舒适、互动和可观赏性等，但是，目前车辆只能提供简单的搭运功能，用户上车一般就是简单的开车，乘客则只能聊天、看手机或者直接睡觉。显然，现有的车内设置明显跟不上技术发展的趋势，难以满足日益增长的物质文化需求。针对现有技术的多方面不足，本申请的专利技术人经过深入研究，提出一种车辆及其基于物品显示信息的语音交互方法和系统。
技术实现思路
本申请的目的在于，提供一种车辆及其基于物品显示信息的语音交互方法和系统，能够对用户的随身携带物品进行识别，而且当这些物品邻接至某些识别区域时，能够自动生成详细信息，比如动画、介绍和图片展示等，便于用户了解，增强用户互动体验。为解决上述技术问题，本申请提供一种基于物品显示信息的语音交互方法，作为其中一种实施方式，提供车机设备、一屏显装置和摄像头，所述基于物品显示信息的语音交互方法包括：屏显装置判断是否获取到目标物品；若获取到目标物品，判断所述目标物品是否进入指定的识别区域；<br>若进入指定的识别区域，所述摄像头识别所述目标物品的特征信息；车机设备根据所述特征信息从自身数据库和/或网络获取所述目标物品的详细信息；将所述详细信息通过预定方式提示给用户；获取用户根据所述详细信息所作的语音反馈，根据所述语音反馈切换详细信息、关闭所述详细信息和/或显示更多的详细信息，以实现语音交互。作为其中一种实施方式，所述获取用户根据所述详细信息所作的语音反馈，根据所述语音反馈切换详细信息、关闭所述详细信息和/或显示更多的详细信息，以实现语音交互的步骤，具体包括：采用TTS播报的方式与用户之间进行多轮语音交互，以获取用户的语音反馈；根据所述语音反馈切换详细信息、关闭所述详细信息和/或显示更多的详细信息。作为其中一种实施方式，所述摄像头识别所述目标物品的形状、轮廓、色彩、图案和/或纹理的特征信息；和/或，所述车机设备通过屏显装置的压力传感器的压感方式判断是否获取到目标物品。作为其中一种实施方式，所述车机设备根据所述特征信息从自身数据库和/或网络获取所述目标物品的详细信息的步骤，具体包括：车机设备从预存储到本地的数据库中查找与所述目标物品对应的详细信息；和/或，车机设备将所述特征信息发送至云服务器进行处理，并获取云服务器返回的与所述特征信息相关联的详细信息。作为其中一种实施方式，所述摄像头获取所述目标物品邻近所述指定的识别区域的接触面的第一特征信息，远离所述接触面的背面的第二特征信息，和/或位于所述接触面与所述背面之间的多个侧面的第三特征信息，以作为所述目标物品的特征信息。作为其中一种实施方式，所述屏显装置为一体化屏显桌面、具备屏幕的车载中央扶手和/或车载摄像头。作为其中一种实施方式，所述详细信息通过视频、图片、网站、游戏界面和/或悬浮窗口的方式显示给用户。作为其中一种实施方式，当所述详细信息通过悬浮窗口的方式显示给用户时，可手动设置所述悬浮窗口的颜色及透明度，并可调整其显示位置。为解决上述技术问题，本申请还提供一种基于物品显示信息的语音交互系统，包括车机设备、一屏显装置和摄像头，作为其中一种实施方式，所述车机设备包括存储器和处理器，所述存储器存储有计算机程序，所述处理器用于执行计算机程序，以实现如上所述的基于物品显示信息的语音交互方法。为解决上述技术问题，本申请还提供一种车辆，作为其中一种实施方式，所述车辆配置有如上所述的基于物品显示信息的语音交互系统。本申请车辆及其基于物品显示信息的语音交互方法和系统，屏显装置判断是否获取到目标物品，若获取到目标物品，判断所述目标物品是否进入指定的识别区域，若进入指定的识别区域，所述摄像头识别所述目标物品的特征信息，车机设备根据所述特征信息从自身数据库和/或网络获取所述目标物品的详细信息，将所述详细信息通过预定方式提示给用户，获取用户根据所述详细信息所作的语音反馈，根据所述语音反馈切换详细信息、关闭所述详细信息和/或显示更多的详细信息，以实现语音交互。本申请能够对用户的随身携带物品进行识别，而且当这些物品邻接至某些识别区域时，能够自动生成详细信息，比如动画、介绍和图片展示等，便于用户了解，增强用户互动体验。通过上述方式，本申请能感应到摆放的小物件，并能智能识别物体的类别，在屏幕环绕该摆件物体显示出与之相关的优选的聚合卡片内容，极大地提高车辆座舱的使用体验，还可以应用到智能家居领域等。上述说明仅是本申请技术方案的概述，为了能够更清楚了解本申请的技术手段，而可依照说明书的内容予以实施，并且为了让本申请的上述和其他目的、特征和优点能够更明显易懂，以下特举较佳实施例，并配合附图,详细说明如下。附图说明图1为本申请基于物品显示信息的语音交互方法一实施方式的流程示意图。图2为本申请基于物品显示信息的语音交互系统的车机设备的模块示意图。具体实施方式为更进一步阐述本申请为达成预定申请目的所采取的技术手段及功效,以下结合附图及较佳实施例，对依据本申请车辆及其基于物品显示信息的语音交互方法和系统的具体实施方式、方法、步骤、特征及其效果，详细说明如下。有关本申请的前述及其他
技术实现思路
、特点及功效,在以下配合参考图式的较佳实施例的详细说明中将可清楚呈现。通过具体实施方式的说明,当可对本申请为达成预定目的所采取的技术手段及效果得以更加深入且具体的了解，然而所附图式仅是提供参考与说明之用,并非用来对本申请加以限制。请参阅图1，图1为本申请基于物品显示信息的语音交互方法一实施方式的流程示意图。需要说明的是，本申请提供车机设备、一屏显装置和摄像头，本实施方式所述基于物品显示信息的语音交互方法可以包括但不限于如下几个步骤。步骤S101，屏显装置判断是否获取到目标物品；步骤S102，若获取到目标物品，判断所述目标物品是否进入指定的识别区域；若无，则不作处理；步骤S103，若进入指定的识别区域，所述摄像头识别所述目标物品的特征信息；步骤S104，车机设备根据所述特征信息从自身数据库和/或网络获取所述目标物品的详细信息；步骤S105，将所述详细信息通过预定方式提示给用户；步骤S106，获取用户根据所述详细信息所作的语音反馈，根据所述语音反馈切换详细信息、关闭所述详细信息和/或显示更多的详细信息，以实现语音交互。需要说明的是，本实施方式所述的预定方式，可以指的本文档来自技高网...

【技术保护点】
1.一种基于物品显示信息的语音交互方法，其特征在于，提供车机设备、一屏显装置和摄像头，所述基于物品显示信息的语音交互方法包括：/n屏显装置判断是否获取到目标物品；/n若获取到目标物品，判断所述目标物品是否进入指定的识别区域；/n若进入指定的识别区域，所述摄像头识别所述目标物品的特征信息；/n车机设备根据所述特征信息从自身数据库和/或网络获取所述目标物品的详细信息；/n将所述详细信息通过预定方式提示给用户；/n获取用户根据所述详细信息所作的语音反馈，根据所述语音反馈切换详细信息、关闭所述详细信息和/或显示更多的详细信息，以实现语音交互。/n

【技术特征摘要】
1.一种基于物品显示信息的语音交互方法，其特征在于，提供车机设备、一屏显装置和摄像头，所述基于物品显示信息的语音交互方法包括：
屏显装置判断是否获取到目标物品；
若获取到目标物品，判断所述目标物品是否进入指定的识别区域；
若进入指定的识别区域，所述摄像头识别所述目标物品的特征信息；
车机设备根据所述特征信息从自身数据库和/或网络获取所述目标物品的详细信息；
将所述详细信息通过预定方式提示给用户；
获取用户根据所述详细信息所作的语音反馈，根据所述语音反馈切换详细信息、关闭所述详细信息和/或显示更多的详细信息，以实现语音交互。


2.根据权利要求1所述的基于物品显示信息的语音交互方法，其特征在于，所述获取用户根据所述详细信息所作的语音反馈，根据所述语音反馈切换详细信息、关闭所述详细信息和/或显示更多的详细信息，以实现语音交互的步骤，具体包括：
采用TTS播报的方式与用户之间进行多轮语音交互，以获取用户的语音反馈；
根据所述语音反馈切换详细信息、关闭所述详细信息和/或显示更多的详细信息。


3.根据权利要求1所述的基于物品显示信息的语音交互方法，其特征在于，所述摄像头识别所述目标物品的形状、轮廓、色彩、图案和/或纹理的特征信息；
和/或，所述车机设备通过屏显装置的压力传感器的压感方式判断是否获取到目标物品。


4.根据权利要求3所述的基于物品显示信息的语音交互方法，其特征在于，所述车机设备根据所述特征信息从自身数据库和/或网络获取所述目标物品的详细信息的步骤，具体包括：...

【专利技术属性】
技术研发人员：吴俊，
申请(专利权)人：上海博泰悦臻电子设备制造有限公司，
类型：发明
国别省市：上海;31