本申请涉及用于多系统装置的可见即可说方法。多系统装置包括一个或多个显示屏，多系统装置中安装有多个操作系统，其中每个显示屏配置成为多个操作系统中关联的操作系统显示内容，可见即可说识别命中方法包括：接收截屏信息，所述截屏信息包括所述一个或多个显示屏中至少一个显示屏当前显示的内容；对所接收到的截屏信息进行识别以获取可操作区域信息；响应于接收到用户的语音信息而对所述语音信息进行语义分析，以判断所述语音信息是否命中所述可操作区域信息；以及在所述语音信息命中所述可操作区域信息的情况下传送命中信息。本申请可以在多系统的设备应用场景下实现可见即可说功能。可说功能。可说功能。
【技术实现步骤摘要】
用于多系统装置的可见即可说方法
[0001]本申请涉及多媒体
，具体而言，涉及用于多系统装置的可见即可说方法。
技术介绍
[0002]智能座舱是驾乘人员在车辆中直接接触的硬件与生态，可以容易地被消费者感知。通过将座舱内饰、电子产品与技术创新、升级和联动，智能座舱可以将车辆从单一的驾驶、乘坐工具升级为一个以消费者为中心的“智能移动空间”。智能座舱往往期望搭载诸如中控屏、娱乐系统、仪表盘、抬头显示系统(HUD)等系统设备，从而能够实现多模态交互、地图导航服务、丰富车机娱乐内容和生活服务信息等功能。
[0003]智能座舱聚焦人机交互，核心是让车更懂人。通过各种AI技术和传感器，智能座舱可以实现一定的语音交互功能。然而，现有的语音交互模块在系统方面存在局限性，无法适配于包括多个操作系统的电子设备。
技术实现思路
[0004]本申请的实施例提供了一种用于多系统装置的可见即可说模块和方法，用于在多系统的设备应用场景下实现可见即可说功能。本文中所述的“可见即可说”指的是一种语音交互的功能。在可见即可说功能下，当用户在显示屏界面上看到诸如文字、按钮或者进度条之类的可以操作的控件的情况下，只要是用户能通过手动触屏或者按键能够实现的，都可以利用用户的语音来实现操作，而无需用户的触碰操作。
[0005]根据本申请的一方面，提供一种用于多系统装置的可见即可说识别命中方法，所述多系统装置包括一个或多个显示屏，所述多系统装置中安装有多个操作系统，其中每个所述显示屏配置成为所述多个操作系统中关联的操作系统显示内容，所述可见即可说识别命中方法包括：接收截屏信息，所述截屏信息包括所述一个或多个显示屏中至少一个显示屏当前显示的内容；对所接收到的截屏信息进行识别以获取可操作区域信息；响应于接收到用户的语音信息而对所述语音信息进行语义分析，以判断所述语音信息是否命中所述可操作区域信息；以及在所述语音信息命中所述可操作区域信息的情况下传送命中信息。
[0006]在本申请的一些实施例中，可选地，所述可见即可说识别命中方法由可见即可说模块执行，并且所述可见即可说模块安装在所述多个操作系统中的一个操作系统中。
[0007]在本申请的一些实施例中，可选地，所述命中信息包括：命中的可操作区域的名称、关联的操作系统的名称。
[0008]根据本申请的又一方面，提供一种用于多系统装置的可见即可说显示更新方法，所述多系统装置包括一个或多个显示屏，所述多系统装置中安装有多个操作系统，其中每个所述显示屏配置成为所述多个操作系统中关联的操作系统显示内容，所述可见即可说显示更新方法包括：获取截屏信息且传送所述截屏信息，所述截屏信息包括所述一个或多个显示屏中至少一个显示屏当前显示的内容；以及接收命中信息且在所述命中信息中存在至少部分命中信息与关联的显示屏相关联的情况下，基于所述至少部分命中信息发出执行关
联操作的指令，所述关联操作包括更新所述关联的显示屏当前显示的内容。
[0009]在本申请的一些实施例中，可选地，所述可见即可说显示更新方法由多个显示监控模块执行，所述多个显示监控模块对应配置在所述多个操作系统中。
[0010]在本申请的一些实施例中，可选地，所述获取截屏信息包括：由所述多个显示监控模块监控所述可见即可说模块是否开启，并且在监控到所述可见即可说模块开启的情况下，对关联的显示屏当前显示的内容进行截屏以获取所述截屏信息；和/或由所述多个显示监控模块监控关联的显示屏当前显示的内容是否发生变化，并且在监控到当前显示的内容发生变化的情况下，对内容发生变化的显示屏当前显示的内容进行截屏以更新所述截屏信息。
[0011]在本申请的一些实施例中，可选地，所述接收命中信息包括：由所述多个显示监控模块中的主显示监控模块接收所述命中信息；所述可见即可说显示更新方法还包括：在接收到所述命中信息的情况下，由所述主显示监控模块识别所述命中信息与所述多个显示监控模块相关联的状态，并且基于所述相关联的状态向所述多个显示监控模块中相关联的显示监控模块分配所述命中信息。
[0012]根据本申请的另一方面，提供一种可见即可说模块，所述可见即可说模块包括：存储器，其配置成存储指令；和处理器，其配置成执行所述指令使得所述可见即可说模块执行如上文中所述的任意一种可见即可说识别命中方法。
[0013]根据本申请的又一另外的方面，提供一种多系统装置，所述多系统装置包括一个或多个显示屏，所述多系统装置中安装有多个操作系统，其中每个所述显示屏配置成为所述多个操作系统中关联的操作系统显示内容；所述多系统装置还包括多个显示监控模块，所述多个显示监控模块配置成能够执行如上文中所述的任意一种可见即可说显示更新方法。
[0014]根据本申请的再一方面，提供一种计算机可读存储介质，所述计算机可读存储介质中存储有指令，当所述指令由处理器执行时，使得所述处理器执行如上文中所述的任意一种可见即可说识别命中方法或者可见即可说显示更新方法。
[0015]本申请的可见即可说识别命中方法和可见即可说显示更新方法适用于包括多个操作系统的设备应用场景。在多系统装置中，利用本申请的可见即可说模块和方法，用户可以基于当前看到的界面，通过发出语音指令来实现触摸点击界面的功能。
附图说明
[0016]从结合附图的以下详细说明中，将会使本申请的上述和其他目的及优点更加完整清楚，其中，相同或相似的要素采用相同的标号表示。
[0017]图1A至1C示出了根据本申请的一个或多个实施例的多系统装置的示意图；
[0018]图2A和图2B分别示出了根据本申请的一个或多个实施例的显示屏所显示的内容的示意图；
[0019]图3示出了根据本申请一个或多个实施例的显示监控模块的示意图；
[0020]图4A至图4C示出了根据本申请一个或多个实施例的显示监控模块在多系统装置中的配置情形的示意图；
[0021]图5示出了根据本申请一个或多个实施例的可见即可说模块的示意图；
[0022]图6示出了根据本申请的一个或多个实施例的执行可见即可说方法的流程示意图。
具体实施方式
[0023]出于简洁和说明性目的，本文主要参考其示范实施例来描述本申请的原理。但是，本领域技术人员将容易地认识到相同的原理可等效地应用于所有类型的用于多系统装置的可见即可说模块和方法，并且可以在其中实施这些相同或相似的原理，任何此类变化不背离本申请的真实精神和范围。
[0024]下面将结合图1A至图1C来介绍本申请的一个或多个实施例的多系统装置100。在一些实施例中，多系统装置100可以是安装在车辆(诸如，其中的智能座舱)中的电子设备。
[0025]图1A至图1C示出了根据本申请的一个或多个实施例的多系统装置100的示意图。如图1A至1C所示，多系统装置100中可以配置有多个操作系统105，其中多个操作系统105之间可以互相通信。在一些实施例中，多个操作系统可以包括Android操作系统、QNX操作系统、Linux操作系统、Windo本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种用于多系统装置的可见即可说识别命中方法，其特征在于，所述多系统装置包括一个或多个显示屏，所述多系统装置中安装有多个操作系统，其中每个所述显示屏配置成为所述多个操作系统中关联的操作系统显示内容，所述可见即可说识别命中方法包括：接收截屏信息，所述截屏信息包括所述一个或多个显示屏中至少一个显示屏当前显示的内容；对所接收到的截屏信息进行识别以获取可操作区域信息；响应于接收到用户的语音信息而对所述语音信息进行语义分析，以判断所述语音信息是否命中所述可操作区域信息；以及在所述语音信息命中所述可操作区域信息的情况下传送命中信息。2.根据权利要求1所述的可见即可说识别命中方法，其特征在于，所述可见即可说识别命中方法由可见即可说模块执行，并且所述可见即可说模块安装在所述多个操作系统中的一个操作系统中。3.根据权利要求1所述的可见即可说识别命中方法，其特征在于，所述命中信息包括：命中的可操作区域的名称、关联的操作系统的名称。4.一种用于多系统装置的可见即可说显示更新方法，其特征在于，所述多系统装置包括一个或多个显示屏，所述多系统装置中安装有多个操作系统，其中每个所述显示屏配置成为所述多个操作系统中关联的操作系统显示内容，所述可见即可说显示更新方法包括：获取截屏信息且传送所述截屏信息，所述截屏信息包括所述一个或多个显示屏中至少一个显示屏当前显示的内容；以及接收命中信息且在所述命中信息中存在至少部分命中信息与关联的显示屏相关联的情况下，基于所述至少部分命中信息发出执行关联操作的指令，所述关联操作包括更新所述关联的显示屏当前显示的内容。5.根据权利要求4所述的可见即可说显示更新方法，其特征在于，所述可见即可说显示更新方法由多个显示监控模块执行，所述多个显示监控模块对应配置在所述多个操作系统中。6.根据权利要求5所述的可见即可说显示更新方法，其特征在于，所述获取截屏...
【专利技术属性】
技术研发人员：雷金亮，吴成贵，
申请(专利权)人：蔚来汽车科技安徽有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。