一种车内乘客与车外景观实时交互方法及相关设备技术

本申请实施例提供一种车内乘客与车外景观实时交互方法及相关设备，包括：获取驾乘人员的意图信息，其中，所述意图信息至少包括语音信息、视线变化信息、身体位置变化信息中的任意两项；根据所述意图信息，判断所述驾乘人员是否存在拍照意图；若判定所述驾乘人员存在拍照意图，则通过所述车辆上配置的图像传感器拍摄所述车辆外的景物。采用本申请实施例能够实现车辆自身拍摄车窗外的景物，无需用户自身通过手机或摄像头等设备进行拍照，提高了用户乘车的安全性。乘车的安全性。乘车的安全性。

【技术实现步骤摘要】
一种车内乘客与车外景观实时交互方法及相关设备


[0001]本申请涉及车辆领域，尤其涉及一种车内乘客与车外景观实时交互方法及相关设备。

技术介绍

[0002]随着科学技术的发展，用户对车辆智能化的需求越来越高，在车辆智能化领域中，解决车辆与用户之间的交互问题显得尤为重要。通常在行车过程中，若用户对车外的景物或事物产生兴趣，则需要用户自身通过手机或摄像机等设备进行拍照，十分地不便，尤其是在用户开车的情况下，增加了驾驶危险。

技术实现思路

[0003]本申请实施例公开了一种车内乘客与车外景观实时交互方法及电子设备，可以实现车辆自身拍摄车窗外的景物，无需用户自身通过手机或摄像头等设备进行拍照，提高了用户乘车的安全性。
[0004]本申请的一个目的在于提供车辆语音广播交互装置，其优势在于可以实现用户与车辆之间的交互功能，完善车辆的娱乐设备。
[0005]本申请的另一个目的在于车辆根据用户意图主动拍摄车窗外的景物，其优势在于车辆能自动拍摄车窗外的景物，无需用户自身通过终端(例如手机、平板)拍摄车窗外的景物，降低了用户的驾车风险，车辆根据景物位置向用户发出语音提醒也能避免用户错过路边的景物。
[0006]为实现上述目的，第一方面，本申请实施例提供了一种车内乘客与车外景观实时交互方法，该方法包括：
[0007]获取驾乘人员的意图信息，其中，所述意图信息至少包括语音信息、视线变化信息、身体位置变化信息中的任意两项；
[0008]根据所述意图信息，判断所述驾乘人员是否存在拍照意图；
[0009]若判定所述驾乘人员存在拍照意图，则通过所述车辆上配置的图像传感器拍摄所述车辆外的景物。
[0010]在上述方法中，通过获取驾乘人员的意图信息(例如语音信息、视线变化信息以及身体位置变化信息)来判断乘客是否存在拍照意图，车辆再根据驾乘人员的拍照意图选择是否利用车辆上配置的图像传感器拍摄所述车辆外的景物，而不是驾乘人员自身利用摄像设备(例如手机或摄像机)拍摄车辆外的景物，也就是说，车辆能够自身拍摄车窗外的景物，无需驾乘人员自身通过手机或摄像头等设备进行拍照，提高了驾驶员驾驶的安全性，在驾乘人员开车的情况下，降低驾驶员危险驾驶的可能性，同时，车辆能够识别车窗外的景物，即时拍摄车窗外的景物，避免错过景物，能够提高驾乘人员的拍照效率。
[0011]在第一方面的一种可能的实现方案中，若所述意图信息包括所述语音信息和所述视线变化信息，则根据所述意图信息，判断所述驾乘人员是否存在拍照意图，包括：
[0012]将所述语音信息转换为语音文本，以及，根据所述视线变化信息确定所述驾乘人员看向车窗外的持续时间；
[0013]若所述语音文本中包括预设关键词，且所述驾乘人员看向车窗外的持续时间达到第一预设时长，则判定所述驾乘人员存在拍照意图。
[0014]在上述方法中，若使用视线变化信息判断驾乘人员是否存在拍照意图，通常驾乘人员的习惯性动作(例如看向窗外)会导致车辆使用视线变化信息拍摄车辆外的非景物照片(即与景物无关的照片)，降低了拍摄车窗外景物的准确度和效率，而选择使用语音信息和视线变化信息两个条件判断驾乘人员是否存在拍照意图，能增加车辆识别驾乘人员是否存在拍照意图的准确度，提高拍摄车窗外景物的准确度和效率。
[0015]需要说明的是，语音文本中的关键词可以包括景物的名称、驾驶人员对景物的描述等文本；视线变化信息中的第一预设时长可以用于筛选出驾乘人员看向窗外超过第一预设时长的视线动作，避免车辆将非指示景物的动作(例如驾乘人员的习惯性动作)作为是否进行拍摄的拍照意图，增加车辆识别驾乘人员是否存在拍照意图的准确度，同时提高了拍摄车窗外景物的准确度和效率。
[0016]在第一方面又一种可能的实现方案中，若所述意图信息包括所述语音信息和所述身体位置变化信息，则根据所述意图信息，判断所述驾乘人员是否存在拍照意图，包括：
[0017]将所述语音信息转换为语音文本，以及，根据身体位置变化信息确定所述驾乘人员的手势动作指向车窗外的持续的时间；
[0018]若所述语音文本中包括预设关键词，且所述手势动作指向车窗外的持续时间达到第二预设时长，则判定所述驾乘人员存在拍照意图。
[0019]在上述方法中，若使用身体位置变化信息判断驾乘人员是否存在拍照意图，通常驾乘人员的习惯性动作(例如手势动作指向车窗外)会导致车辆使用身体位置变化信息拍摄车辆外的非景物照片(即与景物无关的照片)，降低了车辆拍摄车窗外景物的准确度和效率，而选择使用语音信息和身体位置变化信息两个条件判断驾乘人员是否存在拍照意图，能增加车辆识别驾乘人员是否存在拍照意图的准确度，提高拍摄车窗外景物的准确度和效率。
[0020]需要说明的是，语音文本中的关键词可以包括景物的名称、驾驶人员对景物的描述等文本；身体位置变化信息中的第二预设时长可以用于筛选出驾乘人员的手势动作指向窗外的持续时间超过第二预设时长的手势动作，避免车辆将非指示景物的动作(例如驾乘人员的习惯性动作)作为是否进行拍摄的拍照意图，能增加车辆识别驾乘人员是否存在拍照意图的准确度。
[0021]在第一方面又一种可选的方案中，若所述意图信息包括所述视线变化信息和所述身体位置变化信息，则根据所述意图信息，判断所述驾乘人员是否存在拍照意图，包括：
[0022]根据所述视线变化信息确定所述驾乘人员看向车窗外的持续时间，以及，根据身体位置变化信息确定所述驾乘人员的手势动作指向车窗外的持续的时间；
[0023]若所述驾乘人员看向车窗外的持续时间达到第一预设时长，且所述手势动作指向车窗外的持续时间达到第二预设时长，则确定所述驾乘人员存在拍照意图。
[0024]在上述方法中，若使用视线变化信息判断驾乘人员是否存在拍照意图，通常驾乘人员的习惯性动作(例如眼睛看向窗外)会导致车辆使用视线变化信息拍摄车辆外的非景
物照片(即与景物无关的照片)，若使用身体位置变化信息判断驾乘人员是否存在拍照意图，通常驾乘人员的习惯性动作(例如手势动作指向车窗外)会导致车辆使用身体位置变化信息拍摄车辆外的非景物照片(即与景物无关的照片)，降低了拍摄车窗外景物的准确度和效率，而选择使用视线变化信息和身体位置变化信息两个条件判断驾乘人员是否存在拍照意图，能增加车辆识别驾乘人员是否存在拍照意图的准确度，提高拍摄车窗外景物的准确度和效率。
[0025]需要说明的是，视线变化信息中的第一预设时长可以用于筛选出驾乘人员看向窗外超过第一预设时长的视线动作，避免车辆将非指示景物的动作(例如驾乘人员的习惯性动作)作为是否进行拍摄的拍照意图；身体位置变化信息中的第二预设时长可以用于筛选出驾乘人员的手势动作指向窗外的持续时间超过第二预设时长的手势动作，避免车辆将非指示景物的动作(例如驾乘人员的习惯性动作)作为是否进行拍摄的拍照意图，能增加车辆识别驾乘人员是否存在拍照意图的准确度，提高了拍摄车窗外景物的准确度和效率。
[0026]在第一方面又一种可选的方案中，所述通过所述本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种车内乘客与车外景观实时交互方法，其特征在于，包括：获取驾乘人员的意图信息，其中，所述意图信息至少包括语音信息、视线变化信息、身体位置变化信息中的任意两项；根据所述意图信息，判断所述驾乘人员是否存在拍照意图；若判定所述驾乘人员存在拍照意图，则通过所述车辆上配置的图像传感器拍摄所述车辆外的景物。2.根据权利要求1所述的方法，其特征在于，若所述意图信息包括所述语音信息和所述视线变化信息，则根据所述意图信息，判断所述驾乘人员是否存在拍照意图，包括：将所述语音信息转换为语音文本，以及，根据所述视线变化信息确定所述驾乘人员看向车窗外的持续时间；若所述语音文本中包括预设关键词，且所述驾乘人员看向车窗外的持续时间达到第一预设时长，则判定所述驾乘人员存在拍照意图。3.根据权利要求1所述的方法，其特征在于，若所述意图信息包括所述语音信息和所述身体位置变化信息，则根据所述意图信息，判断所述驾乘人员是否存在拍照意图，包括：将所述语音信息转换为语音文本，以及，根据身体位置变化信息确定所述驾乘人员的手势动作指向车窗外的持续的时间；若所述语音文本中包括预设关键词，且所述手势动作指向车窗外的持续时间达到第二预设时长，则判定所述驾乘人员存在拍照意图。4.根据权利要求1所述的方法，其特征在于，若所述意图信息包括所述视线变化信息和所述身体位置变化信息，则根据所述意图信息，判断所述驾乘人员是否存在拍照意图，包括：根据所述视线变化信息确定所述驾乘人员看向车窗外的持续时间，以及，根据身体位置变化信息确定所述驾乘人员的手势动作指向车窗外的持续的时间；若所述驾乘人员看向车窗外的持续时间达到第一预设时长，且所述手势动作指向车窗外的持续时间达到第二预设时长，则确定所述驾乘人员存在拍照意图。5.根据权利要求1
‑
4任一项所述的方法，其特征在于，所述通过所述车辆上配置的图像传感器拍摄所述车辆外的景物，包括：确定所述驾乘人员的观察视野；根据所述观察视野，调整所述图像传感器的拍摄视角，并控制所述图像传感器进行拍摄。6.根据权利要求5所述的方法，其特征在于，所述确定所述驾乘人员的观察视野，包括：采集驾乘人员的面部图像和/或获取驾乘人员的人体重心；根据所述面部图像和/或人体重心确定所述驾乘人员眼睛的位置；根据所述驾乘人员眼睛的位置确定所述驾乘人员的观察视野。7.根据权利要求5所述的方法，其特征在于，所述确定所述驾乘人员的观察视野，包括：获取驾乘人员的注视向量；根据所述注视向量确定驾乘人员的注视落点轨迹；根据所述驾乘人员的注视落点轨迹确定驾乘人员的观察视野。8.根据权利要求1
‑
4任一项所述的方法，其特征在于，所述方法还包括：
获取所述车辆的当前位置；若所述车辆的当前位置为预设的目标位置，则通过所述车辆上配置的图像传感器拍摄所述车辆外的景物。9.根据权利要求1
‑
4任一项所述的方法，其特征在于，在通过所述车辆上配置的图像传感...

【专利技术属性】
技术研发人员：刘怡丹，丁云，
申请(专利权)人：博泰车联网南京有限公司，
类型：发明
国别省市：