一种视线检测方法、装置、电子设备和存储介质制造方法及图纸

本发明专利技术涉及计算机视觉技术领域，公开了一种视线检测方法、装置、电子设备和存储介质。该方法包括：根据车内摄像头采集至少两个预设视线检测区域内的视线检测图像，其中，预设视线检测区域基于驾驶员的视野范围划分，基于预设运动检测算法确定至少两个预设视线检测区域内的视线检测图像分别对应的运动特征，并根据运动特征和预设第一权重映射关系确定第一视线受阻权重，以及基于预设障碍物模型确定至少两个预设视线检测区域内的视线检测图像的障碍物分布特征，并根据障碍物分布特征和预设第二权重映射关系确定第二视线受阻权重，在预设筛选条件下基于第一视线受阻权重和第二视线受阻权重确定视线受阻情况。可提高视线受阻情况描述的准确性。况描述的准确性。况描述的准确性。

【技术实现步骤摘要】
一种视线检测方法、装置、电子设备和存储介质


[0001]本专利技术涉及计算机视觉
，尤其涉及一种视线检测方法、装置、电子设备和存储介质。

技术介绍

[0002]随着经济的发展和人们生活水平的不断提高，道路上的车辆越来越多，对驾驶员的安全防护是汽车发展所追求的永恒主题。尤其是在大雨、扬尘、大雪等恶劣条件下，驾驶员由于视线受阻，往往不能够及时、快速地发现前面视野内的障碍物，进而导致交通事故的频发。
[0003]随着智能汽车的普及，利用车内摄像头实现对驾驶员的视线捕捉成为视线检测的研究热点。现有视线检测方法通常采用以下两类方法：一是基于模板库的视线检测方法，二是基于特征点运动检测的视线检测方法。但是上述视线检测方法还存在以下不足之处：
[0004]1、采用基于模板库的视线检测方法需要人为地去设计匹配模板，因此存在因设计人员经验不足导致视线检测方法精度较低的问题；
[0005]2、采用基于特征点运动检测的视线检测方法描述视线受阻行为较为单一，普适性和鲁棒性不高。

技术实现思路

[0006]本专利技术提供了一种视线检测方法、装置、电子设备和存储介质，以解决现有视线检测方法存在的检测精度、普适性和鲁棒性较低的问题，可以提高视线受阻情况描述的准确性，以及增强用户驾驶车辆的安全性。
[0007]根据本专利技术的一方面，提供了一种视线检测方法，该方法包括：
[0008]根据车内摄像头采集至少两个预设视线检测区域内的视线检测图像，其中，预设视线检测区域基于驾驶员的视野范围划分；
[0009]基于预设运动检测算法确定至少两个预设视线检测区域内的视线检测图像分别对应的运动特征，并根据运动特征和预设第一权重映射关系确定第一视线受阻权重；
[0010]基于预设障碍物模型确定至少两个预设视线检测区域内的视线检测图像的障碍物分布特征，并根据障碍物分布特征和预设第二权重映射关系确定第二视线受阻权重；
[0011]在预设筛选条件下基于第一视线受阻权重和第二视线受阻权重确定视线受阻情况。
[0012]根据本专利技术的另一方面，提供了一种视线检测装置，该装置包括：
[0013]图像采集模块，用于根据车内摄像头采集至少两个预设视线检测区域内的视线检测图像，其中，预设视线检测区域基于驾驶员的视野范围划分；
[0014]第一权重确定模块，用于基于预设运动检测算法确定至少两个预设视线检测区域内的视线检测图像分别对应的运动特征，并根据运动特征和预设第一权重映射关系确定第一视线受阻权重；
[0015]第二权重确定模块，用于基于预设障碍物模型确定至少两个预设视线检测区域内的视线检测图像的障碍物分布特征，并根据障碍物分布特征和预设第二权重映射关系确定第二视线受阻权重；
[0016]视线受阻确定模块，用于在预设筛选条件下基于第一视线受阻权重和第二视线受阻权重确定视线受阻情况。
[0017]根据本专利技术的另一方面，提供了一种电子设备，所述电子设备包括：
[0018]至少一个处理器；以及
[0019]与所述至少一个处理器通信连接的存储器；其中，
[0020]所述存储器存储有可被所述至少一个处理器执行的计算机程序，所述计算机程序被所述至少一个处理器执行，以使所述至少一个处理器能够执行本专利技术任一实施例所述的视线检测方法。
[0021]根据本专利技术的另一方面，提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于使处理器执行时实现本专利技术任一实施例所述的视线检测方法。
[0022]本专利技术实施例的技术方案，通过根据车内摄像头采集至少两个预设视线检测区域内的视线检测图像，其中，预设视线检测区域基于驾驶员的视野范围划分，基于预设运动检测算法确定至少两个预设视线检测区域内的视线检测图像分别对应的运动特征，并根据运动特征和预设第一权重映射关系确定第一视线受阻权重，基于预设障碍物模型确定至少两个预设视线检测区域内的视线检测图像的障碍物分布特征，并根据障碍物分布特征和预设第二权重映射关系确定第二视线受阻权重，在预设筛选条件下基于第一视线受阻权重和第二视线受阻权重确定视线受阻情况。本专利技术实施例通过根据驾驶员的视野范围划分至少两个预设视线检测区域，再根据预设运动检测算法和预设障碍物模型分别确定各预设视线检测区域分别对应的第一视线受阻权重和第二视线受阻权重，最后依据第一视线受阻权重和第二视线受阻权重确定视线受阻情况，可以通过多检测区域的运动特征和障碍物分布特征自适应地描述视线受阻情况，提高了视线检测的鲁棒性和准确性，具有较好的普适性，增强了用户驾驶车辆的安全性。
[0023]应当理解，本部分所描述的内容并非旨在标识本专利技术的实施例的关键或重要特征，也不用于限制本专利技术的范围。本专利技术的其它特征将通过以下的说明书而变得容易理解。
附图说明
[0024]为了更清楚地说明本专利技术实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0025]图1是根据本专利技术实施例一提供的一种视线检测方法的流程图；
[0026]图2是根据本专利技术实施例二提供的一种视线检测方法的流程图；
[0027]图3是根据本专利技术实施例二提供的一种预设障碍物模型训练过程的流程图；
[0028]图4是根据本专利技术实施例三提供的一种视线检测方法的流程图；
[0029]图5是根据本专利技术实施例三提供的另一种视线检测方法的流程图；
[0030]图6是根据本专利技术实施例四提供的一种视线检测装置的结构示意图；
[0031]图7是实现本专利技术实施例的视线检测方法的电子设备的结构示意图。
具体实施方式
[0032]为了使本
的人员更好地理解本专利技术方案，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分的实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本专利技术保护的范围。
[0033]需要说明的是，本专利技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本专利技术的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
[0034]实施例一
[0035]图1为本专利技术实施例一提供了一种视线检测方法的流程图，本实施例可适用于对驾驶员的视线进行本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视线检测方法，其特征在于，所述方法包括：根据车内摄像头采集至少两个预设视线检测区域内的视线检测图像，其中，所述预设视线检测区域基于驾驶员的视野范围划分；基于预设运动检测算法确定所述至少两个预设视线检测区域内的视线检测图像分别对应的运动特征，并根据所述运动特征和预设第一权重映射关系确定第一视线受阻权重；基于预设障碍物模型确定所述至少两个预设视线检测区域内的视线检测图像的障碍物分布特征，并根据所述障碍物分布特征和预设第二权重映射关系确定第二视线受阻权重；在预设筛选条件下基于所述第一视线受阻权重和所述第二视线受阻权重确定视线受阻情况。2.根据权利要求1所述方法，其特征在于，所述根据车内摄像头采集至少两个预设视线检测区域内的视线检测图像，包括：基于所述驾驶员的视野范围划分至少两个所述预设视线检测区域，并利用所述车内摄像头采集对应所述预设视线检测区域内的至少五个连续帧的所述视线检测图像。3.根据权利要求1所述方法，其特征在于，所述基于预设运动检测算法确定所述至少两个预设视线检测区域内的视线检测图像分别对应的运动特征，并根据所述运动特征和预设第一权重映射关系确定第一视线受阻权重，包括：采用Harris角点检测算法提取所述至少两个预设视线检测区域内的视线检测图像分别对应的检测关键点；调用预设光流算法生成相邻两帧所述视线检测图像内检测关键点对应的光流；依据所述光流剔除未移动的检测关键点，并将剩余检测关键点作为移动点；连接相邻两帧所述视线检测图像内相同检测关键点作为移动点矢量线；针对所述预设视线检测区域提取对应的所述移动点矢量线的方向作为所述运动特征；判断所述运动特征是否满足预设第一权重映射关系，若是，则将所述第一视线受阻权重设置为1，若否，则将所述第一视线受阻权重设置为0，其中，所述预设第一权重映射关系至少包括：所述预设视线检测区域内至少相邻五帧所述视线检测图像的所述运动特征为正负交替变化。4.根据权利要求1所述方法，其特征在于，所述基于预设障碍物模型确定所述至少两个预设视线检测区域内的视线检测图像的障碍物分布特征，并根据所述障碍物分布特征和预设第二权重映射关系确定第二视线受阻权重，包括：按照预设图像处理规则提取所述至少两个视线检测图像的尺度不变特征变换特征和方向梯度直方图特征；将所述至少两个视线检测图像分别对应的尺度不变特征变换特征以及方向梯度直方图特征输入所述预设障碍物模型，统计所述至少两个视线检测图像分别对应的尺度不变特征变换特征以及方向梯度直方图特征满足所述预设障碍物模型的比例；将所述比例作为所述至少两个预设视线检测区域内的视线检测图像的障碍物分布特征；判断所述障碍物分布特征是否满足预设第二权重映射关系，若是，则将所述第二视线受阻权重设置为1，若否，则将所述第二视线受阻权重...

【专利技术属性】
技术研发人员：朱有菊，
申请(专利权)人：北京惠朗时代科技有限公司，
类型：发明
国别省市：