显示系统和方法技术方案

技术编号:18829705 阅读:127 留言:0更新日期:2018-09-04 23:21
显示系统包括:用于检测驾驶者的眼球的视线跟踪摄像机、第一和第二立体摄像机、控制单元以及存储单元。第一和第二立体摄像机根据基于立体摄像机的视线信息拍摄与视野相应的范围,并提供拍摄的图像,其中该基于立体摄像机的视线信息根据基于预存的视线跟踪摄像机的视线信息而改变。控制单元基于跟踪摄像机以及第一和第二立体摄像机的位置和旋转信息将基于视线跟踪摄像机的视线信息转换为基于第一和第二立体摄像机的视线信息,并且将转换后的信息投射到第一和第二立体摄像机上,从而计算三维视线坐标。存储单元存储与系统有关的信息以及跟踪摄像机以及第一和第二立体摄像机的位置和旋转信息。

Display system and method

The display system includes a line-of-sight tracking camera for detecting a driver's eyeball, a first and second stereoscopic camera, a control unit and a storage unit. The first and second stereoscopic cameras shoot a range corresponding to the field of view based on the line of sight information of the stereoscopic camera, and provide the photographed image, wherein the line of sight information based on the stereoscopic camera is changed according to the line of sight information based on the pre-stored line of sight tracking camera. The control unit converts the line-of-sight information based on the line-of-sight tracking camera into line-of-sight information based on the first and second stereoscopic cameras based on the position and rotation information of the tracking camera and the first and second stereoscopic cameras, and projects the converted information onto the first and second stereoscopic cameras, thereby calculating the three-dimensional line-of-sight. Coordinates. The storage unit stores system-related information as well as tracking camera and position and rotation information of the first and second stereoscopic cameras.

【技术实现步骤摘要】
显示系统和方法
本专利技术概念涉及一种显示系统和方法。
技术介绍
目前,如专利文件1中所公开的,已开发了用于车辆驾驶者的方便和安全的各种车辆安全装置。更具体地,提供了一种获得车辆内驾驶者的视线并使用获得的视线来提供车辆所驾驶的道路的实时前景、警报服务等的视线跟踪技术。然而,主要在仅检测视线方向的二维(2D)环境例如广告效率的验证、利用显示器的界面等中优化上述视线跟踪技术。同时,由于驾驶者在驾驶车辆时使用肉眼观看实际环境例如3D环境,仅使用2D环境中检测到的视线矢量来准确检测视线方向存在限制。[相关技术文件][专利文件](专利文件1)KR10-2011-0139474A
技术实现思路
因此,制作本专利技术概念以解决现有技术中出现的上述问题,同时完整保持现有技术所实现的优点。本专利技术概念的一个方面涉及一种用于检测基于三维的驾驶者视线坐标的显示系统和方法。显示系统包括配置成检测驾驶者眼球的视线跟踪摄像机。第一和第二立体摄像机配置成根据基于立体摄像机的驾驶者视线信息拍摄与驾驶者视野相应的范围,并提供所拍摄的图像,其中该基于立体摄像机的驾驶者视线信息根据基于视线跟踪摄像机的驾驶者视线信息而改变。本文档来自技高网...

【技术保护点】
1.一种显示系统,包括:视线跟踪摄像机,配置成检测驾驶者的眼球;第一和第二立体摄像机,配置成根据基于立体摄像机的驾驶者视线信息拍摄与驾驶者视野相应的范围,并提供拍摄的图像,其中所述基于立体摄像机的驾驶者视线信息根据基于视线跟踪摄像机的驾驶者视线信息而改变;控制单元,配置成基于预存的所述视线跟踪摄像机以及所述第一和第二立体摄像机的位置信息和旋转信息来将所述基于视线跟踪摄像机的驾驶者视线信息转换为基于第一和第二立体摄像机的驾驶者视线信息,并将转换后的信息投射到所述第一和第二立体摄像机上,从而计算驾驶者视线的三维坐标;以及存储单元,配置成存储与所述显示系统有关的信息以及所述视线跟踪摄像机以及所述第一...

【技术特征摘要】
2012.12.11 KR 10-2012-01439211.一种显示系统,包括:视线跟踪摄像机,配置成检测驾驶者的眼球;第一和第二立体摄像机,配置成根据基于立体摄像机的驾驶者视线信息拍摄与驾驶者视野相应的范围,并提供拍摄的图像,其中所述基于立体摄像机的驾驶者视线信息根据基于视线跟踪摄像机的驾驶者视线信息而改变;控制单元,配置成基于预存的所述视线跟踪摄像机以及所述第一和第二立体摄像机的位置信息和旋转信息来将所述基于视线跟踪摄像机的驾驶者视线信息转换为基于第一和第二立体摄像机的驾驶者视线信息,并将转换后的信息投射到所述第一和第二立体摄像机上,从而计算驾驶者视线的三维坐标;以及存储单元,配置成存储与所述显示系统有关的信息以及所述视线跟踪摄像机以及所述第一和第二立体摄像机的位置信息和旋转信息,所述基于视线跟踪摄像机的驾驶者视线信息包括视线跟踪矢量单眼点和视线跟踪矢量,并且所述控制单元配置成将所述基于视线跟踪摄像机的视线跟踪矢量单眼点转换为基于立体摄像机的视线跟踪矢量单眼点。2.根据权利要求1所述的显示系统,其中所述控制单元配置成通过下式将所述基于视线跟踪摄像机的视线跟踪矢量单眼点转换为基于立体摄像机的视线跟踪矢量单眼点其中和表示位置信息,且Θx,Θy,Θz表示旋转信息。3.一种显示系统,包括:视线跟踪摄像机,配置成检测驾驶者的眼球;第一和第二立体摄像机,配置成根据基于立体摄像机的驾驶者视线信息拍摄与驾驶者视野相应的范围,并提供拍摄的图像,其中所述基于立体摄像机的驾驶者视线信息根据基于视线跟踪摄像机的驾驶者视线信息而改变;控制单元,配置成基于预存的所述视线跟踪摄像机以及所述第一和第二立体摄像机的位置信息和旋转信息来将所述基于视线跟踪摄像机的驾驶者视线信息转换为基于第一和第二立体摄像机的驾驶者视线信息,并将转换后的信息投射到所述第一和第二立体摄像机上,从而计算驾驶者视线的三维坐标;以及存储单元,配置成存储与所述显示系统有关的信息以及所述视线跟踪摄像机以及所述第一和第二立体摄像机的位置信息和旋转信息,所述基于视线跟踪摄像机的驾驶者视线信息包括视线跟踪矢量单眼点和视线跟踪矢量,并且所述控制单元配置成将所述基于视线跟踪摄像机的视线跟踪矢量转换为基于立体摄像机的视线跟踪矢量。4.根据权利要求3所述的显示系统,其中所述控制单元配置成通过下式将所述基于视线跟踪摄像机的视线跟踪矢量转换为基于立体摄像机的视线跟踪矢量其中Θx,Θy,Θz表示旋转信息。5.一种显示系统,包括:视线跟踪摄像机,配置成检测驾驶者的眼球;第一和第二立体摄像机,配置成根据基于立体摄像机的驾驶者视线信息拍摄与驾驶者视野相应的范围,并提供拍摄的图像,其中所述基于立体摄像机的驾驶者视线信息根据基于视线跟踪摄像机的驾驶者视线信息而改变;控制单元,配置成基于预存的所述视线跟踪摄像机以及所述第一和第二立体摄像机的位置信息和旋转信息来将所述基于视线跟踪摄像机的驾驶者视线信息转换为基于第一和第二立体摄像机的驾驶者视线信息,并将转换后的信息投射到所述第一和第二立体摄像机上,从而计算驾驶者视线的三维坐标;以及存储单元,配置成存储与所述显示系统有关的信息以及所述视线跟踪摄像机以及所述第一和第二立体摄像机的位置信息和旋转信息,所述控制单元配置成根据投射到所述第一和第二立体摄像机上的基于立体摄像机的视线跟踪矢量计算驾驶者视线注视点,并基于计算出的驾驶者视线注视点计算所述驾驶者视线的三维坐标。6.根据权利要求5所述的显示系统,其中所述控制单元配置成在投射到所述第一立体摄像机上的图像上生成与预设的人视线主要注视范围相应的窗口,根据基于第一立体摄像机的视线跟踪矢量移动所生成窗口的单眼点,执行模板匹配使得被移动的窗口与所述第二立体摄像机的视线跟踪矢量相应,并且作为执行所述模板匹配的结果将模板匹配位置中的最高模板匹配位置识别为驾驶者视线注视点。7.根据权利要求5所述的显示系统,其中所述驾驶者视线的三维坐标为P(Xp,Yp,Zp),且其中P1(x1,y1)为P投射到所述第一立体摄像机的成像表面上的点,Pr(xr,yr)为P投射到所述第二立体摄像机的成像表面上的点,f为所述摄像机的焦距,T为所述第一和第二立体...

【专利技术属性】
技术研发人员:卢熙真李奭范石东熙朴晟珉
申请(专利权)人:现代自动车株式会社
类型:发明
国别省市:韩国,KR

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1