一种显示设备的注视点补偿方法及补偿装置、显示设备制造方法及图纸

本发明专利技术实施例提供一种显示设备的注视点补偿方法及补偿装置、显示设备，涉及智能显示设备技术领域，能够解决现有技术中由于人眼与VR头显会发生相对滑动而造成眼球追踪精度下降的问题。所述方法包括：获取用户的实时眼部图像；获取实时眼部图像的眼角位置坐标；若眼角位置坐标在初始标定范围内，则根据瞳孔与眼角位置的对应关系对眼角位置坐标进行第一补偿；若眼角位置坐标不在初始标定范围内，则对眼角位置坐标进行第二补偿，第二补偿被配置为使经过第二补偿后的眼角位置坐标至少在初始标定范围内；根据第一补偿或第二补偿对注视点进行补偿。本发明专利技术用于显示设备。

【技术实现步骤摘要】
一种显示设备的注视点补偿方法及补偿装置、显示设备
本专利技术涉及智能显示设备
，尤其涉及一种显示设备的注视点补偿方法及补偿装置、显示设备。
技术介绍
随着虚拟现实(VirtualReality，VR)技术的发展，眼球追踪技术在虚拟现实交互、注视点渲染等方面的应用也得到了重视。目前，在基于VR的眼球追踪系统中，用于捕捉眼球运动的摄像机位于VR头显中，由于人眼与VR头显是相对独立的两个个体，当使用VR头显时，人眼可能会与VR头显发生相对滑动，这样会造成眼球追踪系统偏离初始的标定位置，进而造成眼球追踪精度的下降。
技术实现思路
本专利技术的实施例提供一种显示设备的注视点补偿方法及补偿装置、显示设备，能够解决现有技术中由于人眼与VR头显会发生相对滑动而造成眼球追踪精度下降的问题。为达到上述目的，本专利技术的实施例采用如下技术方案：一方面，本专利技术实施例提供一种显示设备的注视点补偿方法，所述方法包括：获取用户的实时眼部图像；获取所述实时眼部图像的眼角位置坐标；若所述眼角位置坐标在初始标定范围内，则根据瞳孔与眼角位置的对应关系对所述眼角位置坐标进行第一补偿；若所述眼角位置坐标不在所述初始标定范围内，则对所述眼角位置坐标进行第二补偿，所述第二补偿被配置为使经过第二补偿后的眼角位置坐标至少在所述初始标定范围内；根据所述第一补偿或所述第二补偿对注视点进行补偿。可选的，所述第二补偿包含第一子补偿和第二子补偿；所述对所述眼角位置坐标进行第二补偿具体包括：对所述眼角位置坐标进行第一子补偿，所述第一子补偿被配置为使经过第一子补偿后的眼角位置坐标在所述初始标定范围内；对经过所述第一子补偿后的眼角位置坐标进行第二子补偿，所述第二子补偿是根据所述瞳孔与眼角位置的对应关系对所述眼角位置坐标进行的补偿。可选的，所述对所述眼角位置坐标进行第一补偿具体包括：根据瞳孔与眼角位置的对应关系，获取所述实时眼部图像的瞳孔中心坐标对应的眼角点坐标；获取所述眼角点坐标与所述眼角位置坐标的差值，将所述差值作为眼角点补偿量；所述根据所述第一补偿对注视点进行补偿具体为：根据所述眼角点补偿量对注视点进行补偿。可选的，所述对所述眼角位置坐标进行第一子补偿具体为：获取使所述眼角位置坐标落入所述初始标定范围内的最小补偿量，将所述最小补偿量作为粗补偿量；获取所述粗补偿量与所述眼角位置坐标的和值，将所述和值作为经过所述第一子补偿后的眼角位置坐标；所述对经过所述第一子补偿后的眼角位置坐标进行第二子补偿具体为：获取所述实时眼部图像的瞳孔中心坐标与所述粗补偿量的和值，将所述和值作为补偿后的瞳孔中心坐标；根据所述瞳孔与眼角位置的对应关系，获取所述补偿后的瞳孔中心坐标对应的眼角点坐标，并获取所述眼角点坐标与经过所述第一子补偿后的眼角位置坐标的差值，将所述差值作为细补偿量；所述根据所述第二补偿对注视点进行补偿具体为：获取所述粗补偿量和所述细补偿量的和值，将所述和值作为眼角点补偿量；根据所述眼角点补偿量对注视点进行补偿。可选的，所述方法还包括：建立瞳孔与眼角位置的对应关系。可选的，所述建立瞳孔与眼角位置的对应关系具体包括：获取用户分别注视多个标定点时的多幅标定眼部图像；获取所述标定眼部图像的瞳孔中心坐标和眼角位置坐标；根据所述标定眼部图像的瞳孔中心坐标与眼角位置坐标，建立瞳孔与眼角位置的关系方程式。可选的，所述瞳孔与眼角位置的关系方程式为：xcorner＝a0+a1·x+a2·x2+a3·x3ycorner＝b0+b1·y+b2·y2+b3·y3其中，瞳孔中心坐标为(x，y)；眼角位置坐标为(xcorner，ycorner)，a0、a1、a2、a3、b0、b1、b2和b3为瞳孔与眼角位置拟合曲线的系数。可选的，所述获取所述实时眼部图像的眼角位置坐标具体包括：获取所述实时眼部图像的瞳孔中心坐标；对所述实时眼部图像进行边缘检测，以获取眼角区域中距离所述瞳孔中心坐标最远的边缘点的坐标，将所述边缘点的坐标作为所述实时眼部图像的眼角粗坐标；对所述实时眼部图像进行角点检测，以获取多个角点坐标，并获取多个所述角点坐标中距离所述眼角粗坐标最近的角点坐标，将该角点坐标作为所述实时眼部图像的眼角位置坐标。可选的，获取所述实时眼部图像的瞳孔中心坐标具体包括：对所述实时眼部图像进行二值化处理，提取处理后的实时眼部图像中符合瞳孔特性的最大连通区域，并提取所述最大连通区域的边缘点；根据所述边缘点进行瞳孔椭圆拟合，获取瞳孔中心坐标。可选的，所述根据所述眼角点补偿量对注视点进行补偿具体包括：根据眼角位置与注视点位置的对应关系，获取所述眼角点坐标对应的注视点坐标和所述眼角点补偿量对应的注视点补偿量；获取所述注视点坐标与所述注视点补偿量的和值，将所述和值作为补偿后的注视点坐标。可选的，所述眼角位置与注视点位置的对应关系的建立方法包括：获取用户分别注视多个标定点时的多幅标定眼部图像；获取所述标定眼部图像的眼角位置坐标，并获取与多幅所述标定眼部图像对应的注视点位置坐标；根据所述眼角位置坐标与所述注视点位置坐标，建立眼角位置与注视点位置的关系方程式。可选的，所述眼角位置与注视点位置的关系方程式为：Gx＝c0+c1·xcorner+c2·ycorner+c3·xcorner·ycornerGy＝d0+d1·xcorner+d2·ycorner+d3·xcorner·ycorner其中，注视点位置坐标为(Gx，Gy)；眼角位置坐标为(xcorner，ycorner)，c0、c1、c2、c3、d0、d1、d2和d3为眼角位置与注视点位置拟合曲线的系数。另一方面，本专利技术实施例提供一种显示设备的注视点补偿装置，所述装置包括：眼部图像获取传感器，用于获取用户的实时眼部图像；处理器，用于获取所述实时眼部图像的眼角位置坐标；所述处理器还用于若所述眼角位置坐标在初始标定范围内，则根据瞳孔与眼角位置的对应关系对所述眼角位置坐标进行第一补偿；若所述眼角位置坐标不在所述初始标定范围内，则对所述眼角位置坐标进行第二补偿，所述第二补偿被配置为使经过第二补偿后的眼角位置坐标至少在所述初始标定范围内；所述处理器还用于根据所述第一补偿或所述第二补偿对注视点进行补偿；数据存储器，所述数据存储器用于存储所述实时眼部图像和所述实时眼部图像的眼角位置坐标，以及所述瞳孔与眼角位置的对应关系。可选的，所述第二补偿包含第一子补偿和第二子补偿；所述处理器具体用于：对所述眼角位置坐标进行第一子补偿，所述第一子补偿被配置为使经过第一子补偿后的眼角位置坐标在所述初始标定范围内；对经过所述第一子补偿后的眼角位置坐标进行第二子补偿，所述第二子补偿是根据所述瞳孔与眼角位置的对应关系对所述眼角位置坐标进行的补偿。再一方面，本专利技术实施例提供一种显示设备，包括：存储器，用于存储计算机程序；处理器，用于执行所述计算机程序，以实现如上述任意一种所述的显示设备的注视点补偿方法。本专利技术实施例提供的显示设备的注视点补偿方法及补偿装置、显示设备，所述方法包括：获取用户的实时眼部图像；获取实时眼部图像的眼角位置坐标；若眼角位置坐标在初始标定范围内，则根据瞳孔与眼角位置的对应关系对眼角位置坐标进行第一补偿；若眼角位置坐标不在初始标定范围内，则对眼角位置坐标进行第二补偿，第二补偿被配置为使经过第二补偿后的眼本文档来自技高网...

【技术保护点】
1.一种显示设备的注视点补偿方法，其特征在于，所述方法包括：获取用户的实时眼部图像；获取所述实时眼部图像的眼角位置坐标；若所述眼角位置坐标在初始标定范围内，则根据瞳孔与眼角位置的对应关系对所述眼角位置坐标进行第一补偿；若所述眼角位置坐标不在所述初始标定范围内，则对所述眼角位置坐标进行第二补偿，所述第二补偿被配置为使经过第二补偿后的眼角位置坐标至少在所述初始标定范围内；根据所述第一补偿或所述第二补偿对注视点进行补偿。

【技术特征摘要】
1.一种显示设备的注视点补偿方法，其特征在于，所述方法包括：获取用户的实时眼部图像；获取所述实时眼部图像的眼角位置坐标；若所述眼角位置坐标在初始标定范围内，则根据瞳孔与眼角位置的对应关系对所述眼角位置坐标进行第一补偿；若所述眼角位置坐标不在所述初始标定范围内，则对所述眼角位置坐标进行第二补偿，所述第二补偿被配置为使经过第二补偿后的眼角位置坐标至少在所述初始标定范围内；根据所述第一补偿或所述第二补偿对注视点进行补偿。2.根据权利要求1所述的显示设备的注视点补偿方法，其特征在于，所述第二补偿包含第一子补偿和第二子补偿；所述对所述眼角位置坐标进行第二补偿具体包括：对所述眼角位置坐标进行第一子补偿，所述第一子补偿被配置为使经过第一子补偿后的眼角位置坐标在所述初始标定范围内；对经过所述第一子补偿后的眼角位置坐标进行第二子补偿，所述第二子补偿是根据所述瞳孔与眼角位置的对应关系对所述眼角位置坐标进行的补偿。3.根据权利要求1所述的显示设备的注视点补偿方法，其特征在于，所述对所述眼角位置坐标进行第一补偿具体包括：根据瞳孔与眼角位置的对应关系，获取所述实时眼部图像的瞳孔中心坐标对应的眼角点坐标；获取所述眼角点坐标与所述眼角位置坐标的差值，将所述差值作为眼角点补偿量；所述根据所述第一补偿对注视点进行补偿具体为：根据所述眼角点补偿量对注视点进行补偿。4.根据权利要求2所述的显示设备的注视点补偿方法，其特征在于，所述对所述眼角位置坐标进行第一子补偿具体为：获取使所述眼角位置坐标落入所述初始标定范围内的最小补偿量，将所述最小补偿量作为粗补偿量；获取所述粗补偿量与所述眼角位置坐标的和值，将所述和值作为经过所述第一子补偿后的眼角位置坐标；所述对经过所述第一子补偿后的眼角位置坐标进行第二子补偿具体为：获取所述实时眼部图像的瞳孔中心坐标与所述粗补偿量的和值，将所述和值作为补偿后的瞳孔中心坐标；根据所述瞳孔与眼角位置的对应关系，获取所述补偿后的瞳孔中心坐标对应的眼角点坐标，并获取所述眼角点坐标与经过所述第一子补偿后的眼角位置坐标的差值，将所述差值作为细补偿量；所述根据所述第二补偿对注视点进行补偿具体为：获取所述粗补偿量和所述细补偿量的和值，将所述和值作为眼角点补偿量；根据所述眼角点补偿量对注视点进行补偿。5.根据权利要求1所述的显示设备的注视点补偿方法，其特征在于，所述方法还包括：建立瞳孔与眼角位置的对应关系。6.根据权利要求5所述的显示设备的注视点补偿方法，其特征在于，所述建立瞳孔与眼角位置的对应关系具体包括：获取用户分别注视多个标定点时的多幅标定眼部图像；获取所述标定眼部图像的瞳孔中心坐标和眼角位置坐标；根据所述标定眼部图像的瞳孔中心坐标与眼角位置坐标，建立瞳孔与眼角位置的关系方程式。7.根据权利要求6所述的显示设备的注视点补偿方法，其特征在于，所述瞳孔与眼角位置的关系方程式为：xcorner＝a0+a1·x+a2·x2+a3·x3ycorner＝b0+b1·y+b2·y2+b3·y3其中，瞳孔中心坐标为(x，y)；眼角位置坐标为(xcorner，ycorner)，a0、a1、a2、a3、b0、b1、b2和b3为瞳孔与眼角位置拟合曲线的系数。8.根据权利要求1所述的显示设备的注视点补偿方法，其特征在于，所述获取所述实时眼部图像的眼角位置坐标具体包括：获取所述实时眼部图像的瞳孔中心坐标；...

【专利技术属性】
技术研发人员：孙建康，陈丽莉，张浩，薛鸿臻，马福强，董泽华，
申请(专利权)人：京东方科技集团股份有限公司，北京京东方光电科技有限公司，
类型：发明
国别省市：北京,11