电视机虚拟现实数据处理方法及装置制造方法及图纸

本申请实施例提供一种电视机虚拟现实数据处理方法及装置，方法包括：启动vr播放器，播放器接管电视外接usb摄像头，获取人面对电视时的头部图像；使用mtcnn算法对所述头部图像进行人脸识别，计算出脸部关键点的位置；根据所述脸部关键点的位置确定人脸到边框的欧式距离变化值，并根据所述欧式距离变化值确定转头方向；将所述转头方向传递给所述vr播放器，控制画面移动；本申请能够实现与电视的虚拟现实交互，使电视用户不带vr眼镜的同时体验了vr的效果，减轻佩戴眼镜疲劳。减轻佩戴眼镜疲劳。减轻佩戴眼镜疲劳。

【技术实现步骤摘要】
电视机虚拟现实数据处理方法及装置


[0001]本申请涉及智能设备领域，具体涉及一种电视机虚拟现实数据处理方法及装置。

技术介绍

[0002]当前智能电视，和TV盒子，95％都是基于android系统开发。电视上看vr当前缺陷在于，电视没有陀螺仪，无法感知人体头部运动；画面不能跟随头部运动转向；无法体验vr 360度视角的快乐。

技术实现思路

[0003]针对现有技术中的问题，本申请提供一种电视机虚拟现实数据处理方法及装置，能够实现与电视的虚拟现实交互，使电视用户不带vr眼镜的同时体验了vr的效果，减轻佩戴眼镜疲劳。
[0004]为了解决上述问题中的至少一个，本申请提供以下技术方案：
[0005]第一方面，本申请提供一种电视机虚拟现实数据处理方法，包括：
[0006]启动vr播放器，播放器接管电视外接usb摄像头，获取人面对电视时的头部图像；使用mtcnn算法对所述头部图像进行人脸识别，计算出脸部关键点的位置；
[0007]根据所述脸部关键点的位置确定人脸到边框的欧式距离变化值，并根据所述欧式距离变化值确定转头方向；将所述转头方向传递给所述vr播放器，控制画面移动。
[0008]进一步地，所述获取人面对电视时的头部图像，包括：
[0009]当人面对电视时候，每秒获取5帧
‑
25帧的头部图像。
[0010]进一步地，所述使用mtcnn算法对所述头部图像进行人脸识别，计算出脸部关键点的位置，包括：
[0011]使用基于深度学习的人脸检测和人脸对齐方法，计算出脸部关键点的位置，得到一个矩形框和5个关键点。
[0012]进一步地，所述根据所述脸部关键点的位置确定人脸到边框的欧式距离变化值，包括：
[0013]计算鼻子到矩形左右边框的欧式距离；
[0014]当人向左转头或者向右转头时确定矩形左右边框到鼻子的欧式距离变化值。
[0015]第二方面，本申请提供一种电视机虚拟现实数据处理装置，包括：
[0016]人脸识别模块，用于启动vr播放器，播放器接管电视外接usb摄像头，获取人面对电视时的头部图像，使用mtcnn算法对所述头部图像进行人脸识别，计算出脸部关键点的位置；
[0017]画面控制模块，用于根据所述脸部关键点的位置确定人脸到边框的欧式距离变化值，并根据所述欧式距离变化值确定转头方向，将所述转头方向传递给所述vr播放器，控制画面移动。
[0018]进一步地，所述人脸识别模块包括：
[0019]头部图像获取单元，用于当人面对电视时候，每秒获取5帧
‑
25帧的头部图像。
[0020]进一步地，所述人脸识别模块包括：
[0021]关键点确定单元，用于使用基于深度学习的人脸检测和人脸对齐方法，计算出脸部关键点的位置，得到一个矩形框和5个关键点。
[0022]进一步地，所述画面控制模块包括：
[0023]欧式距离计算单元，用于计算鼻子到矩形左右边框的欧式距离；
[0024]欧式距离变化值确定单元，用于当人向左转头或者向右转头时确定矩形左右边框到鼻子的欧式距离变化值。
[0025]第三方面，本申请提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现所述的电视机虚拟现实数据处理方法的步骤。
[0026]第四方面，本申请提供一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现所述的电视机虚拟现实数据处理方法的步骤。
[0027]由上述技术方案可知，本申请提供一种电视机虚拟现实数据处理方法及装置，通过实现与电视的虚拟现实交互，使电视用户不带vr眼镜的同时体验了vr的效果，减轻佩戴眼镜疲劳。
附图说明
[0028]为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0029]图1为本申请实施例中的电视机虚拟现实数据处理方法的流程示意图之一；
[0030]图2为本申请实施例中的电视机虚拟现实数据处理方法的流程示意图之二；
[0031]图3为本申请实施例中的电视机虚拟现实数据处理装置的结构图；
[0032]图4为本申请实施例中的电子设备的结构示意图。
具体实施方式
[0033]为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整的描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
[0034]考虑到当前智能电视，和TV盒子，95％都是基于android系统开发。电视上看vr当前缺陷在于，电视没有陀螺仪，无法感知人体头部运动；画面不能跟随头部运动转向；无法体验vr 360度视角的快乐的问题，本申请提供一种电视机虚拟现实数据处理方法及装置，通过实现与电视的虚拟现实交互，使电视用户不带vr眼镜的同时体验了vr的效果，减轻佩戴眼镜疲劳。
[0035]为了能够实现与电视的虚拟现实交互，使电视用户不带vr眼镜的同时体验了vr的效果，减轻佩戴眼镜疲劳，本申请提供一种电视机虚拟现实数据处理方法的实施例，参见图
1，所述电视机虚拟现实数据处理方法具体包含有如下内容：
[0036]步骤S101：启动vr播放器，播放器接管电视外接usb摄像头，获取人面对电视时的头部图像；使用mtcnn算法对所述头部图像进行人脸识别，计算出脸部关键点的位置。
[0037]可选的，智能电视外接usb摄像头(或者原电视已经带摄像头)，启动vr播放器，播放器接管电视带的摄像头，获取图像，当人面对电视时候，每秒可获取5帧
‑
25帧的头部图像。
[0038]可选的，VR播放器的人脸识别模块，使用mtcnn算法(MTCNN算法是一种基于深度学习的人脸检测和人脸对齐方法)，计算出脸部关键点的位置；一个矩形框和5个关键点(a左眼b右眼c鼻子d左嘴唇e右嘴唇)。
[0039]步骤S102：根据所述脸部关键点的位置确定人脸到边框的欧式距离变化值，并根据所述欧式距离变化值确定转头方向；将所述转头方向传递给所述vr播放器，控制画面移动。
[0040]可选的，计算c点(鼻子)到矩形左右边框的欧式距离，当人向左转头或者向右转头时A点B点到c点的距离发生变化，将转头方向传递给vr播放器，vr播放器就知道要往那个方向移动画面，转一次头就拨动一次画面。
[0041]由此实现可以在电视上播放Vr视频,并带有人脸识别模块；当人脸识别模块获取人脸转动动方向后，播放器可以旋转视界把相应的视本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种电视机虚拟现实数据处理方法，其特征在于，所述方法包括：启动vr播放器，播放器接管电视外接usb摄像头，获取人面对电视时的头部图像；使用mtcnn算法对所述头部图像进行人脸识别，计算出脸部关键点的位置；根据所述脸部关键点的位置确定人脸到边框的欧式距离变化值，并根据所述欧式距离变化值确定转头方向；将所述转头方向传递给所述vr播放器，控制画面移动。2.根据权利要求1所述的电视机虚拟现实数据处理方法，其特征在于，所述获取人面对电视时的头部图像，包括：当人面对电视时候，每秒获取5帧
‑
25帧的头部图像。3.根据权利要求1所述的电视机虚拟现实数据处理方法，其特征在于，所述使用mtcnn算法对所述头部图像进行人脸识别，计算出脸部关键点的位置，包括：使用基于深度学习的人脸检测和人脸对齐方法，计算出脸部关键点的位置，得到一个矩形框和5个关键点。4.根据权利要求1所述的电视机虚拟现实数据处理方法，其特征在于，所述根据所述脸部关键点的位置确定人脸到边框的欧式距离变化值，包括：计算鼻子到矩形左右边框的欧式距离；当人向左转头或者向右转头时确定矩形左右边框到鼻子的欧式距离变化值。5.一种电视机虚拟现实数据处理装置，其特征在于，包括：人脸识别模块，用于启动vr播放器，播放器接管电视外接usb摄像头，获取人面对电视时的头部图像，使用mtcnn算法对所述头部...

【专利技术属性】
技术研发人员：张宁，吴懿，魏宁，陈硕宏，宋振华，卢佳锐，胡正喜，
申请(专利权)人：四开花园网络科技广州有限公司，
类型：发明
国别省市：