基于图像识别的定位装置制造方法及图纸

本发明专利技术涉及基于图像识别的定位装置，所述装置包括闪光灯位置提取设备、虚拟环境搭建设备和显示设备，闪光灯位置提取设备用于检测观众席上的闪光灯动作，虚拟环境搭建设备用于重建现场的三维虚拟图像，显示设备分别与闪光灯位置提取设备和虚拟环境搭建设备连接，用于显示闪光灯位置提取设备和虚拟环境搭建设备的输出结果。

Panoramic video live broadcast service device

The invention relates to a panoramic video broadcast service, including the host, the main machine respectively through a data line and a display, panoramic camera and mobile phone connected; the host comprises a motherboard, the motherboard has four card interface, two of which are respectively inserted with the graphics interface card, the other two graphics interface respectively. Insert output card and graphics; mobile phone set in the helmet box; a host of collection, panoramic camera through a data line and the host is connected to the mouth collection.

【技术实现步骤摘要】

本专利技术涉及视频领域，尤其涉及一种全景视频直播服务装置。
技术介绍
目前。全景视频直播已经运用在旅游教学、演唱会、大型活动、地质灾害、教育培训等众多领域，其能够展示了全景视频会议，全景视频培训，得到广泛的赞许和支持。现有的全景视频直播设备多存在携带不方便，组装麻烦，调试时间较长，观看不方便，需要另行配备专门的头戴式显示设备等问题。申请号为“201610321666.6”，公开号为“CN105759427A”，名称为“VR眼镜”的中国专利技术专利申请，公开了一种全景眼镜，包括佩戴部分、显示部分，佩戴部分与显示部分连接。显示部分包括镜片，显示部分远离佩戴部分的一侧设置有手机搁置板，手机搁置板与手机接触的表面相对镜片所在平面倾斜。虽然可以达到视觉效果，但是其并无法实现全景视频直播。
技术实现思路
为了解决上述问题，本专利技术提供了全景视频直播服务装置，包括主机，主所述机分别通过数据线与显示器、全景摄像头和手机相连接；所述主机内包括主板，所述主板上设有四个显卡接口，其中两个显卡接口分别插有采集卡，另外两个显卡接口分别插有输出卡和图形显卡；手机设置在头盔盒中；主机上设有采集口，全景摄像头通过数据线与主机的采集口相连接。本专利技术能够解决携带不方便，组装麻烦，调试时间较长，观看不方便，另行配备需要专门的头戴式显示设备等问题，使其使用方便，组装简便，便于调试，方便观看，无需另行配备专门的头戴式显示设备；其对用户使用来说无任何门槛，操作简单，视觉体验冲击感强烈；通过配备手机即可及时观看直播活动，其能够很好的融合科技与文化应用于文化旅游综合信息服务，适用于景区活动直播，在旅游宣传的体验上可以引起游客的好奇心，还能推动全景视频直播服务技术在文化旅游上的发展。具体实施方式下面将对本专利技术的实施方案进行详细说明。本专利技术提供了全景视频直播服务装置，包括主机，主所述机分别通过数据线与显示器、全景摄像头和手机相连接；所述主机内包括主板，所述主板上设有四个显卡接口，其中两个显卡接口分别插有采集卡，另外两个显卡接口分别插有输出卡和图形显卡；手机设置在头盔盒中；主机上设有采集口，全景摄像头通过数据线与主机的采集口相连接。当前，即时回放系统的使用费用昂贵，其研发成本虽高，但经济回馈规模可观。以网球赛事为例，一块网球场地布置即时回放系统的各项费用共计16万美元，利润非常丰厚。即时回放系统的核心难点在于如何进行适当的软硬件搭配，以及如何对球体目标进行精确跟踪。如果克服上述难题，将很容易在即时回放系统的市场上占据一席之地。当前，即时回放系统精度仍需进一步提高，以适应更多球类运动，其中，关键在于如何提高各种图像处理技术的精度和自适应程度，从而在保持设备规模、维持现有成本的同时提升即时回放系统的性能，另外，即时回放系统的功能仍比较单一，控制水平仍比较低下，无法满足现场运动员和裁判员的各种需求，更谈不上去维持比赛现场环境和秩序了。为了克服上述不足，本专利技术提供一种基于图像识别的定位装置，引入高自适应能力的畸变消除设备和高精度的图像滤波设备提高预处理图像的精度，保证后续球类目标识别和运动轨迹判断的准确性，引入回放启动的自动化控制机制，方便运动员和裁判员的操作。因此，本专利技术提供一种基于图像识别的定位装置，所述装置包括闪光灯位置提取设备、虚拟环境搭建设备和显示设备，闪光灯位置提取设备用于检测观众席上的闪光灯动作，虚拟环境搭建设备用于重建现场的三维虚拟图像，显示设备分别与闪光灯位置提取设备和虚拟环境搭建设备连接，用于显示闪光灯位置提取设备和虚拟环境搭建设备的输出结果。在一方面，显示设备包括液晶显示器。在二方面，闪光灯位置提取设备包括鱼眼摄像头和闪光灯检测设备。在三方面，所述装置包括：鱼眼摄像头，用于对乒乓球场地的观众席进行全景拍摄以获得全景观众席图像；闪光灯检测设备，与鱼眼摄像头连接，用于基于预设闪光灯亮度范围在全景观众席图像中检测是否存在闪光动作，如果存在闪光动作，则确定闪光动作在全景观众席图像中的相对位置，并发出存在闪光拍照信号；其中，预设闪光灯亮度范围由预设闪光灯上限亮度和预设闪光灯下限亮度组成；闪光灯定位设备，与闪光灯检测设备连接，用于基于预设座位编号图案和闪光动作在全景观众席图像中的相对位置确定距离闪光动作最近的座位编号；高清摄像机阵列，由多个高清摄像机组成，多个高清摄像机分别设置在乒乓球场地的不同位置，每一个高清摄像机包括亮度补偿设备、CMOS传感设备、直方图均衡设备、边缘增强设备、小波滤波设备、畸变类型检测设备、畸变处理设备、参考点选择设备、畸变坐标映射设备、畸变灰度映射设备、目标识别设备和目标坐标提取设备；摄像机定标设备，与每一个高清摄像机连接，用于获取每一个高清摄像机的内参数和每一个高清摄像机的外参数，每一个高清摄像机的内参数包括高清摄像机的焦距、CMOS传感设备尺寸、摄像镜头失真度，每一个高清摄像机的外参数包括高清摄像机相对于乒乓球场地的相对位置以及高清摄像机的拍摄方向；坐标映射设备，与摄像机定标设备连接，用于接收每一个高清摄像机的内参数和每一个高清摄像机的外参数，并基于每一个高清摄像机的内参数和每一个高清摄像机的外参数确定每一个高清摄像机的图像空间中像素点坐标与三维世界坐标之间的映射关系；三维坐标拟合设备，用于分别与多个高清摄像机的目标坐标提取设备连接，用于接收多个平面坐标参数，还与摄像机定标设备连接，用于接收多个高清摄像机的图像空间中像素点坐标分别与三维世界坐标之间的映射关系，三维坐标拟合设备基于上述多个平面坐标参数以及上述多个高清摄像机对应的映射关系拟合出乒乓球目标在三维世界坐标系中的三维坐标并作为三维目标坐标输出；环境重建设备，与每一个高清摄像机连接，用于接收分别来自多个高清摄像机的多个几何校准图像，基于多个几何校准图像对乒乓球场地进行环境重建，以获得并输出乒乓球场地的虚拟场景；场景融合设备，分别与环境重建设备和三维坐标拟合设备连接，用于基于三维目标坐标将乒乓球目标的运动位置融合到虚拟场景中以获得并输出融合图像帧；现场回放设备，与场景融合设备连接以接收并回放融合图像帧，现场回放设备包括液晶显示器、显示驱动器和显示缓存；动作识别设备，位于现场回放设备的正下方，对现场回放设备的正下方场景进行图像采集以获得下方图像，基于下方图像检测乒乓球场地上的运动员的姿态以确定运动员是否发出挑战动作，在确定运动员发出挑战动作时，输出启动挑战信号，在确定运动员未发出挑战动作时，输出未启动挑战信号；有球轨迹检测设备，位于现场回放设备中，用于与场景融合设备连接以接收融合图像帧，对融合图像帧进行逐个检测，将存在运动球体的融合图像帧按照时间段进行组合以获得多个有球视频，每一个有球视频对应一个有球时间段；其中，预设座位编号图案的获得过程如下：对无观众状态下乒乓球场地的观众席进行预先拍摄以获得无观众图像，再对无观众图像中观众席上的每一个座位完成编号以获得预设座位编号图案。在四方面，其中，显示驱动器还分别与闪光灯检测设备和闪光灯定位设备连接，用于在接收到闪光拍照信号时，将距离闪光动作最近的座位编号推送到显示缓存中以便于液晶显示器进行相应显示，还将禁止闪光灯拍照警示信息推送到显示缓存中以便于液晶显示器进行相应显示；其中，在每一个高清摄像机中，亮度补偿设备与CMOS传感设备连本文档来自技高网...

【技术保护点】
全景视频直播服务装置，其特征在于，包括主机，主所述机分别通过数据线与显示器、全景摄像头和手机相连接；所述主机内包括主板，所述主板上设有四个显卡接口，其中两个显卡接口分别插有采集卡，另外两个显卡接口分别插有输出卡和图形显卡；手机设置在头盔盒中；主机上设有采集口，全景摄像头通过数据线与主机的采集口相连接。

【技术特征摘要】
1.全景视频直播服务装置，其特征在于，包括主机，主所述机分别通过数据线与显示器、全景摄像头和手机相连接；所述主机内包括主板，所述主板上设有四个显卡接口，...

【专利技术属性】
技术研发人员：孙景芝，
申请(专利权)人：孙景芝，
类型：发明
国别省市：上海;31