图像检测识别装置及其检测识别方法制造方法及图纸

本申请实施例公开了图像检测识别装置及其检测识别方法，用于优化电视机屏幕显示区域的检测和识别，实现实时屏幕取色，从而控制灯带颜色变化，提高用户的使用感受。本申请实施例方法包括：先验信息保存模块、摄像模块、图像处理模块、通讯模块；其中：先验信息保存模块，用于保存所述图像检测识别装置在初次启用时所需的先验信息，且在所述图像检测识别装置初次启用时将所述先验信息传输至图像处理模块；摄像模块，用于获取矩形显示区域的图像数据，并将所述图像数据传输至所述图像处理模块；图像处理模块，用于通过帧间相对差算法获取所述矩形显示区域的位置信息；通讯模块，用于所述图像检测识别装置与主机或终端之间的信息交互。互。互。

【技术实现步骤摘要】
图像检测识别装置及其检测识别方法


[0001]本申请实施例涉及物联网智能家居领域，尤其涉及图像检测识别装置及其检测识别方法。

技术介绍

[0002]随着物联网家用智能设备的普及，涌现出越来越多的智能应用场景。沉浸式智能电视机灯带就是一种融合智能照明、智能摄像机的产品。它主要通过摄像机实时获取电视机屏幕颜色，再控制安装在电视机背面的灯带显示对应颜色，实现一种沉浸式观影体验。
[0003]此类产品中主要技术可以概括为三部分，即电视机屏幕区域识别、实时屏幕取色、实时灯带控制。电视屏幕区域识别，目前上市产品主要通过人工标定来实现，即通过可视画面，用户通过界面交互手动完成区域标记。
[0004]但是这种标定过程在人为交互过程中会导致产品操作复杂、步骤冗余，用户体验差且还有可能标定结果不准确。

技术实现思路

[0005]本申请实施例提供了图像检测识别装置及其检测识别方法，具有更高的准确度，从而实现优化电视机屏幕显示区域的检测和识别，实现实时屏幕取色，且操作简便，提高用户的使用感受。
[0006]本申请实施例提供的一种图像检测识别装置，应用于家居智能设备，包括：先验信息保存模块、摄像模块、图像处理模块、通讯模块；其中：
[0007]先验信息保存模块，用于保存所述图像检测识别装置在初次启用时所需的先验信息，且在所述图像检测识别装置初次启用时将所述先验信息传输至图像处理模块，以使得所述图像处理模块根据所述先验信息确定矩形显示区域的位置信息；
[0008]摄像模块，用于获取矩形显示区域的图像数据，并将所述图像数据传输至所述图像处理模块，以使得所述图像处理模块根据所述图像数据确定所述矩形显示区域的位置信息；
[0009]图像处理模块，用于通过帧间相对差算法获取所述矩形显示区域的位置信息；
[0010]通讯模块，用于所述图像检测识别装置与主机或终端之间的信息交互，以有线连接方式或无线连接方式连接于主机或终端，以使得各种主机或终端都能连接所述图像检测识别装置而具备图像检测识别功能。
[0011]可选的，所述摄像模块通过安装于靠近所述矩形显示区域的任一边的中点位置的鱼眼摄像头获取矩形显示区域的图像数据。
[0012]可选的，通过人工标定的方式获取先验信息，并将所述先验信息保存在所述先验信息保存模块中。
[0013]可选的，所述先验信息包括位于安装边的第一顶点坐标、第二顶点坐标、第一中点坐标以及相对边所在区域；其中，所述安装边为所述矩形显示区域靠近安装所述鱼眼摄像
头的边，所述相对边为所述矩形显示区域中与所述安装边相对的边，第一中点为所述安装边的第一顶点与第二顶点之间的中点。
[0014]本申请实施例提供的一种图像检测识别方法，应用于上述任一项所述的图像检测识别装置，包括：
[0015]获取先验信息，所述先验信息包括位于安装边的第一顶点坐标、第二顶点坐标、第一中点坐标以及相对边所在区域；其中，所述安装边为所述矩形显示区域靠近安装所述鱼眼摄像头的边，所述相对边为所述矩形显示区域中与所述安装边相对的边，第一中点为所述安装边的第一顶点与第二顶点之间的中点；
[0016]获取矩形显示区域的第一图像数据和第二图像数据，所述第一图像数据和所述第二图像数据为所述矩形显示区域在不同亮度状态下的图像数据；
[0017]对所述第一图像数据和所述第二图像数据运用帧间相对差算法，确认所述矩形显示区域的相对边的第三顶点坐标、第四顶点坐标和第二中点坐标，其中第二中点为矩形显示区域位于相对边的中点；
[0018]结合所述先验数据，通过所述第一顶点坐标与所述第三顶点坐标确定第三中点坐标，通过所述第二顶点坐标与所述第四顶点坐标确定第四中点坐标；其中，所述第三中点坐标为第一顶点与第三顶点之间的中点的坐标，所述第四中点坐标为第二顶点与第四顶点之间的中点的坐标；
[0019]将所述第一顶点坐标、所述第二顶点坐标、所述第三顶点坐标、所述第四顶点坐标、所述第一中点坐标、所述第二中点坐标、所述第三中点坐标以及所述第四中点坐标确定为所述矩形显示区域的位置信息。
[0020]可选的，所述获取先验信息包括：
[0021]获取多份样本图像数据，所述样本图像数据由所述鱼眼摄像头对不同尺寸的矩形显示区域进行拍摄得到；
[0022]根据样本图像建立目标坐标系，以样本图像的左上角顶点为坐标原点，沿着图像左上角顶点水平向右为X轴正方向，沿着图像左上角顶点垂直向下为Y轴正方向；
[0023]通过人工标定的方法在所述目标坐标系上标注每一个样本图像中位于安装边的第一顶点坐标、第二顶点坐标、第一中点坐标以及相对边所在区域；
[0024]根据多份样本图像的标注结果确定第一顶点坐标、第二顶点坐标、第一中点坐标以及相对边所在区域，并作为先验信息。
[0025]可选的，所述获取矩形显示区域的第一图像数据和第二图像数据包括：
[0026]通过与用户终端交互的形式获取所述矩形显示区域在不同亮度状态下的第一图像数据和第二图像数据。
[0027]可选的，所述对所述第一图像数据和所述第二图像数据运用帧间相对差算法，确认所述矩形显示区域的相对边的第三顶点坐标、第四顶点坐标和第二中点坐标包括：
[0028]根据所述第一图像数据和所述第二图像数据在不同亮度状态下的相对像素变化，将像素变大的区域标记为白色像素区域，将像素变小的区域标记为黑色像素区域，得到差分图像；
[0029]根据所述先验信息在所述差分图像上标注相对边所在区域；其中，相对边所在区域以矩形框表示，且矩形框内包括部分白色像素区域和部分黑色像素区域；
[0030]以矩形框左上角顶点为起点，一个像素点作为基本单位，每次统计矩形框内水平方向一行像素点的数量，且计算白色像素点数量在一行像素点总数中所占的第一比例；
[0031]沿Y轴方向遍历矩形框，当所述第一比例达到预设的第一条件时，确认当前行的纵坐标为相对边的第三顶点和第四顶点的纵坐标，所述第三顶点和所述第四顶点的横坐标为矩形框垂直于X轴的两条边的横坐标，得到所述第三顶点坐标和所述第四顶点坐标；
[0032]继续沿Y轴方向遍历矩形框，当所述第一比例达到预设的第二条件时，确认当前行的纵坐标为位于相对边的第二中点的纵坐标，取第三顶点的横坐标与第四顶点的横坐标的中间值作为所述第二中点的横坐标，得到所述第二中点坐标。
[0033]本申请实施例提供的一种图像检测识别设备，其特征在于，包括：
[0034]中央处理器，存储器以及输入输出接口；
[0035]所述存储器为短暂存储存储器或持久存储存储器；
[0036]所述中央处理器配置为与所述存储器通信，并执行所述存储器中的指令操作以执行前述的图像检测识别方法。
[0037]本申请实施例提供的一种计算机可读存储介质，包括指令，当所述指令在计算机上运行时，使得计算机执行前述的图像检测识别方法。
[0038]从以上技术方案可以看出，本申请实施本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像检测识别装置，应用于家居智能设备，其特征在于，包括：先验信息保存模块、摄像模块、图像处理模块、通讯模块；其中：先验信息保存模块，用于保存所述图像检测识别装置在初次启用时所需的先验信息，且在所述图像检测识别装置初次启用时将所述先验信息传输至图像处理模块，以使得所述图像处理模块根据所述先验信息确定矩形显示区域的位置信息；摄像模块，用于获取矩形显示区域的图像数据，并将所述图像数据传输至所述图像处理模块，以使得所述图像处理模块根据所述图像数据确定所述矩形显示区域的位置信息；图像处理模块，用于通过帧间相对差算法获取所述矩形显示区域的位置信息；通讯模块，用于所述图像检测识别装置与主机或终端之间的信息交互，以有线连接方式或无线连接方式连接于主机或终端，以使得各种主机或终端都能连接所述图像检测识别装置而具备图像检测识别功能。2.根据权利要求1所述的图像检测识别装置，其特征在于，所述摄像模块通过安装于靠近所述矩形显示区域的任一边的中点位置的鱼眼摄像头获取矩形显示区域的图像数据。3.根据权利要求2所述的图像检测识别装置，其特征在于，通过人工标定的方式获取先验信息，并将所述先验信息保存在所述先验信息保存模块中。4.根据权利要求3所述的图像检测识别装置，其特征在于，所述先验信息包括位于安装边的第一顶点坐标、第二顶点坐标、第一中点坐标以及相对边所在区域；其中，所述安装边为所述矩形显示区域靠近安装所述鱼眼摄像头的边，所述相对边为所述矩形显示区域中与所述安装边相对的边，第一中点为所述安装边的第一顶点与第二顶点之间的中点。5.一种图像检测识别方法，应用于权利要求2至4中任一项所述的图像检测识别装置，其特征在于，包括：获取先验信息，所述先验信息包括位于安装边的第一顶点坐标、第二顶点坐标、第一中点坐标以及相对边所在区域；其中，所述安装边为所述矩形显示区域靠近安装所述鱼眼摄像头的边，所述相对边为所述矩形显示区域中与所述安装边相对的边，第一中点为所述安装边的第一顶点与第二顶点之间的中点；获取矩形显示区域的第一图像数据和第二图像数据，所述第一图像数据和所述第二图像数据为所述矩形显示区域在不同亮度状态下的图像数据；对所述第一图像数据和所述第二图像数据运用帧间相对差算法，确认所述矩形显示区域的相对边的第三顶点坐标、第四顶点坐标和第二中点坐标，其中第二中点为矩形显示区域位于相对边的中点；结合所述先验数据，通过所述第一顶点坐标与所述第三顶点坐标确定第三中点坐标，通过所述第二顶点坐标与所述第四顶点坐标确定第四中点坐标；其中，所述第三中点坐标为第一顶点与第三顶点之间的中点的坐标，所述第四中点坐标为第二顶点与第四顶点之间的中点的坐标；将所述第一顶点坐标、所述第二顶点坐标、所述第三顶点坐标、所述第四...

【专利技术属性】
技术研发人员：胡正东，徐靖熙，侯成龙，陈晶，
申请(专利权)人：杭州涂鸦信息技术有限公司，
类型：发明
国别省市：