一种电视机投屏监测装置及方法制造方法及图纸

一种电视机投屏监测装置及方法，通过一个摄像头监测电视画面，一个摄像头监测手机画面，结合日志过滤异常，并通过双摄像头捕获到的画面实时监测两端画面的同步状况，自动判断手机画面和电视上画面之间是否存在延时。本发明专利技术，能够自动处理投屏过程中出现的图像延时等各种问题。提升投屏机械手用户的自动化体验，监测准确率更高，同时，消耗的资源更少，研发、设计以及使用成本更低。

【技术实现步骤摘要】
一种电视机投屏监测装置及方法
本专利技术涉及家庭娱乐产品领域，尤其涉及一种针对电视机的投屏监测装置及方法。
技术介绍
当前现有的投屏技术主要通过编程机械手点击其控制范围内相应的坐标点来操控手机，使手机在电视机端进行投屏。目前的技术通常采用查看日志或通过人工对投屏显示结果进行控制，判断投屏是否出现异常。但是，现有的方法中，除非是完全依赖人工查看的方式对投屏进行控制，否则，如果采用日志来过滤投屏过程中出现的异常，则无法对投屏中声音和图像的准确性进行判断。这是因为，日志本身无法对声音和图像的准确性进行监测，而只能检测投屏行为是否出现异常(例如无法传输图像等)。这使得投屏机械手的自动化体验效果很差。因而，目前急需一种能够对投屏过程进行自动监测的装置，通过该装置，在完成投屏操作的同时，也能够自动处理投屏过程中出现的图像延时等各种问题。
技术实现思路
为了解决现有技术存在的不足，本专利技术的目的在于提供一种电视机投屏监测装置及方法。通过一个摄像头监测电视画面，一个摄像头监测手机画面，结合日志过滤异常，并通过双摄像头捕获到的画面实时监测两端画面的同步状况，自动判断手机画面和电视上画面之间是否存在延时。首先，为实现上述目的，提出一种投屏监测方法，步骤包括：第一步，发出投屏指令；这里的指令，既可以是机械手发出，也可以是软件模块发出，也可以由人工发出；第二步，控制两套图像采集装置同步地分别对投屏终端和显示端画面进行采集；第三步，比较所述两套图像采集装置采集的画面是否一致；若一致，则继续监测；若不一致，则跳转至第四步；第四步，打包所述显示端的日志信息，报错。具体的，上述投屏监测方法中，所述投屏端包括手机、平板电脑、笔记本电脑及其他可以进行投屏操作的终端。同时，上述投屏监测方法中，所述显示端包括电视机、显示器、投影仪及其他可以接受投屏的终端。进一步的，述投屏监测方法中，所述两套图像采集装置参数相同，并由自动化脚本同步控制所述两套图像采集装置。通过自动化脚本同步控制两套图像采集装置开始工作，这样可以做到同步监测。这是因为，采用自动化脚本或者嵌入式软件控制的话，一个指令，只需要为数不多的几个系统时钟周期就能够得到响应。这个执行对应指令而造成的延时，理论上要比摄像头每帧所对应的时长要短。因而不存在两套图像采集装置之间不同步的问题。进一步的，述投屏监测方法中，所述第三步中，通过PSNR(PeakSignaltoNoiseRatio)峰值信噪比、感知哈希算法或特征点比较所述两套图像采集装置采集的画面是否一致。进一步的，述投屏监测方法中，所述第四步之后，跳转至第一步。本专利技术还并列地提出一种投屏监测装置，包括控制模块，其特征在于，所述投屏监测装置还包括两个摄像头，以及投屏监测模块；所述两个摄像头分别用于对投屏端画面和显示端画面进行采集；所述投屏监测模块用于比较所述两个摄像头采集的画面是否一致，若一致，则继续监测；若不一致，则打包显示端日志，报错；所述控制模块用于控制所述两个摄像头。进一步的，如上所述的投屏监测装置，所述投屏监测装置还包括投屏机械手；所述控制模块还用于控制所述投屏机械手完成投屏操作；或所述控制模块还用于控制所述投屏端运行相应脚本进行投屏操作；或所述控制模块还用于在投屏端提示人工投屏操作。进一步的，如上所述的投屏监测装置，其中，所述两个摄像头均设置于所述投屏机械手端；或所述两个摄像头与所述控制模块均设置于独立控制终端。进一步的，上述投屏监测装置中，所述投屏监测模块通过OpenCV技术或其他视频比较技术(例如，视频比较软件)比较所述两个摄像头采集的画面。具体的，所述通过OpenCV技术比较所述两个摄像头采集的画面，包括通过PSNR(PeakSignaltoNoiseRatio，一种全参考的图像质量评价指标)峰值信噪比、感知哈希算法或特征点比较所述两个摄像头采集的画面的相似程度，或比较所述两个摄像头采集的画面是否一致。其中，所述特征点包括局部图像特征、特征向量中的至少一种。其中，所述显示端的日志信息包括logcat日志、anr数据(ApplicationNotResponding，应用程序无响应)、tombstones目录数据中的至少一种。所述投屏监测装置中，所述控制模块根据所述报错信息控制所述投屏机械手完成的手机端操作包括：进入投屏路径，对图片或者视频/音频进行投屏等；有益效果本专利技术通过一个摄像头监测电视画面，一个摄像头监测手机画面，同步比较两端画面，结合日志过滤异常，实时监测两端画面的同步状况，自动判断手机画面和电视上画面之间是否存在延时。克服了现有投屏技术只能检测投屏行为是否出现异常，无法对投屏中声音和图像的准确性进行判断的缺陷，并结合控制模块根据比较两侧画面得出的报错信息控制投屏机械手完成对应的手机端操作。本专利技术在判断画面不同步之后自动结合日志进行分析，并对投屏手机进行调整，提升了投屏机械手的自动化体验。而且，本专利技术将两个摄像头设置于同一设备上(投屏机械手端或者独立控制终端，所述独立控制终端可包括电视机端)，将采集到的两侧画面在同一后台实现对比，比较过程中无需传输大量的视频信息，比较画面过程得以简化，也更容易得到比较结果。由于无需传输大量视频信息，本方法同样可以克服传输过程中由于数据时沿或者数据丢失、干扰而造成的错误。结果更准确，而且消耗的资源更少，降低研发、设计以及使用成本。进一步的，本专利技术通过openCV技术比较所述两个摄像头采集的画面，可以更准确对比所采集到信息的情况。本专利技术的其它特征和优点将在随后的说明书中阐述，并且能够通过实施本专利技术而了解。附图说明附图用来提供对本专利技术的进一步理解，并且构成说明书的一部分，并与本专利技术的实施例一起，用于解释本专利技术，并不构成对本专利技术的限制。在附图中：图1为根据本专利技术的电视机投屏检测装置模块图；图2为将摄像头设置在电视机端的投屏检测装置模块图。具体实施方式以下结合附图对本专利技术的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本专利技术，并不用于限定本专利技术。图1为电视机投屏检测装置模块图，包括投屏机械手，所述投屏机械手端设有控制模块，其特征在于，所述投屏机械手端还设有两个摄像头，以及投屏监测模块；所述两个摄像头分别用于对投屏手机端画面和电视机端画面进行采集；所述投屏监测模块用于比较所述两个摄像头采集的画面是否一致，若一致，则继续监测；若不一致，则打包电视机端日志，报错；所述控制模块用于控制所述投屏机械手完成投屏操作，并根据所述投屏监测模块的报错信息控制所述投屏机械手完成手机端操作。具体的，上述装置中，所述投屏监测模块通过OpenCv技术比较所述两个摄像头采集的画面。具体而言，所述通过OpenCv技术比较所述两个摄像头采集的画面，包括通过PSNR峰值信噪比、感知哈希算法、特征点等比较所述两个摄像头采集的画面的相似度。其中，特征点包括局部图像特征、特征向量等。与上述实施例相并列，本专利技术还提供一种如图2所示的一种电视机投屏监测装置。该装置与图1所示装置的区别在于，图2所示装置将两个摄像头设置在电视机端。装置具体包括投屏机械手以及控制模块，其特征在于，所述电视机投屏监测装置还包括设置在电视机端的两个摄像头以及投屏监测模块；所述两个摄像头分别用于对投屏手机端画面和电视机端画面进行采本文档来自技高网...

【技术保护点】
一种投屏监测方法，其特征在于，步骤包括：第一步，发出投屏指令；第二步，控制两套图像采集装置同步地分别对投屏端和显示端画面进行采集；第三步，比较所述两套图像采集装置采集的画面是否一致；若一致，则继续监测；若不一致，则跳转至第四步；第四步，打包所述显示端的日志信息，报错。

【技术特征摘要】
1.一种投屏监测方法，其特征在于，步骤包括：第一步，发出投屏指令；第二步，控制两套图像采集装置同步地分别对投屏端和显示端画面进行采集；第三步，比较所述两套图像采集装置采集的画面是否一致；若一致，则继续监测；若不一致，则跳转至第四步；第四步，打包所述显示端的日志信息，报错。2.如权利要求1所述的投屏监测方法，其特征在于，所述两套图像采集装置参数相同，并由自动化脚本同步控制所述两套图像采集装置。3.如权利要求1所述的投屏监测方法，其特征在于，所述第三步中，通过峰值信噪比、感知哈希算法或特征点比较所述两套图像采集装置采集的画面是否一致。4.如权利要求1所述的投屏监测方法，其特征在于，所述第四步之后，跳转至第一步。5.一种投屏监测装置，包括控制模块，其特征在于，所述投屏监测装置还包括两个摄像头，以及投屏监测模块；所述两个摄像头分别用于对投屏端画面和显示端画面进行采集；所述投屏监测模块用于比较所述两个摄像头采集的画面是否一致，若一致，则继续监测；若不一致，则打包显示端日志，报错；...

【专利技术属性】
技术研发人员：孙华，李小纳，其他发明人请求不公开姓名，
申请(专利权)人：微鲸科技有限公司，
类型：发明
国别省市：上海,31