显示设备、终端设备及连屏动作评分显示方法技术

本申请实施例提供一种显示设备、终端设备及连屏动作评分显示方法，所述方法响应于启动指令，接收由终端设备采集的用户动作数据，用户动作数据包括若干带有帧时间戳的动作帧。在延迟时长后，根据采集帧率抓取播放的标准动作视频帧，以获得标准动作数据。延迟时长根据当前显示设备的第一系统时间和终端设备的第二系统时间计算获得，采集帧率为终端设备采集用户动作数据时的采样频率。然后根据帧时间戳查找目标帧，并根据动作帧和目标帧的相似度生成并显示动作评分。本申请实施例根据显示设备和终端设备计算延迟时长，以通过延迟时长同步显示设备和终端设备的时间基准，使显示设备和终端设备比对同一时间戳的画面，提高动作评分显示的准确性。示的准确性。示的准确性。

【技术实现步骤摘要】
显示设备、终端设备及连屏动作评分显示方法


[0001]本申请涉及终端互联
，尤其涉及一种显示设备、终端设备及连屏动作评分显示方法。

技术介绍

[0002]显示设备是指能够输出具体显示画面的终端设备，可以是智能电视、通信终端、智能广告屏、投影仪等终端设备。以智能电视为例，智能电视是基于Internet应用技术，具备开放式操作系统与芯片，拥有开放式应用平台，可实现双向人机交互功能，集影音、娱乐、数据等多种功能于一体的电视产品，用于满足用户多样化和个性化需求。
[0003]基于上述人机交互功能，用户还可以通过显示设备来辅助运动，例如，通过显示设备来矫正健身动作，以达到强身健体的目的。显示设备可以通过与图像采集装置建立数据传输通道来获取用户的健身动作视频，并与显示设备所播放的教学视频进行比对评分，根据评分结果以纠正用户的健身动作。但是，在图像采集装置在向显示设备传输健身动作视频的过程中，存在一定的时间消耗，这就导致显示设备会将用户在当前时间点所做的动作与教学视频中的上一时间点所做的动作进行比对，造成用户的健身动作与教学动作的偏差较大，评分不准确，导致显示的连屏动作评分不准确，降低用户体验。

技术实现思路

[0004]本申请部分实施例提供一种显示设备、终端设备及连屏动作评分显示方法，以解决图像采集装置传输健身动作视频的过程中，连屏动作评分显示不准确的问题。
[0005]第一方面，本申请的部分实施例提供一种显示设备，包括显示器、通信器和控制器，其中，所述通信器被配置为与终端设备建立通信连接，所述终端设备用于采集用户动作数据，所述控制器被配置为：
[0006]响应于启动指令，接收终端设备采集的用户动作数据，所述用户动作数据中包括若干带有帧时间戳的动作帧；
[0007]在延迟时长后，根据采集帧率抓取播放的标准动作视频帧，以获得标准动作数据；所述延迟时长根据当前显示设备的第一系统时间和所述终端设备的第二系统时间计算获得；所述采集帧率为所述终端设备采集用户动作数据时的采样频率；
[0008]根据所述帧时间戳在所述标准动作数据中查找目标帧；
[0009]计算所述动作帧和所述目标帧的相似度，并根据所述相似度生成动作评分，所述相似度根据所述动作帧中的骨骼点坐标与所述目标帧中的骨骼点坐标偏差计算获得。
[0010]第二方面，本申请的部分实施例提供一种终端设备，包括摄像头、通信端口和控制器，其中，所述摄像头被配置为采集用户动作数据；所述通信端口被配置为与第一方面任一项所述的显示设备建立通信连接；所述控制器被配置为：
[0011]响应于所述显示设备发送的采集信号，控制所述摄像头采集用户动作数据，所述用户动作数据中包括若干带有帧时间戳的动作帧；
[0012]通过所述通信端口将所述用户动作数据发送至所述显示设备，以使所述显示设备根据所述帧时间戳在标准动作数据中查找目标帧，并根据所述动作帧和所述目标帧的相似度生成动作评分，所述相似度根据所述动作帧中的骨骼点坐标与所述目标帧中的骨骼点坐标偏差计算获得。
[0013]第三方面，本申请的部分实施例提供一种连屏动作评分显示方法，所述方法应用于显示设备，所述显示设备包括显示器、通信器和控制器，其中，所述通信器被配置为与终端设备建立通信连接，所述终端设备用于采集用户动作数据，所述方法包括：
[0014]响应于启动指令，接收终端设备采集的用户动作数据，所述用户动作数据中包括若干带有帧时间戳的动作帧；
[0015]在延迟时长后，根据采集帧率抓取播放的标准动作视频帧，以获得标准动作数据；所述延迟时长根据当前显示设备的第一系统时间和所述终端设备的第二系统时间计算获得；所述采集帧率为所述终端设备采集用户动作数据时的采样频率；
[0016]根据所述帧时间戳在所述标准动作数据中查找目标帧；
[0017]计算所述动作帧和所述目标帧的相似度，并根据所述相似度生成动作评分，以及控制显示器显示所述动作评分，所述相似度根据所述动作帧中的骨骼点坐标与所述目标帧中的骨骼点坐标偏差计算获得。
[0018]由以上方案可知，本申请实施例提供一种显示设备、终端设备及连屏动作评分显示方法，所述方法可以响应于启动指令，接收由终端设备采集的用户动作数据，在用户动作数据中包括若干带有帧时间戳的动作帧。在延迟时长后，根据采集帧率抓取播放的标准动作视频帧，以获得标准动作数据。延迟时长根据当前显示设备的第一系统时间和终端设备的第二系统时间计算获得，采集帧率为终端设备采集用户动作数据时的采样频率。然后根据帧时间戳查找目标帧，并根据动作帧和目标帧的相似度生成并显示动作评分。本申请实施例可以根据显示设备和终端设备计算延迟时长，以通过延迟时长同步显示设备和终端设备的时间基准，使显示设备和终端设备比对同一时间戳的画面，提高动作评分显示的准确性。
附图说明
[0019]为了更清楚地说明本申请的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0020]图1为本申请实施例中显示设备的使用场景；
[0021]图2为本申请实施例中显示设备的硬件配置图；
[0022]图3为图像采集装置上传用户动作数据的时间延迟示意图；
[0023]图4为本申请实施例提供的一种连屏动作评分显示方法的流程图；
[0024]图5为本申请实施例中显示设备计算延迟时长的第一实施例示意图；
[0025]图6为本申请实施例中显示设备计算延迟时长的第二实施例示意图；
[0026]图7为本申请实施例中根据关节特征识别算法识别的关节部位示意图；
[0027]图8为本申请实施例中根据骨骼点坐标生成节骨点数组的示意图；
[0028]图9为本申请实施例中骨骼点坐标的标记示意图；
[0029]图10为本申请实施例中根据骨骼点坐标计算坐标偏差的流程图；
[0030]图11为本申请实施例中判定冗余数据的流程示意图；
[0031]图12为本申请实施例中显示设备删除冗余数据的流程示意图。
具体实施方式
[0032]为使本申请的目的和实施方式更加清楚，下面将结合本申请示例性实施例中的附图，对本申请示例性实施方式进行清楚、完整地描述，显然，描述的示例性实施例仅是本申请一部分实施例，而不是全部的实施例。
[0033]需要说明的是，本申请中对于术语的简要说明，仅是为了方便理解接下来描述的实施方式，而不是意图限定本申请的实施方式。除非另有说明，这些术语应当按照其普通和通常的含义理解。
[0034]本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似或同类的对象或实体，而不必然意味着限定特定的顺序或先后次序，除非另外注明。应该理解这样使用的用语在适当情况下可以互换。
[0035]术语“包括”和“具有”以及他们的任何变形，意图在于覆盖但不排他的包含本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种显示设备，其特征在于，包括：显示器；通信器，被配置为与终端设备建立通信连接，所述终端设备用于采集用户动作数据；控制器，被配置为：响应于启动指令，接收终端设备采集的用户动作数据，所述用户动作数据中包括若干带有帧时间戳的动作帧；在延迟时长后，根据采集帧率抓取播放的标准动作视频帧，以获得标准动作数据；所述延迟时长根据当前显示设备的第一系统时间和所述终端设备的第二系统时间计算获得；所述采集帧率为所述终端设备采集用户动作数据时的采样频率；根据所述帧时间戳在所述标准动作数据中查找目标帧；根据所述动作帧和所述目标帧的相似度生成动作评分，以及控制所述显示器显示所述动作评分，所述相似度根据所述动作帧中的骨骼点坐标与所述目标帧中的骨骼点坐标偏差计算获得。2.根据权利要求1所述的显示设备，其特征在于，所述控制器进一步被配置为：在与所述终端设备建立通信连接后，向所述终端设备发送同步指令，所述同步指令包括当前显示设备的第一系统时间；获取所述终端设备针对所述同步指令反馈的同步数据，所述同步数据包括所述终端设备的第二系统时间以及所述用户动作数据的采集帧率；根据所述第一系统时间和所述第二系统时间计算延迟时长。3.根据权利要求1所述的显示设备，其特征在于，所述控制器执行根据所述采集帧率抓取播放的标准动作视频帧后，进一步被配置为：根据关节特征识别算法计算所述标准动作视频帧的骨骼点坐标；获取所述骨骼点坐标的生成时间，并将所述生成时间和所述骨骼点坐标存储为节骨点数组。4.根据权利要求3所述的显示设备，其特征在于，所述控制器执行根据所述帧时间戳在所述标准动作数据中查找目标帧，进一步被配置为：根据所述帧时间戳查找目标节骨点数组，所述目标节骨点数组为生成时间最接近所述帧时间戳的节骨点数组；将所述目标节骨点数组对应的标准动作视频帧标记为目标帧。5.根据权利要求4所述的显示设备，其特征在于，所述控制器执行根据所述动作帧和所述目标帧的相似度生成动作评分，进一步被配置为：根据关节特征识别算法计算所述动作帧的骨骼点坐标；从所述目标节骨点数组中提取目标帧的骨骼点坐标；计算所述动作帧的骨骼点坐标和所述目标帧的骨骼点坐标的坐标偏差；根据所述坐标偏差，计算所述相似度。6.根据权利要求5所述的显示设备，其特征在于，所述控制器执行计算所述动作帧的骨骼点坐标和所述目标帧的骨骼点坐标的坐标偏差，进一步被配置为：根据所述动作帧的骨骼点坐标对应的肢体部位和所述目标...

【专利技术属性】
技术研发人员：赵洋，庞秀娟，
申请(专利权)人：海信视像科技股份有限公司，
类型：发明
国别省市：