将传感器数据与视频对齐制造技术

一种半导体封装装置可包括用于进行如下操作的技术：识别视频(31)中的动作，基于识别的动作(32)确定视频中的同步点，并且基于同步点(33)将传感器相关信息与视频对齐。

Align sensor data with video

【技术实现步骤摘要】
【国外来华专利技术】将传感器数据与视频对齐
实施例概括而言涉及视频系统。更具体而言，实施例涉及将传感器数据与视频对齐。
技术介绍
一些娱乐和/或分析应用可尝试将视频信息与传感器信息相结合，成功度各不相同。附图说明通过阅读以下说明书和所附权利要求，并且通过参考以下附图，实施例的各种优点将对本领域技术人员变得清楚，附图中：图1是根据一实施例的电子处理系统的示例的框图；图2是根据一实施例的半导体封装装置的示例的框图；图3A至3C是根据一实施例的对齐传感器相关信息的方法的示例的流程图；图4是根据一实施例的传感器对齐装置的示例的框图；图5是根据一实施例的挥杆期间的动作姿态的示例的说明图；图6是根据一实施例的对齐传感器相关信息的方法的另一示例的流程图；图7是根据一实施例的体育应用的显示器的示例的说明图；图8是根据一实施例的实况体育视频的显示器上的覆盖应用的示例的说明图；图9是根据一实施例的对齐传感器相关信息的方法的另一示例的流程图；图10是根据一实施例的实况体育视频的显示上的覆盖应用的另一示例的说明图；图11是根据一实施例的具有导航控制器的系统的示例的框图；并且图12是根据一实施例的具有小外形参数的系统的示例的框图。具体实施方式现在转到图1，电子处理系统10的实施例可包括处理器11、通信地耦合到处理器11的存储器12、和通信地耦合到处理器11的逻辑13，该逻辑13用于识别视频中的动作，基于所识别的动作确定视频中的同步点，并且基于同步点将传感器相关信息与视频对齐。在一些实施例中，逻辑13还可被配置为基于计算机视觉(例如，利用计算机视觉技术)来确定同步点。例如，逻辑13也可被配置为识别视频中的参与者，跟踪参与者在视频中的位置，并且将传感器相关信息映射到所跟踪的参与者在视频中的位置。在一些实施例中，逻辑13还可被配置为标识视频中的两个或更多个参与者，将每个参与者与该参与者穿戴的传感器关联起来，并且将与关联的参与者相对应的传感器相关信息覆盖(overlay)在视频中。例如，逻辑13也可被配置为估计参与者的姿态以识别动作的开始，和/或基于来自用户的输入来选择要跟踪的参与者。在一些实施例中，也可基于识别的动作、传感器相关信息、所标识/选择的选手和/或跟踪信息来覆盖手动标记的数据。一些实施例可有利地将传感器空间对齐到视频/屏幕空间。上述处理器11、存储器12、逻辑13和其他系统组件的每一者的实施例可以用硬件、软件或者其任何适当组合来实现。例如，硬件实现方式可包括可配置逻辑，例如可编程逻辑阵列(programmablelogicarray，PLA)、现场可编程门阵列(fieldprogrammablegatearray，FPGA)、复杂可编程逻辑器件(complexprogrammablelogicdevice，CPLD)，或者使用诸如专用集成电路(applicationspecificintegratedcircuit，ASIC)、互补金属氧化物半导体(complementarymetaloxidesemiconductor，CMOS)或晶体管-晶体管逻辑(transistor-transistorlogic，TTL)技术之类的电路技术的固定功能逻辑硬件，或者这些的任何组合。替换地或者额外地，这些组件的全部或一些部分可作为存储在机器或计算机可读存储介质中的一组逻辑指令被实现在一个或多个模块中，以被处理器或计算设备执行，所述机器或计算机可读存储介质例如是随机访问存储器(randomaccessmemory，RAM)、只读存储器(readonlymemory，ROM)、可编程ROM(programmableROM，PROM)、固件、闪存等等。例如，可以用一种或多种操作系统(operatingsystem，OS)适用/适合的编程语言的任何组合来编写用于执行组件的操作的计算机程序代码，所述编程语言包括面向对象的编程语言，比如PYTHON、PERL、JAVA、SMALLTALK、C++、C#等，还包括传统的过程式编程语言，比如“C”编程语言或类似的编程语言。例如，存储器12、持续性存储介质或其他系统存储器可存储一组指令，这些指令当被处理器11执行时使得系统10实现系统10的一个或多个组件、特征或方面(例如，逻辑13，识别视频中的动作，基于所识别的动作确定视频中的同步点，基于同步点将传感器相关信息与视频对齐，等等)。现在转到图2，半导体封装装置20的实施例可包括衬底21，以及耦合到衬底21的逻辑22，其中逻辑22至少部分实现在可配置逻辑和固定功能硬件逻辑的一个或多个中。耦合到衬底21的逻辑22可被配置为识别视频中的动作，基于所识别的动作确定视频中的同步点，并且基于同步点将传感器相关信息与视频对齐。在一些实施例中，逻辑22还可被配置为基于计算机视觉(例如，利用计算机视觉技术)来确定同步点。例如，逻辑22也可被配置为识别视频中的参与者，跟踪参与者在视频中的位置，并且将传感器相关信息映射到所跟踪的参与者在视频中的位置。在一些实施例中，逻辑22还可被配置为标识视频中的两个或更多个参与者，将每个参与者与该参与者穿戴的传感器关联起来，并且将与关联的参与者相对应的传感器相关信息覆盖在视频中。例如，逻辑22也可被配置为估计参与者的姿态以识别动作的开始，和/或基于来自用户的输入来选择要跟踪的参与者。逻辑22的实施例以及装置20的其他组件可实现在硬件、软件或者其任何组合中，包括硬件中的至少部分实现。例如，硬件实现方式可包括可配置逻辑，例如PLA、FPGA、CPLD，或者利用诸如ASIC、CMOS或TTL技术之类的电路技术之类的固定功能逻辑硬件，或者这些的任何组合。此外，这些组件的一些部分可作为存储在机器或计算机可读存储介质中的一组逻辑指令被实现在一个或多个模块中，以被处理器或计算设备执行，所述机器或计算机可读存储介质例如是RAM、ROM、PROM、固件、闪存，等等。例如，可以用一种或多种OS适用/适合的编程语言的任何组合来编写用于执行组件的操作的计算机程序代码，所述编程语言包括面向对象的编程语言，比如PYTHON、PERL、JAVA、SMALLTALK、C++、C#等，还包括传统的过程式编程语言，比如“C”编程语言或类似的编程语言。现在转到图3，对齐传感器相关信息的方法300的实施例可包括在块31识别视频中的动作，在块32基于所识别的动作确定视频中的同步点，并且在块33基于同步点将传感器相关信息与视频对齐。方法30的一些实施例还可包括在块34基于计算机视觉来确定同步点(例如，利用计算机视觉技术)。例如，方法30也可包括在块35识别视频中的参与者，在块36跟踪参与者在视频中的位置，并且在块37将传感器相关信息映射到所跟踪的参与者在视频中的位置。方法30的一些实施例还可包括在块38标识视频中的两个或更多个参与者，在块39将每个参与者与该参与者穿戴的传感器关联起来，并且在块40将与关联的参与者相对应的传感器相关信息覆盖在视频中。例如，方法本文档来自技高网...

【技术保护点】
1.一种电子处理系统，包括：/n处理器；/n通信地耦合到所述处理器的存储器；以及/n通信地耦合到所述处理器的逻辑，该逻辑用于：/n识别视频中的动作，/n基于所识别的动作确定所述视频中的同步点，并且/n基于所述同步点将传感器相关信息与所述视频对齐。/n

【技术特征摘要】
【国外来华专利技术】1.一种电子处理系统，包括：
处理器；
通信地耦合到所述处理器的存储器；以及
通信地耦合到所述处理器的逻辑，该逻辑用于：
识别视频中的动作，
基于所识别的动作确定所述视频中的同步点，并且
基于所述同步点将传感器相关信息与所述视频对齐。


2.如权利要求1所述的系统，其中所述逻辑还用于：
基于计算机视觉来确定所述同步点。


3.如权利要求1所述的系统，其中所述逻辑还用于：
识别所述视频中的参与者；
跟踪所述参与者在所述视频中的位置；并且
将所述传感器相关信息映射到所跟踪的所述参与者在所述视频中的位置。


4.如权利要求1至3的任何一项所述的系统，其中所述逻辑还用于：
标识所述视频中的两个或更多个参与者；
将每个参与者与该参与者穿戴的传感器相关联；并且
将与关联的参与者相对应的传感器相关信息覆盖在所述视频中。


5.如权利要求1至3的任何一项所述的系统，其中所述逻辑还用于：
估计所述参与者的姿态以识别动作的开始。


6.如权利要求1至3的任何一项所述的系统，其中所述逻辑还用于：
基于来自用户的输入来选择参与者以进行跟踪。


7.一种半导体封装装置，包括：
衬底；以及
耦合到所述衬底的逻辑，其中所述逻辑至少部分地实现在可配置逻辑和固定功能硬件逻辑中的一个或多个中，耦合到所述衬底的所述逻辑用于：
识别视频中的动作，
基于所识别的动作确定所述视频中的同步点，并且
基于所述同步点将传感器相关信息与所述视频对齐。


8.如权利要求7所述的装置，其中所述逻辑还用于：
基于计算机视觉来确定所述同步点。


9.如权利要求7所述的装置，其中所述逻辑还用于：
识别所述视频中的参与者；
跟踪所述参与者在所述视频中的位置；并且
将所述传感器相关信息映射到所跟踪的所述参与者在所述视频中的位置。


10.如权利要求7至9的任何一项所述的装置，其中所述逻辑还用于：
标识所述视频中的两个或更多个参与者；
将每个参与者与该参与者穿戴的传感器相关联；并且
将与关联的参与者相对应的传感器相关信息覆盖在所述视频中。


11.如权利要求7至9的任何一项所述的装置，其中所述逻辑还用于：
估计所述参与者的姿态以识别动作的开始。


12.如权利要求7至9的任何一项所述的装置，其中所述逻辑还用于：
基于来自用户的输入来选择参与者以进行跟踪。


13.一种对齐传感器相关信息的方法，包括：
识别视频中的动作；

【专利技术属性】
技术研发人员：李文龙，童晓峰，栗强，纳迪亚·P·班克斯，多伦·T·霍米纳，
申请(专利权)人：英特尔公司，
类型：发明
国别省市：美国;US