跟踪式视频缩放制造技术

公开了用于由客户端进行动态画中画(PIP)的系统、方法和手段。所述客户端可以驻留在任何设备上。所述客户端可以从服务器接收视频内容，并且使用对象辨识或元数据中的至少一个来识别所述视频内容内的对象。所述元数据可以包括指示对象在所述视频内容的帧内的位置的信息。所述客户端可以接收用户对所述对象的选择，并且使用对象辨识或元数据中的至少一个来确定所述对象跨所述视频内容的多个帧的位置数据。所述客户端可以在跨越所述视频内容的多个帧的PIP窗口内显示所述对象的放大和延时版本。替代地或另外，所述PIP窗口在每一帧内的位置可以是固定的或可以基于所述对象在每一帧内的位置。

Tracking video zoom

【技术实现步骤摘要】
【国外来华专利技术】跟踪式视频缩放相关申请的交叉引用本申请要求在2017年8月30日提交的美国临时专利申请No.62/552,032的权益，其内容通过引用而被结合于此。
技术介绍
各种数字视频压缩技术实现了有效的数字视频通信、分发和消费。标准化视频压缩技术的一些示例是H.261、MPEG-1、MPEG-2、H.263、MPEG-4部分2和H.264/MPEG-4部分10AVC。先进的视频压缩技术(例如，高效视频编码(HEVC))可以在与H.264/AVC相比相同的视频质量下提供两倍的压缩或一半的比特率。
技术实现思路
公开了用于由客户端进行动态画中画(PIP)的系统、方法和手段。客户端可以例如驻留在任何设备上，诸如有线设备(例如，电视(TV))或无线发射/接收单元(WTRU)(例如，智能TV、手持无线设备等)。所述设备可从服务器接收视频内容，且使用对象辨识或元数据中的至少一者来识别所述视频内容内的对象。所述元数据可以包括指示对象在所述视频内容的帧内的位置的信息。所述元数据可以在所述视频内容中被提供或者与所述视频内容一起被提供。所述设备可以接收用户对所述对象的本文档来自技高网...

【技术保护点】
1.一种用于显示动态画中画的方法，所述方法包括：/n从服务器接收视频内容；/n基于对象辨识或元数据，确定对象在所述视频内容的第一帧内的第一位置；/n基于所述对象的所述第一位置，确定第一窗口的位置，所述第一窗口包括所述第一帧的视觉放大部分，所述第一帧的所述视觉放大部分包括所述对象；/n在显示设备上在所述第一帧内显示所述第一窗口；/n基于对象辨识或元数据，确定所述对象在所述视频内容的第二帧内的第二位置，其中所述对象的所述第二位置不同于所述对象的所述第一位置；/n基于所述对象的所述第二位置，确定第二窗口的位置，所述第二窗口包括所述第二帧的视觉放大部分，所述第二帧的所述视觉放大部分包括所述对象；以及/...

【技术特征摘要】
【国外来华专利技术】20170830 US 62/552,0321.一种用于显示动态画中画的方法，所述方法包括：
从服务器接收视频内容；
基于对象辨识或元数据，确定对象在所述视频内容的第一帧内的第一位置；
基于所述对象的所述第一位置，确定第一窗口的位置，所述第一窗口包括所述第一帧的视觉放大部分，所述第一帧的所述视觉放大部分包括所述对象；
在显示设备上在所述第一帧内显示所述第一窗口；
基于对象辨识或元数据，确定所述对象在所述视频内容的第二帧内的第二位置，其中所述对象的所述第二位置不同于所述对象的所述第一位置；
基于所述对象的所述第二位置，确定第二窗口的位置，所述第二窗口包括所述第二帧的视觉放大部分，所述第二帧的所述视觉放大部分包括所述对象；以及
在所述显示设备上在所述第二帧内显示所述第二窗口。


2.根据权利要求1所述的方法，还包括：
基于对象辨识或元数据，确定第二对象在所述视频内容的第三帧内的位置；
基于所述第二对象的所述位置，确定包括所述第二对象的窗口在所述第三帧中的位置；
基于对象辨识或元数据，确定所述对象在所述第三帧内的第三位置；
基于所述对象的所述第三位置，确定包括所述对象的窗口在所述第三帧中的位置；
确定在所述第三帧中包括所述对象的所述窗口与在所述第三帧中包括所述第二对象的所述窗口重叠；以及
在所述显示设备上在所述第三帧内显示包括所述对象和所述第二对象的合并窗口。


3.根据权利要求2所述的方法，还包括：
基于对象辨识或元数据，确定所述对象在所述视频内容的第四帧内的位置；
基于所述对象在所述第四帧内的所述位置，确定包括所述对象的窗口在所述第四帧中的位置；
基于对象辨识或元数据，确定所述第二对象在所述第四帧内的位置；
基于所述第二对象在所述第四帧内的所述位置，确定包括所述第二对象的窗口在所述第四帧中的位置；
确定在所述第四帧中包括所述对象的所述窗口不再与在所述第四帧中包括所述第二对象的所述窗口重叠；
在所述显示设备上在所述第四帧内显示包括所述对象的所述窗口和包括所述第二对象的所述窗口。


4.根据权利要求1所述的方法，还包括：
基于对象辨识或元数据，确定所述对象在所述视频内容的第三帧内的第三位置；以及
在所述显示设备上在第四帧内的预定位置显示第三窗口，其中所述第三窗口包括所述第三帧的视觉放大部分，所述第三帧的所述视觉放大部分包括所述对象，并且其中所述第四帧在时间上在所述第三帧之后。


5.根据权利要求1所述的方法，其中所述第一窗口包括所述第一帧的基于所述对象的用户选择的所述视觉放大部分。


6.根据权利要求1所述的方法，还包括：
识别所述视频内容的较早帧内的多个对象，所述多个对象包括所述对象；
在所述较早帧内显示多个窗口，所述多个窗口中的每一者包括所述多个对象中的相应对象，其中所述多个窗口中的每一者提供关于所述相应对象的指示；以及
基于用户输入，循环通过在所述多个窗口中的焦点窗口。


7.根据权利要求6所述的方法，还包括：
接收对所述多个对象中的所述对象的用户选择；以及
基于所述用户选择，在所述第一窗口内放大所述对象。


8.根据权利要求6所述的方法，其中所述多个对象由所述用户选择。


9.根据权利要求6所述的方法，还包括：
接收对所述多个窗口中的不期望窗口的用户选择；以及
停止显示所述不期望的窗口。


10.根据权利要求1所述的方法，其中元数据包括指示对象在所述视频内容的帧内的位置的信息。


11.根据权利要求1所述的方法，还包括：
在所述第二帧内显示与所述对象有关的信息。


12.一种方法，包括：
从服务器接收视频内容；
使用对象辨识或元数据中的至少一个来识别所述视频内容内的对象；
接收用户对所述对象的选择；
使用对象辨识或元数据中的至少一个来确定跨所述视频内容的帧的所述对象的位置数据；以及
跨所述视频内容的所述帧在画中画PIP窗口内显示所述对象的放大版本，其中所述PIP窗口包括所述帧中的所述视频内容的包含所述对象的部分，其中所述PIP窗口在所述帧内的位置是基于所述对象在所述视频内容的所述帧内的所述位置数据而被确定的。


13.一种方法，...

【专利技术属性】
技术研发人员：路易斯·克伦斯基，爱德华多·阿斯邦，
申请(专利权)人：VID拓展公司，
类型：发明
国别省市：美国;US