当前位置: 首页 > 专利查询>VID拓展公司专利>正文

用户自适应的视频电话制造技术

技术编号:14618493 阅读:71 留言:0更新日期:2017-02-10 09:59
一种设备可以经由转码和/或流量整形来控制视频通信。所述设备可以包括多点控制单元(MCU)和/或服务器。设备可以接收来自一个或多个设备的一个或多个视频流。设备可以分析接收到的视频流以确定观看参数。观看参数可以包括用户观看参数、设备观看参数、和/或内容观看参数。设备可以基于所述观看参数来修改视频流。修改视频流可以包括对视频流进行重新编码、调整朝向、移除视频细节、和/或调整比特率。设备可以向另一设备发送修改后的视频流。设备可以基于所述观看参数来为所述视频流确定比特率。设备可以通过发送反馈消息和/或通过用信号发送带宽限制来指示比特率。

【技术实现步骤摘要】
【国外来华专利技术】相关申请的交叉引用本申请要求享有2013年8月29日提交的申请号为61/871,836的美国临时申请、2014年2月25日提交的申请号为61/944,548的美国临时申请的权益,该申请的内容在此结合作为参考。
技术介绍
视频电话是无线网络上承载的一个正在增长的流量部分。这种趋势有望持续进行,其证据是引入了对LTE网络上传递的苹果的的FaceTime技术的支持。视频电话系统可以集成在网页浏览器中,而无需第三方插件。移动视频电话系统在捕获(capture)和处理视频数据的过程中可以不将视觉(visual)链路考虑在内。无线网络上的实时视频电话以显著的带宽和延时需求为特征。由于对诸如视频聊天之类的交互会话中的延时的容忍性低,接收机处的缓存会受到很大限制。视频解码器可以受到信道特性的动态影响。一些视频电话系统可能在动态无线信道的场景中不具有鲁棒性或不可靠。瞬时的拥塞和/或临时的大分组延时可能造成可靠性差。在无线网络中,通常在延时和带宽之间存在折衷。
技术实现思路
提供了用于控制视频通信的系统、方法以及手段。设备可以经由转码来控制视频通信。设备可以包括多点控制单元(MCU)。设备可以接收来自第一设备的第一视频流和来自第二设备的第二视频流。设备可以接收来自第三设备的第三视频流。设备可以接收来自第二设备的第四视频流。设备可以分析第一视频流来确定与第一设备相关联的第一观看参数。设备可以分析第二视频流来确定与第二设备相关联第二观看参数。设备可以分析第三视频流来确定与第三设备相关联的第三观看参数。观看参数可以包括用户观看参数、设备观看参数、和/或内容观看参数。设备可以基于第一观看参数和/或第三观看参数来修改第二视频流。设备可以基于第三观看参数和/或第二观看参数来修改第一视频流。设备可以基于第三观看参数来修改第四视频流。修改视频流可以包括对视频流进行重新编码、调整朝向、移除视频细节、和/或调整比特率。设备可以向第一设备和/或第三设备发送修改后的第二视频流。设备可以向第二设备发送修改后的第一视频流。设备可以向第一设备和/或第三设备发送修改后的第四视频流。设备可以比较与第一观看参数和第三观看参数相关联的比特率。当第三观看参数与比第一观看参数更高的比特率相关联时,设备可以基于第三观看参数来修改第四视频流。设备可以经由流量整形来控制视频通信。设备可以包括MCU。设备可以接收来自第一设备的第一视频流和来自第二设备的第二视频流。设备可以通过分析第一视频流来确定与第一设备相关联的观看参数。观看参数可以包括用户观看参数、设备观看参数、和/或内容观看参数。设备可以基于观看参数来为第二视频流确定视频流比特率。设备可以向第二设备指示视频流比特率。设备可以通过在向第一设备发送所述第二视频流之前从所述第二视频流中移除一个或多个分组。设备可以通过发送指示调整后的分组丢失率来指示视频流比特率。设备可以为第二视频流测量分组丢失率。设备可以为第二视频流确定调整后的分组丢失率。所述调整后的分组丢失率可以与所确定的视频流比特率相关联。所述调整后的分组丢失率可以不同于所测量到的分组丢失率。所述设备可以生成指示调整后的分组丢失率的反馈消息。设备可以向第二设备发送反馈消息。设备可以通过用信号发送带宽限制来指示视频流比特率。设备可以为第一设备确定第一观看参数和为第三设备确定第三观看参数。第一观看参数可以与第一视频流相关联。第三观看参数可以与来自第三设备的第三视频流相关联。设备可以为第二视频流确定第一视频流比特率和/或为第二视频流确定第二视频流比特率。第一视频流比特率可以基于第一观看参数。第二视频流比特率可以基于第三观看参数。设备可以向第二设备指示带宽限制。带宽限制可以与第一视频流比特率和/或第二视频流比特率相关联。服务器可以控制两个或更多个设备之间的视频通信。服务器可以接收来自第一设备的第一视频流的采样。服务器可以基于采样来确定观看参数。观看参数可以与第一设备相关联。服务器可以基于观看参数来指示对第二视频流的修改。所述修改可以包括调整比特率、调整分辨率、移除细节、调整朝向、和/或滤波。服务器可以生成指示对第二视频流的修改的消息。服务器可以向第二设备发送所述消息。附图说明可从以下描述中获取更详细的理解,这些描述是结合附图通过举例给出的,其中:图1A是可以实施所公开的一个或多个实施方式的示例性通信系统的系统图;图1B是可以在图1A所示的通信系统中使用的示例性无线发射/接收单元(WTRU)的系统图;图1C是可以在图1A所示的通信系统中使用的示例性无线电接入网和示例性核心网络的系统图;图1D是可以在图1A所示的通信系统中使用的另一个示例性无线电接入网和另一个示例性核心网络的系统图;图1E是可以在图1A所示的通信系统中使用的另一个示例性无线电接入网和另一个示例性核心网络的系统图;图2A是显示了示例性移动视频电话系统的示图;图2B是观看设置的示例性参数的示图;图2C是使用坎贝尔-罗布森图(Campbell-Robsonchart)的对比灵敏度函数的一个示例的示图;图3显示了不同朝向的WTRU之间的示例性视频电话会话;图4显示了不同朝向的WTRU之间的示例性视频电话会话;图5是显示了包括经由网络与彼此通信的WTRU的示例性视频电话系统的示图;图6是显示了包括经由网络与彼此通信的WTRU的示例性视频电话系统的示图;图7是显示了包括经由网络与彼此通信的WTRU的示例性视频电话系统的示图;图8是显示了包括经由网络与彼此通信的WTRU的示例性视频电话系统的示图,其中一个WTRU基于另一WTRU的朝向来进行视频捕获;图9A-图9D是显示了对于WTRU相对于观看者的显示器的给定朝向在接收WTRU处显示视频的示例的示图;图10A-图10B是显示了发送方侧剪切(crop)的示例的示图;图11A-图11B是显示了发送方侧缩小(downsizing)或下采样(downsampling)的示例的示图;图12A-图12B是显示了图像传感器选择的示图;图13是图像传感器阵列旋转的示例的示图;图14是显示了针对视频图片的宽度的示例性向上方向(updirection)的示图;图15是显示了用户的示例性眼轴的示图;图16是显示了眼轴到显示器平面的一个示例性投射的示图;图17是根据远程设备的朝向在本地捕获视频的一个本文档来自技高网...

【技术保护点】
一种用于控制视频通信的方法,该方法包括:接收来自第一设备的第一视频流和来自第二设备的第二视频流;通过分析所述第一视频流来确定与所述第一设备相关联的观看参数;基于所述观看参数来修改所述第二视频流;以及向所述第一设备发送修改后的第二视频流。

【技术特征摘要】
【国外来华专利技术】2013.08.29 US 61/871,836;2014.02.25 US 61/944,5481.一种用于控制视频通信的方法,该方法包括:
接收来自第一设备的第一视频流和来自第二设备的第二视频流;
通过分析所述第一视频流来确定与所述第一设备相关联的观看参数;
基于所述观看参数来修改所述第二视频流;以及
向所述第一设备发送修改后的第二视频流。
2.根据权利要求1所述的方法,其中修改所述第二视频流包括以下中
的至少一者:对所述第二视频流进行重新编码、调整朝向、移除视频细节、
和调整比特率。
3.根据权利要求1所述的方法,其中所述观看参数是第一观看参数,
并且所述方法还包括:
通过分析所述第二视频流来确定与所述第二设备相关联的第二观看参
数;
基于所述第二观看参数来修改所述第一视频流,其中修改所述第一视频
流包括以下中的至少一者:对所述第一视频流进行重新编码、调整朝向、移
除视频细节、和调整比特率;以及
将修改后的第一视频流发送给所述第二设备。
4.根据权利要求1所述的方法,其中所述观看参数是第一观看参数,
所述方法还包括:
接收来自第三设备的第三视频流;
接收来自所述第二设备的第四视频流;
通过分析所述第三视频流来确定与所述第三设备相关联的第三观看参
数;
基于所述第三观看参数来修改所述第四视频流;以及
将修改后的第四视频流发送给所述第三设备。
5.根据权利要求4所述的方法,其中修改所述第四视频流还包括:
对与所述第一观看参数和所述第三观看参数相关联的比特率进行比较;
以及
在所述第三观看参数相比于所述第一观看参数与更高的比特率相关联
的条件下,基于所述第三观看参数来调整与所述第四视频流相关联的比特率。
6.根据权利要求1所述的方法,其中所述观看参数包括用户观看参数,
该用户观看参数包括以下中的至少一者:用户的存在性、用户相对于所述第
一设备的屏幕的位置、用户相对于所述第一设备的屏幕的朝向、用户相对于
所述第一设备的屏幕的视角、用户与所述第一设备的屏幕的距离、用户的视
觉敏锐度、环境照度条件、观看所述第一设备的屏幕的用户数量、和用户的
关注点。
7.根据权利要求1所述的方法,其中所述观看参数包括设备观看参数,
该设备观看参数包括以下中的至少一者:所述第一设备的屏幕的尺寸、所述
第一设备的屏幕的对比度、所述第一设备的屏幕的亮度、所述第一设备的屏
幕的像素密度、在所述第一设备上显示多媒体内容的窗口的尺寸、所述第一
设备上的摄像机设置、和在所述第一设备上显示所述多媒体内容的窗口的位
置。
8.根据权利要求1所述的方法,其中所述观看参数包括内容观看参数,
该内容观看参数包括以下中的至少一者:对比度、色域、和三维内容的深度

\t范围。
9.一种用于控制视频通信的设备,该设备至少部分被配置为:
接收来自第一设备的第一视频流和来自第二设备的第二视频流;
基于对所述第一视频流的分析来确定与所述第一设备相关联的观看参
数;
基于所述观看参数来修改所述第二视频流;以及
向所述第一设备发送修改后的第二视频流。
10.根据权利要求9所述的设备,其中被配置为修改所述第二视频流包
括被配置为以下中的至少一者:对所述第二视频流进行重新编码、调整朝向、
移除视频细节、和调整比特率。
11.根据权利要求9所述的设备,其中所述观看参数是第一观看参数,
所述设备还被配置为:
基于对所述第二视频流的分析来确定与所述第二设备相关联的第二观
看参数;
基于所述第二观看参数来修改所述第一视频流,其中被配置为修改所述
第一视频流包括被配置为以下中的至少一者:对所述第一视频流进行重新编
码、调整朝向、移除视频细节、和调整比特率;以及
将修改后的第一视频流发送给所述第二设备。
12.根据权利要求9所述的设备,其中所述观看参数是第一观看参数,
所述设备还被配置为:
接收来自第三设备的第三视频流;
接收来自所述第二设备的第四视频流;
基于对所述第三视频流的分析来确定与所述第三设备相关联的第三观
看参数;
基于所述第三观看参数来修改所述第四视频流;以及
将修改后的第四视频流发送给所述第三设备。
13.根据权利要求12所述的设备,其中被配置为修改所述第四视频流
包括所述设备还被配置为:
对与所述第一观看参数和所述第三观看参数相关联的比特率进行比较;
以及
在所述第三观看参数相比于所述第一观看参数与更高的比特率相关联
的条件下,基于所述第三观看参数来调整与所述第四视频流相关联的比特率。
14.根据权利要求9所述的设备,其中所述观看参数包括用户观看参数,
该用户观看参数包括以下中的至少一者:用户的存在性、用户相对于所述第
一设备的屏幕的位置、用户相对于所述第一设备的屏幕的朝向、用户相对于
所述第一设备的屏幕的视角、用户与所述第一设备的屏幕的距离、用户的视
觉敏锐度、环境照度条件、观看所述第一设备的屏幕的用户数量、和用户的
关注点。
15.根据权利要求9所述的设备,其中所述观看参数包括设备观看参数,
该设备观看参数包括以下中的至少一者:所述第一设备的屏幕的尺寸、所述
第一设备的屏幕的对比度、所述第一设备的屏幕的亮度、所述第一设备的屏
幕的像素密度、在所述第一设备上显示多媒体内容的窗口的尺寸、所述第一
设备上的摄像机设置、和在所述第一设备上显示所述多媒体内容的窗口的位

\t置。
16.根据权利要求9所述的设备,其中所述观看参数包括内容观看参数,
该内容观看参数包括以下中的至少一者:对比度、色域、和三维内容的深度
范围。
17.根据权利要求9所述的设备,其中所述设备包括多点控制单元
(MCU)。
18.一种用于控制视频通信的方法,该方法包括:
接收来自第一设备的第一视频流;
通过分析所述第一视频流来确定与所述第一设备相关联的观看参数;
基于所述观看参数为来自第二设备的第二视频流确定视频流比特率;以

向所述第二设备指示所述视频流比特率。
19.根据权利要求18所述的方法,其中指示所述视频流比特率包括:
接收来自所述第二设备的第二视频流;
为所述第二视频流测量分组丢失率;
确定不同于所测量到的分组丢失率的与所确定的视频流比特率相关联
的调整后的分组丢失率;
生成指示所述调整后的分组丢失率的反馈消息;以及
向所述第二设备发送所述反馈消息。
20.根据权利要求18所述的方法,其中所述观看参数是第一观看参数,
并且其中所述视频流比特率是针对所述第二视频流的第一视频流比特率,并

\t且其中指示所述视频流比特率包括:
接收来自第三设备的第三视频流;
通过分析所述第三视频流来确定与所述第三设备相关联的第三观看参
数;
基于所述第三观看参数来为所述第二视频流确定第二视频流比特率;以

向所述第二设备用信号发送与所述第一视频流比特率和所述第二视频
流比特率相关联的带宽限制。
21.根据权利要求18所述的方法,该方法还包括:接收来自所述第...

【专利技术属性】
技术研发人员:Y·雷兹尼克G·S·斯滕伯格A·泽拉马良平Y·何A·巴拉苏布拉马尼安叶琰L·克拉夫斯基R·内夫陈志峰
申请(专利权)人:VID拓展公司
类型:发明
国别省市:美国;US

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1