用于相机标定参数或SEI的基于SDP的信令的装置制造方法及图纸

本公开提供了用于相机标定参数或补充增强信息(SEI)的基于会话描述协议(SDP)的信令的装置。一种用于客户端的装置，包括：第一电路，被配置为编码一组媒体流，该一组媒体流携带捕获的二维(2D)视频；以及第二电路，配置为响应于来自另一客户端的请求相机标定参数的会话描述协议(SDP)提议而生成SDP应答，SDP应答包括一SDP属性，用于指示针对携带捕获的2D视频的一组媒体流的一个或多个相机标定参数或指示一个或多个相机标定参数的存在，其中一个或多个相机标定参数将由另一客户端用来拼接2D视频以生成360度视频。接2D视频以生成360度视频。接2D视频以生成360度视频。

【技术实现步骤摘要】
用于相机标定参数或SEI的基于SDP的信令的装置
[0001]优先权声明
[0002]本申请要求于2021年01月15日递交的美国临时申请第63/138,278号和2021年01月27日递交的美国临时申请第63/142,419号的优先权权益，这两个申请的全部内容通过引用合并于此。


[0003]本公开的实施例总体涉及无线通信领域，具体地，涉及用于相机标定参数和/或补充增强信息(SEI)的基于会话描述协议(SDP)的信令的装置和方法。

技术介绍

[0004]市场上有各种品牌的360度摄像机，例如，理光(Ricoh)、看道(Kandao)、Insta360等。360度摄像机可能会有很大差异。例如，它们可能有2个镜头、3个镜头、6个镜头或更多。相机标定数据是用于后续360度视频拼接和生成的基础信息。但是，没有标准的方式来对准拼接操作。用户必须设计一种方法来对准每个平台的拼接操作。一些硬件提供商可能会提供用于拼接的软件。但是，用户可能对硬件提供商提供的软件的拼接质量不满意，并且该软件无法被定制，例如在拼接动作之前执行分析。有时，需要在要求本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种用于客户端的装置，包括：第一电路，被配置为编码一组媒体流，所述一组媒体流携带捕获的二维2D视频；以及第二电路，配置为响应于来自另一客户端的请求相机标定参数的会话描述协议SDP提议而生成SDP应答，所述SDP应答包括一SDP属性，用于指示针对携带捕获的2D视频的所述一组媒体流的一个或多个相机标定参数或指示所述一个或多个相机标定参数的存在，其中所述一个或多个相机标定参数将由所述另一客户端用来拼接所述2D视频以生成360度视频。2.如权利要求1所述的装置，其中，所述一个或多个相机标定参数包括用于捕获所述2D视频的相机的数量、所述相机的布局和位置、每个相机的内在参数、以及每个相机的外部参数中的任何一者或多者，每个相机的内在参数包括焦距、视场、主点、中心位置和半径、图像和角像素分辨率、相机畸变、成像区域的高度和宽度中的任何一者或多者，并且每个相机的外部参数包括平移和方向值、center_azimuth、center_elevation、center_tilt、azimuth_range、elevation_range和其它由x、y、z坐标表示的外部参数中的任何一者或多者。3.如权利要求1或2所述的装置，其中，所述SDP属性是针对每个媒体流声明的，并且所述一个或多个标定参数是在每个流的基础上收集的。4.如权利要求1或2所述的装置，其中，在所述SDP属性指示所述一个或多个相机标定参数的存在的情况下,相应的媒体流被编码为包括具有补充增强信息SEI消息的比特流以指示所述一个或多个相机标定参数。5.如权利要求4所述的装置，其中，所述SEI消息是针对高级视频编码AVC比特流或高效视频编码HEVC比特流的多视图获取信息SEI消息。6.如权利要求5所述的装置，其中，当前层的多视图获取信息SEI消息被包括在一访问单元内，该访问单元包括所述当前层的编码层视频序列CLVS的第一张图片。7.如权利要求5所述的装置，其中，所述多视图获取信息SEI消息被包括在可扩展嵌套SEI消息中，所述可扩展嵌套SEI消息中的语法元素bitstream_subset_flag、nesting_op_flag和all_layers_flag等于0。8.如权利要求5所述的装置，其中，所述多视图获取信息SEI消息包括以下语法元素中的任何一个或多个：intrinsic_param_flag,extrinsic_param_flag,intrinsic_params_equal_flag,prec_focal_length,prec_principal_point,prec_skew_factor,sign_focal_length_x[i],exponent_focal_length_x[i],mantissa_focal_length_x[i],sign_focal_length_y[i],exponent_focal_length_y[i],mantissa_focal_length_y[i],sign_principal_point_x[i],exponent_principal_point_x[i],mantissa_principal_point_x[i],sign_principal_point_y[i],exponent_principal_point_y[i],mantissa_principal_point_y[i],sign_skew_factor[i],sign_skew_factor[i],exponent_skew_factor[i],mantissa_skew_factor[i],prec_rotation_param,prec_translation_param,sign_r[i][j][k],exponent_r[i][j][k],mantissa_r[i][j][k],sign_t[i][j],exponent_t[i][j],mantissa_t[i][j]num_views_minus1,view_position[i]，其中i表示相机的索引，j和k中的任一个表示由相应语法元素表示的标定参数的分量。
9.如权利要求1或2所述的装置，其中，来自所述另一客户端的所述SDP提议包括一布尔标志参数来指示是否请求相机标定参数。10.如权利要求1或2所述的装置，其中，所述客户端是互联网协议多媒体子系统的多媒体电话业务MTSI客户端，所述另一个客户端是媒体资源功能MRF或媒体控制单元MCU服务器。11.如权利要求1或2所述的装置，其中，所述SDP应答还包括用于指示一个或多个补充增强信息SEI消息的另一SDP属性。12.如权利要求11所述的装置，其中，所述一个或多个SEI消息包括等量矩形投影ERP SEI消息、立方体贴图投影CMP SEI消息、球面旋转SEI消息、帧打包排列SEI消息、和显示方向SEI消息中的任何一个或多个。13.一种用于服务器的装置，包括：第一电路，被配置为：生成要发送到客户端的会话描述协议SDP提议，以请求用于从由该客户端的相机捕获的二维2D视频生成360度视频的相机标定参数；并且获得来自所述客户端的SDP应答，该SDP应答包括一SDP属性，用于指示针对跟在该SDP应答之后的携带2D视频的一组...

【专利技术属性】
技术研发人员：厄兹古尔，
申请(专利权)人：英特尔公司，
类型：发明
国别省市：