位置/定向数据的实时传送制造技术

本发明专利技术提供了一种提供方位信息的方法。所述方法包括：经由实时传送协议，由第一设备向第二设备发送指定了与第二设备相关联的至少一个方位相关参数的消息。所述方法还包括：经由实时传送协议，由第一设备从第二设备接收所述至少一个方位相关参数。

【技术实现步骤摘要】
位置/定向数据的实时传送
技术介绍
许多智能电话、特色电话、平板计算机、数字摄像机和类似设备装备了全球定位系统(GPS)或其他位置感测接收机、加速度计、或数字罗盘。这样的组件可以感测安装了该组件的设备的位置和/或定向。这样的设备还可以装备能够记录协调的视频和音频信息的摄像机。可以用位置感测组件所提供的位置和定向信息来标注视频和音频数据。【附图说明】为了更充分地理解本公开，此时结合附图和详细描述参照以下简要描述，其中，相似的参考标记表示相似的部分。图1示出了摆动(pan)、倾斜(tilt)和旋转(rotation)的概念。图2示出了根据本公开实现的实时传输协议(RTP)有效载荷的结构。图3示出了根据本公开实现的RTP有效载荷中的内容表条目。图4示出了根据本公开实现的示例RTP位置/定向有效载荷。图5示出了根据本公开实现的另一示例RTP位置/定向有效载荷。图6示出了根据本公开实现的具有时间偏移的内容表条目。图7示出了根据本公开实现的具有时间偏移的两个位置/定向帧的示例。图8示出了根据本公开实现的具有首部扩展的RTP分组格式。图9示出了根据本公开实现的包含位置/定向数据的首部扩展。图10示出了根据本公开实现的RTCP应用分组。图11示出了根据本公开实施例的在两个设备间交换位置/定向数据的协商。图12是根据本公开实现的用于提供位置/定向数据的方法的流程图。图13示出了适于实现本公开的处理器和相关组件。【具体实施方式】首先，应当理解，虽然下文提供了本公开的一个或多个实施例的说明性实现，可以使用当前已知的或现有的任意数目的技术来实现所公开的系统和/或方法。本公开绝不应受限于下述说明性实施方式、附图和技术(包括本文说明和描述的示例设计和实施方式在内)，但可以在所附权利要求的范围连同其完全等价范围内作出修改。为各种目的，一并引入在此的2012年I月23日提交的题为“Multimedia FileSupport for Media Capture Device Position and Location Timed Metadata，，的美国专利申请13/356，409提出了将时间戳与方位相关参数相关联并将对参数的支持集成于国际标准化组织(ISO)系媒体文件格式或基于ISO系媒体文件格式的文件格式(如第三代伙伴计划(3GPP)或MPEG-4(MP4)文件)。这样，可以在视频文件中记录这样的信息，使得可以在处理视频时或显示视频时使用该信息。在本公开的实施例中，在多媒体电话或流传输中使用以这样的方式捕捉的位置和/或定向信息。即，可以使用实时流传输来向第二设备发送与第一设备相关联的位置和/或定向(LO)信息。例如，LO数据可用于建立在视频呼叫或游戏中涉及的设备位置和/或定向，用于显示设备位置的地图，用于稳定从非稳定设备接收的图像，或用于其他目的。此处，位置和/或定向信息可一般地称为方位信息。多种设备(如视频摄像机、摄像机电话、智能电话、个人数字助理、平板计算机和类似设备)能够记录视频和/或音频信息。一些这样的设备可以仅记录视频信息或仅记录音频信息，但此处的讨论将关注与能够记录视频和音频的设备。此处，能够记录视频和/或音频信息的任意这样的装置将被称为设备。在此处描述的一些示例实施例中，可能使用术语“摄像机”代替术语“设备”。然而，应理解:本公开更一般地适用于设备。设备可能能够以方位数据标记所记录的信息，所述方位数据可以包括地理位置和/或物理定向。即，包含视频和/或音频信息的文件可以与描述文件创建时设备方位的元数据相关联。方位信息可由GPS系统或类似系统确定。本公开的实现可以将时间戳与设备检测到的位置相关参数和定向相关参数相关联。如以下详细讨论的，位置相关信息可以包括纬度、经度和/或高度，而定向相关信息可以包括摆动、旋转、倾斜和/或缩放。在创建视频和/或音频记录的整个过程中可以连续记录位置相关信息和/或定向相关信息的多个采样，并且可以为采样加时间戳。位置相关和/或定向相关信息可以被记录为视频和/或音频记录期间的静态信息。可以在能够与视频轨和音频轨相关联的元数据轨中记录采样。位置相关信息可以包括经度、纬度和/或高度。经度可以是以度数指示经度的16.16定点数。负值可以表示西经。纬度可以是以度数指示纬度的16.16定点数。负值可以表不南纟韦。闻度可以是以米指不闻度的16.16定点数。由O指不的参考闻考可以被设置为海平面。设备在给定位置的定向可由其沿三个正交轴的旋转方位唯一确定。图1示出了起初面向y轴的设备的摆动、倾斜和旋转的定向相关参数。在特定情况下，可能只有这些参数的子集是相关的。例如，对于定向麦克风，旋转参数值可以有关或可以无关。在图中，χ-y面与地球表面平行，z轴按摄像机位置垂直于地球表面(即，正z方向指向天空)。沿摄像机朝向的方向指向的任意矢量将具有χ-y面中的分量矢量和沿z轴的另一分量矢量。x-y面中存在分量的唯一例外是:摄像机竖直向下指向地面或竖直向上指向天空的情况。在该例外情况下，摆动值是未定义的，并且无需包括在定向参数中。假设χ-y面中的分量矢量存在，其方向限定了正y轴。换言之，沿摄像机朝向的方向指向的任意矢量的罗盘方向分量是正I轴方向。摆动值可以被定义为使起初指向x-y面中的固定参考方向(例如东)的矢量与y轴对准所需的绕z轴的逆时针(或备选地顺时针)旋转量。即，摆动可以是以度数测量且与沿摄像机朝向的方向指向的任意矢量的在平行于地球表面的面中的分量的罗盘方向相对应的16.16定点数。北可以对应于O度，东可以对应于90度等。如果摄像机沿与地球表面垂直的方向指向(竖直向上指向天空或竖直向下指向地面)，则摆动值是未定义的。应用知道摆动方向是“真实”方向还是磁方向可能是有用的。北的“真实”方向是地理北极的方向，而磁方向是罗盘针指向的方向。两者的区别部分是由磁北极和地理北极的位置不同而引起的，部分是由诸如本地铁矿矿藏等因素引起的。倾斜值对应于摄像机绕X轴的旋转方位(X轴被定义为与I轴和z轴垂直显示)。即，倾斜可以是以度数测量的与绕通过摄像机中心的等幅平面中垂直于摆动方向的轴的旋转方位相对应的16.16定点数。如果摄像机平行于地球表面指向，倾斜为O。如果摄像机竖直向上指向天空，倾斜为90度；如果摄像机竖直向下指向地面，倾斜为-90度。旋转值对应于绕沿摄像机朝向的方向的轴的摄像机旋转方位。即，旋转可以是以度数测量的与绕I轴的旋转方位相对应的16.16定点数。由于倾斜和旋转是独立参数，针对倾斜值O定义了旋转。即，摄像机首先被倾斜为平行于地球表面沿对应于摆动的方向指向。此时，旋转是使起初竖直向上指向天空的矢量与摄像机“上”方向对准所需的绕摄像机朝向的轴的逆时针旋转量。在由于摄像机直上或直下指向摆动为未定义的情况下，旋转可以被定义为使起初指向北的矢量与摄像机“上”方向对准所需的旋转量。除了以上定义的参数，还可以定义一个或更多个变焦参数，指示与来自摄像机的图像相关联的光学变焦和/或数字变焦量。光学变焦可以是指示光学放大比例因子的16.16定点数。数字变焦可以是指示由于剪切并将像素尺寸插值回原始尺寸而导致的图像的放大比例因子的16.16定点数。对于变焦，也可以存在水平和/或垂直分量，指示作为变焦中心的图像内的水平和/或垂直方本文档来自技高网...

【技术保护点】
一种用于提供方位信息的方法，包括：经由实时传送协议，由第一设备向第二设备发送指定了与第二设备相关联的至少一个方位相关参数的消息；以及经由实时传送协议，由第一设备从第二设备接收所述至少一个方位相关参数。

【技术特征摘要】
2012.08.06 US 13/567,8821.一种用于提供方位信息的方法，包括: 经由实时传送协议，由第一设备向第二设备发送指定了与第二设备相关联的至少一个方位相关参数的消息；以及 经由实时传送协议，由第一设备从第二设备接收所述至少一个方位相关参数。2.根据权利要求1所述的方法，其中，所述实时传送协议是互联网工程任务组(IETF)请求评述(RFC) 3550中规范的实时传输协议(RTP)。3.根据权利要求2所述的方法，其中，所述至少一个方位相关参数是在与RTP视频流和RTP音频流分开的RTP流中传送的。4.根据权利要求2所述的方法，其中，所述至少一个方位相关参数是在RTP视频流或RTP音频流中至少一个的首部扩展中传送的。5.根据权利要求2所述的方法，其中，所述至少一个方位相关参数是在RTP控制协议(RTCP)反馈分组中传送的。6.根据权利要求1所述的方法，其中，所述消息是会话描述协议(SDP)提议消息。7.根据权利要求1所述的方法，其中，所述至少一个方位相关参数是以下至少一个: 经度； 纬度； 高度； 摆动； 摆动方向； 旋转； 倾斜； 光学变焦；或 数字变焦。8.根据权利要求1所述的方法，其中，所述至少一个方位相关参数是在多媒体电话会话中传送的。9.根据权利要求1所述的方法，其中，所述至少一个方位相关参数是在包括内容表部分和数据部分在内的有效载荷中传送的，其中，所述内容表部分包括多个二进制标记，标记的设置指示所述数据部分中是否存在对应的数据元素。10.根据权利要求1所述的方法，其中，多个方位相关参数由时间偏移值分开，使得以比传送视频数据或音频数据的间隔长的间隔来传送方位相关参数。11.一种设备，包括: 处理器，被配置为使得所述设备经由实时传送协议向第二设备发送指定了与第二设备相关联的至少一个方位相关参数的消息；所述处理器还被配置为使得所述设备经由实时传送协议从第二设备接收所述至少一个方位相关参数。12.根据权利要求11所述的设备，其中，所述实时传送协议是互联网工程任务组(IETF)请求评述(RFC) 3550中规范的实时传输协议(RTP)。13.根据权利要求12所述的设备，其中，所述至少一个方位相关参数是在与RTP视频流和RTP音频流分开的RTP流中传送的。14.根据权利要求12所述的设备，其中，所述至少一个方位相关参...

【专利技术属性】
技术研发人员：戴维·斯图尔特·弗贝克，
申请(专利权)人：黑莓有限公司，
类型：发明
国别省市：