选择运载工具捕获的视频的部分以用于显示制造技术

运载工具相机系统捕获视频并将视频传送到用户设备，该用户设备包括用于重放所捕获的视频的观看设备，诸如虚拟现实眼镜或增强现实眼镜。渲染映射被生成，其指示视频帧的哪些像素(由视频帧的特定坐标标识)对应于虚拟球体的哪些坐标，在该虚拟球体中，视频帧的一部分被渲染以用于显示。当视频帧被接收时，渲染映射被用来确定用于虚拟球体中的坐标的纹理值(例如，颜色)，其被用来为用户生成显示。当用户转动他或她的头部时(例如，在虚拟现实中)，该技术减少了渲染时间，因此减少了由渲染延迟引起的晕动症状和/或虚拟现实症状。

Select the part of the video captured by the carrier for display.

The carrier camera system captures video and transmits it to a user device that includes viewing devices for replaying captured video, such as virtual reality glasses or augmented reality glasses. Render mappings are generated that indicate which pixels of the video frame (identified by the specific coordinates of the video frame) correspond to which coordinates of the virtual sphere in which a portion of the video frame is rendered for display. When a video frame is received, the rendering map is used to determine the texture value (e.g., color) for the coordinates in the virtual sphere, which is used to generate the display for the user. When a user rotates his or her head (for example, in virtual reality), the technique reduces rendering time, thereby reducing motion symptoms and/or virtual reality symptoms caused by delayed rendering.

【技术实现步骤摘要】
【国外来华专利技术】选择运载工具捕获的视频的部分以用于显示
技术介绍
遥控运载工具已变得越来越流行。尤其是对于无人驾驶飞行器(UAV)这种情况，UAV通常包括允许UAV更容易被驾驶的稳定技术，特别是由新手用户。这些遥控运载工具中的一些还包括相机，该相机允许视频被捕获并被传送回至用户以用于在用户所在位置的屏幕上显示，从而向用户提供运载工具“看到”的内容的第一人称视图(FPV)(例如，如果用户在运载工具的位置，他或她将看到什么)。虽然来自这些运载工具的第一人称视图视频是有益的，但是它并非没有问题。一个这样的问题是，由于响应于用户对运载工具的控制的视图变化的等待时间，视频的回放可能导致一些用户的晕动症状。
技术实现思路
本
技术实现思路
被提供以简化的形式引入一些概念的选择，这些概念将在下面的具体实施方式中进一步被描述。本
技术实现思路
不旨在标识所要求保护的技术主题的关键特征或必要特征，也不旨在被用来限制所要求保护的技术主题的范围。根据一个或多个方面，用于观看设备的、纹理帧坐标到虚拟球体坐标的渲染映射被获得，该渲染映射已经在观看设备的初始化过程期间被生成。多个视频帧的第一视频帧从运载工具的相机系统被接收并且被保存到第一纹理帧本文档来自技高网...

【技术保护点】
1.一种方法，包括：获取用于观看设备的、纹理帧坐标到虚拟球体坐标的渲染映射，所述渲染映射已经在所述观看设备的初始化过程期间被生成；从运载工具的相机系统接收多个视频帧中的第一视频帧；将所述多个帧中的所述第一视频帧保存到第一纹理帧缓冲器中；使用所述渲染映射和所述第一纹理帧缓冲器中的所述第一视频帧来确定用于虚拟球体的纹理值；以及使用所确定的所述纹理值通过所述观看设备显示所述虚拟球体。

【技术特征摘要】
【国外来华专利技术】2016.02.29 US 15/056,8041.一种方法，包括：获取用于观看设备的、纹理帧坐标到虚拟球体坐标的渲染映射，所述渲染映射已经在所述观看设备的初始化过程期间被生成；从运载工具的相机系统接收多个视频帧中的第一视频帧；将所述多个帧中的所述第一视频帧保存到第一纹理帧缓冲器中；使用所述渲染映射和所述第一纹理帧缓冲器中的所述第一视频帧来确定用于虚拟球体的纹理值；以及使用所确定的所述纹理值通过所述观看设备显示所述虚拟球体。2.根据权利要求1所述的方法，所述观看设备包括虚拟现实耳机或眼镜。3.根据权利要求1所述的方法，所述观看设备包括增强现实耳机或眼镜。4.根据权利要求1至权利要求3中任一项所述的方法，所述显示包括提供所述运载工具的第一人称视图。5.根据权利要求1至权利要求4中任一项所述的方法，进一步包括：针对虚拟球体对和用于所述第一视频帧的帧对，重复所述保存、所述使用和所述显示，以及同时显示所述虚拟球体对。6.根据权利要求1至权利要求5中任一项所述的方法，进一步包括：从所述运载工具接收所述多个视频帧中的第二视频帧；将所述多个帧中的所述第二视频帧保存到第二纹理帧缓冲器中；通过使用所述第一视频帧和所述第二视频帧来生成第三视频帧以对所述多个视频帧进行上采样；使用所述渲染映射和所述第三视频帧来确定用于所述虚拟球体的附加纹理值；以及使用所确定的所述纹理值通过所述观看设备显示所述虚拟球体。7.根据权利要求1至权利要求6中任一项所述的方法，进一步包括：检测所述观看设备沿一个或多个轴到新位置的移动；从所述运载工具接收所述多个视频帧中的第二视频帧，所述第二视频帧是在顺序上位于所述第一视频帧之后的紧接的下一视频帧；将所述多个帧中的所述第二视频帧保存到第二纹理帧缓冲器中；使用所述渲染映射和所述纹理缓冲器中的所述第二视频帧来确定用于所述虚拟球体的新纹理值；以及使用所述新纹理值通过所述观看设备显示所述虚拟球体。8.根据权利要求1至权利要求7中任一项所述的方法，进一步包括：检测所述观看设备沿一个或多个轴到新位置的...

【专利技术属性】
技术研发人员：N·斯莫尔扬斯基，张正友，S·E·安德森，M·霍尔，
申请(专利权)人：微软技术许可有限责任公司，
类型：发明
国别省市：美国,US