虚拟背景的显示方法、电子设备和计算机可读存储介质技术

本发明专利技术公开了一种虚拟背景的显示方法。该方法包括：获取视频图像；对所述视频图像进行人体识别，得到人体图像和非人体图像；将所述非人体图像替换为预设的背景图像，并将所述人体图像和所述背景图像进行叠加；将合并后的图像发送给显示端进行显示。本发明专利技术还公开了一种虚拟背景的显示电子设备及计算机可读存储介质。本发明专利技术能够实现在视频过程中，通过虚拟背景实体化的方法将用户选择的虚拟背景与现实人物完美融合，变换视频中的人物背景。

Display Method of Virtual Background, Electronic Equipment and Computer Readable Storage Media

The invention discloses a display method of virtual background. The method includes: acquiring video image; recognizing the human body to obtain human body image and non-human body image; replacing the non-human body image with the preset background image and superimposing the human body image and the background image; sending the combined image to the display terminal for display. The invention also discloses a virtual background display electronic device and a computer readable storage medium. The invention can realize the perfect fusion of the virtual background selected by the user and the real person through the method of virtual background materialization in the video process, and transform the person background in the video.

【技术实现步骤摘要】
虚拟背景的显示方法、电子设备和计算机可读存储介质
本专利技术涉及视频图像处理领域，尤其涉及一种虚拟背景的显示方法、电子设备和计算机可读存储介质。
技术介绍
随着互联网技术的发展，越来越多的通信功能得到开发及应用，其中，视频通信功能由于可以实现异地用户的可视化沟通而得到广泛应用。目前，视频通信功能也很好地在医疗远程会诊方面起到了作用。然而，医生固定于会诊室进行会诊。实际医生工作地点不固定是常态化：可能在门诊坐诊；可能在科室查房；可能下社区医院等等。这些情况下，医生只能选择回到会诊室会诊或是使用便携设备就地会诊。前者时间成本高后者不具有会诊权威性。因此本专利技术旨在综合两者的优势，在主管部门允许和授权的前提下，为医生会诊的场景匹配合规的背景画面和场所，为患者呈现便捷丰富可信的会诊视频方式，同时也兼顾了保护用户在视频过程中不相干的其他人员的隐私安全。
技术实现思路
本专利技术的主要目的在于提供一种虚拟背景的显示方法、电子设备和计算机可读存储介质，旨在实现在视频过程中，通过虚拟背景实体化的方法将用户选择的虚拟背景与现实人物完美融合，变换视频中的人物背景。为实现上述目的，本专利技术提供一种虚拟背景的显示方法，所述虚拟背景的显示方法包括以下步骤：获取视频图像；对所述视频图像进行人体识别，得到人体图像和非人体图像；将所述非人体图像替换为预设的背景图像，并将所述人体图像和所述背景图像进行叠加；将合并后的图像发送给显示端进行显示。可选地，所述将所述非人体图像替换为预设的背景图像，并将所述人体图像和所述背景图像进行叠加的步骤包括：对视频图像的人体图像进行位姿计算，得到所述视频图像人体图像的坐标；根据所述人体图像的坐标，对人体图像进行叠加虚拟背景图像。可选地，所述对视频图像的人体图像进行位姿计算，得到所述视频图像人体图像的坐标的步骤包括：获得视频图像提取的人体几何特征；根据几何特征参数形成的特征向量集；多组特征向量可确认该画面人体坐标；根据人体坐标与预设数据库中的人体模型匹配，生成人体特征坐标对应人体模型的投影矩阵；根据所述投影矩阵和预设的内参矩阵来计算位姿矩阵，确定人体坐标为有效人体姿态坐标。可选地，所述根据所述人体图像的坐标，对人体图像进行叠加虚拟背景图像的步骤包括：从预设数据库中获得所述预设的虚拟背景图像；将所述虚拟背景图像与所述人体图像的坐标进行融合计算，使所述人体图像叠加浮于虚拟背景图像上。可选地，所述虚拟背景的显示方法还包括：获取视频中人体图像的特征向量；跟踪视频中特征向量的运动，判断所述特征向量的运动是否超过范围；若是，则返回执行步骤：获取视频图像。可选地，所述获取视频中人体图像的特征向量的步骤包括：将所述视频图像投影到多个低维子空间，得到图像在多个低维子空间的特征点；将所述多个低维子空间的特征点进行组合构建，获得所述视频图像中的人体的特征向量。可选地，所述跟踪视频中特征向量的运动，判断所述特征向量的运动是否超过范围的步骤包括：根据预设的运动参数，计算特征向量的运动模型；根据视频中的特性向量的运动是否超出运动模型，判断所述特征向量的运动是否超过范围。可选地，所述预设的背景图像包括二维虚拟背景图像或者三维虚拟背景图像。此外，为实现上述目的，本专利技术还提供一种虚拟背景的显示电子设备，所述虚拟背景的显示电子设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的虚拟背景的显示程序，所述虚拟背景的显示程序被所述处理器执行时实现如上所述的身虚拟背景的显示方法的步骤。此外，为实现上述目的，本专利技术还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有虚拟背景的显示程序，所述虚拟背景的显示程序被处理器执行时实现上述的虚拟背景的显示方法的步骤。本专利技术提供一种虚拟背景的显示方法、电子设备和计算机存储介质。在该方法中，获取视频图像；对所述视频图像进行人体识别，得到人体图像和非人体图像；将所述非人体图像替换为预设的背景图像，并将所述人体图像和所述背景图像进行叠加；将合并后的图像发送给显示端进行显示。通过上述方式，本专利技术能够实现在视频过程中，通过人体识别技术识别出人体区域和背景区域，并将人体图像浮于预先设定合规的场景的背景图像上，使视频中的背景图像能够变更为通过管理部门审核后的用户选择的背景图像，使用户不在拘束于视频地点，为医生会诊的场景匹配合规的背景画面和场所，为患者呈现便捷丰富可信的会诊视频方式，同时也兼顾了保护用户在视频过程中不相干的其他人员的隐私安全。附图说明图1是本专利技术实施例方案涉及的硬件运行环境的装置结构示意图；图2为本专利技术虚拟背景的显示方法第一实施例的流程示意图；图3为本专利技术虚拟背景的显示方法第二实施例的流程示意图；图4为本专利技术虚拟背景的显示方法第三实施例的流程示意图；图5为本专利技术虚拟背景的显示方法第四实施例的流程示意图；图6为本专利技术虚拟背景的显示方法第五实施例的流程示意图；图7为本专利技术虚拟背景的显示方法第六实施例的流程示意图；图8为本专利技术虚拟背景的显示方法第七实施例的流程示意图；本专利技术目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。具体实施方式应当理解，此处所描述的具体实施例仅仅用以解释本专利技术，并不用于限定本专利技术。如图1所示，图1是本专利技术实施例方案涉及的硬件运行环境的装置结构示意图。本专利技术实施例终端可以是PC，也可以是智能手机、平板电脑、便携计算机等具有数据处理功能的终端设备。如图1所示，该终端可以包括：处理器1001，例如CPU，网络接口1004，用户接口1003，存储器1005，通信总线1002。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)，可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器，也可以是稳定的存储器(non-volatilememory)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。可选地，终端还可以包括摄像头、RF(RadioFrequency，射频)电路，传感器、音频电路、Wi-Fi模块等等。其中，传感器比如光传感器、运动传感器以及其他传感器。具体地，光传感器可包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示屏的亮度，接近传感器可在移动终端移动到耳边时，关闭显示屏和/或背光。作为运动传感器的一种，重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别移动终端姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；当然，移动终端还可配置陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器，在此不再赘述。本领域技术人员可以理解，图1中示出的终端结构并不构成对终端的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。如图1所示，作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及虚拟背景的显示程序。在图1所示的终端中，网络接口1004主要用于连接后台服务器本文档来自技高网...

【技术保护点】
1.一种虚拟背景的显示方法，其特征在于，所述虚拟背景的显示方法包括以下步骤：获取视频图像；对所述视频图像进行人体识别，得到人体图像和非人体图像；将所述非人体图像替换为预设的背景图像，并将所述人体图像和所述背景图像进行叠加；将合并后的图像发送给显示端进行显示。

【技术特征摘要】
1.一种虚拟背景的显示方法，其特征在于，所述虚拟背景的显示方法包括以下步骤：获取视频图像；对所述视频图像进行人体识别，得到人体图像和非人体图像；将所述非人体图像替换为预设的背景图像，并将所述人体图像和所述背景图像进行叠加；将合并后的图像发送给显示端进行显示。2.如权利要求1所述的虚拟背景的显示方法，其特征在于，所述将所述非人体图像替换为预设的背景图像，并将所述人体图像和所述背景图像进行叠加的步骤包括：对视频图像的人体图像进行位姿计算，得到所述视频图像人体图像的坐标；根据所述人体图像的坐标，对人体图像进行叠加虚拟背景图像。3.如权利要求2所述的虚拟背景的显示方法，其特征在于，所述对视频图像的人体姿态识别，得到所述视频图像人体姿态的坐标的步骤包括：获得视频图像提取的人体几何特征；根据几何特征参数形成的特征向量集；多组特征向量可确认该画面人体坐标；根据人体坐标与预设数据库中的人体模型匹配，生成人体特征坐标对应人体模型的投影矩阵；根据所述投影矩阵和预设的内参矩阵来计算位姿矩阵，确定人体坐标为有效人体姿态坐标。4.如权利要求2所述的虚拟背景的显示方法，其特征在于，所述根据所述人体图像的坐标，对人体图像进行叠加虚拟背景图像的步骤包括：从预设数据库中获得所述预设的虚拟背景图像；将所述虚拟背景图像与所述人体图像的坐标进行融合计算，使所述人体图像叠加浮于虚拟背景图像上。5.如权利要求1所述的虚拟背景的显示方法，其特...

【专利技术属性】
技术研发人员：邵源，龚金思，郭晓，万星星，
申请(专利权)人：深圳安泰创新科技股份有限公司，
类型：发明
国别省市：广东,44