基于智能对焦的远程视频方法和电子设备技术

本说明书实施例提供一种基于智能对焦的远程视频方法，获取第一用户聚焦到第一终端摄像头与第二用户正视时的标准图像，确定面部仰角、第一用户的眼球在眼眶中的位置，根据其在第一终端屏幕上的聚焦点位置，根据第二图像和聚焦点位置确定聚焦对象，根据标准图像中面部仰角、第一用户的眼球在眼眶中的位置和所述聚焦对象对第一图像设置训练标签，训练焦点修正模型，采集当前的第一视频流，输入到焦点修正模型中，焦点修正模型对所述第一视频流中的面部仰角、第一用户的眼球在眼眶中的位置进行转换，得到转换后的第一视频流，将转换后的第一视频流发送至第二终端并在第二终端的显示装置上显示，从而使转换后的视频流能够得到对视效果，提升了体验。提升了体验。提升了体验。

【技术实现步骤摘要】
基于智能对焦的远程视频方法和电子设备


[0001]本申请涉及计算机领域，尤其涉及一种基于智能对焦的远程视频方法、装置和电子设备。

技术介绍

[0002]随着众多视频软件的兴起，人们越来越喜欢用手机这类终端开启远程视频进行交流。
[0003]然而，目前所有的视频方式都存在一种人们未意识到的缺陷。
[0004]申请人对现有技术进行分析发现，通常某用户(比如甲)在视频对话时，会注视手机屏幕，聚焦到对方乙的脸部，从而观察对方的表情，或者注视着乙的眼睛。
[0005]这本身没什么问题，但是，对于乙来说，甲并未与乙对视，这是因为，甲的目光并非在摄像头上，而只有甲将目光移到摄像头上时，才能与乙对视，但是这样甲就看不到乙的表情。
[0006]因此，需要提供一种新的方法，以提高视频互动的真实性。

技术实现思路

[0007]本说明书实施例提供一种基于智能对焦的远程视频方法、装置和电子设备，用以提高视频互动的真实性。
[0008]本说明书实施例提供一种基于智能对焦的远程视频方法，包括：
[0009]通过具有摄像头和显示装置的第一终端和第二终端开启远程视频任务，通过第一终端采集第一用户的第一视频流，所述第一视频流中具有多个第一图像，通过第二终端采集第二用户的第二视频流，所述第二视频流中具有多个第二图像；
[0010]获取所述第一用户聚焦到第一终端摄像头与第二用户正视时的标准图像，确定所述标准图像中面部仰角、第一用户的眼球在眼眶中的位置；
[0011]根据第一图像中面部仰角、第一用户的眼球在眼眶中的位置确定第一用户目光在第一终端屏幕上的聚焦点位置，根据第一终端的显示装置当前显示的第二图像和所述聚焦点位置确定所述第一用户的聚焦对象；
[0012]根据所述标准图像中面部仰角、第一用户的眼球在眼眶中的位置和所述聚焦对象对第一图像设置训练标签；
[0013]结合第一图像的训练样本和所述训练标签构建并训练焦点修正模型；
[0014]采集当前的第一视频流，输入到所述焦点修正模型中，所述焦点修正模型对所述第一视频流中的面部仰角、第一用户的眼球在眼眶中的位置进行转换，得到转换后的第一视频流；
[0015]将转换后的第一视频流发送至第二终端并在第二终端的显示装置上显示。
[0016]可选地，还包括：
[0017]获取第二终端的摄像头与显示装置的相对位置信息，根据其与第一终端的摄像头
与显示装置的相对位置的差异，调整定睛模型的模型参数，下发至第二终端中进行安装。
[0018]可选地，还包括：
[0019]在第二终端存储第一用户的肖像特征；
[0020]第一终端提取第一视频流中的表情特征并对第一视频流中的肖像特征进行脱敏，得到第一脱敏视频流；
[0021]所述将转换后的第一视频流发送至第二终端，包括：
[0022]通过焦点修正模型将第一脱敏视频流进行转换后，将提取出的表情特征和转换后的第一脱敏视频流发送至第二终端；
[0023]所述在第二终端的显示装置上显示，包括：
[0024]第二终端结合本地存储的第一用户的肖像特征、所述表情特征和转换后的第一脱敏视频流合成具有表情特征的视频流，并在显示装置上显示。
[0025]可选地，还包括：
[0026]第一终端对第一视频流中的肖像特征进行哈希处理生成肖像摘要信息，发送至第二终端；
[0027]所述第二终端结合本地存储的第一用户的肖像特征、所述表情特征和转换后的第一脱敏视频流合成具有表情特征的视频流，包括：
[0028]第二终端根据第一终端发送的肖像摘要信息查询并从本地调用对应的肖像特征；
[0029]结合所述肖像特征、所述表情特征和转换后的第一脱敏视频流合成具有表情特征的视频流。
[0030]可选地，所述第一终端还利用所述肖像摘要信息中的私钥对所述第一视频流进行加签；
[0031]所述第二终端从区块链获取所述第一用户的公钥，对所述加签的第一视频流进行解签，并与未加签的第一视频流对比，对比验证通过后将第二视频流发送至第一终端。
[0032]可选地，所述焦点修正模型部署于第一终端中。
[0033]可选地，所述第一用户为斜视障碍用户，所述根据第一终端的显示装置当前显示的第二图像和所述聚焦点位置确定所述第一用户的聚焦对象，包括：
[0034]获取第一用户的反馈信息，结合第一用户的反馈、第一终端的显示装置当前显示的第二图像和所述聚焦点位置确定所述第一用户的聚焦对象。
[0035]可选地述获取第一用户的反馈信息，包括：
[0036]将第二图像划分成多个子区域，按照顺序依次对子区域进行画面变换，并实时监测第一用户眼眶的变化，当第一用户眼眶和眼球产生变化满足预设条件时，确定此时画面反转的区域，判定作为聚焦点位置。
[0037]本说明书实施例还提供一种电子设备，其中，该电子设备包括：
[0038]处理器；以及，
[0039]存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器执行上述任一项方法。
[0040]本说明书实施例还提供一种计算机可读存储介质，其中，所述计算机可读存储介质存储一个或多个程序，所述一个或多个程序当被处理器执行时，实现上述任一项方法。
[0041]本说明书实施例提供的各种技术方案通过获取第一用户聚焦到第一终端摄像头
与第二用户正视时的标准图像，确定面部仰角、第一用户的眼球在眼眶中的位置，根据其在第一终端屏幕上的聚焦点位置，根据第二图像和聚焦点位置确定聚焦对象，根据标准图像中面部仰角、第一用户的眼球在眼眶中的位置和所述聚焦对象对第一图像设置训练标签，训练焦点修正模型，采集当前的第一视频流，输入到焦点修正模型中，焦点修正模型对所述第一视频流中的面部仰角、第一用户的眼球在眼眶中的位置进行转换，得到转换后的第一视频流，将转换后的第一视频流发送至第二终端并在第二终端的显示装置上显示，从而使转换后的视频流能够得到对视效果，提升了体验。
附图说明
[0042]此处所说明的附图用来提供对本申请的进一步理解，构成本申请的一部分，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：
[0043]图1为本说明书实施例提供的一种基于智能对焦的远程视频方法的原理示意图；
[0044]图2为本说明书实施例提供的一种基于智能对焦的远程视频装置的结构示意图；
[0045]图3为本说明书实施例提供的一种电子设备的结构示意图；
[0046]图4为本说明书实施例提供的一种计算机可读介质的原理示意图。
具体实施方式
[0047]现在将参考附图更全面地描述本专利技术的示例性实施例。然而，示例性实施例能够以多种形式实施，且不应被理解为本专利技术仅限于在此阐述的实施例。相反，提供这些示例性实施例能够使得本专利技术更加全面和完整，更加便于将专利技术构思全面地传达给本领域的技术人员本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于智能对焦的远程视频方法，其特征在于，包括：通过具有摄像头和显示装置的第一终端和第二终端开启远程视频任务，通过第一终端采集第一用户的第一视频流，所述第一视频流中具有多个第一图像，通过第二终端采集第二用户的第二视频流，所述第二视频流中具有多个第二图像；获取所述第一用户聚焦到第一终端摄像头与第二用户正视时的标准图像，确定所述标准图像中面部仰角、第一用户的眼球在眼眶中的位置；根据第一图像中面部仰角、第一用户的眼球在眼眶中的位置确定第一用户目光在第一终端屏幕上的聚焦点位置，根据第一终端的显示装置当前显示的第二图像和所述聚焦点位置确定所述第一用户的聚焦对象；根据所述标准图像中面部仰角、第一用户的眼球在眼眶中的位置和所述聚焦对象对第一图像设置训练标签，结合第一图像的训练样本和所述训练标签构建并训练焦点修正模型；采集当前的第一视频流，输入到所述焦点修正模型中，所述焦点修正模型对所述第一视频流中的面部仰角、第一用户的眼球在眼眶中的位置进行转换，得到转换后的第一视频流；将转换后的第一视频流发送至第二终端并在第二终端的显示装置上显示。2.根据权利要求1所述的方法，其特征在于，还包括：获取第二终端的摄像头与显示装置的相对位置信息，根据其与第一终端的摄像头与显示装置的相对位置的差异，调整定睛模型的模型参数，下发至第二终端中进行安装。3.根据权利要求1所述的方法，其特征在于，还包括：在第二终端存储第一用户的肖像特征；第一终端提取第一视频流中的表情特征并对第一视频流中的肖像特征进行脱敏，得到第一脱敏视频流；所述将转换后的第一视频流发送至第二终端，包括：通过焦点修正模型将第一脱敏视频流进行转换后，将提取出的表情特征和转换后的第一脱敏视频流发送至第二终端；所述在第二终端的显示装置上显示，包括：第二终端结合本地存储的第一用户的肖像特征、所述表情特征和...

【专利技术属性】
技术研发人员：葛纪侠，
申请(专利权)人：葛纪侠，
类型：发明
国别省市：