图像处理方法、装置及介质制造方法及图纸

本申请公开了图像处理方法、装置及介质，涉及图像处理技术领域，该方法包括：获取不同视角下的多个原始车舱图像；将所述多个原始车舱图像进行拼接，得到车舱全景图像；基于计算机视觉感知，确定所述多个原始车舱图像中的目标对象；确定所述目标对象对应的目标虚拟形象，并得到包含所述目标虚拟形象的目标图层；将所述车舱全景图像和所述目标图层进行叠加，得到包含所述目标虚拟形象的目标全景图像。本申请利用计算视觉技术感知车舱图像中的目标对象，并通过使用目标虚拟形象表征检测到的目标对象，使得合成后的目标全景图像能有效提升对车舱的感知效果。对车舱的感知效果。对车舱的感知效果。

【技术实现步骤摘要】
图像处理方法、装置及介质


[0001]本申请涉及图像处理
，具体涉及图像处理方法、装置及介质。

技术介绍

[0002]目前在汽车座舱内计算机视觉应用已越来越广泛，静态的座舱监测技术也在不断的发展和更新。相关技术中，基于真实的舱内影像可以对驾驶员、乘客、舱内物品等进行远程监测，但对于处于视线隐蔽处的物品等存在难以察觉的问题。

技术实现思路

[0003]为了提升对车舱的感知效果，本申请提供了图像处理方法、装置及介质。所述技术方案如下：
[0004]第一方面，本申请提供了一种图像处理方法，所述方法包括：
[0005]获取不同视角下的多个原始车舱图像；
[0006]将所述多个原始车舱图像进行拼接，得到车舱全景图像；
[0007]基于计算机视觉感知，确定所述多个原始车舱图像中的目标对象；
[0008]确定所述目标对象对应的目标虚拟形象，并得到包含所述目标虚拟形象的目标图层；
[0009]将所述车舱全景图像和所述目标图层进行叠加，得到包含所述目标虚拟形象的目标全景图像。
[0010]可选的，所述将所述多个原始车舱图像进行拼接，得到车舱全景图像，包括：
[0011]对所述多个原始车舱图像分别进行特征点检测，得到各所述原始车舱图像的特征点以及所述特征点的描述信息；
[0012]根据所述特征点的描述信息，对各所述原始车舱图像的特征点进行匹配，得到特征点对；
[0013]基于所述特征点对确定各所述原始车舱图像之间的关联关系；
[0014]根据各所述原始车舱图像之间的关联关系，将所述多个原始车舱图像进行拼接和融合，得到所述车舱全景图像。
[0015]可选的，所述基于计算机视觉感知，确定所述多个原始车舱图像中的目标对象，包括：
[0016]将所述多个原始车舱图像分别输入至训练后的计算机视觉感知模型，进行视觉感知处理，得到感知结果，所述感知结果指示所述多个原始车舱图像中的目标对象以及所述目标对象的属性信息。
[0017]进一步地，所述属性信息包括目标对象类别，所述确定所述目标对象对应的目标虚拟形象，并得到包含所述目标虚拟形象的目标图层，包括：
[0018]基于预设映射关系，确定与所述目标对象类别对应的目标图层类型；所述预设映射关系表征对象类别与图层类型的对应关系；
[0019]根据所述目标对象类别和所述目标图层类型，确定所述目标对象对应的目标虚拟形象；
[0020]根据所述目标图层类型与所述目标虚拟形象，生成包含所述目标虚拟形象的所述目标图层。
[0021]进一步地，所述属性信息还包括所述目标对象在相机坐标系下的第一坐标信息，所述得到包含所述目标虚拟形象的目标图层，还包括：
[0022]确定所述相机坐标系与预先标定的车舱坐标系之间的坐标转换关系；
[0023]根据所述第一坐标信息和所述坐标转换关系，得到所述目标对象在所述车舱坐标系下的第二坐标信息；
[0024]根据所述第二坐标信息，确定所述目标虚拟形象在所述目标图层的显示区域信息。
[0025]可选的，所述将所述车舱全景图像和所述目标图层进行叠加，得到包含所述目标虚拟形象的目标全景图像，包括：
[0026]在预先设定的车舱坐标系下，将相同尺度的所述车舱全景图像和所述目标图层进行数字图像合成，得到所述车舱坐标系下的所述目标全景图像，并在所述目标全景图像中，以所述目标虚拟形象表征所述目标对象。
[0027]可选的，所述方法还包括：
[0028]将所述目标全景图像发送至用户终端，以使在所述用户终端上根据用户视角相应地展示所述目标全景图像；
[0029]并在所述目标全景图像中以预设展示样式展示所述目标虚拟形象。
[0030]进一步地，所述属性信息还包括所述目标对象在车舱内的状态信息，所述方法还包括：
[0031]根据所述状态信息，生成所述目标虚拟形象对应的交互信息；
[0032]在展示所述目标虚拟形象时显示对应的所述交互信息，所述交互信息包括状态提示信息或操作指示信息。
[0033]第二方面，本申请提供了一种图像处理装置，所述装置包括：
[0034]获取模块，用于获取不同视角下的多个原始车舱图像；
[0035]拼接模块，用于将所述多个原始车舱图像进行拼接，得到车舱全景图像；
[0036]感知模块，用于基于计算机视觉感知，确定所述多个原始车舱图像中的目标对象；
[0037]虚拟化模块，用于确定所述目标对象对应的目标虚拟形象，并得到包含所述目标虚拟形象的目标图层；
[0038]叠加模块，用于将所述车舱全景图像和所述目标图层进行叠加，得到包含所述目标虚拟形象的目标全景图像。
[0039]第三方面，本申请提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有至少一条指令或至少一段程序，所述至少一条指令或至少一段程序由处理器加载并执行以实现如第一方面所述的一种图像处理方法。
[0040]第四方面，本申请提供了一种计算机设备，所述计算机设备包括处理器和存储器，所述存储器中存储有至少一条指令或至少一段程序，所述至少一条指令或至少一段程序由所述处理器加载并执行以实现如第一方面所述的一种图像处理方法。
[0041]第五方面，本申请提供了一种计算机程序产品，所述计算机程序产品包括计算机指令，所述计算机指令被处理器执行时实现如第一方面所述的一种图像处理方法。
[0042]本申请提供的图像处理方法、装置、及介质，具有如下技术效果：
[0043]本申请提供的方案一方面将不同视角下的多个原始车舱图像拼接成车舱全景图像，另一方面基于计算机视觉感知技术，识别出各个原始车舱图像中的目标对象，并构建包含该目标对象对应的目标虚拟形象的目标图层，从而可以将真实场景下的车舱全景图像与目标图层相叠加，得到虚实结合的目标全景图像，并在目标全景图像中以目标虚拟形象表征目标对象，还可以突出显示目标虚拟形象，本申请提供的技术方案能够显著提升对车舱的感知效果，既可以让观察者了解舱内的真实情况，并可以有效避免人眼难以察觉到视线隐蔽处的对象的问题，同时方便了用户对车舱的监测。
[0044]本申请的附加方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本申请的实践了解到。
附图说明
[0045]为了更清楚地说明本申请实施例或现有技术中的技术方案和优点，下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它附图。
[0046]图1是本申请实施例提供的一种图像处理方法的流程示意图；
[0047]图2是本申请实施例提供的一种拼接多个原始车舱图像的流程示意图；
[0048]图3是本申请实施例提供的一种生成包含目标虚拟形象的目标图层的流程示意图；...

【技术保护点】

【技术特征摘要】
1.一种图像处理方法，其特征在于，所述方法包括：获取不同视角下的多个原始车舱图像；将所述多个原始车舱图像进行拼接，得到车舱全景图像；基于计算机视觉感知，确定所述多个原始车舱图像中的目标对象；确定所述目标对象对应的目标虚拟形象，并得到包含所述目标虚拟形象的目标图层；将所述车舱全景图像和所述目标图层进行叠加，得到包含所述目标虚拟形象的目标全景图像。2.根据权利要求1所述的方法，其特征在于，所述将所述多个原始车舱图像进行拼接，得到车舱全景图像，包括：对所述多个原始车舱图像分别进行特征点检测，得到各所述原始车舱图像的特征点以及所述特征点的描述信息；根据所述特征点的描述信息，对各所述原始车舱图像的特征点进行匹配，得到特征点对；基于所述特征点对确定各所述原始车舱图像之间的关联关系；根据各所述原始车舱图像之间的关联关系，将所述多个原始车舱图像进行拼接和融合，得到所述车舱全景图像。3.根据权利要求1所述的方法，其特征在于，所述基于计算机视觉感知，确定所述多个原始车舱图像中的目标对象，包括：将所述多个原始车舱图像分别输入至训练后的计算机视觉感知模型，进行视觉感知处理，得到感知结果，所述感知结果指示所述多个原始车舱图像中的目标对象以及所述目标对象的属性信息。4.根据权利要求3所述的方法，其特征在于，所述属性信息包括目标对象类别，所述确定所述目标对象对应的目标虚拟形象，并得到包含所述目标虚拟形象的目标图层，包括：基于预设映射关系，确定与所述目标对象类别对应的目标图层类型；所述预设映射关系表征对象类别与图层类型的对应关系；根据所述目标对象类别和所述目标图层类型，确定所述目标对象对应的目标虚拟形象；根据所述目标图层类型与所述目标虚拟形象，生成包含所述目标虚拟形象的所述目标图层。5.根据权利要求3所述的方法，其特征在于，所述属性信息还包括所述目标对象在相机坐标系下的第一坐标信息，所述得到包含所述目标虚拟形象的目标图层，还包括：确定所述相机坐标...

【专利技术属性】
技术研发人员：方超，季栋辉，于波，
申请(专利权)人：中汽创智科技有限公司，
类型：发明
国别省市：