一种跨尺度自适应信息映射成像方法及装置、介质制造方法及图纸

本文是关于一种跨尺度自适应信息映射成像方法及装置、介质，涉及多像感器成像技术。本文提供的一种多像感器跨时空映射成像方法，包括：获取高空间分辨小尺度时间‑频率等信息模式的第一图像及其对应的低空间分辨大尺度时间‑频率等信息模式的第二图像，其中，第一图像的像素高于第二图像的像素图像；将第二图像与第一图像进行跨时间‑空间维度对齐处理，得到对齐后的第二图像；基于第一图像以及对齐后的第二图像，融合生成具有大时间‑频率尺度信息的第三图像，第三图像的像素与第一图像的像素相同。本文提供的跨尺度自适应信息映射成像方案将跨尺度图像融合实现高时空谱分辨率的高清晰成像，有效提升了成像图像的分辨率与细节还原。

【技术实现步骤摘要】
一种跨尺度自适应信息映射成像方法及装置、介质
本文涉及多像感器成像技术，尤其涉及一种跨尺度自适应信息映射成像方法及装置、介质。
技术介绍
跨尺度图像融合实现高时空谱分辨率的高清晰成像是图像编辑领域中一个活跃的、有挑战性的研究课题。跨尺度图像融合实现高时空谱分辨率的高清晰成像最初被定义为给窄谱图像、电影或视频提高光谱分辨率的计算机辅助处理技术,对于多方面的应用都具有重大意义。由于大时间-频率尺度信息对图像和视频效果的重要性,研究图像融合技术,不仅可以解决现有的有限数量的窄谱电影或图像的宽谱化问题,也可以给现有宽谱视频和图像优化光谱,生成具有大时间-频率尺度信息的效果。而且着色在影视、医疗、太空探索及其它许多工业和科学领域也有着广泛的应用。目前，跨尺度图像融合实现高时空谱分辨率的高清晰成像的方法可以分为自动方法和基于参考图像的方法。其中，自动方法不需要输入额外的参考信息，但是生成的宽谱图像可能偏离真实情形。在基于参考图像的方法中，目标是在给定窄谱图像和参考图像的情况下生成宽谱图像。基于参考的方法可以保证生成的图像符合真实的高空间分辨大时间-本文档来自技高网...

【技术保护点】
1.一种跨尺度自适应信息映射成像方法，其特征在于，包括：/n获取高空间分辨小尺度时间-频率等信息模式的第一图像及其对应的低空间分辨大尺度时间-频率等信息模式的第二图像，其中，所述第一图像的像素高于所述第二图像的像素图像；/n将所述第二图像与第一图像进行跨时间-空间维度对齐处理，得到对齐后的第二图像；/n基于所述第一图像以及所述对齐后的第二图像，融合生成具有高空间分辨大时间-频率尺度信息的第三图像，其中，所述第三图像的像素与所述第一图像的像素相同。/n

【技术特征摘要】
1.一种跨尺度自适应信息映射成像方法，其特征在于，包括：
获取高空间分辨小尺度时间-频率等信息模式的第一图像及其对应的低空间分辨大尺度时间-频率等信息模式的第二图像，其中，所述第一图像的像素高于所述第二图像的像素图像；
将所述第二图像与第一图像进行跨时间-空间维度对齐处理，得到对齐后的第二图像；
基于所述第一图像以及所述对齐后的第二图像，融合生成具有高空间分辨大时间-频率尺度信息的第三图像，其中，所述第三图像的像素与所述第一图像的像素相同。


2.如权利要求1所述的方法，其特征在于，所述获取高空间分辨小尺度时间-频率等信息模式的第一图像及其对应的低空间分辨大尺度时间-频率等信息模式的参考图像，包括：
利用多像感器进行拍摄，每次拍摄生成一张高空间分辨小尺度时间-频率等信息模式的第一图像及其对应的一张低空间分辨大尺度时间-频率等信息模式的第二图像。


3.如权利要求1或2所述的方法，其特征在于，所述将所述第二图像与第一图像进行跨时间-空间维度对齐处理,包括：
对所述第二图像与所述第一图像进行光流估计，得到表征所述第二图像与所述第一图像之间像素级对应关系的光流图像；
利用所述光流图像在不同的特征层上对所述第二图像进行变形处理，得到对齐后的第二图像。


4.如权利要求3所述的方法，其特征在于，所述方法还包括：
利用预先生成的神经网络模型提取所述第二图像的色彩特征和亮度特征；
所述利用所述光流图像在不同的特征层上对所述第二图像进行变形处理，得到对齐后的第二图像，包括：
利用所述光流图像在不同的特征层上分别对所述第二图像的色彩特征及亮度特征进行变形处理，得到对齐后的第二图像以及对齐后的亮度通道图像。


5.如权利要求4所述的方法，其特征在于，所述基于所述第一图像以及所述对齐后的第二图像，融合生成具有高空间分辨大时间-频率尺度信息的第三图像，包括：
利用预先生成的神经网络模型，基于对齐后的第二图像，所述对齐后的亮度通道图像以及所述第一图像的亮度特征，估计所述...

【专利技术属性】
技术研发人员：方璐，温建伟，袁潮，赵雅萍，季梦奇，
申请(专利权)人：北京拙河科技有限公司，
类型：发明
国别省市：北京;11