图像成像方法、装置、设备及存储介质制造方法及图纸

本申请公开一种图像成像方法、装置、设备及存储介质，涉及成像技术领域。方法包括：获取马赛克图像；通过U‑Net图像成像模型，对马赛克图像进行去噪和光谱重建同步处理，获得多光谱图像；U‑Net图像成像模型包括编码器网络和解码器网络；其中，编码器网络包括多个编码器，编码器包括下采样层，且至少一个编码器还包括第一特征聚合前馈模块，配置为对输入至第一特征聚合前馈模块的图像的邻域空间内特征进行聚合处理；解码器网络包括多个解码器，解码器包括上采样层，且至少一个解码器还包括第二特征聚合前馈模块，配置为对输入至第二特征聚合前馈模块的图像的邻域空间内特征进行聚合处理。本申请可以提高成像质量。

【技术实现步骤摘要】

本申请涉及成像，特别涉及一种图像成像方法、装置、设备及存储介质。

技术介绍

1、相关技术中，彩色相机是通过在探测器阵列前加一层cfa(color filter array，彩色滤光阵列)，采集得到一张预设数量个通道的不完全空间信息的图像，即马赛克图像，然后通过相应算法补足以重建预设数量个通道缺省的信息，以达到彩色成像的目的。

2、但是，去除噪音在光谱重建之前的预处理过程中进行，不免会导致光谱信息丢失，从而导致最终得到的图像色彩失真严重。

技术实现思路

1、本申请的主要目的是提供一种图像成像方法、装置、设备及存储介质，旨在解决噪音导致成像质量较低的技术问题。

2、为实现上述目的，第一方面，本申请提出一种图像成像方法，包括：

3、获取马赛克图像；

4、通过u-net图像成像模型，对马赛克图像进行去噪和光谱重建同步处理，获得多光谱图像；u-net图像成像模型包括编码器网络和解码器网络；

5、其中，编码器网络包括多个编码器，编码器包括下采样层，且至少一个编码本文档来自技高网...

【技术保护点】

1.一种图像成像方法，其特征在于，包括：

2.根据权利要求1所述的图像成像方法，其特征在于，至少一个所述编码器还包括第一多头注意力模块，所述第一多头注意力模块配置为提取输入至所述第一多头注意力模块的图像的稀疏性光谱特征，获得光谱特征图，所述第一特征聚合前馈模块配置为对所述光谱特征图的邻域空间内特征进行聚合处理；

3.根据权利要求2所述的图像成像方法，其特征在于，所述U-Net图像成像模型还包括瓶颈层，所述瓶颈层包括第三多头注意力模块与第三特征聚合前馈模块；

4.根据权利要求2所述的图像成像方法，其特征在于，所述U-Net图像成像模型还包括通道扩展层、位...

【技术特征摘要】

1.一种图像成像方法，其特征在于，包括：

2.根据权利要求1所述的图像成像方法，其特征在于，至少一个所述编码器还包括第一多头注意力模块，所述第一多头注意力模块配置为提取输入至所述第一多头注意力模块的图像的稀疏性光谱特征，获得光谱特征图，所述第一特征聚合前馈模块配置为对所述光谱特征图的邻域空间内特征进行聚合处理；

3.根据权利要求2所述的图像成像方法，其特征在于，所述u-net图像成像模型还包括瓶颈层，所述瓶颈层包括第三多头注意力模块与第三特征聚合前馈模块；

4.根据权利要求2所述的图像成像方法，其特征在于，所述u-net图像成像模型还包括通道扩展层、位置编码层以及位置解码层；

5.根据权利要求1至4任一项所述的图像成像方法，其特征在于，在至少一个所述编码器中，所述第一多头注意力模块配置为提取输入至所述编码器的图像的稀疏性光谱特征，获得光谱特征图，所述第一特征聚合前馈模块配置为对所述光谱特征图...

【专利技术属性】
技术研发人员：胡传真，张佳豪，贾昊，马强，朱镇峰，蔡宏，毛慧，浦世亮，
申请(专利权)人：杭州海康威视数字技术股份有限公司，
类型：发明
国别省市：