【技术实现步骤摘要】
本专利技术涉及成像图分析及时领域，尤其涉及一种基于多模态的成像图融合叠加方法及相关装置。
技术介绍
1、在现有的一些能量治疗设备中，因为没有集成有相应的成像设备，在医护工作人员利用这些能量治疗设备对患者的某一个指定区域进行能量治疗之后，无法及时的利用相关设备对治疗情况进行分析，只能通过医护人员的工作经验进行相应的治疗相关的评估，因此可能导致评估结果与实际结果相差较远；同时对治疗区域的温度也是通过经验的方式进行把控，容易导致温度较高，从而达不到相应的治疗效果；因此需要再治疗设备上集成具体超声成像功能和热成像功能的成像设备，生成具有温度数据信息的超声成像数据，方便后续对能量治疗后的区域进行评估检测。
技术实现思路
1、本专利技术的目的在于克服现有技术的不足，本专利技术提供了一种基于多模态的成像图融合叠加方法及相关装置，可以快速获得对能量治疗后的区域的具有温度数据信息的超声成像数据，方便后续对能量治疗后的区域进行评估检测。
2、为了解决上述技术问题，本专利技术实施例提供了一种基于多模态的成像图融合叠加方法，应用于治疗设备，所述治疗设备的治疗头上集成有能量治疗仪和成像设备；所述方法包括：
3、在所述治疗头与皮肤接触并利用所述能量治疗仪对皮肤接触区域进行能量治疗后，基于所述成像设备中的超声成像模块对皮肤接触区域进行成像处理，获得皮肤接触区域的超声成像图像数据；
4、基于所述成像设备中的超声测温模块对皮肤接触区域进行成像处理，获得皮肤接触区域的三维热成像图像
5、分别对所述超声成像图像数据以及三维热成像图像数据进行图像特征提取处理，获得所述超声成像图像数据对应的第一提取特征数据以及所述三维热成像图像数据对应的第二提取特征数据；
6、基于所述第一提取特征数据以及所述第二提取特征数据对所述超声成像图像数据和所述三维热成像图像数据进行多模态融合叠加处理，获得融合叠加超声图像数据。
7、可选的，所述基于所述成像设备中的超声成像模块对皮肤接触区域进行成像处理，获得皮肤接触区域的超声成像图像数据，包括：
8、基于所述成像设备中的超声成像模块对所述皮肤接触区域发射多段超声信号，同时所述超声成像模块基于接收到的所述皮肤接触区域的多段超声回波信号生成皮肤接触区域的超声成像图像数据。
9、可选的，所述超声成像模块基于接收到的所述皮肤接触区域的多段超声回波信号生成皮肤接触区域的超声成像图像数据，包括：
10、所述超声成像模块对所述多段超声回波信号进行滤波处理，获得滤波后的多段超声回波信号；
11、所述超声成像模块基于滤波后的多段超声回波信号生成皮肤接触区域的超声成像图像数据。
12、可选的，所述基于所述成像设备中的超声测温模块对皮肤接触区域进行成像处理，获得皮肤接触区域的三维热成像图像数据，包括：
13、所述成像设备中的超声测温模块对所述皮肤接触区域进行热成像探测时，基于回波时移算法对所述皮肤接触区域进行三维热成像处理，获得皮肤接触区域的三维热成像图像数据。
14、可选的，所述分别对所述超声成像图像数据以及三维热成像图像数据进行图像特征提取处理，获得所述超声成像图像数据对应的第一提取特征数据以及所述三维热成像图像数据对应的第二提取特征数据，包括：
15、将所述超声成像图像数据以及所述三维热成像图像数据按照预设的分割规则进行图像分割处理，获得分割超声成像图像数据以及分割三维热成像图像数据，其中分割超声成像图像数据的每个分割区块与分割三维热成像图像数据的每个分割区域大小一致；
16、利用facet模块分别对分割超声成像图像数据以及分割三维热成像图像数据进行编码处理，获得编码后的分割超声成像图像数据以及编码后的分割三维热成像图像数据；
17、基于bi-lstm和注意力机对分别对编码后的分割超声成像图像数据以及编码后的分割三维热成像图像数据进行特征提取处理，获得分割超声成像图像数据的提取特征以及分割三维热成像图像数据的提取特征；
18、对所述分割超声成像图像数据的提取特征以及分割三维热成像图像数据的提取特征分别进行特征增强处理，获得分割超声成像图像数据的增强提取特征以及分割三维热成像图像数据的增强提取特征；
19、将分割超声成像图像数据的增强提取特征以及分割三维热成像图像数据的增强提取特征分别按照分割规则进行重新拼接处理，获得所述超声成像图像数据对应的第一提取特征数据以及所述三维热成像图像数据对应的第二提取特征数据。
20、可选的，所述基于所述第一提取特征数据以及所述第二提取特征数据对所述超声成像图像数据和所述三维热成像图像数据进行多模态融合叠加处理，获得融合叠加超声图像数据，包括：
21、基于正交化机制利用所述第一提取特征数据以及所述第二提取特征数据对所述超声成像图像数据和所述三维热成像图像数据进行多模态融合叠加处理，获得融合叠加超声图像数据。
22、可选的，所述方法还包括：基于所述融合叠加超声图像数据对目标组织图像区域进行定位，并对定位到的目标组织图像区域进行组织的形变及温度分析处理，获得目标组织图像区域的组织分析结果；
23、基于所述目标组织图像区域的组织分析结果获得在能量治疗后的组织状态信息。
24、另外，本专利技术实施例该提供了一种基于多模态融合的成像图分析装置，应用于治疗设备，所述治疗设备的治疗头上集成有能量治疗仪和成像设备；所述装置包括：
25、第一成像模块：用于在所述治疗头与皮肤接触并利用所述能量治疗仪对皮肤接触区域进行能量治疗后，基于所述成像设备中的超声成像模块对皮肤接触区域进行成像处理，获得皮肤接触区域的超声成像图像数据；
26、第二成像模块：用于基于所述成像设备中的超声测温模块对皮肤接触区域进行成像处理，获得皮肤接触区域的三维热成像图像数据；
27、特征提取模块：用于分别对所述超声成像图像数据以及三维热成像图像数据进行图像特征提取处理，获得所述超声成像图像数据对应的第一提取特征数据以及所述三维热成像图像数据对应的第二提取特征数据；
28、多模态融合模块：用于基于所述第一提取特征数据以及所述第二提取特征数据对所述超声成像图像数据和所述三维热成像图像数据进行多模态融合叠加处理，获得融合叠加超声图像数据。
29、另外，本专利技术实施例该提供了一种治疗设备，包括处理器和存储器，所述处理器运行存储于所述存储器中的计算机程序或代码，实现上述中任一项所述的成像图融合叠加方法。
30、另外，本专利技术实施例该提供了一种计算机可读存储介质，用于存储计算机程序或代码，当所述计算机程序或代码被处理器执行时，实现上述中任一项所述的成像图融合叠加方法。
31、在本专利技术实施例中，通过采集皮肤接触区域的超声成像图像数据以及三维热成像图像数据，并对超声成像图像数据以及三维热成像图像数据进行融合叠加，形成融合叠加超声图像数据，可以本文档来自技高网...
【技术保护点】
1.一种基于多模态的成像图融合叠加方法，其特征在于，应用于治疗设备，所述治疗设备的治疗头上集成有能量治疗仪和成像设备；所述方法包括：
2.根据权利要求1所述的成像图融合叠加方法，其特征在于，所述基于所述成像设备中的超声成像模块对皮肤接触区域进行成像处理，获得皮肤接触区域的超声成像图像数据，包括：
3.根据权利要求2所述的成像图融合叠加方法，其特征在于，所述超声成像模块基于接收到的所述皮肤接触区域的多段超声回波信号生成皮肤接触区域的超声成像图像数据，包括：
4.根据权利要求1所述的成像图融合叠加方法，其特征在于，所述基于所述成像设备中的超声测温模块对皮肤接触区域进行成像处理，获得皮肤接触区域的三维热成像图像数据，包括：
5.根据权利要求1所述的成像图融合叠加方法，其特征在于，所述分别对所述超声成像图像数据以及三维热成像图像数据进行图像特征提取处理，获得所述超声成像图像数据对应的第一提取特征数据以及所述三维热成像图像数据对应的第二提取特征数据，包括：
6.根据权利要求1所述的成像图融合叠加方法，其特征在于，所述基于所述第一提
7.根据权利要求1所述的成像图融合叠加方法，其特征在于，所述方法还包括：
8.一种基于多模态融合的成像图分析装置，其特征在于，应用于治疗设备，所述治疗设备的治疗头上集成有能量治疗仪和成像设备；所述装置包括：
9.一种治疗设备，包括处理器和存储器，其特征在于，所述处理器运行存储于所述存储器中的计算机程序或代码，实现如权利要求1至7中任一项所述的成像图融合叠加方法。
10.一种计算机可读存储介质，用于存储计算机程序或代码，其特征在于，当所述计算机程序或代码被处理器执行时，实现如权利要求1至7中任一项所述的成像图融合叠加方法。
...【技术特征摘要】
1.一种基于多模态的成像图融合叠加方法，其特征在于，应用于治疗设备，所述治疗设备的治疗头上集成有能量治疗仪和成像设备；所述方法包括：
2.根据权利要求1所述的成像图融合叠加方法，其特征在于，所述基于所述成像设备中的超声成像模块对皮肤接触区域进行成像处理，获得皮肤接触区域的超声成像图像数据，包括：
3.根据权利要求2所述的成像图融合叠加方法，其特征在于，所述超声成像模块基于接收到的所述皮肤接触区域的多段超声回波信号生成皮肤接触区域的超声成像图像数据，包括：
4.根据权利要求1所述的成像图融合叠加方法，其特征在于，所述基于所述成像设备中的超声测温模块对皮肤接触区域进行成像处理，获得皮肤接触区域的三维热成像图像数据，包括：
5.根据权利要求1所述的成像图融合叠加方法，其特征在于，所述分别对所述超声成像图像数据以及三维热成像图像数据进行图像特征提取处理，获得所述超声成像图像数据对应的第一提取特征数据以及...
【专利技术属性】
技术研发人员：李亚楠，丁毅，雷晓兵，
申请(专利权)人：湖南半岛医疗科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。