【技术实现步骤摘要】
一种基于Transformer双分支模型的皮肤病变图像分割方法
[0001]本专利技术属于计算机视觉
，具体涉及一种基于Transformer双分支模型的皮肤病变图像分割方法。
技术介绍
[0002]皮肤病(dermatosis)是发生在皮肤和皮肤附属器官疾病的总称，常见的皮肤病有湿疹、荨麻疹、黄褐斑、水痘、色素障碍性皮肤病等。其中，恶性黑色素瘤是由皮肤和其他器官黑素细胞产生的肿瘤，它是导致皮肤肤色素性病变中最致命的一种皮肤癌。恶性黑色素瘤的发生率和死亡率逐年升高，根据皮肤癌基金会的统计数据，它的致死率甚至高达75％。恶性黑色素瘤除早期手术切除外，缺乏特效治疗，因此恶性黑色素瘤的早期诊断和治疗极其重要，但是由于皮肤的表面存在很多不可控因素，比如毛发、血管、颜色以及病变皮肤和未病变皮肤之间的对比度低等，经验丰富的专业医生不仅无法准确地判断出皮肤上的病变区域，还可能在判断时带有主观看法。因此需要借助计算机辅助诊断系统提高对黑色素瘤的检测，而对皮肤病图像的分割就是计算机辅助诊断里十分重要的环节。
[0003]传统的医...
【技术保护点】
【技术特征摘要】
1.一种基于Transformer双分支模型的皮肤病变图像分割方法，其特征在于，构建并训练Transformer双分支模型，将待处理图像输入到训练好的Transformer双分支模型中得到分割结果；所述Transformer双分支模型包括主分支网络、辅助分支网络和信息聚合模块；所述Transformer双分支模型的训练过程包括：S1.获取皮肤病变图像数据集并进行预处理得到训练图像集；S2.将训练图像输入到辅助分支网络提取低级特征并输出第二分割图；S3.将辅助分支网络提取的低级特征输入到主分支网络提取出多尺度的高级特征，并输出第一分割图；S4.采用信息聚合模块融合第一分割图和第二分割图得到最终分割图；S5.通过最终损失函数计算损失并反向传播训练Transformer双分支模型，直至模型收敛。2.根据权利要求1所述的一种基于Transformer双分支模型的皮肤病变图像分割方法，其特征在于，基于ResT架构搭建Transformer双分支模型，所述ResT架构包括依次级联的Steam模块、stage1模块、stage2模块、stage3模块和stage4模块；每个stage模块均包括一个块嵌入模块、一个位置编码模块和多个高效transformer模块，每个高效transformer模块均由EMSA、FFN以及残差链接构成；从ResT架构中的Steam模块处延伸出一条分支构建辅助分支网络；从ResT架构中的stage1模块到stage4模块各延伸出一条分支，通过这四条分支构建主分支网络。3.根据权利要求2所述的一种基于Transformer双分支模型的皮肤病变图像分割方法，其特征在于，主分支网络中设有一个高级特征融合模块，用于将stage1模块、stage2模块、stage3模块和stage4模块输出的不同尺度的高级特征在解码过程中进行级联融合和跳转连接，具体包括：S11.stage1模块输出高级特征X1，stage2模块输出高级特征X2，stage3模块输出高级特征X3，stage4模块输出高级特征X4；S12.对高级特征X4上采样后分别经过卷积单元和得到特征和特征将特征和高级特征X3的乘积与特征进行拼接，通过卷积单元处理该拼接结果得到融合特征图X3′
；S13.对融合特征图X3′
上采样后经过卷积单元得到特征X3″1，对特征和高级特征X3的乘积上采样后与高级特征X2相乘得到特征X3″2，将特征X3″2与特征X3″1进行拼接后经过卷积单元得到融合特征图X2′
；S14.对融合特征图X2′
上采样后经过卷积单元得到特征X2″1，对特征X3″2上采样后与高级特征X1相乘得到特征X2″2，将特征X2″2与特征X2″1进行拼接后依次经过卷积单元和卷积单元得到第一分割图T1。4.根据权利要求1或2任一一项所述的一种基于Transformer双分支模型的皮肤病变图像分割方法，其特征在于，辅助分支网络中设有...
【专利技术属性】
技术研发人员：李永红，李梓歆，赵志强，周诚，胡晋武，张合龙，
申请(专利权)人：重庆邮电大学，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。