[发明专利]全局和局部特征同时提取与融合的多器官分割方法及装置在审
申请号: | 202310059116.1 | 申请日: | 2023-01-18 |
公开(公告)号: | CN116258685A | 公开(公告)日: | 2023-06-13 |
发明(设计)人: | 林毓聪;李宗雨;艾丹妮;杨健;梁萍;范敬凡;肖德强 | 申请(专利权)人: | 北京理工大学 |
主分类号: | G06T7/00 | 分类号: | G06T7/00;G06V10/26;G06V10/80;G06N3/08;G06N3/0464 |
代理公司: | 北京市中闻律师事务所 11388 | 代理人: | 冯梦洪 |
地址: | 100081 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 全局 局部 特征 同时 提取 融合 器官 分割 方法 装置 | ||
1.全局和局部特征同时提取与融合的多器官分割方法,其特征在于:其包括以下步骤:
(1)对CT图像进行预处理;
(2)设计卷积神经网络CNN和Transformer并行编码器结构,同时使用CNN和Transformer编码器分别提取图像局部特征和全局特征;并行编码器包括CNN和Transformer编码器各一个,CNN编码器采用连续三维卷积块,Transformer编码器为连续三维Swin Transformer块,编码器各个阶段间均通过跨度为2的卷积实现降采样;
(3)进行特征交换、特征一致性损失评估、特征融合,融合两种编码器特征,消除CNN和Transformer特征的差异性,提升特征融合效果,保证解码器输入特征的一致性和有效性。
2.根据权利要求1所述的全局和局部特征同时提取与融合的多器官分割方法,其特征在于:所述步骤(1)包括图像重采样、像素值裁剪、像素值归一化。
3.根据权利要求2所述的全局和局部特征同时提取与融合的多器官分割方法,其特征在于:所述步骤(3)的特征交换的输入为某一尺度i下的CNN特征Ci和Transformer特征Ti,输出为CTi和TCi,i=1,2,3,通过如下公式表示:
CTi=Fatt(Fhw(Ci))
Tci=Fatt(Fhw(Ti))
函数Fhw(·)表示不同特征图加权得到混合加权特征图Cw和Tw的过程:
Fhw(Ci)=Ci*Wc+Ti*Wtc
Fhw(Ti)=Ti*Wt+Ci*Wct
其中*为逐像素相乘操作,Wc、Wtc、Wt、Wct为各个特征图的权重;函数Fatt(·)表示特征耦合过程,经加权得到的混合加权特征图除有用信息外仍包含其余无关信息,经过卷积操作重新映射和sigmod函数激活,起到抑制无关信息,突出关键信息的作用,具体过程如下:
Fatt(CTi)=Sigmod(Conv(Cw))*Cw
Fatt(TCi)=Sigmod(Conv(Tw))*Tw
其中Conv为跨度为1*1*1,卷积核大小为3*3*3的卷积操作,
Sigmod为sigmod函数。
4.根据权利要求3所述的全局和局部特征同时提取与融合的多器官分割方法,其特征在于:所述步骤(3)的特征融合对两种特征进行充分耦合,表示为:
D=Fh(Fh(C3+T3))
其中函数Fh(·)表示为:
Fh(x)=relu(conv(x))*sigmod(conv(x))
其中relu表示Relu函数;
Transformer和CNN编码器特征图输入后,直接进行相加得到混合特征图。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京理工大学,未经北京理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310059116.1/1.html,转载请声明来源钻瓜专利网。