利索能及
我要发布
收藏
专利号: 201910221414X
申请人: 电子科技大学
专利类型:发明专利
专利状态:已下证
更新日期:2025-12-01
缴费截止日期: 暂无
联系人

摘要:

权利要求书:

1.一种基于深度强化学习的3D/2D医学图像配准方法,其特征在于,包括以下步骤:(1)、获取2D和3D医学图像

获取X射线图像作为配准过程的术中2D参考图像,获取医学CT作为配准过程的训练图像集和术前待配准3D图像;

(2)、训练图像集预处理

将训练图像集输入至X射线成像计算模型,再随机变换参数Ti=(txi,tyi,tzi,rxi,ryi,rzi),通过该模型生成DRR图像,其中,i=1,2,…,n;

随机选取一部分DRR图像作为参考图像,另一部分作为浮动图像;

(3)、修改参考图像和浮动图像的分辨率,得到分辨率为p1的参考图像和分辨率为p2的参考图像,以及分辨率为p1的浮动图像和分辨率为p2的浮动图像;

(4)、搭建深度强化学习网络

设深度强化学习网络的编码部分包含四条卷积路径L1、L2、L3、L4,L1中输入分辨率为p1的参考图像,L2中输入分辨率为p2的参考图像,L3中输入分辨率为p1的浮动图像,L4中输入分辨率为p2的浮动图像;

设深度强化学习网络的解码部分为Dueling网络,通过全连接层连接编码部分,解码输出为12个沿着变换参数tx、ty、tz、rx、ry、rz的正向和负向运动的动作和12个对应的奖励Q值;

(5)、术前待配准3D图像做特定方向投影

对术前待配准3D图像做体数据的矢状面、冠状面、轴面以及六个对角面所对应的法线方向的特定投影,得到9幅具有不同变换参数Ti=(txi,tyi,tzi,rxi,ryi,rzi)的DRR图像,i=

1,2,…,9;

(6)、计算相似性测度

先对9幅DRR图像和2D参考图像进行进行去噪处理,然后分别计算每幅DRR图像与2D参考图像的相似性测度,最后选出相似性测度值最高的DRR图像;

(7)、利用深度强化学习网络进行图像配准

(7.1)、将选出的DRR图像与2D参考图像进行重采样,再将采样后的图像作为深度强化学习网络的输入参考图像和浮动图像;

(7.2)、深度强化学习网络解码输出12个奖励Q值和对应的12个动作,然后选出奖励Q值中变化最大的一个,最后根据变化最大的奖励Q值及其对应的动作更新变换参数Tx,再根据更新后的变换参数Tx更新选出的DRR图像,并计算选出的DRR图像与2D参考图像的配准精度;

(7.3)、重复步骤(7.1)-(7.2),当配准精度达到预期要求时,迭代停止,得到配准后的图像。

2.根据权利要求1所述的基于深度强化学习的3D/2D医学图像配准方法,其特征在于,所述的X射线成像计算模型为:其中,I为X射线经过衰减后的能量,I0为X射线初始能量,μi为人体组织i对应的线性衰减系数,di为射线在该组织中经过的距离。

3.根据权利要求1所述的基于深度强化学习的3D/2D医学图像配准方法,其特征在于,所述的相似性测度的计算方法为:通过计算互信息I(A,B)来计算相似性测度,即:

H(A)=-∑PA(a)logPAB(a,b)

H(B)=-∑PB(b)logPAB(a,b)

I(A,B)=H(A)+H(B)-H(A,B)

其中,H(A)表示DRR图像的熵,H(B)表示2D参考图像的熵,H(A,B)表示DRR图像和2D参考图像的联合熵,a、b为两幅图像中相关像素点的值,PA(a)表示DRR图像中像素a的概率分布函数,PB(b)表示2D参考图像中像素b的概率分布函数,PAB(a,b)为DRR图像和2D参考图像之间的联合概率分布函数。