一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

基于跨域网络的磁共振成像降采样和重建方法

2022-06-05 13:55:27 来源:中国专利 TAG:


1.本发明属于磁共振成像的技术领域,特别涉及基于跨域网络的磁共振成像降采样和重建。


背景技术:

2.主流的基于深度学习的mr图像重建方法均是研究如何设计复杂的神经网络,从而实现预期的重建图像质量的提升或完整的逆傅里叶(fourier)变换的功能。它们只是利用已经欠采样的k空间数据或欠采样的mr图像,作为模型的输入,而忽略了优化降采样轨迹(undersampled trajectory)的重要性。降采样轨迹是实现快速磁共振成像mri并且保证高质量重建的关键因素。降采样的稀疏性决定了加速程度,例如,10%的降采样比例对应10倍加速,20%的降采样比例对应5倍加速。一般来说,mri降采样只发生在相位编码维度上,不存在于频率编码维度。对于二维磁共振成像,包含一个频率编码和一个相位编码维度,只能采取一维降采样。对于传统三维磁共振成像,包含一个频率编码维度和两个相位编码维度,因而降采样一般是二维的。目前已有的二维降采样轨迹包括径向(radial)降采样[p c lauterbur.image formation by induced local interactions:examples employing nuclear magnetic resonance[j].nature,mar 1973.242(5394):190

191]螺旋(spiral)降采样[c b ahn,j h kim,z h cho.highspeed spiral-scan echo planar nmr imaging[j].ieee transactions on medical imaging,mar 1986.5(1):2

7]、高斯(gaussian)降采样[robert l.cook.stochastic sampling in computer graphics[j].acm transactions on graphics(tog),jan 1986.5(1):51

72]和泊松(poisson)降采样[thouis r.jones.efficient generation of poisson-disk sampling patterns[j].journal of graphics tools,jan 2006.11(2):27

36]。但是,这些方法只是遵循先前研究的选择,没有提出确定性的理论依据,或者分析出哪一种的降采样轨迹最适合于优化特定的k空间数据。目前,仅有少数研究开始关注降采样轨迹的优化,针对特定的k空间数据,在采集阶段最大程度地提升mr图像的质量。
[0003]
ü
等人[baran
ü
,rabeeh karimi mahabadi,yenhuan li,efe ilicak,tolga cukur,jonathan scarlett,volkan cevher.learning-based compressive mri[j].ieee transactions on medical imaging,jun2018.37(6):1394 1406]提出了一种无参数贪婪轨迹选择方法(pfgms),通过逐步地更新降采样轨迹,作用于k空间数据,搜索出能获得较高图像质量的降采样轨迹。然而,由于学习降采样轨迹的过程中没有可调节的参数(非神经网络结构),pfgms方法只依靠贪婪迭代的方式去扩增降采样轨迹,需要消耗大量的时间来迭代获得最终的降采样轨迹,不能适用于大规模数据的训练。另外,pfgms方法中降采样轨迹优化和cnn模型的训练被分离处理,然后交替进行更新来得到近似最优解,无法实现跨域联合训练的机制。
[0004]
huijben等人[iris a.m.huijben,bastiaan s.veeling,ruud j.g.van sloun.deep probabilistic subsampling for task-adaptive compressed sensing
[c]//international conference for learning representations,2020:1 16]提出了一种概率表示的采样方式(dps),并引入二层的全连接网络、三层的卷积网络或生成网络,实现了端到端的联合训练机制。然而,huijben等人只在mnist和cifar-10小规模的图像集上进行训练和验证,未在特定的mr图像集上进行测试。为了突破采样点分布不可微的限制,dps中引入了gumbel-softmax作为一种连续可微的近似松弛法,但这并不等价于真实的离散采样值,且只选择了概率值最大的前k个采样点,却忽略了大部分的高频信息,更无法对采样点的选择给出通用的理论分析。
[0005]
aggarwal等人[hemant kumar aggarwal,mathews jacob.j-modl:joint model-based deep learning for optimized sampling and reconstruction[j].arxiv preprint,2019.1911.02945:1 10]提出了一种基于深度学习的联合优化降采样轨迹和重建模型的方法(j-modl),其中提出了2d降采样轨迹优化的概念,训练的模型包括k空间数据一致性操作(需已知降采样轨迹)和u-net[olaf ronneberger,philipp fischer,thomas brox.u-net:convolutional networks for biomedical image segmentation[c]//nassir navab,joachim hornegger,william m wells,alejandro f frangi.international conference on medical image computing and computer-assisted intervention.cham:springer international publishing,2015:234

241]结构。但是,aggarwal等人采用较复杂的训练机制:1)单独训练u-net模型;2)单独训练降采样轨迹;3)同时训练降采样轨迹和u-net网络。这导致了训练的效率不高,且存在大量重复的计算。j-modl为了使得降采样轨迹可以参与梯度更新,直接使用了连续值的参数代替离散的采样值,导致它与真实的降采样轨迹差异太大,所以训练的结果对离散的降采样过程的借鉴意义不足。另外,降采样轨迹对低频、高频部分的采样比例分配过于平均,没有利用k空间数据重要性的分布规律,也缺少对获得的降采样轨迹进行理论分析。
[0006]
最近,weiss等人[tomer weiss,sanketh vedula,ortal senouf,oleg michailovich,michael zibulevsky,alex bronstein.joint learning of cartesian under sampling and reconstruction for accelerated mri[c]//ieee international conference on acoustics,speech and signal processing(icassp).ieee,may2020:8653 8657]提出了一种降采样轨迹和重建网络u-net联合训练的方法(j-ucr),用于学习1d cartesian降采样轨迹,以加速磁共振成像过程。weiss等人[9]设计了二值化mask向量φ和连续值mask向量φc。在训练阶段的每一次迭代后,通过硬阈值(τ)方法由φc更新φ。weiss等人使用单一阈值法导致了降采样轨迹不能灵活变化。另外,j-ucr中采用的向量φ和φc的初始化步骤过于复杂,需要手动设计将低频、高频部分按特定的采样比例分配。由于降采样轨迹严重依赖于特定的初始化值,其在联合训练的过程中并无显著的改变,其中连续值向量φc也没有作为概率分布进行理论分析。j-ucr的训练过程也只采用了一个l1损失函数,导致其对降采样过程的监督信息不足,因而训练的降采样轨迹不能重建获得最佳质量的mr图像。


技术实现要素:

[0007]
本发明的目的在于提供基于跨域网络的磁共振成像降采样和重建方法,可以有效提升磁共振成像的重建效果。
[0008]
本发明采取以下技术方案:
[0009]
基于跨域网络的磁共振成像降采样和重建方法,所述方法包括:
[0010]
(1)获取头部mr图像,经过预处理后,通过傅里叶变换得到仿真全采样k空间数据;
[0011]
(2)将步骤(1)中获得的仿真全采样k空间数据的实部和虚部进行分离,独立保存在两个同维度的矩阵中,然后合并为两个通道作为跨域网络的输入;
[0012]
(3)构建跨域网络,所述跨域网络包括降采样层、逆傅里叶变换层和空间域重建层;将步骤(2)中数据作为输入进行训练,降采样层模拟降采样轨迹对仿真全采样k空间数据进行降采样、逆傅里叶变换层将降采样后的k空间数据重建得到降采样mr图像、空间域重建网络将降采样mr图像重建恢复出细节内容,得到训练完成后的跨域网络;
[0013]
(4)使用步骤(3)训练完成后的跨域网络对头部mr图像进行降采样和重建:
[0014]
(4-1)设置步骤(3)中降采样层的采样比例,通过优化跨域网络,得到不同采样比例下的概率矩阵以及相应的空间域重建网络,基于概率矩阵和采样间隔约束生成最优降采样轨迹;
[0015]
(4-2)根据不同采样比例下的概率矩阵,定量分析不同采样比例约束下的概率矩阵与采样比例的关系,数据拟合得到不同采样比例下的概率矩阵的三位曲面图p
face
,经过中心点的行/列方向的截面概率曲线p
center
和行/列方向的边缘概率曲线p
margin
的函数表达式;
[0016]
(4-3)根据p
face
、p
center
、p
margin
的函数表达式和采样间隔约束可以生成不同采样比例的概率矩阵和降采样轨迹;
[0017]
(4-4)使用步骤(4-3)中的降采样轨迹对mr图像获取k空间数据,逆傅里叶变换层将k空间数据重建得到降采样mr图像,空间域重建网络将降采样mr图像重建恢复出细节内容。
[0018]
在步骤(1)中,每一组数据的空间分辨率为256
×
256
×
(240~320)(维度256
×
256,240~320张扫描切片不等),在数据预处理阶段,以组为基本单位对数据进行归一化,并对每个切片进行8次随机角度旋转,尽可能削弱边缘突变效应对降采样轨迹的优化和分析带来的干扰,同时考虑到真实扫描过程中数据多样性,提高方法的泛化能力。
[0019]
在步骤(1)中,本发明采用了复数分离快速计算的策略。傅里叶变换采用的fourier矩阵表示为:
[0020][0021]
其中,fn表示fourier矩阵,(
·
)h表示共轭转置hermitian;
[0022]
将矩阵fn的实部和虚部分离,借助欧拉euler公式,得到如下矩阵:
[0023]
[0024][0025]
由于矩阵的维度可提前确定,fourier矩阵fm和fn可以提前计算并保存,不需要作为学习参数加入训练过程。本发明已经将k空间数据(复数)的实部和虚部分离,同理在训练前把fourier矩阵fn(fm)的实部和虚部分离,以避免复数的格式并且加速训练。
[0026]
在步骤(3)中,所述降采样层用矩阵元素乘积的方式实现降采样层:
[0027][0028]mu
表示降采样矩阵/轨迹,维度和k空间数据的行列维度保持一致,但取值范围仅为离散值{0,1},“0”表示不采样的部分,“1”表示采样部分;表示输入的全采样k空间数据,表示降采样后的k空间数据。
[0029]
在步骤(3)中,构建降采样层的方法为:
[0030]
(3-1)设计概率矩阵pu,并将所有元素值都初始化为降采样比例,并在训练过程中对概率矩阵进行两点约束:概率矩阵的平均值与降采样比例之间的差值保持在一定的误差范围内概率矩阵中每个点的概率值满足p∈(0,1;
[0031]
(3-2)基于概率矩阵pu,根据伯努利分布生成采样矩阵mu;
[0032]
(3-3)基于概率矩阵pu和采样矩阵mu,设计降采样概率层,每次训练迭代过程中,基于采样矩阵mu进行前向计算,得到降采样的k空间数据,基于概率矩阵pu进行梯度传播,实现参数更新。
[0033]
优选的,步骤(3-1)中,概率化降采样层中的概率矩阵pu的所有元素值都初始化为将采样比例,并且在训练过程中一直保持约束采样矩阵mu的初始状态是由概率矩阵pu通过伯努利分布得到。同时在训练过程中概率矩阵的取值范围是p∈(0,1,当p=0时,其采样分布就无意义,而且会导致采样矩阵中对应的元素无法参与更新,使得训练过早陷入局部的极小值,当p》1时,梯度更新过程中出现越界值,导致生成的采样矩阵mu的步骤出现异常。
[0034]
优选的,步骤(3-2)中降采样矩阵mu的元素均为{0,1}离散值,能进行前向计算,但是离散值是不可微的,不存在梯度,无法实现反向传播的更新过程。因此,本发明提出了网络结构自动训练的策略:mu定义为结构参数,pu定义为控制参数。即每一次训练迭代之前,前向计算的过程中使用的结构参数mu,其值由控制参数pu通过伯努利分布生成离散值;接着,反向传播时使用控制参数进行梯度更新;如此循环,直至概率矩阵pu收敛:
[0035][0036][0037][0038]
该策略既保留了采样矩阵mu的概率分布特性,也在训练过程中加入了随机性,使
得概率矩阵pu经过不断的优化,可以趋于稳定且方便分析,容易发现其中的普遍规律。
[0039]
优选的,步骤(3-2)中概率矩阵pu通过伯努利分布生成采样矩阵mu带有丰富的随机性,训练过程中随机性有助于概率矩阵pu进行充分地训练,训练结束后,该随机性使得每次由同样的pu生成的mu的采样点位置的大相迥异,导致重建网络的性能变化剧烈,不利于进一步分析概率矩阵pu的规律。
[0040]
在步骤(3)中,所述逆傅里叶变换层(实现k空间数据转换为mr图像的功能)的输入是降采样后的部分k空间数据,在前向计算的过程中使用逆傅里叶变换就可以得到欠采样的mr图像;其中,正逆傅里叶变换、逆傅里叶变换的计算过程分别如下:
[0041][0042][0043]
在步骤(3)中,所述空间域重建网络,选用普通的10层卷积网络结构,并加入全局的跳跃连接实现空间域重建网络,将降采样后的mr图像重建恢复出细节内容:
[0044]
x
rec
=xu f
cnn
(xu|θ),
[0045]
其中xu代表降采样后的mr图像,f
cnn
代表空间域重建网络,θ表示f
cnn
的待优化网络参数。
[0046]
本发明提供的空间域重建网络使得图像的信噪比得到显著提升,同时保证了跨域网络的通用性。
[0047]
所述空间域重建网络中前9层的卷积核大小为3
×
3,通道数为16,步长为1,每个卷积层后,都跟随一个relu激活函数;第十层卷积层进行特征融合,该层卷积核大小为3
×
3,通道数为1,步长为1。
[0048]
在步骤(3)中,在训练过程中,训练的损失函数基于传统的euclidean损失约束,由降采样损失和重建损失两部分组成:
[0049]
l
joint
=λ1·
l
ift
λ2·
l
rec
,λ1,λ2∈[0,1],
[0050]
其中降采样损失重建损失y
rec
表示真实的全采样mr图像。
[0051]
为了避免深度网络带来的梯度消失,同时增强概率化降采样层的训练效果,损失函数不仅包括重建损失,还包括降采样层损失,为模型提供深度监督,其中超参数λ1和λ2都设置为1时效果最佳,这意味着两个损失函数在训练的过程中加入的监督信息同等的重要。
[0052]
在步骤(4-1)中,基于概率矩阵pu生成采样矩阵mu的过程中进行采样间隔约束,等概率区域内所有采样点之间的距离尽可能平均分配,最小距离为r0,最大距离为20:
[0053]
r0<‖mu(xi,yj)-mu(xk,y
l
)‖2<2r0[0054][0055]
在步骤(4-3)中,截面概率曲线p
center
、边缘概率曲线p
margin
和三维曲面图p
face
满足的函数表达式为:
[0056][0057][0058][0059][0060][0061][0062][0063]
其中,rate为总采样比例,为最小采样概率值的限制,z表示概率矩阵pu的坐标值,d表示概率矩阵pu中的像素点与矩阵中心的距离。
[0064]
具体的:根据要求的采样比例rate可以计算出一系列参数σ、t0、t1、p
min
,那么根据这些参数,用公式p
face
就可以计算出概率矩阵pu中各个点的概率值,再根据概率矩阵结合采样间隔约束就可以生成采样矩阵。截面概率曲线p
center
和边缘概率曲线p
margin
是用于分析获得三维曲面图p
face
的表达式的,然后根据p
face
可以计算获得概率矩阵pu,再基于pu和采样间隔约束生成最终的降采样轨迹。
[0065]
通过本发明得到的不同采样比例下的p
face
、p
center
、p
margin
的函数表达式,结合采样间隔约束就可以生成不同采样比例下的降采样轨迹,可以一种通用的二维降采样轨迹。降采样轨迹用于在获取k空间数据时,只对采样点进行降采样(也就是降采样矩阵中值为1的点),逆傅里叶变换层将降采样后的k空间数据重建得到降采样mr图像、然后用训练好的空间域重建网络将降采样mr图像重建恢复出细节内容。
[0066]
本发明提出的基于跨域网络的磁共振(mr)图像的降采样和重建方法,在这过程中同时优化了磁共振(mr)图像的降采样轨迹及空间域重建网络,并且定量分析了跨域网络中的最佳降采样轨迹概率分布的函数表达式。本发明主要包括三个部分:概率化降采样层模拟降采样轨迹;逆傅里叶变换层将降采样后的k空间数据重建得到mr图像;空间域重建网络将模糊的mr图像重建恢复出细节内容。本发明提出的跨域重建网络使用基于真实mr数据经
过傅里叶变换后获得的k空间数据,仅在传统的euclidean损失约束下,充分训练2d概率化降采样层和重建网络模型,发现了最佳2d降采样轨迹的概率分布与采样比例(加速倍数)的关系。本发明提出的2d概率化降采样层和跨域联合训练机制的实用性更强、针对不同mr采集及重建场景的效果更优。本发明提供的方法学习到的最佳采样轨迹概率分布的函数表达式可为3d mr扫描磁共振成像(mri)场景中的降采样轨迹提供理论依据。同时,本发明采用不同模态、不同健康状况的3d扫描的真实mr图像进行测试,证明了本发明的降采样轨迹的鲁棒性和普适性。对比现有的几种降采样策略,在同等的采样比例(加速倍数)条件下,本发明提出的概率化降采样轨迹的重建效果明显超过了已有几种降采样轨迹的重建效果。
附图说明
[0067]
图1为跨域网络结构图。
[0068]
图2为本发明优化得到的2d概率化降采样层的概率矩阵曲线的分析结果:三维曲面图p
face
、经过中心点的行(列)方向的截面概率曲线(实线)p
center
、和行(列)方向的边缘概率曲线(虚线)p
margin
,降采样比例分别为(a)10%,(b)20%,(c)30%,(d)40%。
[0069]
图3为本发明提出的采样间隔约束性能展示,对降采样概率为10%并且均匀分布的采样结果如下:(a)为伯努利随机生成的采样矩阵;(b)为约束条件下生成的采样矩阵。
[0070]
图4为本发明对比的几种降采样轨迹实例:(a)j-cur;(b)pfgms;(c)j-modl;(d)loupe;(e)gaussian;(f)poisson。
[0071]
图5为本发明提出的2d概率化降采样层在无重建网络仅使用欠采样损失训练的结果,第一行表示概率矩阵,第二行表示在稳定性约束条件下生成的采样矩阵:降采样比例分别为:(a)10%;(b)20%;(c)30%;(d)40%。
[0072]
图6为本发明优化得到的降采样轨迹和重建网络在miccai2013测试集和高级别胶质瘤患者的动态对比增强磁共振图像数据集中的测试样例。
具体实施方式
[0073]
本发明采用公共数据集miccai 2013grand challenge on multi-atlas labeling中t1加权模态头部mr图像,经过傅里叶变换获得仿真全采样k空间数据。考虑到头部mr图像中除部分组织外、其余背景简单且无内容的情况,为了避免恢复的图像出现边缘突变效应,本发明采用将图像中组织部分平移至图像中心的预处理方式。另外,考虑到头部mr图像形态固定、方向不变化的特性,会导致图像特征的多样性不足,本发明采取如下的数据扩充策略:所有训练图像随机旋转0
°–
360
°
,重复8次,通过随机方向的旋转来丰富mr图像的形态特征,避免出现有偏收敛解和非预期的过拟合情况。
[0074]
本发明提出的模型由tensorflow与keras高级接口共同实现。鉴于训练阶段所需的数据量、参数量和内存占用,本发明的实验都是在配备intel xeon(r)platinum处理器(cpu)@2.50ghz,528gb内存,4个nvidia tesla v100(32gb)gpu和ubuntu linux发行版的服务器上运行的。
[0075]
本发明提供的跨域网络磁共振图像降采样轨迹和重建网络优化方法主要包括以下步骤:
[0076]
(1)获取头部mr图像,并划随机分为训练集、验证集和测试集三个部分;以组为基
本单位,对训练集中的数据进行归一化,并对每个切片进行随机角度旋转,提高数据多样性。对预处理后的图像经过傅里叶变换获得仿真全采样k空间数据。
[0077]
具体为:采用公共数据集miccai 2013grand challenge on multi-atlas labeling中t1加权模态头部mr图像,从训练样本中随机选取200组和10组分别作为本方法的训练集和验证集,从测试样本中随机选择10组作为本方法的测试集,经过预处理后,通过傅里叶变换得到仿真全采样k空间数据。
[0078]
(2)将步骤(1)中获得的仿真全采样k空间数据的实部和虚部进行分离。独立保存在两个同维度的矩阵中,然后合并为两个通道,作为跨域网络的输入:
[0079]
该过程记为:
[0080][0081]
表示复数形式的仿真全采样k空间数据,该方法可以避开频域的复数计算且无任何信息损失。
[0082]
(3)构建跨域网络,如图1所示,跨域网络包括降采样层、逆傅里叶变换层和空间域重建层;将步骤(2)中数据作为输入进行训练,降采样层模拟降采样轨迹对仿真全采样k空间数据进行降采样、逆傅里叶变换层将降采样后的k空间数据重建得到降采样mr图像、空间域重建网络将降采样mr图像重建恢复出细节内容、得到训练完成后的跨域网络,具体过程为:
[0083]
(3-1)设计概率矩阵pu,并将所有元素值都初始化为降采样比例,并在训练过程中对概率矩阵进行两点约束:概率矩阵的平均值与将采样比例之间的差值保持在一定的误差范围内概率矩阵中每个点的概率值满足p∈(0,1]。
[0084]
(3-2)基于步骤(4-1)中设计的概率矩阵pu,根据伯努利分布生成采样矩阵mu。
[0085]
(3-3)基于步骤(4)中设计的概率矩阵pu和步骤(4-2)中设计的采样矩阵mu,设计降采样概率层,每次训练迭代过程中,基于采样矩阵mu进行前向计算,得到降采样k空间数据,基于概率矩阵pu进行梯度传播,实现参数更新。
[0086]
(3-4)设计逆傅里叶变换层,将步骤(4-3)中得到的降采样k空间数据变换到图像域,获得降采样mr图像。
[0087]
在前向计算的过程中使用逆傅里叶变换就可以得到欠采样的mr图像;其中,正逆傅里叶变换、逆傅里叶变换的计算过程分别如下:
[0088][0089][0090]
(3-5)设计空间域重建网络,提高步骤(4-4)中的降采样mr图像的信噪比,恢复出细节内容。
[0091]
表示为:
[0092]
x
rec
=xu f
cnn
(xu|θ),
[0093]
其中xu代表降采样后的mr图像,f
cnn
代表空间域重建网络,θ表示f
cnn
的待优化网络
参数。
[0094]
具体的,空间域重建网络中前9层的卷积核大小为3
×
3,通道数为16,步长为1,每个卷积层后,都跟随一个relu激活函数;第十层卷积层进行特征融合,该层卷积核大小为3
×
3,通道数为1,步长为1。
[0095]
(3-6)将步骤(3-3)-(3-5)中的三部分网络整合为跨域网络,基于步骤(1)-(2)中获得的数据对网络进行训练,直至网络收敛,得到优化后的降采样轨迹和重建网络。
[0096]
在训练过程中,训练的损失函数基于传统的euclidean损失约束,由降采样损失和重建损失两部分组成:
[0097]
l
joint
=λ1·
l
ift
λ2·
l
rec
,λ1,λ2∈[0,1],
[0098]
其中降采样损失重建损失y
rec
表示真实的全采样mr图像。
[0099]
(3-7)基于步骤(3-6)中优化得到的降采样概率矩阵,在采样间隔约束的条件下生成采样矩阵,并将其固定为跨域网络中的概率矩阵和采样矩阵,对空间域重建网络进行微调,获得最终采样矩阵和空间域重建网络。
[0100]
如图3所示。因此除了总采样比例约束外,本发明提出采样间隔约束,等概率区域内所有采样点之间的距离尽可能平均分配,最小距离为r0,最大距离为20。
[0101]
r0<‖mu(xi,yj)-mu(xk,y
l
)‖2<2r0[0102][0103]
(4)分别将采样比例设置为10%、20%、30%、40%和50%,重复步骤(3-6)-(3-7)训练得到不同采样比例下优化的降采样轨迹和重建网络。
[0104]
(5)定量分析不同采样比例和其对应的概率矩阵之间的数量关系,数据拟合得到截面概率曲线p
center
、边缘概率曲线p
margin
和三维曲面图p
face
满足的函数表达式,根据该函数表达式和采样间隔约束可以生成不同采样比例的概率矩阵和降采样轨迹,该过程中需要手动配置的参数只有总采样比例rate和最小采样概率值的限制手动配置的参数只有总采样比例rate和最小采样概率值的限制并不需要大量的超参数调整。
[0105]
步截面概率曲线p
center
、边缘概率曲线p
margin
和三维曲面图p
face
满足的函数表达式为:
[0106][0107][0108]
[0109][0110][0111][0112][0113]
其中,rate为总采样比例,为最小采样概率值的限制,z表示概率矩阵pu的坐标值,d表示概率矩阵pu中的像素点与矩阵中心的距离。
[0114]
步骤(5)中获得的不同采样比例下的概率矩阵具有高度规律性,继续进行定量分析,本发明探索了不同采样比例下的概率矩阵的三维曲面图p
face
、经过中心点的行(列)方向的截面概率曲线(实线)p
center
、和行(列)方向的边缘概率曲线(虚线)p
margin
,如图2所示,随着采样比例的上升,中心区域的采样比例逐渐增加,高频区域的最低采样比例p
min
也逐渐提高。另外,由于概率矩阵是高度中心对称的,截面概率曲线p
center
的行、列方向的结果是完全重合的,且边缘概率曲线p
margin
的行、列方向的结果也是完全重合的。因此,本发明只需关注任意一个方向进行曲线分析。截面概率曲线p
center
的最大值为1,最小值为预设的p
min
;随着采样比例的增加,曲线的形状变得越来越“宽”。边缘概率曲线p
margin
的最大值随着采样比例的增加而变大,最小值为预设的p
min
;随着采样比例的增加,曲线的形状变得越来越“高”且“宽”。经过曲线数据拟合,本发明提出了上述几个概率分布的具体表达式。
[0115]
(6)使用步骤(5)中的降采样轨迹对mr图像获取k空间数据,逆傅里叶变换层将k空间数据重建得到降采样mr图像,空间域重建网络将降采样mr图像重建恢复出细节内容。
[0116]
其中,当步骤(6)中采样比例与步骤(4)相同时,采用步骤(4)中的空间域重建网络;当两者不同时,需要重新训练得到此采样比例下的空间域重建网络。
[0117]
为了测试本发明提出的概率化降采样的策略,本发明选择一些现有的降采样方法,在10%

50%采样比例条件下,对应10倍

2倍加速,进行结果比较。对比方法包括jcur、pfgms、j-modl、loupe、gaussian、poisson。本发明使用上述(一部分固定、另一部分可训练)的降采样轨迹代替本发明提出的概率化降采样层中的采样矩阵,并且训练重建网络,最后进行定量比较mr重建图像的信噪比。由于不同的采样比例的模型参数不能共享,本发明针对不同采样比例的条件,分别训练出多个模型用于测试。
[0118]
定量分析不同采样比例以及对应的概率矩阵,数据拟合得到截面概率曲线p
center
、边缘概率曲线p
margin
和三维曲面图p
face
满足的函数表达式,并且根据该函数表达式和采样间隔约束可以生成不同采样比例的概率矩阵和降采样轨迹,该过程中需要手动配置的参数只有总采样比例rate和最小采样概率值的限制并不需要大量的超参数调整;并且采样概率函数和最佳的降采样轨迹可作为真实的降采样策略部署于mri扫描仪,实
现了有限采样比例下高信噪比的mr图像采集和重建的目标。
[0119]
为了比较同样以数据驱动方式、学习到的降采样策略的方法和传统降采样策略方法,本发明对比了j-cur降采样(图4中(a)),pfgms降采样(图4中(b)),j-modl降采样(图4中(c)),loupe降采样(图4中(d)),gaussian降采样(图4中(e)),poisson降采样(图4中(f))。可以发现j-cur方法和pfgms方法的降采样轨迹对高频部分的信息采集太少,而j-modl方法的降采样轨迹把低频、高频部分的信息按同等的比例采集,这都导致了重建的mr图像信噪比相对不高。而本发明获得的概率化降采样轨迹(如图5所示:2d概率化降采样层在无重建网络仅使用欠采样损失训练的结果,第一行表示概率矩阵,第二行表示在稳定性约束条件下生成的采样矩阵:降采样比例分别为:(a)10%;(b)20%;(c)30%;(d)40%)能把采样点合理地分配到k空间中的低频、高频区域,概率矩阵中心的低频区域的概率值最大且高度对称,以同心圆向外,概率值迅速降低,使其可以适用于不同类型的mr数据。同时本发明训练得到的概率矩阵同样被认为是k空间采样点的重要性分布:中心低频部分的能量很高,对恢复mr图像的整体结构很重要;高频部分的能量很低,但对提升mr图像的复杂细节很关键。
[0120]
如图6所示,我们在两个不同的数据集上对本发明进行性能测试,其中一个测试集是与训练集独立同分布,另一个测试集是高级别胶质瘤患者的动态对比增强磁共振图像,从结果上看,本发明提出的端到端的降采样轨迹和重建网络优化能够提高图像的降采样质量以及重建质量,同时相比其他方法,本发明对于分布不同的数据也能够表现出较好的性能,证明了本发明具有一定的普适性。
再多了解一些

本文用于企业家、创业者技术爱好者查询,结果仅供参考。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表

相关文献