分享:
分享到微信朋友圈
X
特别关注
深度学习MRI重建算法的临床应用和发展前景
严福华

Cite this article as: YAN F H. The clinical application and development prospect of deep learning MRI reconstruction algorithm[J]. Chin J Magn Reson Imaging, 2023, 14(5): 8-10.本文引用格式:严福华. 深度学习MRI重建算法的临床应用和发展前景[J]. 磁共振成像, 2023, 14(5): 8-10. DOI:10.12015/issn.1674-8034.2023.05.002.


[摘要] 随着MRI技术的发展,其在临床疾病诊断中的应用越来越广泛,但基于传统重建方法的MRI面临着成像时间、图像分辨率和信噪比之间彼此制约的困难和挑战。近几年,深度学习(deep learning, DL)MRI重建算法的提出,极大限度地解决了传统重建算法的不足。DL-MRI重建已用于神经系统、肌骨系统、体部及心脏等多部位的成像,在缩短成像时间、提升信噪比和提高分辨率方面表现卓越,在提高病灶的检出率和定性准确性方面,也具有潜在的优势。目前已经商业化的DL-MRI重建模型,其重建速度完全能满足临床工作的需求,但尚需深入研究其临床应用场景以及对影像诊断的影响,从而更好地发挥其优势,助力MRI临床应用能力的提升。
[Abstract] With the development of MR technology, MRI has become more and more popular in the clinical application for the diagnosis. However, there are many problems and challenges that restrict each other in scanning time, image resolution and signal to noise ratio based on traditional MRI reconstruction methods. In recent years, deep learning (DL) MRI reconstruction algorithm has been proposed, which has greatly solved the shortcomings of traditional reconstruction algorithms. DL-MRI reconstruction has been applied in nervous system, muscle and skeletal system, body and cardiac imaging. It has excellent performance in reducing scan time, improving signal-to-noise ratio and resolution, and also has potential advantages in improving the lesion detection and characterization. At present, the commercialized DL-MRI reconstruction model can fully meet the clinical needs in the reconstruction speed. However, it is still need further study for the clinical application scenario and the effectiveness on imaging diagnosis, facilitated to playing the advantages of MRI and helpful for improving the clinical procedure.
[关键词] 磁共振成像;深度学习;图像重建算法
[Keywords] magnetic resonance imaging;deep learning;image reconstruction

严福华 *  

上海交通大学医学院附属瑞金医院放射科,上海 200025

通信作者:严福华,E-mail:yfh11655@rjh.com.cn

作者贡献声明:严福华设计本研究的方案,起草和撰写稿件,获取、分析或解释本研究的数据/文献,对稿件重要内容进行了修改,同意发表最后的修改稿,同意对本研究的所有方面负责,确保本研究的准确性和诚信。


        
        严福华,女,教授,主任医师,博士生导师。现任上海交通大学医学院附属瑞金医院放射科主任、上海交通大学医学院医学影像学系主任、医学技术学院医学影像技术系主任。“十三五”国家重点研发计划首席科学家、国家临床重点专科(医学影像学)负责人、上海市高水平地方高校协同创新团队负责人。担任国际医学磁共振学会(ISMRM)中国区主席、亚洲医学磁共振学会(ASMRM)第一届主席、中华医学会放射学分会常委兼磁共振学组组长、中国医师协会放射医师分会副会长、中国医学装备协会磁共振应用专业委员会副主任委员、中国研究型医院学会磁共振专委会副主任委员、中国医疗保健国际交流促进会影像医学分会副主任委员等社会任职。任《磁共振成像》杂志副主编,《诊断学理论与实践》副主编,《中华放射学杂志》等10余种杂志的编委。学术方向主要为CT及MRI新技术的研发及转化应用研究。在放射学著名期刊《Radiology》《Neuroimage》等杂志发表论文300余篇。获国家科学技术进步奖二等奖、中华医学科技奖一等奖、上海市科技进步奖一等奖、上海市明治乳业生命科学奖等10余项奖项。主译专著2部,主编、副主编、参编著作20余部。培养博士后、博士、硕士研究生50余名。

收稿日期:2023-02-12
接受日期:2023-05-15
中图分类号:R445.2 
文献标识码:A
DOI: 10.12015/issn.1674-8034.2023.05.002
本文引用格式:严福华. 深度学习MRI重建算法的临床应用和发展前景[J]. 磁共振成像, 2023, 14(5): 8-10. DOI:10.12015/issn.1674-8034.2023.05.002.

0 前言

       自20世纪70年代初期诞生以来,MRI技术已经取得了长足的进步,并广泛应用于临床诊断和科学研究。MRI的广泛应用离不开重建算法的发展和推动。1973年,LAUTERBUR[1]首次发表了通过反向投影算法(back projection, BP)重建经梯度编码的MR信号得到物体MRI图像的开创性成果。然而,基于BP重建MRI的成像时间非常长,图像信噪比和对比度差[2]。ERNST[3]提出可以将傅里叶变换(Fourier translation, FT)用于MRI。随后,荷兰中心实验室“质子”项目研究组于1981年成功将FT重建算法用于MRI。较BP重建算法而言[4],FT重建算法获取的MRI人脑图像信噪比和对比度得到极大提升。尽管后续有种类繁多的MRI重建算法被提出[5],但FT至今仍是MRI的标准重建算法。

1 传统MRI重建方法

       MRI信号采集无法避免热噪声和电子噪声,这些噪声会转换到重建后的MRI图像中,降低了图像信噪比[6]。此外,MRI由于成像速度慢的原因,快速成像方法也在不断提出和应用,如:并行成像[7]、多层并发采集成像[8]等,但也会牺牲图像的信噪比和(或)分辨率[6]。为了降低噪声水平,MRI设备硬件性能在不断加强,如:更高的磁场强度、更优的线圈设计等,但这会显著增加系统成本[6]。对已有的设备,通过增加扫描平均次数是常用的提升信噪比的方法,代价是显著的延长了扫描时间[6]。另一方面,实际成像过程中对高频信号的采集往往是不完备的,会导致经FT重建后的MRI图像边缘存在环状伪影。提高采集分辨率可以减轻环状伪影,但会增加扫描时间以及降低信噪比。传统MRI重建方法至今仍面临着成像时间、图像分辨率和信噪比之间的权衡问题[6]

2 深度学习MRI重建方法

       近几年,深度学习(deep learning, DL)算法在很多领域都取得了巨大成功,在MRI重建方法的转变方面也显示出巨大的潜力[6]。DL的核心是深度神经网络(deep neural network, DNN),此网络利用多层非线性信息处理单元来学习数据之间的复杂关系。常见的DNN包括卷积神经网络(convolutional neural network, CNN)、递归神经网络(recurrent neural network, RNN)和生成对抗网络(generative adversarial network, GAN)[9]。基于DL的MRI重建算法大致分三大类:数据驱动、模型驱动和二者的整合[5, 9]。数据驱动DL重建算法使用网络模型作为“黑匣子”来学习输入和输出数据之间的映射,不需要任何先验知识,但严重依赖大量数据来训练[5, 9]。模型驱动DL重建算法以约束重建模型为基础,将迭代优化算法的过程展开到深度网络,进行网络参数训练学习,在训练集规模较小的情况下,模型驱动重建算法通常表现良好[5, 9]。至今,大部分DL-MRI重建算法集中在对欠采样数据进行重建,以实现比快速采集方法更快的成像速度[6]

       目前仅GE公司提供商业化的DL-MRI重建算法,即AIR Recon DL[6]。AIR Recon DL使用深度CNN对400余万个重建前的MRI原始复数数据进行训练,整个CNN网络包含超过10 000个卷积核,训练的参数超过400余万个,最终得到极低噪声和极小环状伪影的“纯净”且锐利的MRI图像[6]。AIR Recon DL单个数据重建所需时间不到2 s[10]。另一方面,AIR Recon DL的算法设计使其可与现有的MRI快速采集方法(如:并行采集、部分傅里叶采集)直接无缝兼容,扩大了其应用范围[6]。此外,基于AIR Recon DL重建算法带来的信噪比和对比度的显著提升,使得MRI可以在加快扫描速度的同时,获得更高分辨率和更高信噪比的图像[6,10]

3 DL-MRI重建算法的临床应用

       近年来,DL-MRI重建算法的临床应用报道不断增多。神经系统方面,使用DL重建技术,头部MRI扫描的时间缩短了近3/4,而图像质量与传统重建图像类似[11]。如垂体这样的小器官,基于DL重建,行1 mm薄层T1加权成像(T1-weighted imaging, T1WI)对垂体瘤检出及海绵窦侵犯的诊断效能均优于常规重建、3 mm层厚的T1WI[10, 12]。扩散张量成像(diffusion tensor imaging, DTI)被广泛应用于探究脑微观结构和连接,相较于传统重建模型的DTI,DL重建DTI在提升图像信噪比、减少伪影方面有显著效果,重建出的白质纤维束与标准图谱更具一致性[13]

       在骨肌系统方面,与传统重建方法相比,DL重建的使用极大地缩短了成像时间(40%~75%),同时提高了信噪比和对比度,更清晰地显示了局部细节,更短的扫描时间也有助于运动伪影的减少[14, 15, 16, 17],而这些优势有助于提升骨关节疾病的诊断信心。YASAKA等[17]的研究结果表明,DL重建能更清晰地显示颈椎结构(脊髓、椎体、关节突等),提高了不同阅片人对椎管狭窄和椎间孔狭窄评估的一致性。在疾病检测方面,DL重建能替代传统的重建方法,节约了70%的扫描时间且不影响疾病的诊断[18]

       在前列腺方面,T2加权成像(T2-weighted imaging, T2WI)是前列腺癌检查的常规序列,基于DL重建的T2WI序列扫描时间更短,且对前列腺癌边界和侵犯范围的诊断效能与常规重建的T2WI一致[19]。对于前列腺癌小病灶的检测,通常使用高b值的扩散加权成像(diffusion weighted imaging, DWI),但高b值会降低图像信噪比,而DL重建能提升高b值DWI的图像质量且提高前列腺癌的检出敏感性[20]

       在心脏方面,心肌延迟强化(late gadolinium enhancement, LGE)对心肌纤维化的评估具有重要价值。已有研究表明,DL重建能显著降低LGE图像的噪声水平、提高图像对比度和锐利度,从而提升诊断准确性[21, 22]。在心肌组织弛豫定量方面,DL重建能够提供更精确的T1弛豫定量信息[23]

4 总结与展望

       目前DL-MRI重建已经开始进入临床应用,在缩短成像时间、提升信噪比、提高分辨率和消除伪影方面均发挥了重要作用。但是,DL能否替代传统MRI重建算法用于日常临床检查,仍需要开展更广泛深入的研究。此外,使用DL-MRI的重建算法对定量评估是否影响,也需要开展全面的对照研究。目前只有GE公司提供了商用的DL重建技术,但支持的成像序列有限,包括结构成像、弛豫定量成像、DWI、对比增强成像等,支持的设备均是1.5 T及以上的高场设备。期待更多的MR设备厂家提供DL重建技术,支持更全面的成像序列(如:动脉自旋标记灌注成像、合成成像等),覆盖更低场强的设备(因低场强的信噪比更低),从而推动DL重建技术获得更广泛的临床应用,推动MRI技术迈向新的高度和水平。

[1]
LAUTERBUR P C. Image formation by induced local interactions. Examples employing nuclear magnetic resonance. 1973[J]. Clin Orthop Relat Res, 1989(244): 3-6.
[2]
VIARD A, EUSTACHE F, SEGOBIN S. History of magnetic resonance imaging: a trip down memory lane[J]. Neuroscience, 2021, 474: 3-13. DOI: 10.1016/j.neuroscience.2021.06.038">10.1016/j.neuroscience.2021.06.038">10.1016/j.neuroscience.2021.06.038.
[3]
ERNST R R. NMR Fourier zeugmatography[J]. J Magn Reson, 2011, 213(2): 510-512. DOI: 10.1016/j.jmr.2011.08.006">10.1016/j.jmr.2011.08.006">10.1016/j.jmr.2011.08.006.
[4]
HOLLAND G N, HAWKES R C, MOORE W S. Nuclear magnetic resonance (NMR) tomography of the brain: coronal and sagittal sections[J]. J Comput Assist Tomogr, 1980, 4(4): 429-433. DOI: 10.1097/00004728-198008000-00002">10.1097/00004728-198008000-00002">10.1097/00004728-198008000-00002.
[5]
PAL A, RATHI Y. A review and experimental evaluation of deep learning methods for MRI reconstruction[J/OL]. J Mach Learn Biomed Imaging, 2022, 1: 001 [2023-02-11]. https://www.ncbi.nlm.nih.gov/pmc/articles/PMC9202830/. DOI: 10.1109/TMI.2018.2865356">10.1109/TMI.2018.2865356">10.1109/TMI.2018.2865356.
[6]
LEBEL R M. Performance characterization of a novel deep learning-based MR image reconstruction pipeline[EB/OL]. [2023-02-11]. https://arxiv.org/abs/2008.06559. DOI: 10.48550/arXiv.2008.06559">10.48550/arXiv.2008.06559">10.48550/arXiv.2008.06559.
[7]
HUTCHINSON M, RAFF U. Fast MRI data acquisition using multiple detectors[J]. Magn Reson Med, 1988, 6(1): 87-91. DOI: 10.1002/mrm.1910060110">10.1002/mrm.1910060110">10.1002/mrm.1910060110.
[8]
MÜLLER S. Multifrequency selective rf pulses for multislice MR imaging[J]. Magn Reson Med, 1988, 6(3): 364-371. DOI: 10.1002/mrm.1910060315">10.1002/mrm.1910060315">10.1002/mrm.1910060315.
[9]
LIANG D, CHENG J, KE Z, et al. Deep MRI reconstruction: unrolled optimization algorithms meet neural networks[EB/OL]. [2023-02-11]. https://arxiv.org/abs/1907.11711. DOI: 10.48550/arXiv.1907.11711">10.48550/arXiv.1907.11711">10.48550/arXiv.1907.11711.
[10]
KIM M, KIM H S, KIM H J, et al. Thin-slice pituitary MRI with deep learning-based reconstruction: diagnostic performance in a postoperative setting[J]. Radiology, 2021, 298(1): 114-122. DOI: 10.1148/radiol.2020200723">10.1148/radiol.2020200723">10.1148/radiol.2020200723.
[11]
QUARTERMAN P. Development of a high-speed MRI protocol with deep learning reconstruction method for brain imaging in a clinical setting[C/OL]. ISMRM, 2022 [2023-02-11]. https://archive.ismrm.org/2022/3967.html.
[12]
LEE D H, PARK J E, NAM Y K, et al. Deep learning-based thin-section MRI reconstruction improves tumour detection and delineation in pre- and post-treatment pituitary adenoma[J/OL]. Sci Rep, 2021, 11(1): 21302 [2023-02-11]. https://www.nature.com/articles/s41598-021-00558-2. DOI: 10.1038/s41598-021-00558-2">10.1038/s41598-021-00558-2">10.1038/s41598-021-00558-2.
[13]
CHOI K S, Figee M, Lebel R M, et al. Evaluation of the efficacy of a deep learning-based reconstruction in the connectomic deep brain stimulation[C/OL]. ISMRM, 2022 [2023-02-11]. https://archive.ismrm.org/2022/4779.html.
[14]
HAHN S, YI J, LEE H J, et al. Image quality and diagnostic performance of accelerated shoulder MRI with deep learning-based reconstruction[J]. AJR Am J Roentgenol, 2022, 218(3): 506-516. DOI: 10.2214/AJR.21.26577">10.2214/AJR.21.26577">10.2214/AJR.21.26577.
[15]
KOCH K M, SHERAFATI M, ARPINAR V E, et al. Analysis and evaluation of a deep learning reconstruction approach with denoising for orthopedic MRI[J/OL]. Radiol Artif Intell, 2021, 3(6): e200278 [2023-02-11]. https://www.ncbi.nlm.nih.gov/pmc/articles/PMC8637471/. DOI: 10.1148/ryai.2021200278">10.1148/ryai.2021200278">10.1148/ryai.2021200278.
[16]
SUN S, TAN E T, MINTZ D N, et al. Evaluation of deep learning reconstructed high-resolution 3D lumbar spine MRI[J]. Eur Radiol, 2022, 32(9): 6167-6177. DOI: 10.1007/s00330-022-08708-4">10.1007/s00330-022-08708-4">10.1007/s00330-022-08708-4.
[17]
YASAKA K, TANISHIMA T, OHTAKE Y, et al. Deep learning reconstruction for 1.5 T cervical spine MRI: effect on interobserver agreement in the evaluation of degenerative changes[J]. Eur Radiol, 2022, 32(9): 6118-6125. DOI: 10.1007/s00330-022-08729-z">10.1007/s00330-022-08729-z">10.1007/s00330-022-08729-z.
[18]
ALMANSOUR H, HERRMANN J, GASSENMAIER S, et al. Deep learning reconstruction for accelerated spine MRI: prospective analysis of interchangeability[J/OL]. Radiology, 2023, 306(3): e212922 [2023-02-11]. https://pubs.rsna.org/doi/10.1148/radiol.212922?url_ver=Z39.88-2003&rfr_id=ori:rid:crossref.org&rfr_dat=cr_pub%20%200pubmed. DOI: 10.1148/radiol.212922">10.1148/radiol.212922">10.1148/radiol.212922.
[19]
PARK J C, PARK K J, PARK M Y, et al. Fast T2-weighted imaging with deep learning-based reconstruction: evaluation of image quality and diagnostic performance in patients undergoing radical prostatectomy[J]. J Magn Reson Imaging, 2022, 55(6): 1735-1744. DOI: 10.1002/jmri.27992">10.1002/jmri.27992">10.1002/jmri.27992.
[20]
UEDA T, OHNO Y, YAMAMOTO K, et al. Deep learning reconstruction of diffusion-weighted MRI improves image quality for prostatic imaging[J]. Radiology, 2022, 303(2): 373-381. DOI: 10.1148/radiol.204097">10.1148/radiol.204097">10.1148/radiol.204097.
[21]
MUSCOGIURI G, MARTINI C, GATTI M, et al. Feasibility of late gadolinium enhancement (LGE) in ischemic cardiomyopathy using 2D-multisegment LGE combined with artificial intelligence reconstruction deep learning noise reduction algorithm[J]. Int J Cardiol, 2021, 343: 164-170. DOI: 10.1016/j.ijcard.2021.09.012">10.1016/j.ijcard.2021.09.012">10.1016/j.ijcard.2021.09.012.
[22]
VAN DER VELDE N, HASSING H C, BAKKER B J, et al. Improvement of late gadolinium enhancement image quality using a deep learning-based reconstruction algorithm and its influence on myocardial scar quantification[J]. Eur Radiol, 2021, 31(6): 3846-3855. DOI: 10.1007/s00330-020-07461-w">10.1007/s00330-020-07461-w">10.1007/s00330-020-07461-w.
[23]
DELSO G, GARCÍA-POLO P, GORODEZKY M, et al. Improved myocardial T1 mapping accuracy with deep learning reconstruction of low flip angle MOLLI series[C/OL]. ISMRM, 2022 [2023-02-11]. https://archive.ismrm.org/2022/4779.html.

上一篇 周围神经MRI检查中国专家共识
下一篇 深度学习重建在改善磁共振神经黑色素图像质量中的价值研究
  
诚聘英才 | 广告合作 | 免责声明 | 版权声明
联系电话:010-67113815
京ICP备19028836号-2