分享:
分享到微信朋友圈
X
综述
机器学习基于MRI预测乳腺癌对新辅助化疗反应的研究进展
陈志庚 李响 沙琳

Cite this article as: Chen ZG, Li X, Sha L. Research progress of machine learning for predicting breast cancer response to neoadjuvant chemotherapy based on MRI[J]. Chin J Magn Reson Imaging, 2021, 12(12): 102-104.本文引用格式:陈志庚, 李响, 沙琳. 机器学习基于MRI预测乳腺癌对新辅助化疗反应的研究进展[J]. 磁共振成像, 2021, 12(12): 102-104. DOI:10.12015/issn.1674-8034.2021.12.024.


[摘要] 新辅助化疗(neoadjuvant chemotherapy,NAC)是乳腺癌治疗方案中的重要组成部分。乳腺癌经NAC后会出现不同程度的缓解,准确的疗效预估手段有助于治疗方案的调整和术式的选择,能够使患者最大限度地受益。机器学习(machine learning,ML)可以提取MR图像的高通量信息反映肿瘤的异质性,在NAC早期甚至是治疗前预测肿瘤的反应。本文就ML结合乳腺MRI预判NAC疗效的研究进展予以综述。
[Abstract] Neoadjuvant chemotherapy (NAC) is the essential component of breast cancer treatment plan. Breast cancer will show varying degrees of remission after NAC. An accurate method of efficacy prognosis can help in the adjustment of treatment plan and the selection of surgical modality that can benefit patients to the maximum extent. Machine learning (ML) can extract high-throughput information from MR images to reflect tumor heterogeneity and predict tumor response early in NAC or even before therapy. This article reviews the progress of research on ML combined with breast MRI to predict the efficacy of NAC.
[关键词] 机器学习;磁共振成像;乳腺癌;新辅助化疗
[Keywords] machine learning;magnetic resonance imaging;breast cancer;neoadjuvant chemotherapy

陈志庚    李响 *   沙琳 *  

大连医科大学附属第二医院放射科,大连 116027

李响,E-mail:lixiang_5007@163.com 沙琳,E-mail:drshalin@163.com

全体作者均声明无利益冲突。


收稿日期:2021-07-02
接受日期:2021-09-08
DOI: 10.12015/issn.1674-8034.2021.12.024
本文引用格式:陈志庚, 李响, 沙琳. 机器学习基于MRI预测乳腺癌对新辅助化疗反应的研究进展[J]. 磁共振成像, 2021, 12(12): 102-104. DOI:10.12015/issn.1674-8034.2021.12.024.

       新辅助化疗(neoadjuvant chemotherapy,NAC)是绝大多数乳腺癌,尤其是局部晚期乳腺癌的标准治疗方法[1, 2],其旨在降低肿瘤分期,减少手术干预程度。虽然多数患者可以从中受益,但是全世界范围内仅12%~28%达到病理完全缓解(pathologic complete response,pCR)[3],另有10%~35%对NAC不敏感以及5%左右出现病灶进展[4]。乳腺癌的反应可分为六种,即pCR、单病灶缩小、单病灶伴卫星灶残留、多病灶残留、病灶稳定以及病灶进展[5, 6]。在手术方案的制订中,对pCR和单病灶缩小倾向于采取保乳手术,余者更倾向于乳房切除术。

       目前NAC疗效评估的金标准是病理活检。Miller-Payne (MP)分级是基于病理活检的临床评估方法,其根据镜下肿瘤细胞的密度和形态划分G1~G5。实体瘤的疗效评估(RECIST 1.1)是基于影像学检查的评价方法。MRI能够将肿瘤内部信息可视化后用于分析,在乳腺癌的良恶性鉴别、分级和NAC反应评估等方面得到普遍应用[7, 8]。有别于传统影像诊断,机器学习(machine learning,ML)能够提取医学图像中肉眼无法识别的信息并转换为定量特征,筛选其中与肿瘤异质性高度相关者用于预测或分类。本文就ML基于不同MR序列预测NAC后乳腺癌的反应进行综述。

1 机器学习介绍

       ML是统计学和计算机科学的交叉学科,专注于对数据进行学习归纳并不断自我完善,常用于处理预测和分类的问题。按学习方式分为监督学习、无监督学习、半监督学习和强化学习。监督学习是一类基于已标记的训练样本进行学习进而推测未知样本的算法,而无监督学习所采用的训练样本无需标记[9]。半监督学习介于二者之间,是一种兼具低成本和准确性的方法[10]。强化学习与无监督学习相似,但是引入了奖惩函数,以奖励信号函数值达到最大为目标[11]。影像组学(radiomics)主要流程为:(1)获取医学图像;(2)勾画感兴趣区(region of interest,ROI);(3)提取影像特征;(4)特征降维;(5)建立模型。ML已涉及其中(2)~(5)。相关研究常以监督学习方法建立预测模型,常用算法有支持向量机(support vector machine,SVM)、随机森林(random forest,RF)、逻辑回归(Logistic regression)等。

2 机器学习预测模型

2.1 动态对比增强磁共振成像

       动态对比增强磁共振成像(dynamic contrast-enhanced magnetic resonance imaging,DCE-MRI)是乳腺MRI最灵敏的成像序列,该技术的原理是通过连续、快速地扫描获取对比剂注射前后多个时间点的图像。在以往研究中,NAC评估常用的MRI特征有肿瘤直径、体积和病灶增强等,但从现有证据来看,该特征并不足以作为pCR的早期预测因素[12]。直方图和纹理分析是基于统计建模对肿瘤异质性的定量分析,Bitencourt等[13]对DCE-MRI进行分析发现直方图特征的熵、第90百分位数、方差,纹理特征的区域长度方差与pCR密切相关,其预测效能优于包括肿瘤直径、增强类型在内的临床和MRI特征。DCE-MRI的血流动力学参数同样可以用于定量分析,容积转移参数(Ktrans)、速率参数(Kep)以及血管外细胞外容积分数(Ve)是早期预测肿瘤反应的良好特征[14]。但是Braman等[15]研究认为与影像特征相比,血流动力学参数并非高度相关特征。这表示影像特征可能更具备成为生物标志物的潜力。浸润性乳腺癌对周围组织具有侵犯性,其浸润范围与手术范围密切相关,因此肿瘤周围区域同样需要深入分析。Braman等[15]提取肿瘤周围区域特征用于分析,其结果证明肿瘤周围区域的直方图特征和纹理特征可用于预测模型,但是不同乳腺癌亚型的最佳预测特征存在差异。NAC方案通常需要6到8个周期,期间肿瘤异质性的变化是值得深入探讨的。治疗前的图像通常称之为基线图像,Fan等[16]选取基线与两个治疗周期后图像通过配准形成雅可比图以反映图像体素变化,该模型基于此三类图像进行特征提取,其分析结果显示反映肿瘤异质性的直方图特征(例如平均值)和纹理特征(例如太依赖高灰度强调)的变化可用于早期预测,NAC应答组的降低程度高于无应答组。Sutton等[17]表明基线和NAC后不同增强时间点的图像纹理特征的变化同样具有预测价值。该特征变化由生长分割混合高斯模型计算图像间体素差异而得。研究中所用的Gabor滤波器对图像边缘敏感,可以细致地获取纹理的变化,此类特征属于高阶特征。但是Gabor变换对突变信号和非平稳信号处理能力不足,而小波变换可以弥补该缺点。小波变换是对空间频率的局部化分析,可有效地提取图像中的高频和低频信号,更加细致、全面地分析纹理变化[18]。从Zhou等[19]的研究可知小波变换纹理特征对预测pCR有良好的表现,并且优于体积纹理特征和周边纹理特征。另有学者将关注点对准了高斯拉普拉斯(Laplacian of Gaussion,LoG),这是图像二阶空间导数的二维各向同性测度,用于突出图像中强度发生快速变化的区域[20]。Choudhery等[21]提取三阴性乳腺癌的3D形状特征和纹理特征用于分析,发现基于LoG滤波器的信号强度平均值、信号强度中位数、最大信号强化、最小信号强度和信号强度标准差可用于预测pCR。上述特征类别不尽相同,所用滤波器和特征计算方法也存在差异,能够更可信地解释肿瘤间差异化缓解的关键特征可能尚待发掘。因此,特征的优劣对比及对更多高阶特征的尝试值得深入探索。

2.2 弥散加权成像

       弥散加权成像(diffusion-weighted imaging,DWI)是基于组织内水分子弥散运动的成像手段,表观弥散系数(apparent diffusion coefficient,ADC)是其量化指标。DWI和ADC可以反映水分子的弥散率、肿瘤细胞密度和细胞膜完整性,用于预测NAC反应[22]。Chen等[23]对比了DCE-MRI和ADC图,结果表明基于ADC图的模型能够预测pCR,并且基于DCE-MRI和ADC图的联合模型表现更好,其所用四个影像特征中两个取自ADC图。由此可知,多模态序列中纳入DWI和ADC是一个值得考虑的选择。另外,研究认为基于逻辑回归的诺谟图具备定量预测pCR的潜能。Bian等[24]和Chen等[25]基于DWI、DCE-MRI、和T2WI高效地预测了pCR并肯定了诺谟图的作用,并且后者通过决策曲线分析(decision curve analysis,DCA)证实了诺谟图的有效性。上述研究大多致力于对pCR的预测,然而非pCR肿瘤的退缩模式是影响手术方式的重要因素,如能准确识别将有助于治疗方案制定和调整。Zhuang等[5]将pCR和单病灶缩小作为一组,其余非pCR退缩模式为另一组,基于多模态基线图进行预测,AUC可达0.826。目前早期预测研究一种聚焦于基线图像,另一种聚焦于治疗期间图像的变化。Eun等[26]选取基线和治疗中期(第3或4治疗周期)的多模态图像(DWI、ADC图、DCE-MRI和T2)进行纹理分析,经对比表明治疗中期的预测效能优于基线及治疗中期-基线。目前,多序列的结合较之单一序列效能更佳,但是最佳的序列组合尚无定论,后续可以对此做进一步的比对研究。

3 深度学习介绍与应用

       目前,ML正在向深度学习(deep learning,DL)方向发展。DL基本结构是输入层、隐含层和输出层,其中隐含层包括卷积层、池化层以及全连接层。卷积层负责提取图像特征,池化层则对特征进行筛选和信息过滤,得到的特征最后进入全连接层进行非线性组合得以输出。这是一种端到端的结构类型,即前端输入原始图像后末端直接输出结果,无需对特征进行预设定,可自行创建特征并进行学习,建立起从输入端到输出端的函数关系[27]。卷积神经网络(convolutional neural network,CNN)是DL的代表算法之一,该网络结构是对生物神经网络的模拟,在图像识别方面拥有其他算法不可比拟的作用[28]

       VGGNet (visual geometry group network)是CNN中常用的网络结构,常使用L2正则化(regularization)、增强(augmentation)、舍弃(dropout)防止数据过拟合。在一些研究中已经展现出比传统ML更高的效能。在Ha等[29]研究中将NAC后肿瘤的反应分为pCR、部分缓解和无缓解或进展三组,使用基线DCE-MRI实现了良好的预测效能。El Adoui等[30]进一步讨论了NAC前后DCE-MRI在CNN预测pCR中的差异。他们发现虽然使用基线与NAC后图像的组合模型的AUC最高,但是基线图像的AUC也达到0.7969,并且高于NAC后图像。此外,该研究显示选用未经分割的图像较人工分割肿瘤边界的图像效能更佳。这说明CNN足以应付复杂信息,人为裁剪图像可能反而减少与肿瘤异质性相关的数据,限制了CNN的能力。随着DL深度的增加可能会出现梯度消失和梯度爆炸,导致浅层参数未能得到充分训练。多通道CNN可以有效减少此类问题,使DL的浅层学习到更具区分性的特征。前文El Adoui等[30]以包含两个并行子通道的多通道CNN同时分析治疗前后的图像,Qu等[31]则扩展至12个并行子通道将治疗前后DCE-MRI的六个增强阶段图像纳入分析。后者表示NAC后图像的预测效能优于基线图像,不过采用治疗前后图像数据的组合模型表现仍是最优的,并且该研究通过DCA证实多通道CNN具有临床价值。目前乳腺癌CNN研究仍以DCE-MRI为主,而在结直肠癌中,除主要序列T2WI外,还对多种序列及其组合(DCE-MRI、ADC等)进行了探索并取得良好成效[32]。有鉴于此,多模态序列及新兴序列的CNN应用可作为后续研究的思路之一。

4 挑战与展望

       综上所述,直方图特征、纹理特征和高阶特征对NAC反应的预测作用已经得到证实,但是受限于开发人员的专业知识,传统ML设定的特征可能无法获取正常与异常间的复杂变化。DL则很好地弥补了这点,但是具有很高的敏感度的同时也存在较高的假阳性率。传统ML研究大部分采取人工勾画ROI,虽然这是金标准,但是需要大量的时间和人力成本,也存在主观因素的干扰。值得期待的是自动分割和半自动分割有望取代人工分割[33, 34, 35],不过仍需要更多的研究来进行论证。无论是传统ML还是DL,都需要大数据作为支撑才能发挥出应有的效果。虽然近年的研究中纳入的样本量正在逐渐增多,但是仍然需要进一步地扩大。机器型号或参数等都可能对预测模型产生影响,因此图像的预处理是极为重要的环节[36]。对预处理的具体步骤目前尚无统一的标准,在许多研究中往往也欠缺细致的说明。最后,现阶段的预测模型还停留在研究阶段,绝大多数是单一中心的回顾性研究,而且关于DL应用于预测乳腺癌NAC反应的研究的数量较之传统ML尚显不足。总而言之,ML强大的分析能力为乳腺癌诊疗技术的进步带来了希望,相信随着人工智能技术的进步,未来将开发出更精准、适用范围更广且更具临床价值的ML模型。

[1]
Gradishar WJ, Anderson BO, Balassanian R, et al. Breast cancer, version 4.2017, NCCN clinical practice guidelines in oncology[J]. J Natl Compr Canc Netw, 2018, 16(3): 310-320. DOI: 10.6004/jnccn.2018.0012.
[2]
邵志敏, 江泽飞, 李俊杰, 等.中国乳腺癌新辅助治疗专家共识(2019年版)[J].中国癌症杂志, 2019, 29(5): 390-400. DOI: 10.19401/j.cnki.1007-3639.2019.05.009.
Shao ZM, Jiang ZF, Li JJ, et al. Consensus of experts on neoadjuvant therapy for breast cancer in China (2019 version)[J]. Chin J Oncol, 2019, 29(5): 390-400. DOI: 10.19401/j.cnki.1007-3639.2019.05.009.
[3]
Matthews CM, Nymberg K, Berger M, et al. Pathological complete response rates with pertuzumab-based neoadjuvant chemotherapy in breast cancer: a single-center experience[J]. J Oncol Pharm Pract, 2020, 26(3): 572-579. DOI: 10.1177/1078155219857800.
[4]
Xiong QQ, Zhou XZ, Liu ZY, et al. Multiparametric MRI-based radiomics analysis for prediction of breast cancers insensitive to neoadjuvant chemotherapy[J]. Clin Transl Oncol, 2020, 22(1): 50-59. DOI: 10.1007/s12094-019-02109-8.
[5]
Zhuang XS, Chen C, Liu ZY, et al. Multiparametric MRI-based radiomics analysis for the prediction of breast tumor regression patterns after neoadjuvant chemotherapy[J]. Transl Oncol, 2020, 13(11): 100831. DOI: 10.1016/j.tranon.2020.100831.
[6]
Ling DC, Sutera PA, Iarrobino NA, et al. Is multifocal regression a risk factor for ipsilateral breast tumor recurrence in the modern era after neoadjuvant chemotherapy and breast conservation therapy?[J]. Int J Radiat Oncol Biol Phys, 2019, 104(4): 869-876. DOI: 10.1016/j.ijrobp.2019.03.012.
[7]
Park AR, Chae EY, Cha JH, et al. Preoperative breast mri in women 35 years of age and younger with breast cancer: benefits in surgical outcomes by using propensity score analysis[J]. Radiology, 2021, 300(1): 39-45. DOI: 10.1148/radiol.2021204124.
[8]
Morrow M, Waters J, Morris E. MRI for breast cancer screening, diagnosis, and treatment[J]. Lancet, 2011, 378(9805): 1804-1811. DOI: 10.1016/S0140-6736(11)61350-0.
[9]
Deo RC. Machine learning in medicine[J]. Circulation, 2015, 132(20): 1920-1930. DOI: 10.1161/CIRCULATIONAHA.115.001593.
[10]
Gao YH, Liu B, Zhu Y, et al. Detection and recognition of ultrasound breast nodules based on semi-supervised deep learning: a powerful alternative strategy[J]. Quant Imaging Med Surg, 2021, 11(6): 2265-2278. DOI: 10.21037/qims-20-12b.
[11]
Ardulov V, Martinez VR, Somandepalli K, et al. Robust diagnostic classification via Q-learning[J]. Sci Rep, 2021, 11(1): 11730. DOI: 10.1038/s41598-021-90000-4.
[12]
Abramson RG, Li X, Hoyt TL, et al. Early assessment of breast cancer response to neoadjuvant chemotherapy by semi-quantitative analysis of high-temporal resolution DCE-MRI: preliminary results[J]. Magn Reson Imaging, 2013, 31(9): 1457-1464. DOI: 10.1016/j.mri.2013.07.002.
[13]
Bitencourt A, Gibbs P, Rossi Saccarelli C, et al. MRI-based machine learning radiomics can predict HER2 expression level and pathologic response after neoadjuvant therapy in HER2 overexpressing breast cancer[J]. EBioMedicine, 2020, 61:103042. DOI: 10.1016/j.ebiom.2020.103042.
[14]
侯唯姝,钱银锋,李小虎,等. 动态增强MRI预测乳腺癌新辅助化疗效果的研究[J]. 安徽医科大学学报, 2020, 55(9): 1446-1451. DOI: 10.19405/j.cnki.issn1000-1492.2020.09.025.
Hou WS, Qian YF, Li XH. Research of dynamic contrast-enhanced MRI in predicting response of breast[J]. Acta Universitatis Medicinalis Anhui, 2020, 55(9): 1446-1451. DOI: 10.19405/j.cnki.issn1000-1492.2020.09.025.
[15]
Braman NM, Etesami M, Prasanna P, et al. Intratumoral and peritumoral radiomics for the pretreatment prediction of pathological complete response to neoadjuvant chemotherapy based on breast DCE-MRI[J]. Breast Cancer Res, 2017, 19(1): 57. DOI: 10.1186/s13058-017-0846-1.
[16]
Fan M, Chen H, You C, et al. Radiomics of tumor heterogeneity in longitudinal dynamic contrast-enhanced magnetic resonance imaging for predicting response to neoadjuvant chemotherapy in breast cancer [J]. Front Mol Biosci, 2021, 8: 622219. DOI: 10.3389/fmolb.2021.622219.
[17]
Sutton EJ, Onishi N, Fehr DA, et al. A machine learning model that classifies breast cancer pathologic complete response on MRI post-neoadjuvant chemotherapy[J]. Breast Cancer Res, 2020, 22(6): 1416-1424. DOI: 10.1186/s13058-020-01291-w.
[18]
Chaddad A, Daniel P, Niazi T. Radiomics evaluation of histological heterogeneity using multiscale textures derived from 3D wavelet transformation of multispectral images[J]. Front Oncol, 2018, 8:96. DOI: 10.3389/fonc.2018.00096.
[19]
Zhou JL, Lu JH, Gao C, et al. Predicting the response to neoadjuvant chemotherapy for breast cancer: wavelet transforming radiomics in MRI[J]. BMC Cancer, 2020, 20(1): 100. DOI: 10.1186/s12885-020-6523-2.
[20]
Qiu XQ, Chen Z, Adan S, et al. An improved MR image denoising via low-rank approximation and Laplacian-of-Gaussian edge detector[J]. IET Image Process, 2020, 14(12): 2791-2798. DOI: 10.1049/iet-ipr.2019.1648.
[21]
Choudhery S, Gomez-Cardona D, Favazza CP, et al. MRI radiomics for assessment of molecular subtype, pathological complete response, and residual cancer burden in breast cancer patients treated with neoadjuvant chemotherapy[J]. Acad Radiol, 2020, S1076-6332(20)30607-3. DOI: 10.1016/j.acra.2020.10.020.
[22]
Liu SG, Ren RM, Chen ZQ, et al. Diffusion-weighted imaging in assessing pathological response of tumor in breast cancer subtype to neoadjuvant chemotherapy[J]. J Magn Reson Imaging, 2015, 42(3): 779-787. DOI: 10.1002/jmri.24843.
[23]
Chen XG, Chen XF, Yang JD, et al. Combining dynamic contrast-enhanced magnetic resonance imaging and apparent diffusion coefficient maps for a radiomics nomogram to predict pathological complete response to neoadjuvant chemotherapy in breast cancer patients[J]. J Comput Assist Tomogr, 2020, 44(2): 275-283. DOI: 10.1097/RCT.0000000000000978.
[24]
Bian TT, Wu ZJ, Lin Q, et al. Radiomic signatures derived from multiparametric MRI for the pretreatment prediction of response to neoadjuvant chemotherapy in breast cancer[J]. Br J Radiol, 2020, 93(1115): 20200287. DOI: 10.1259/bjr.20200287.
[25]
Chen SJ, Shu ZY, Li YF, et al. Machine learning-based radiomics nomogram using magnetic resonance images for prediction of neoadjuvant chemotherapy efficacy in breast cancer patients[J]. Front Oncol, 2020, 10: 1410. DOI: 10.3389/fonc.2020.01410.
[26]
Eun NL, Kang D, Son EJ, et al. Texture analysis with 3.0-T MRI for association of response to neoadjuvant chemotherapy in breast cancer[J]. Radiology, 2020, 294(1): 31-41. DOI: 10.1148/radiol.2019182718.
[27]
Duggento A, Conti A, Mauriello A, et al. Deep computational pathology in breast cancer[J]. Semin Cancer Biol, 2021, 72: 226-237. DOI: 10.1016/j.semcancer.2020.08.006.
[28]
Esteva A, Robicquet A, Ramsundar B, et al. A guide to deep learning in healthcare[J]. Nat Med, 2019, 25(1): 24-29. DOI: 10.1038/s41591-018-0316-z.
[29]
Ha R, Chin C, Karcich J, et al. Prior to initiation of chemotherapy, can we predict breast tumor response? Deep learning convolutional neural networks approach using a breast MRI tumor dataset[J]. J Digit Imaging, 2019, 32(5): 693-701. DOI: 10.1007/s10278-018-0144-1.
[30]
El Adoui M, Drisis S, Benjelloun M. Multi-input deep learning architecture for predicting breast tumor response to chemotherapy using quantitative MR images[J]. Int J Comput Assist Radiol Surg, 2020, 15(9): 1491-1500. DOI: 10.1007/s11548-020-02209-9.
[31]
Qu YH, Zhu HT, Cao K, et al. Prediction of pathological complete response to neoadjuvant chemotherapy in breast cancer using a deep learning (DL) method[J]. Thorac Cancer, 2020, 11(3): 651-658. DOI: 10.1111/1759-7714.13309.
[32]
张可可,许永生,高雅,等. 基于深度学习的影像组学在结直肠癌中的研究进展[J]. 磁共振成像,2021,12(3):112-115. DOI: 10.12015/issn.1674-8034.2021.03.028.
Zhang KK, Xu YS, Gao Y, et al. Advances in application of radiomics in colorectal cancer[J]. Chin J Magn Reson Imag, 2021, 12(3): 112-115. DOI: 10.12015/issn.1674-8034.2021.03.028.
[33]
Santucci D, Faiella E, Cordelli E, et al. 3T MRI-radiomic approach to predict for lymph node status in breast cancer patients[J]. Cancers, 2021, 13(9): 2228. DOI: 10.3390/cancers13092228.
[34]
Veeraraghavan H, Dashevsky BZ, Onishi N, et al. Appearance constrained semi-automatic segmentation from DCE-MRI is reproducible and feasible for breast cancer radiomics: a feasibility study[J]. Sci Rep, 2018, 8(1): 4838. DOI: 10.1038/s41598-018-22980-9.
[35]
Doran SJ, Hipwell JH, Denholm R, et al. Breast MRI segmentation for density estimation: do different methods give the same results and how much do differences matter?[J]. Med Phys, 2017, 44(9): 4573-4592. DOI: 10.1002/mp.12320.
[36]
Gillies RJ, Kinahan PE, Hricak H. Radiomics: images are more than pictures, they are data[J]. Radiology, 2016, 278(2): 563-577. DOI: 10.1148/radiol.2015151169.

上一篇 MRI预测高级别胶质瘤术后复发模式的研究进展
下一篇 影像组学在肝细胞癌诊疗中的研究进展
  
诚聘英才 | 广告合作 | 免责声明 | 版权声明
联系电话:010-67113815
京ICP备19028836号-2