基于深度学习的人工智能技术在乳腺MRI中的应用研究进展 | ![]() |
乳腺癌在全球女性癌症中的发病率最高,且发病率呈逐年上升趋势。MRI因具有软组织分辨力更高、无电离辐射、多参数及多功能成像等优势,是乳腺检查的重要技术手段。乳腺MRI常用扫描序包括横轴位T2WI、横轴位T1WI、DWI、增强扫描前横轴位脂肪抑制T1WI、动态对比增强成像(dynamic contrast-enhanced MRI,DEC-MRI)等,其中DEC-MRI不仅可显示肿瘤强化的形态特征,还可进行后处理获得病变强化特征的TIC及血管重建MIP,提高了乳腺疾病的诊断准确率,还可用于乳腺癌高危女性的筛查、术前分期和治疗监控等[1]。然而,各医院乳腺MRI扫描设备及参数不同,MRI图像数量多、读片时间长,经验丰富的MRI诊断医师相对缺乏,增大了临床医师的工作负荷及诊断错误率。
深度学习通过从低级的边缘特征,到形状及目标部分,再到高级的整体部分,一层层将特征抽象出来。通过特征的多层级和相关的影像表达,自动提取相关的特征,有望实现MRI图像的自动分析[2-4]。其中,深度学习根据是否需要标签数据,分为有监督学习和无监督学习。有监督学习是专家先标记处理相关数据集,再用这些显式数据集进行模型训练得到预测模型,因此通常可得到较好的训练结果,但需经验丰富的专家耗费大量时间及精力去标注数据,这也是有监督学习的一大缺陷;无监督学习仅根据训练数据的特征分析将样本最佳地分为不同的类别而无需使用标签,因此无需专家标记,此类算法通常可利用大量数据的特征进行学习。目前,基于深度学习的人工智能技术在乳腺MRI中的应用主要集中在病灶分割、诊断及预测3个方面,下面将从这3个方面进行综述。
1 病灶分割计算机辅助诊断(computer assisted diagnosis,CAD)技术对MRI的病变分割至关重要。然而乳腺病变分割技术存在2个主要的问题:①需手动描绘ROI作为标记图像;②需大量的标记图像用于模型构建和参数学习。目前,应用Sun等[5]提出的从乳腺MRI图像中提取肿瘤的图像分割框架,可成功解决乳腺病变分割的主要技术问题。但在实际临床或实验环境中,难以获得足够标记的MRI图像,暂时无法形成数量可观的数据集。
乳腺MRI的各种CAD需对乳腺病灶和纤维腺体组织进行自动分割。传统的图像分析和计算机视觉技术,如模板匹配、边缘和表面检测等,其适用性常受研究数据集中所使用的图像特征限制,且乳腺MRI图像不仅随乳腺形状变化,还随不同MRI扫描方案变化,这些不足使得利用传统方法对乳腺病灶和纤维腺体组织进行分割较困难。2017年Dalm等[6]通过深度学习技术对乳腺病灶和纤维腺组织进行MRI体积分割,设计了“U-net”的深度学习算法,此方法明显优于现有算法,对乳腺密度计算更精确。2019年Zhang等[7]使用深度学习的全卷积残差神经网络U-Net架构,用于在乳腺MRI中的纤维腺组织的分割,并在独立的数据集中进行测试,该方法分割精度良好,且无需后期处理校对。随着进一步完善和验证,这种基于深度学习的分割方法可提供一种准确有效的手段量化纤维腺组织体积,以评估乳腺密度。
乳腺MRI具有准确测量纤维腺体组织体积的潜力,可评估乳腺密度[8-11]。对乳腺密度评估及病变定位,计算机辅助MRI评估需准确地将乳腺与身体其他组织区域分开,若背景噪声较低,则可通过乳腺边缘空气信号强度的急剧改变轻松识别乳腺-空气边界[12-14]。然而,由于线圈相关的强度不均匀性假象和部分体积问题[15],使乳腺边界的检测较困难。2016年Ertas等[16]发布了一种适用于乳腺MRI的分割方法,用于支持CAD技术对乳腺组织分析、密度评估和病变定位,成功解决了上述问题。
DCE-MRI是乳腺MRI最基础的检查序列,不仅可提供病灶的形态学特征,如形状、大小,还能提供病灶的动力学参数和血管情况,如病灶强化程度、动态曲线类型、强化达峰时间及对比剂是否廓清,这些能够更准确检测及诊断病灶[17-18]。但由于恶性肿瘤组织存在明显的异质性,增强的动力学模式在肿瘤的不同部位可能是不同的[19],因此需行图像后处理,将不同部分病变单独行三维重建,分析时间空间特征,进行病变诊断。Yin等[20]提出的一种基于张量代数的新方法,利用高阶奇异值分解,获得DCE-MRI一系列图像相关多维数据结构,再通过多通道重建方法对病变行三维重建,重建出的病变边界清晰连续。该方法不仅去除病变部位的强度不均分布,还抑制了背景脂肪的信号,增加了肿瘤与背景实质的对比,提高了病变检测及诊断效果。
2 病灶诊断通过对乳腺MRI病变的形态、动力学等特征分析,以及结合人工智能的辅助,放射科医师可提高对乳腺良恶性病变及恶性肿瘤分型的诊断准确性。2020年Jiang等[21]研究发现人工智能与DCE-MRI相结合能提高放射科医师对乳腺病变良恶性的鉴别诊断水平。2018年Daniel比较了放射分析法、卷积神经网络(convolutional neural networks,CNN)算法、放射科医师利用多参数乳腺MRI对良恶性病灶的诊断情况[22],其中放射分析法的AUC为0.80,而CNN算法经过训练之后的AUC从0.83提升至0.88,但两者的AUC均低于放射科医师(0.98);可见,即使在有限的训练数据集下,CNN在多参数乳腺MRI成像病变分类方面还是优于放射分析法算法,虽然CNN诊断结果不如乳腺放射科医师,但通过增加更丰富、更标准的训练数据集及测试集,CNN算法在乳腺MRI方面的诊断具有很高的潜力。
目前,小数据集、计算时间和图像处理的时间较长等因素阻碍了深度学习方法在放射医学CAD中的应用。2017年Antropova等[23]提出了通过利用预先训练的CNN和现有传统的计算机辅助诊断特征来解决深度学习方法在放射医学中CAD的效率问题。这种新颖的乳腺癌CAD方法,与现有的方法相比,可更加高效地描述乳腺病变,且图像无需预处理。在根据乳腺病灶大小、密度、边界、形态等一般影像学特征诊断基础上,Yang等[24]建议将背景实质增强特征整合到决策过程中,使用DCE-MRI研究应用新的定量图像分析方法提高乳腺癌诊断性能的可行性;所提出的定量背景实质增强特征为DCE-MRI中乳腺肿瘤的动力学特征提供了有价值的补充信息加入的计算机辅助诊断方法可提高基于DCE-MRI检查对乳腺疾病的诊断水平。DWI模型拟合的直方图特性是提示病理分类的有价值特征,通过机器深度学习可潜在地改进分类。Vidi等[25]研究发现,支持向量机使用扩散模型组合的特征,提高了对良性与恶性乳腺肿瘤分化的预测准确性,有助于乳腺癌的亚型分析。
3 病灶预测随着个体化、精准医学的日益普及,肿瘤生物标志物在指导临床治疗中发挥着越来越重要的作用[26]。美国临床肿瘤学会指南指出,生物标志物结果可提示诊断和预后,监测乳腺癌复发或进展[27]。人工智能在乳腺MRI中的预测主要集中于对乳腺癌亚型及Ki-67标记值与肿瘤特征之间联系的研究。
Ki-67是乳腺癌一个有价值的预后指标[28],也是化疗评估的重要指标,而基于Ki-67的术前内分泌预后指数是复发风险的具有可行性的预测指标。Dowsett等[29]的研究表明,通过测量接受短期内分泌治疗患者的Ki-67,可提高对肿瘤无复发生存期的预测性能。然而,由于肿瘤异质性表达,传统侵入性检测方法(即活检样本)的准确性受到抽样误差的影响。而Liang等[30]研究表明,乳腺癌基于MRI的放射组学与Ki-67之间存在相关性。
乳腺癌具有高度异质性,不同乳腺癌亚型的临床生物学、病理学特性和治疗反应性均不同[31]。按照第13届St. Gallen国际乳腺癌会议制定的分子分型,将乳腺癌分为4个亚型:Luminal A型、Luminal B型、HER-2型和三阴性型[32],亚型分型为临床治疗选择提供了依据[33]。近几年,学者们试图将从MRI中提取的肿瘤特征与乳腺癌的分子亚型联系起来[34-35],许多研究分析了定性和半定量MRI特征与分子亚型或三阴性乳腺癌之间的关系[36-38]。Koo等[39]发现DCE-MRI灌注参数[容量转移常数(Ktrans)、血管外细胞外间隙容积比(Ve)和速率常数(Kep)]与预后因素及乳腺癌的三阴性亚型相关。Grimm等[40]计算了半自动提取的成像特征,以确定定量MRI特征与乳腺癌亚型之间的关系,结果显示2种动态成像特征与乳腺癌Luminal A型和B型之间存在中度相关性。Fan等[41]首次使用三维容积成像特征对乳腺癌的4种不同的分子亚型进行分类,探讨从DCE-MRI中提取的特征与临床信息在乳腺癌分子亚型预测中的应用。
大量研究表明,人工智能尤其是深度学习技术的快速发展,对提高乳腺MRI的诊断性能并扩大其临床应用有重要作用。目前,人工智能在乳腺MRI的病变分割、检测及病灶预测等方面均得到应用。利用人工智能对乳腺MRI进行研究可辅助临床医师进行诊断,提升其工作效率。但人工智能应用仍有很多问题:①模型的普适性、稳定性、可重复性等仍需更大规模的数据进行验证,特别是不同扫描设备、不同序列及参数等数据的应用;②深度学习乳腺MRI的模型尚未完善,人工智能在乳腺MRI的研究多集中在发现病灶及判断良恶性方面,对于预测乳腺癌分子分型及淋巴结转移的研究较少,且样本量较小。③相关人工智能软件的临床应用,需更加规范化的开发及使用环境。但总体上,近年来人工智能的研究越来越完善,尤其随着精准医疗的发展,人工智能将更好地应用于乳腺MRI的疾病检测、诊断、治疗和风险评估等,更好地辅助临床制订个性化诊疗方案。
[1] |
ZHANG Y W, LOU M W, WANG F J, et al. The application of DCE-MRI in diagnosing breast cancer[J]. Chinese-German J Clin Oncol, 2012, 11(8): 440-444. DOI:10.1007/s10330-012-1010-0 |
[2] |
BLUEMKE DAVID A. Radiology in 2018:are you working with AI or being replaced by AI?[J]. Radiology, 2018, 287(2): 365-366. DOI:10.1148/radiol.2018184007 |
[3] |
ERICKSON, BRADLEY J. Machine learning: discovering the future of medical imaging[J]. J Digit Imaging, 2017, 30(4): 391. DOI:10.1007/s10278-017-9994-1 |
[4] |
MENDELSON E B. Artificial intelligence in breast imaging: potentials and limitations[J]. AJR Am J Roentgenol, 2018, 212(2): 1-7. |
[5] |
SUN L, HE J, YIN X, et al. An image segmentation framework for extracting tumors from breast magnetic resonance images[J]. J Innov Opt Heal Sci, 2018, 11(4): 1850014. DOI:10.1142/S1793545818500141 |
[6] |
DALM M U, LITJENS G, HOLLAND K, et al. Using deep learning to segment breast and fibroglandular tissue in MRI volumes[J]. Med Phys, 2017, 44(2): 533-546. DOI:10.1002/mp.12079 |
[7] |
ZHANG Y, CHEN J H, CHANG K T, et al. Automatic breast and fibroglandular tissue segmentation in breast MRI using deep learning by a fully-convolutional residual neural network U-Net[J]. Acad Radiol, 2019, 26(11): 1526-1535. DOI:10.1016/j.acra.2019.01.012 |
[8] |
WARNER E, CAUSER P A. MRI surveillance for hereditary breast-cancer risk[J]. Lancet, 2005, 365(9473): 1747-1749. DOI:10.1016/S0140-6736(05)66520-8 |
[9] |
BOSTON R C, SCHNALL M D, ENGLANDER S A, et al. Estimation of the content of fat and parenchyma in breast tissue using MRI T1 histograms and phantoms[J]. Magn Reson Imaging, 2005, 23(4): 591-599. DOI:10.1016/j.mri.2005.02.006 |
[10] |
牛兆河, 徐凤磊, 王海波, 等. 磁共振成像与阿基米德法测量乳房体积在即刻假体乳房再造中的效果比较[J]. 中华医学美学美容杂志, 2015, 21(3): 142-145. |
[11] |
THOMPSON D J, LEACH M O, KWAN-LIM G, et al. Assessing the usefulness of a novel MRI-based breast density estimation algorithm in a cohort of women at high genetic risk of breast cancer: the UK MARIBS study[J]. Breast Cancer Res, 2009, 11(6): 80. DOI:10.1186/bcr2447 |
[12] |
ERTAS G, GULCUR H O, TUNACI M, et al. A preliminary study on computerized lesionlocalization in MR mammography using 3D nMITR maps, multilayer cellular neural net-works, and fuzzy c-partitioning[J]. Med Phys, 2008, 35(1): 195. |
[13] |
COUDERC J P. The telemetric and holter ECG warehouse initiative (THEW): a data repository for the design, implementation and validation of ECG-related technologies[J]. Conf Proc IEEE Eng Med Biol Soc, 2010(10): 6252-6255. |
[14] |
KOENIG M, KOHLE S, PEITGEN H O. Automatic cropping of breast regions for registration in MR mammography[C/OL]//Proc. SPIE 5747, Medical Imaging 2005: Image Processing. San Diego: International Society for Optics and Photonics, 2005: 1563-1570. 2005-04-29[2021-04-08]. https://doi.org/10.1117/12.594522.
|
[15] |
YAO J, ZUJEWSKI J A, ORZANO J, et al. Classification and calculation of breast fibroglandular tissue volume on SPGR fat suppressed MRI[C/OL]//Proc. SPIE 5747, Medical Imaging 2005: Image Processing. San Diego: International Society for Optics and Photonics, 2005: 1942-1949. 2005-04-29[2021-04-08]. https://doi.org/10.1117/12.594671.
|
[16] |
ERTAS G, DORAN S J, LEACH M O. A computerized volumetric segmentation method applicable to multi-centre MRI data to support computer-AI ded breast tissue analysis, density assessment and lesion localization[J]. Med Biol Eng Comput, 2017, 55(1): 57-68. DOI:10.1007/s11517-016-1484-y |
[17] |
于京艳. MRI形态学分析及定量动态增强对乳腺良性病变与乳腺癌诊断及鉴别诊断的应用研究[D]. 辽宁: 大连医科大学, 2016.
|
[18] |
张晓鹏, 李洁, 孙应实, 等. 动态增强磁共振成像对乳腺癌新辅助化疗后病理反应性的术前评价[J]. 中国医学科学院学报, 2008, 30(1): 98-103. |
[19] |
KARATHANASIS E, CHAN L, KARUMBAIAH L, et al. Tumor vascular permeability to a nanoprobe correlates to tumor-specific expression levels of angiogenic markers[J]. PLoS One, 2009, 4(6): 5843. DOI:10.1371/journal.pone.0005843 |
[20] |
YIN X X, HADJILOUCAS S, CHEN J H, et al. Tensor based multichannel reconstruction for breast tumours identification from DCE-MRIs[J]. PLoS One, 2017, 12(3): 172111. |
[21] |
JIANG Y, EDWARDS A V, NEWSTEAD G M. Artificial intelligence applied to breast MRI for improved diagnosis[J]. Radiology, 2020, 298(1): 200292. |
[22] |
TRUHN D, SCHRADING S, HAARBURGER C, et al. Radiomic versus convolutional neural networks analysis for classification of contrast-enhancing lesions at multiparametric breast MRI[J]. Radiology, 2019, 290(2): 290-297. DOI:10.1148/radiol.2018181352 |
[23] |
ANTROPOVA N, HUYNH B Q, GIGER M L. A deep feature fusion methodology for breast cancer diagnosis demonstrated on three imaging modality datasets[J]. Med Phys, 2017, 44(10): 5162-5171. DOI:10.1002/mp.12453 |
[24] |
YANG Q, LI L, ZHANG J, et al. A new quantitative image analysis method for improving breast cancer diagnosis using DCE-MRI examinations[J]. Med Phys, 2015, 42(1): 103-109. |
[25] |
VIDI I, EGNELL L, JEROME N P, et al. Support vector machine for breast cancer classification using diffusion-weighted MRI histogram features: Preliminary study[J]. J Magn Reson Imaging, 2018, 47(5): 1205-1216. DOI:10.1002/jmri.25873 |
[26] |
韩晓红, 马丽, 石远凯. 肿瘤个体化治疗的现状和前景[J]. 中华检验医学杂志, 2011, 34(4): 293-299. |
[27] |
HAYES D. S1 American society of clinical oncology 2007 update of recommendations for the use of tumor markers in breast cancer[J]. EJC Supplements, 2007, 25(33): 5287-5312. |
[28] |
贾明. 细胞增殖标记物Ki-67在乳腺癌组织中的表达与预后分析[D]. 石家庄: 河北医科大学, 2011.
|
[29] |
DOWSETT M, SMITH I E, et al. Response: re: prognostic value of ki67 expression after short-term presurgical endocrine therapy for primary breast cancer[J]. JNCI, 2007, 99(13): 1053-1054. |
[30] |
LIANG C, CHENG Z, HUANG Y, et al. An MRI-based radiomics classifier for preoperative prediction of Ki-67 status in breast cancer[J]. Acad Radiol, 2018, S1076633218300187. |
[31] |
叶京明, 刘荫华. 2017年NCCN乳腺癌临床实践指南(第3版)更新与回顾[J]. 中华医学杂志, 2018, 98(18): 1377-1379. |
[32] |
GOLDHIRSEH A, WINER E P, COATES A S, et al. Personalizing the treatment of women with eady breast cancer: highlights of the St Gallen International Expert Consensus on the Primary Therapy of Early Breast Cancer 2013[J]. Ann Oncol, 2013, 24(9): 2206-2223. DOI:10.1093/annonc/mdt303 |
[33] |
CURIGLIANO G, BURSTEIN H J, WINER E P, et al. Reply to the St Gallen international expert consensus on the primary therapy of early breast cancer 2017:Te point of view of an international panel of experts in radiation oncology' by Kirova et al[J]. Ann Oncol, 2018, 29(1): 280-281. DOI:10.1093/annonc/mdx537 |
[34] |
YAMAMOTO S, MAKI D D, KORN R L, et al. Radiogenomic analysis of breast cancer using MRI: a preliminary study to define the landscape[J]. AJR Am J Roentgenol, 2012, 199(3): 654-663. DOI:10.2214/AJR.11.7824 |
[35] |
杨成. 乳腺癌DWI、DCE-MRI成像特征与分子亚型、预后因子相关性分析[D]. 南宁: 广西医科大学, 2018.
|
[36] |
YAMAGUCHI K, ABE H, NEWSTEAD G M, et al. Intratumoral heterogeneity of the distribution of kinetic parameters in breast cancer: comparison based on the molecular subtypes of invasive breast cancer[J]. Breast Cancer, 2015, 22(5): 496-502. DOI:10.1007/s12282-013-0512-0 |
[37] |
徐永立, 段小丽, 潘剑岩, 等. 宫颈癌诊断中动态增强MRI半定量参数与磁共振扩散加权成像ADC值的相关性研究[J]. 检验医学与临床, 2016, 13(22): 3180-3182, 3185. |
[38] |
COSTANTINI M, BELLI P, DISTEFANO D, et al. Magnetic resonance imaging features in triple-negative breast cancer: comparison with luminal and HER2-Overexpressing tumors[J]. Clin Breast Cancer, 2012, 12(5): 331-339. DOI:10.1016/j.clbc.2012.07.002 |
[39] |
KOO H R, CHO N, SONG I C, et al. Correlation of perfusion parameters on dynamic contrast-enhanced MRI with prognostic factors and subtypes of breast cancers[J]. J Magn Reson Imaging, 2012, 36(1): 145-151. DOI:10.1002/jmri.23635 |
[40] |
GRIMM L J, ZHANG J, MAZUROWSKI M A. Computational approach to radiogenomics of breast cancer: luminal A and luminal B molecular subtypes are associated with imaging features on routine breast MRI extracted using computer vision algorithms[J]. J Magn Reson Imaging, 2015, 42(4): 902-907. DOI:10.1002/jmri.24879 |
[41] |
FAN M, LI H, WANG S, et al. Radiomic analysis reveals DCEMRI features for prediction of molecular subtypes of breast cancer[J]. PLoS One, 2017, 12(2): 0171683. |