Skip to main content
Log in

Radiomics & Deep Learning: Quo vadis?

Radiomics and deep learning: quo vadis?

  • Fokus
  • Published:
Forum Aims and scope

Zusammenfassung

Der bevorstehende Umbruch der Medizin angesichts der jüngsten Erfolge künstlicher Intelligenz (KI) wurde vielfach beschrieben. Das häufigste Anwendungsfeld ist dabei die Krebsversorgung aufgrund ihrer immensen Komplexität und gesellschaftlichen Bedeutung. Doch welche konkreten Methoden stehen dahinter? Radiomics beschreibt einen systematischen Zugang zur Erforschung prädiktiver Muster auf Basis der Integration klinischer, molekularer, genetischer und bildgebender Parameter, und Deep Learning ist mittlerweile die mit Abstand führende Methode im Bereich der angewandten KI, die sich insbesondere für das Durchforsten komplexer Daten nach ebensolchen prädiktiven und deskriptiven Mustern eignet. Wir beschreiben die Hintergründe der rasanten Zunahme des wissenschaftlichen Interesses an diesen beiden Konzepten seitens der Krebsforschung, ihre Limitationen sowie mögliche Umsetzungsszenarien. Einschränkend ist festzustellen, dass die zugrunde liegenden Daten nicht standardisiert und vielerorts noch nicht integriert sind. Während die initialen Radiomics-Ansätze auf einer Reihe manuell definierter Bildmerkmale beruhten, erlaubt die Kombination mit Deep Learning eine verbesserte Robustheit gegenüber einer variablen Datenqualität und flexiblere Einsetzbarkeit. Insbesondere die detaillierte Analyse der Muster zeitlicher Veränderung, das sog. Delta Radiomics, verspricht eine erhöhte Spezifität bei der Vorhersage des Therapieansprechens. Bei all diesen Entwicklungen ist es wesentlich, die späteren Einsatzszenarien zu klären. Mitunter werden sich Rollen, Schnittstellen und Entscheidungswege verändern, zumal bereits absehbar ist, dass nicht alle der computergenerierten Ergebnisse noch für den Menschen nachvollziehbar sein werden. Konzertierte Anstrengungen werden notwendig sein, um die Potenziale der KI für die Krebsversorgung voll nutzbar zu machen.

Abstract

The imminent transformation of medical care in the face of the recent successes of artificial intelligence (AI) has often been described. The most common field of application is cancer treatment due to its immense complexity and social significance. But what are the concrete methods behind this? Radiomics describes a systematic approach to the exploration of predictive patterns based on the integration of clinical, molecular, genetic and imaging parameters and deep learning has become the leading method by far in the field of applied AI. It is particularly suitable for the identification of both predictive and descriptive patterns in highly complex data. This article describes the background to the rapid increase in scientific interest in these two concepts within the field of cancer research, their limitations and possible implementation scenarios. One restriction is that the underlying data are not standardized and in many places have not yet been integrated. While the initial radiomics approaches were based on a set of manually defined image features, the combination with deep learning enables improved robustness against a variable quality of data and more flexible applicability. In particular, the detailed analysis of patterns of temporal change, so-called delta radiomics, promises an increased specificity in the prediction of treatment response. For all these developments it is essential to clarify the later application scenarios. In many cases roles, interfaces and decision paths will change, especially since it is already foreseeable that not all computer-generated results will be comprehensible to humans. Concerted efforts will be necessary in order to fully exploit the potential of AI for cancer care.

This is a preview of subscription content, log in via an institution to check access.

Access this article

Price excludes VAT (USA)
Tax calculation will be finalised during checkout.

Instant access to the full article PDF.

Abb. 1
Abb. 2
Abb. 3
Abb. 4
Abb. 5
Abb. 6

Literatur

  1. Aerts HJ, Velazquez ER, Leijenaar RT, Parmar C, Grossmann P, Carvalho S, Bussink J, Monshouwer R, Haibe-Kains B, Rietveld D, Hoebers F, Rietbergen MM, Leemans CR, Dekker A, Quackenbush J, Gillies RJ, Lambin P (2014) Decoding tumour phenotype by noninvasive imaging using a quan-titative radiomics approach. Nat Commun 5:4006

    Article  CAS  Google Scholar 

  2. Chu LC, Goggins MG, Fishman EK (2017) Diagnosis and detection of pancreatic cancer. Cancer J 23(6):333–342

    Article  Google Scholar 

  3. Fave X, Zhang L, Yang J, Mackin D, Balter P, Gomez D, Followill D, Jones AK, Stingo F, Liao Z, Mohan R, Court L (2017) Delta-radiomics features for the prediction of patient outcomes in non-small cell lung cancer. Sci Rep 7(1):588

    Article  Google Scholar 

  4. Georgii J, Zöhrer F, Hahn HK (2013) Model-based position correlation between breast images. 28. Febr. 2013. Proc. SPIE 8670, Medical Imaging 2013: Com-puter-Aided Diagnosis, 86701U-1–7. https://doi.org/10.1117/12.2007472

    Book  Google Scholar 

  5. Gillies RJ, Kinahan PE, Hricak H (2016) Radiomics: images are more than pictures, they are data. Radiology 278(2):563–577

    Article  Google Scholar 

  6. Hosny A, Parmar C, Coroller TP, Grossmann P, Zeleznik R, Kumar A, Bussink J, Gillies RJ, Mak RH, Aerts HJWL (2018) Deep learning for lung cancer prognostication: a retrospective multi-cohort radiomics study. PLoS Med 15(11):e1002711

    Article  Google Scholar 

  7. Khalvati F, Zhang J, Chung AG, Shafiee MJ, Wong A, Haider MA (2018) MPCaD: a multi-scale radiomics-driven framework for automated prostate cancer localization and detection. BMC Med Imaging 18(1):16

    Article  Google Scholar 

  8. Kumar V, Gu Y, Basu S, Berglund A, Eschrich SA, Schabath MB, Forster K, Aerts HJ, Dekker A, Fenstermacher D, Goldgof DB, Hall LO, Lambin P, Balagurunathan Y, Gatenby RA, Gillies RJ (2012) Radiomics: the process and the challenges. Magn Reson Imaging 30(9):1234–1248

    Article  Google Scholar 

  9. Lambin P, Leijenaar RTH, Deist TM, Peerlings J, de Jong EEC, van Timmeren J, Sanduleanu S, Larue RTHM, Even AJG, Jochems A, van Wijk Y, Woodruff H, van Soest J, Lustberg T, Roelofs E, van Elmpt W, Dekker A, Mottaghy FM, Wildberger JE, Walsh S (2017) Radi-omics: the bridge between medical imaging and personalized medicine. Nat Rev Clin Oncol 14(12):749–762

    Article  Google Scholar 

  10. McKinney SM, Sieniek M, Godbole V, Godwin J, Antropova N, Ashrafian H, Back T, Chesus M, Corrado GC, Darzi A, Etemadi M, Garcia-Vicente F, Gilbert FJ, Halling-Brown M, Hassabis D, Jansen S, Karthikesalingam A, Kelly CJ, King D, Ledsam JR, Melnick D, Mostofi H, Peng L, Reicher JJ, Romera-Paredes B, Sidebottom R, Suleyman M, Tse D, Young KC, De Fauw J, Shetty S (2020) Internati-onal evaluation of an AI system for breast cancer screening. Nature 577(7788):89–94

    Article  CAS  Google Scholar 

  11. Pisano ED (2020) AI shows promise for breast cancer screening. Nature 577(7788):35–36

    Article  CAS  Google Scholar 

  12. Rühaak J, Polzin T, Heldmann S, Simpson IJA, Handels H, Modersitzki J, Heinrich MP (2017) Estimation of large motion in lung CT by integrating regularized Keypoint correspondences into dense deformable registration. IEEE Trans Med Imaging 36(8):1746–1757

    Article  Google Scholar 

  13. Strickland E (2019) How IBM Watson overpromised and underdelivered on AI health care. IEEE Spectrum 56(4):24–31

    Article  Google Scholar 

  14. Sun Y, Reynolds HM, Parameswaran B, Wraith D, Finnegan ME, Williams S et al (2019) Multiparametric MRI and radiomics in prostate cancer: a review. Australas Phys Eng Sci Med 42(1):3–25

    Article  Google Scholar 

  15. Thawani R, McLane M, Beig N, Ghose S, Prasanna P, Velcheti V, Madabhushi A (2018) Radiomics and radiogenomics in lung cancer: a review for the clinician. Lung Cancer 115:34–41

    Article  Google Scholar 

  16. Weaver O, Leung JWT (2018) Biomarkers and imaging of breast cancer. AJR Am J Roentgenol 210(2):271–278

    Article  Google Scholar 

  17. Wilson R, Devaraj A (2017) Radiomics of pulmonary nodules and lung cancer. Transl Lung Cancer Res 6(1):86–91

    Article  Google Scholar 

  18. World Medical Innovation Forum (2016) Cancer disruptive dozen. https://worldmedicalinnovation.org/wp-content/uploads/2018/09/Partners-FORUM-2016-D12-Cancer.pdf. Zugegriffen: 24.2.2020

Download references

Author information

Authors and Affiliations

Authors

Corresponding author

Correspondence to Horst K. Hahn.

Ethics declarations

Interessenkonflikt

H. K. Hahn gibt an, dass kein Interessenkonflikt besteht.

Für diesen Beitrag wurden von den Autoren keine Studien an Menschen oder Tieren durchgeführt. Für die aufgeführten Studien gelten die jeweils dort angegebenen ethischen Richtlinien.

Rights and permissions

Reprints and permissions

About this article

Check for updates. Verify currency and authenticity via CrossMark

Cite this article

Hahn, H.K. Radiomics & Deep Learning: Quo vadis?. Forum 35, 117–124 (2020). https://doi.org/10.1007/s12312-020-00761-8

Download citation

  • Published:

  • Issue Date:

  • DOI: https://doi.org/10.1007/s12312-020-00761-8

Schlüsselwörter

Keywords

Navigation