Számítógépes diagnosztika az orvosi képalkotásban

Átírás

1 Számítógépes diagnosztika az orvosi képalkotásban Dr. Bálint Zoltán

2 MSc Orvosi Fizika 2016 Adjunktus, 2018 Docens PhD Biofizika UBB, Cluj-Napoca, RO BRC, Szeged, HU Posztdoktori kutató Kutatási csoport vezető 2015 Habilitáció MUG, Graz, AT LBI, Graz, AT

3 Hiro Yoshida Harvard Medical School Számítógépes diagnosztika az orvosi képalkotásban

4 Számítógépes diagnosztika az orvosi képalkotásban CAD Computer Aided Diagnosis Segítség az orvosnak, egy másodvélemény amit felhasználhat Automatikus formafelismerés + csoportosítás NEM diagnózis felállítása

5 CAD Computer Aided Diagnosis Számítógépes algoritmusok használata a diagnosztikában: - segít a radiológusoknak - időt spórol - a klinikai rutinba illeszthető - orvosilag megbízható és nem jár extra költségekkel Computer-aided Diagnosis: How to Move from the Laboratory to the Clinic Ginneken et al 2011 Radiology

6 Számítógépes diagnosztika az orvosi képalkotásban Példák 1. Tüdő vérerek automatikus felismerése/osztályozása 2. Kormeghatározás a kéz MRI képéből 3. A szív szerkezetének/működésének tanulmányozása

7 1. Tüdő vérerek automatikus felismerése/osztályozása Gyakorlati haszon 400 HU -497 HU HU Image courtesy of M. Pienn, Z. Bálint, H. Olschewski

8 Tüdő vérerek automatikus felismerése/osztályozása 400 HU -497 HU HU Image courtesy of M. Pienn, Z. Bálint, H. Olschewski

9 Artériák és vénák megkülönböztetése A CT képen közel azonos intenzitásúak Közel vannak egymáshoz, nehezen körülhatárolható a körvonaluk Előnyök: - henger alakú struktúrák, 3D-ben lehet azonosítani

10 Digitális kép

11 Érválogató algoritmus lépései 4D - intenzitásérték Henger alakú struktúrák Irányultság meghatározása Payer C. et al.; (2015) MICCAI oral presentation Pienn M. et al. ; (2015) MIUA oral presentation

12 Tüdő vérerek automatikus osztályozása Egyenletes eloszlás Artériák a légutak közelében vannak artéria: kék véna: piros Payer C, et al Medical image analysis 34: doi: /j.media

13 Martin Wurm Diploma student ( ) Michael Pienn PhD student Pius Sonnberger MSc student - project ( ) Zoltán Bálint group leader Christian Payer MSc student (till ) Michael Helmberger MSc Student (till 2013) Horst Olschewski supporting scientist

14 2. Kormeghatározás a kéz MRI képéből Gyakorlati haszon: magmágneses rezonanciás képalkotás nem invazív pontos életkor meghatározás orvosi beavatkozások tervezése Elvárás: gyors képfelvétel másodpercek gyors eredmény másodpercek pontosság

15 Kormeghatározás a kéz MRI képéből Kivitelezés nehézségei - Kép előkészítése - Struktúrák kijelölése - Zajszűrés - Formák kiválasztása - Méretek kiszámítása - Adatok kinyerése Figure: Radiograph of the left hand and wrist analyzed with BoneXpert. The program estimates bone age for 13 bones. Combined with a nonlinear function to obtain the age 9.03 years for this case. Running time for the analysis was 4 seconds. Computer-aided Diagnosis: How to Move from the Laboratory to the Clinic Ginneken et al 2011 Radiology

16 Kormeghatározás a kéz MRI képéből Neumayer B, et al Scientific Reports 8:2063 DOI: /s

17 Kormeghatározás a kéz MRI képéből Kivitelezés nehézségei: Képfelvételi eljárás módszere Képek zajszintje Szoftver validálása Stern D, et al MICCAI DOI: /s

18 Kormeghatározás a kéz MRI képéből Deep convolutional neural network DCNN 3D bemeneti adatok Stern D, et al MICCAI DOI: /s

19 Kormeghatározás a kéz MRI képéből Szoftver validálása klinikai adatokon Stern D, et al MICCAI DOI: /s

20 Kormeghatározás a kéz MRI képéből Kapcsolódási lehetőségek képanalizáló szoftver fejlesztés képfelvételi eljárások fejlesztése adatbázis és kiértékelés optimalizálása

21 3. A szív szerkezetének/működésének tanulmányozása

22 3. A szív szerkezetének/működésének tanulmányozása Bishop et al Europace 2016(18):

23 A szív szerkezetének/működésének tanulmányozása Kivitelezés nehézségei: - Szív formája és elhelyezkedése különböző - Képek zajszintje - mozgás - Készülékek típusa és a felhasznált képkészítési eljárás

24 Bishop et al Europace 2016(18): A szív szerkezetének/működésének tanulmányozása Gyakorlati haszon: - Szerkezeti és működési elváltozások detektálása - Infarktus helyének és mértékének meghatározása - Szívritmuszavar okozta elváltozások észlelése

25 Bishop et al Europace 2016(18): A szív szerkezetének/működésének tanulmányozása Algoritmus:

26 A szív szerkezetének/működésének tanulmányozása 2D Szív MRI képek manuális bejelöléssel Proiect co-finanţat din Fondul European de Dezvoltare Regională prin Programul Operaţional Competitivitate

27 A szív szerkezetének/működésének tanulmányozása Kép előkészítése Struktúrák kijelölése Zajszűrés Formák kiválasztása Méretek kiszámítása Adatok kinyerése és megjelenítése Zahid et al Cardiovasc Res 2016(110): 443

28 A szív szerkezetének/működésének tanulmányozása Kapcsolódási lehetőségek képanalizáló szoftver fejlesztés képfelvételi eljárások fejlesztése adatbázis és kiértékelés optimalizálása

29 IMAGING-BASED, NON-INVASIVE DIAGNOSIS OF PERSISTENT ATRIAL FIBRILLATION imatfib Nr. contract de finanțare: 23/ POC: P_37_245, mysmis: Beneficiar: SPITALUL CLINIC JUDEŢEAN DE URGENŢĂ CLUJ-NAPOCA Director de proiect: Dr. Zoltán Bálint Acțiunea Atragerea de personal cu competențe avansate din străinătate pentru consolidarea capacității de CD Proiect co-finanţat din Fondul European de Dezvoltare Regională prin Programul Operaţional Competitivitate

30 Nemzetközi kihívások a képalkotási eljárások fejlesztésére ötlet, azóta évente több felhívás Medical Segmentation Decathlon: The MSD challenge tests the generalizability of machine learning algorithms when applied to 10 different semantic segmentation tasks. Phase 1 May - Aug 2018 Phase 2 validation deadline 31 Aug 2018

31 Összefoglaló Tüdő vérerek felismerése/osztályozása Kormeghatározás a kéz MRI képéből A szív szerkezetének/működésének tanulmányozása Direkt 3D képfeldolgozás Radiologists will become more productive and make less errors because they will have more time to think about the interpretation of their findings. They will benefit, and so will their patients. Computer-aided Diagnosis: How to Move from the Laboratory to the Clinic Ginneken et al 2011 Radiology

32 Összefoglaló CAD Computer Aided Diagnosis Segítség az orvosnak, egy másodvélemény amit felhasználhat Automatikus formafelismerés + csoportosítás NEM diagnózis felállítása

33 Kapcsolódási lehetőségek Biológiai és orvosi folyamatok mögött húzódó fizikai jelenségek tanulmányozása Adatfeldolgozás optimalizálása Modellek készítése Interdiszciplináris problémamegoldás