Při čtení CT břicha obvykle nejde jen o hledání jedné konkrétní nemoci. DAMO RADAR je navržen tak, aby v jednom kontrastním CT vyšetření upozornil na široké spektrum možných nálezů. Model od výzkumné divize Alibaby DAMO Academy, vyvinutý s klinickými partnery, byl popsán ve výzkumu publikovaném v časopise Science. Zdroje uvádějí širší záběr než 146 stavů; zveřejněné výsledky hodnocení se však vztahují ke 146 nálezům v 18 orgánech a anatomických strukturách.
12
4
8
Co se učí z lékařských zpráv
RADAR je obrazově-jazykový model: při trénování propojuje CT snímky s textem zpráv, které k vyšetřením lékaři již napsali. Má tak možnost učit se vztahy mezi obrazem a popisem různých abnormalit, místo aby pro každou nemoc vznikal zvláštní detektor vyžadující novou sadu ručně označených snímků. Z dostupných podkladů ale nelze přesně ověřit všechny kroky trénování ani vyvodit, které další, samostatně nevyhodnocené stavy dokáže spolehlivě rozpoznat.
5
16
Jak číst výsledek 0,913
Při hodnocení na téměř 40 000 vyšetřeních z reálné praxe dosáhl model průměrné hodnoty AUC 0,913 napříč 146 nálezy. AUC vyjadřuje, jak dobře skóre modelu při různých rozhodovacích hranicích odlišuje případy s nálezem od případů bez něj. Neznamená to, že by RADAR stanovil správnou diagnózu v 91,3 % vyšetření.
14
15
Ve srovnávací studii s 26 radiology dosáhl model podle zveřejněných zpráv lepšího výsledku než 23 z nich. Když lékaři dostali jeho pomoc, počet přehlédnutých nálezů podle těchto zpráv klesl přibližně o 10 % a doba hodnocení asi o 30 %. Dostupné údaje však neuvádějí jednoznačné výchozí a výsledné hodnoty senzitivity lékařů ani to, zda desetiprocentní změna znamená relativní pokles, nebo rozdíl v procentních bodech.
1
6
14
O spolehlivosti mimo podmínky, pro které byl model vyvíjen a hodnocen, zatím z dostupných podkladů nelze uvést ověřené číslo. Nelze z nich tedy vyvozovat, že si stejně dobře povede u všech nemocnic, přístrojů či skupin pacientů.
DAMO Academy oznámila otevřené zveřejnění modelu; podle zpráv jsou dostupné také jeho váhy. To umožňuje další zkoumání a ověřování, nikoli automaticky nasazení bez místní klinické validace. Nejlépe doloženou možnou rolí RADARu je pomocný „druhý čtenář“ pro radiologa, ne samostatný nástroj k určování diagnóz.
3
4
7