Միացեք մեզ

Արհեստական ​​բանականություն

Med-Gemini. Բժշկական AI-ի փոխակերպումը հաջորդ սերնդի մուլտիմոդալ մոդելներով

mm

Հրատարակված է

 on

Արհեստական ​​ինտելեկտը (AI) ալիք է բարձրացրել բժշկական ոլորտում վերջին մի քանի տարիների ընթացքում: Այն բարելավում է բժշկական պատկերների ախտորոշման ճշգրտությունը, օգնում է անհատականացված բուժում ստեղծել գենոմային տվյալների վերլուծության միջոցով և արագացնում է դեղերի հայտնաբերումը կենսաբանական տվյալների ուսումնասիրության միջոցով: Այնուամենայնիվ, չնայած այս տպավորիչ առաջխաղացումներին, այսօր արհեստական ​​ինտելեկտի հավելվածների մեծ մասը սահմանափակված է հատուկ առաջադրանքներով՝ օգտագործելով ընդամենը մեկ տեսակի տվյալ, օրինակ՝ CT սկանավորումը կամ գենետիկական տեղեկատվությունը: Այս միամոդալ մոտեցումը միանգամայն տարբերվում է բժիշկների աշխատանքից՝ ինտեգրելով տարբեր աղբյուրների տվյալները՝ պայմանները ախտորոշելու, արդյունքները կանխատեսելու և բուժման համապարփակ պլաններ ստեղծելու համար:

Բժիշկներին, հետազոտողներին և հիվանդներին իսկապես աջակցելու այնպիսի առաջադրանքներում, ինչպիսիք են ռադիոլոգիայի հաշվետվությունների ստեղծումը, բժշկական պատկերների վերլուծությունը և գենոմային տվյալներից հիվանդություններ կանխատեսելը, AI-ն պետք է զբաղվի տարբեր բժշկական առաջադրանքներով՝ հիմնավորելով բարդ մուլտիմոդալ տվյալները, ներառյալ տեքստը, պատկերները, տեսանյութերը և էլեկտրոնային: առողջության գրառումներ (EHRs): Այնուամենայնիվ, կառուցելով սրանք մուլտիմոդալ բժշկական AI համակարգերը բարդ են եղել՝ կապված տարբեր տեսակի տվյալների կառավարելու AI-ի սահմանափակ կարողությունների և կենսաբժշկական համապարփակ տվյալների սակավության պատճառով:

Մուլտիմոդալ բժշկական AI-ի անհրաժեշտությունը

Առողջապահությունը փոխկապակցված տվյալների աղբյուրների բարդ ցանց է՝ բժշկական պատկերներից մինչև գենետիկ տեղեկատվություն, որը բուժաշխատողները օգտագործում են հիվանդներին հասկանալու և բուժելու համար: Այնուամենայնիվ, ավանդական AI համակարգերը հաճախ կենտրոնանում են առանձին առաջադրանքների վրա՝ տվյալների առանձին տեսակներով, սահմանափակելով հիվանդի վիճակի համապարփակ ակնարկ տրամադրելու նրանց հնարավորությունը: Այս միամոդալ AI համակարգերը պահանջում են հսկայական քանակությամբ պիտակավորված տվյալներ, որոնց ձեռքբերումը կարող է ծախսատար լինել՝ ապահովելով հնարավորությունների սահմանափակ շրջանակ և դիմակայել տարբեր աղբյուրներից պատկերացումներ ինտեգրելու մարտահրավերներին:

Մուլտիմոդալ AI կարող է հաղթահարել առկա բժշկական արհեստական ​​ինտելեկտի համակարգերի մարտահրավերները՝ տրամադրելով ամբողջական հեռանկար, որը միավորում է տեղեկատվությունը տարբեր աղբյուրներից՝ առաջարկելով ավելի ճշգրիտ և ամբողջական պատկերացում հիվանդի առողջության մասին: Այս ինտեգրված մոտեցումը մեծացնում է ախտորոշման ճշգրտությունը՝ բացահայտելով օրինաչափություններ և հարաբերակցություններ, որոնք կարող են բաց թողնել յուրաքանչյուր եղանակն ինքնուրույն վերլուծելիս: Բացի այդ, մուլտիմոդալ AI-ն նպաստում է տվյալների ինտեգրմանը, որը թույլ է տալիս առողջապահական մասնագետներին մուտք գործել հիվանդի տեղեկատվության միասնական տեսակետ, որը խթանում է համագործակցությունը և լավ տեղեկացված որոշումների կայացումը: Դրա հարմարվողականությունն ու ճկունությունը թույլ են տալիս նրան սովորել տվյալների տարբեր տեսակներից, հարմարվել նոր մարտահրավերներին և զարգանալ բժշկական առաջընթացներով:

Ներկայացնում ենք Med-Gemini-ն

Մուլտիմոդալ արհեստական ​​ինտելեկտի խոշոր մոդելների վերջին զարգացումները շարժ են առաջացրել բարդ բժշկական AI համակարգերի զարգացման գործում: Այս շարժման առաջատարներն են Google-ը և DeepMind-ը, որոնք ներկայացրել են իրենց առաջադեմ մոդելը, Մեդ-Երկվորյակ. Բժշկական արհեստական ​​ինտելեկտի այս մուլտիմոդալ մոդելը ցուցադրել է բացառիկ արդյունավետություն Արդյունաբերության 14 չափորոշիչներ, գերազանցելով նման մրցակիցներին OpenAI-ի GPT-4. Med-Gemini-ն կառուցված է Երկվորյակ ընտանիքի մեծ մուլտիմոդալ մոդելներ (LMM) Google DeepMind-ից, որը նախատեսված է տարբեր ձևաչափերով բովանդակություն հասկանալու և ստեղծելու համար, ներառյալ տեքստը, աուդիո, պատկերը և տեսանյութը: Ի տարբերություն ավանդական մուլտիմոդալ մոդելների, Gemini-ն պարծենում է յուրօրինակությամբ Փորձագետների խառնուրդ (ԷՆ) ճարտ., մասնագիտացված տրանսֆորմատորային մոդելներ տիրապետում է տվյալների որոշակի հատվածներին կամ առաջադրանքներին: Բժշկական ոլորտում դա նշանակում է, որ Երկվորյակները կարող են դինամիկ կերպով ներգրավել ամենահարմար մասնագետին՝ ելնելով մուտքային տվյալների տեսակից, լինի դա ռադիոլոգիական պատկեր, գենետիկական հաջորդականություն, հիվանդի պատմություն կամ կլինիկական նշումներ: Այս կարգավորումը արտացոլում է բազմամասնագիտական ​​մոտեցումը, որն օգտագործում են կլինիկական բժիշկները՝ ուժեղացնելով մոդելի՝ տեղեկատվությունն արդյունավետորեն սովորելու և մշակելու կարողությունը:

Fine-Tuning Gemini մուլտիմոդալ բժշկական AI-ի համար

Med-Gemini ստեղծելու համար, հետազոտողներ լավ լարված Երկվորյակ անանուն բժշկական տվյալների հավաքածուների վրա: Սա թույլ է տալիս Med-Gemini-ին ժառանգել Երկվորյակի բնիկ հնարավորությունները, ներառյալ լեզվական խոսակցությունը, մուլտիմոդալ տվյալների հետ հիմնավորումը և բժշկական առաջադրանքների համար ավելի երկար համատեքստերի կառավարումը: Հետազոտողները ուսուցանել են Gemini տեսողության կոդավորիչի երեք հատուկ տարբերակ՝ 2D եղանակների, 3D եղանակների և գենոմիկայի համար: Սա նման է տարբեր բժշկական ոլորտներում մասնագետների պատրաստմանը: Դասընթացը հանգեցրել է Med-Gemini-ի երեք հատուկ տարբերակների մշակմանը` Med-Gemini-2D, Med-Gemini-3D և Med-Gemini-Polygenic:

  • Med-Gemini-2D

Med-Gemini-2D-ը պատրաստված է սովորական բժշկական պատկերների մշակման համար, ինչպիսիք են կրծքավանդակի ռենտգենյան ճառագայթները, CT շերտը, պաթոլոգիայի պատերը և տեսախցիկի նկարները: Այս մոդելը գերազանցում է այնպիսի առաջադրանքներում, ինչպիսիք են դասակարգումը, տեսողական հարցերի պատասխանը և տեքստի ստեղծումը: Օրինակ՝ տրվելով կրծքավանդակի ռենտգեն և «Արդյո՞ք ռենտգենը ցույց է տվել որևէ նշան, որը կարող է ցույց տալ կարցինոմա (քաղցկեղային գոյացությունների ցուցումներ)», Med-Gemini-2D-ը կարող է ճշգրիտ պատասխան տալ: Հետազոտողները պարզել են, որ Med-Gemini-2D-ի կատարելագործված մոդելը 1%-ից 12%-ով բարելավեց AI-ով միացված կրծքավանդակի ռենտգենյան զեկույցների ստեղծումը՝ ստեղծելով «համարժեք կամ ավելի լավ» զեկույցներ, քան ռենտգենաբանների զեկույցները:

  • Med-Gemini-3D

Ընդլայնելով Med-Gemini-2D-ի հնարավորությունները՝ Med-Gemini-3D-ը վերապատրաստվում է 3D բժշկական տվյալների մեկնաբանման համար, ինչպիսիք են CT և MRI սկանավորումները: Այս սկանավորումները ապահովում են անատոմիական կառուցվածքների համապարփակ պատկերացում՝ պահանջելով ավելի խորը ընկալման մակարդակ և ավելի առաջադեմ վերլուծական տեխնիկա: Տեքստային հրահանգներով 3D սկանավորումները վերլուծելու ունակությունը նշանակալի թռիչք է բժշկական պատկերների ախտորոշման մեջ: Գնահատումները ցույց են տվել, որ Med-Gemini-3D-ի կողմից ստեղծված զեկույցների կեսից ավելին հանգեցրել է խնամքի նույն առաջարկություններին, ինչ ռենտգենաբանների կողմից արված:

  • Med-Gemini-Polygenic

Ի տարբերություն այլ Med-Gemini տարբերակների, որոնք կենտրոնանում են բժշկական պատկերների վրա, Med-Gemini-Polygenic-ը նախագծված է կանխատեսելու հիվանդությունները և առողջության արդյունքները գենոմային տվյալների հիման վրա: Հետազոտողները պնդում են, որ Med-Gemini-Polygenic-ն իր տեսակի մեջ առաջին մոդելն է, որը վերլուծում է գենոմային տվյալները՝ օգտագործելով տեքստային հրահանգներ: Փորձերը ցույց են տալիս, որ մոդելը գերազանցում է նախորդ գծային պոլիգենային միավորները՝ կանխատեսելով առողջության ութ արդյունքները, ներառյալ դեպրեսիան, ինսուլտը և գլաուկոման: Հատկանշական է, որ այն նաև ցուցադրում է զրոյական կրակոցի հնարավորություններ՝ կանխատեսելով առողջության լրացուցիչ արդյունքներ՝ առանց հստակ մարզումների: Այս առաջընթացը շատ կարևոր է այնպիսի հիվանդությունների ախտորոշման համար, ինչպիսիք են կորոնար շնչերակ հիվանդությունը, COPD և 2-րդ տիպի շաքարախտը:

Վստահության ձևավորում և թափանցիկության ապահովում

Ի լրումն մուլտիմոդալ բժշկական տվյալների մշակման մեջ իր ուշագրավ առաջընթացի, Med-Gemini-ի ինտերակտիվ հնարավորությունները հնարավորություն ունեն լուծելու. հիմնարար մարտահրավերներ Բժշկական ոլորտում արհեստական ​​ինտելեկտի ընդունման մեջ, ինչպիսիք են AI-ի սև արկղային բնույթը և աշխատանքի փոխարինման հետ կապված մտահոգությունները: Ի տարբերություն տիպիկ AI համակարգերի, որոնք գործում են ծայրից ծայր և հաճախ ծառայում են որպես փոխարինող գործիքներ, Med-Gemini-ն գործում է որպես օժանդակ գործիք առողջապահության մասնագետների համար: Ընդլայնելով իրենց վերլուծության հնարավորությունները՝ Med-Gemini-ն մեղմացնում է աշխատանքի տեղահանման վախը: Իր վերլուծությունների և առաջարկությունների մանրամասն բացատրություններ տալու նրա կարողությունը մեծացնում է թափանցիկությունը՝ թույլ տալով բժիշկներին հասկանալ և ստուգել AI-ի որոշումները: Այս թափանցիկությունը վստահություն է ձևավորում առողջապահության ոլորտի մասնագետների միջև: Ավելին, Med-Gemini-ն աջակցում է մարդու վերահսկողությանը, ապահովելով, որ AI-ի կողմից ստեղծված պատկերացումները վերանայվեն և վավերացվեն փորձագետների կողմից՝ խթանելով համագործակցային միջավայր, որտեղ AI-ն և բժշկական մասնագետները միասին աշխատում են հիվանդների խնամքը բարելավելու համար:

Ճանապարհ դեպի իրական աշխարհի կիրառում

Չնայած Med-Gemini-ն ցուցադրում է ուշագրավ առաջընթացներ, այն դեռ հետազոտության փուլում է և պահանջում է մանրակրկիտ բժշկական վավերացում մինչև իրական աշխարհի կիրառումը: Խիստ կլինիկական փորձարկումները և լայնածավալ փորձարկումները կարևոր են մոդելի հուսալիությունը, անվտանգությունը և արդյունավետությունը տարբեր կլինիկական միջավայրերում ապահովելու համար: Հետազոտողները պետք է հաստատեն Med-Gemini-ի կատարումը տարբեր բժշկական պայմանների և հիվանդների ժողովրդագրության մեջ՝ ապահովելու դրա կայունությունն ու ընդհանրացումը: Առողջապահական մարմինների կողմից կարգավորող հաստատումները անհրաժեշտ կլինեն բժշկական չափանիշներին և էթիկական ուղեցույցներին համապատասխանությունը երաշխավորելու համար: Արհեստական ​​ինտելեկտի մշակողների, բժշկական մասնագետների և կարգավորող մարմինների միջև համատեղ ջանքերը վճռորոշ կլինեն Med-Gemini-ի կատարելագործման, ցանկացած սահմանափակումների լուծման և նրա կլինիկական օգտակարության նկատմամբ վստահություն ստեղծելու համար:

The Bottom Line

Med-Gemini-ն զգալի թռիչք է բժշկական AI-ում՝ ինտեգրելով մուլտիմոդալ տվյալները, ինչպիսիք են տեքստը, պատկերները և գենոմային տեղեկատվությունը, համապարփակ ախտորոշման և բուժման առաջարկություններ տրամադրելու համար: Ի տարբերություն AI-ի ավանդական մոդելների, որոնք սահմանափակվում են միայնակ առաջադրանքներով և տվյալների տեսակներով, Med-Gemini-ի առաջադեմ ճարտարապետությունն արտացոլում է առողջապահության ոլորտի մասնագետների բազմամասնագիտական ​​մոտեցումը՝ բարձրացնելով ախտորոշման ճշգրտությունը և խթանելով համագործակցությունը: Չնայած իր խոստումնալից ներուժին, Med-Gemini-ն պահանջում է խիստ վավերացում և կարգավորող հաստատում մինչև իրական աշխարհի կիրառումը: Դրա զարգացումն ազդարարում է ապագան, որտեղ AI-ն աջակցում է առողջապահության ոլորտի մասնագետներին՝ բարելավելով հիվանդների խնամքը բարդ, ինտեգրված տվյալների վերլուծության միջոցով:

Դոկտոր Թեհսեն Զիան Իսլամաբադի ԿՈՄՍԱԹՍ համալսարանի պաշտոնային դոցենտ է, AI-ի դոկտորի աստիճան Վիեննայի տեխնոլոգիական համալսարանից, Ավստրիա: Մասնագիտանալով արհեստական ​​ինտելեկտի, մեքենայական ուսուցման, տվյալների գիտության և համակարգչային տեսլականի ոլորտներում՝ նա նշանակալի ներդրում է ունեցել հեղինակավոր գիտական ​​ամսագրերում հրապարակումներով: Դոկտոր Թեհսենը նաև ղեկավարել է տարբեր արդյունաբերական նախագծեր՝ որպես գլխավոր քննիչ և ծառայել է որպես AI խորհրդատու: