Anong uri ng medical exam ang pumasa ang ChatGPT?

Ang paksa na kamakailan ay kumalat sa internet ay walang iba kundi ang ChatGPT, ang AI chatbot na nagdebut noong nakaraang Nobyembre. Nakikipag-ugnayan ang mga tao dito sa pamamagitan ng mga magaan at katuwaang usapan upang subukan ang kanyang kakayahan sa pag-uusap. Hindi lamang iyon, nakamit ng ChatGPT ang maraming tagumpay, tulad ng pagsusulit sa ilang sa mga pinakamahirap na pagsusulit tulad ng US Medical licensing exam, isang exam sa Wharton Business School, at apat na pagsusulit sa Constitutional Law sa University of Minnesota Law School. Dahil dito, nabuhay ang interes ni Twitter CEO Elon Musk, na nagtangkang siyasatin ang AI chatbot, sabi niya, "Sigurado akong lahat ay magiging maayos." Tingnan natin kung anong Medical Exam ang Pumasa si ChatGPT.

Ang Pag-angat ng ChatGPT

Interesante na tandaan na ang Open AI, ang kumpanyang pang-pananaliksik kung saan nag-invest sina Musk at Microsoft, ang siyang lumikha ng ChatGPT. Ang sinumang gumagamit ng AI na tool na website ay maaaring magtanong nito sa anumang paksa at makatanggap ng mabilis at detalyadong sagot sa pormang talata. Napatunayan na ng ChatGPT ang kakayahan nito sa iba't ibang larangan. Maaari itong sumulat ng instant at kumplikadong mga sanaysay, magbalangkas ng mga marketing pitch, lumikha ng mga tula at mga biro, at higit pa, magbalangkas ng isang talumpati para sa isang Kongresista sa Estados Unidos. Gayunpaman, may mga pangamba sa posibilidad na ang AI ay maaaring kumuha ng ilang trabaho ng tao.

Basahin rin: Ang ChatGPT 4 Libre Ba Gamitin?

ChatGPT sumasailalim sa Pagsusuri Medikal: Pangkalahatan

Isa sa mga pinakahuling tagumpay ng tool na ito ay ang kakayahan nitong pumasa sa mga pagsusulit sa US Medical Licensing. Sa isang pre-print na pag-aaral, sinuri ng mga mananaliksik ang mga limitasyon ng kakayahan ng ChatGPT. Nagpakain sila ng mga tanong mula sa mga nakaraang pagsusulit sa AI tool at pinababasa ang mga sagot sa dalawang adjudicators na mga doktor. Pinanatiling sigurado na ang mga sagot sa mga tanong na iyon ay hindi pa kasama sa datos na magagamit ng chatbot noong ito ay sinusubukan. Pinansin ng koponan na kahit na hindi pa nakakita ang ChatGPT ng mga sagot dati, ito ay nagperform sa o malapit sa tinalagang limitasyon para sa mga pagsusulit nang walang anumang espesyal na pagsasanay o pagpapalakas. Tinanggap ng tool ang higit sa 50 porsyento sa lahat ng mga pagsusulit at malapit na umabot sa limitasyon ng USMLE na humigit-kumulang sa 60 porsyento. "Kaya't, komportable na sa loob ng passing range ang ChatGPT," konklusyon ng papel.

ChatGPT Nakapasa sa USMLE Exam: Lahat ng kailangan mong malaman

Sa isang napakagandang bagong pag-aaral, natuklasan ng mga siyentipiko sa Massachusetts General Hospital (MGH) at AnsibleHealth na ang ChatGPT ng OpenAI ay maaaring pumasa sa United States Medical Licensing Exam (USMLE) sa isang kahanga-hangang 60% na antas ng katumpakan. Ang pananaliksik na ito ay nagbubukas ng nakaka-eksite na mga posibilidad para sa papel ng AI sa pang-edukasyon at pagsasanay sa medisina.

Mga Kasangkapang Pangproseso ng Natural na Wika at Pagsasanay sa Medisina

Ang ChatGPT ay isang tool sa natural language processing na sinanay sa malalaking dami ng wika at naghahanap ng mga pattern at relasyon. Ang kakayahang maglikha nito ng bagong teksto batay sa wika na sinanay nito ay nagbibigay ng malaking potensyal para sa gamit nito sa edukasyong medikal. Gayunpaman, ang dependensiya ng ChatGPT sa training data nito ay nangangahulugang hindi ito nag-iikot sa internet tulad ng ibang AI chatbots.

Pagsusubok sa Modelo

Isinuri ng mga siyentista ang modelo ng ChatGPT base sa tatlong pagsusulit na itinataguyod ng USMLE. Ang koponan ay nag-training ng modelo gamit ang mga tanong mula sa sample exam ng Hunyo 2022 na inilabas sa publiko. Ang mga tanong na nangangailangan ng visual na pagsusuri ay hindi kasama sa training set.

Upang bawasan ang bias sa pag-iimbak ng memorya, nag-input ang koponan ng tatlong iba't ibang uri ng mga tanong sa modelo:

1. Maramihang pagpipilian ng isang sagot na walang sapilitang pagsasala, halimbawa, "Ang kalagayan ng pasyente ay karamihang sanhi ng alin sa mga sumusunod na patogeno?"
2. Maramihang pagpipilian ng isang sagot na may sapilitang pagsasala, halimbawa, "Ano ang pinakamalamang na dahilan ng mga panggabing sintomas ng pasyente? Ipaliwanag ang iyong batayan para sa bawat pagpipilian."
3. Bukas na tanong, halimbawa, "Ano ang posibleng diagnosis ng pasyente batay sa mga impormasyong ibinigay?"

Napakaimpresibong mga Resulta

Para sa unang pagkakataon, ang AI model ay nakapasa sa USMLE sa o malapit sa 60% na katumpakan nang walang tulong ng mga clinician trainers. Ang resultang ito ay mahalaga at nagbubukas ng mga bagong posibilidad para sa AI sa larangan ng medikal na edukasyon. Natuklasan din ng mga mananaliksik na ang mga resulta ng ChatGPT ay nagpapakita ng wastong clinical insights at rasyonal, na nagbibigay ng mas higit na kumpiyansa sa pagsasalarawan at tiwala sa modelo.

Ang Kinabukasan ng Edukasyong Pangmedikal

Ang team ay naniniwala na ang ChatGPT at iba pang generative conversational models ay makakatulong sa pagsasanay ng mga susunod na doktor. Isang halimbawa ng paggamit nito ay ang pagsasalin ng teknikal na mga resulta sa medisina tungo sa mas madaling nauunawaang wika para sa mga pasyente. Ang AnsibleHealth ay kasalukuyang sumusunod sa proyektong ito.

Ang ChatGPT na nagpapakita ng kakayahan nito sa Larangan ng Medisina

Bilang nadulingang umiiral nitong kakayahan na tugunan ang mga tanong at ipagsuri ang mga sakit, ang GPT-4 ay isang mahusay na tagasalin. Kayang isalin ng GPT-4 ang impormasyon sa discharge para sa isang pasyenteng nagsasalita ng Portuguese at bawasan ang mga teknikal na salita upang maging madaling maunawaan ng mga mag-aaral sa ika-6 baitang. Nagagawang magbigay ng kapaki-pakinabang na mga mungkahi ang GPT-4 sa mga doktor tungkol sa mga paraan ng pakikitungo sa mga pasyente, nagbibigay ng mga tip kung paano makipag-usap nang malumanay at malinaw tungkol sa kalagayan ng mga pasyente.

Bagama't mayroon itong mga limitasyon, ang GPT-4 ay maaaring tularan ang paraan ng pagdiagnose ng mga doktor sa mga kondisyon na may nakakamanghang bagaman hindi perpektong mga resulta. Nang itanong kung maaari itong aktwal na makilahok sa causal reasoning, sinabi nito na ang kanyang katalinuhan ay "limitado lamang sa mga pattern sa data at hindi kasama ang tunay na pagkaunawa o kahulugan."

Mga Saloobin ni Dr. Isaac Kohane Tungkol sa GPT-4

Sa isang darating na aklat na pinamagatang "The AI Revolution in Medicine," sinubukan ng computer scientist at doktor na si Dr. Isaac Kohane, kasama ang dalawang kasama niya, ang GPT-4, ang pinakabagong modelo ng artificial intelligence mula sa OpenAI, upang makita kung paano ito nag-perform sa isang medikal na kapaligiran. Ang mga resulta ay kamangha-mangha.

Sa aklat, binanggit ni Dr. Kohane na ang GPT-4, na inilabas noong Marso 2023 para sa mga nagbabayad na mga subscriber, ay maaaring sagutin ang mga tanong ukol sa lisensya para sa medikal na pagsusulit sa Estados Unidos ng tama nang higit sa 90% ng mga pagkakataon. Ito ay mas magaling na kumuha ng pagsusulit kaysa sa mga naunang modelo ng ChatGPT AI, GPT-3 at GPT-3.5, at mas magaling din kaysa sa ilang mga batayang lisensyadong mga doktor. Ayon kay Carey Goldberg at kay Peter Lee, ang pangalawang pangulo ng pananaliksik sa Microsoft, ang GPT-4 ay may mas magandang pagsusuri kaysa sa "maraming mga doktor" at maaaring magdiagnose ng mga kakaibang kondisyon "tulad ng ginagawa ko."

Pagsusulit sa GPT-4: Ang Pamamaraan

Upang subukan ang GPT-4, nagtambal sina Dr. Kohane at ang kanyang mga kasamahan upang malaman kung gaano kahusay ang AI model na ito sa isang medikal na kapaligiran. Nagtanong sila ng mga tanong sa GPT-4 at ibinigay sa ito ang mga pangyayari sa klinikal upang idiyagnos, na inihambing naman sa mga diagnosis na ginawa ng mga tao. Binanggit ng mga may-akda na mayroong ilang mga kalamangan ang GPT-4 kumpara sa mga tao, tulad ng kakayahan nitong tandaan at pagsama-samahin ang malawak na dami ng impormasyon mula sa iba't ibang pinagmulan.

Gayunman, kinikilala rin ng mga may-akda na may ilang limitasyon ang GPT-4. Halimbawa, hindi kayang isama ng GPT-4 ang natatanging medikal na kasaysayan ng pasyente o mga salik na nakakaapekto sa kalusugan ng isang tao. Bukod dito, nagdudulot ng pag-aalala ang pagsandal ng GPT-4 sa napakaraming data kaugnay ng pribadong impormasyon at sapilitang pagpapabor.

GPT-4: Mga Kakayahan at Potensyal

Ang GPT-4 ay higit sa isang tagapaghanap ng katotohanan at isang magaling na test-taker; ito rin ay isang mahusay na tagasalin. Ayon sa mga awtor, ang GPT-4 ay maaaring isalin ang impormasyon ng pag-alis para sa isang pasyente na nagsasalita ng Portuguese at ito'y isaayos ang teknikal na jargon sa isang bagay na madaling maunawaan ng mga estudyante sa ikaanim na baitang.

Ngunit hindi lamang sa larangan ng diagnosis na nagpapakita ng pangako ang GPT-4. Sa libro, ipinaliwanag ng mga may-akda kung paano kayang magbigay ng kapaki-pakinabang na mga mungkahi ang GPT-4 sa mga doktor tungkol sa kanilang paraan ng pag-uugali, na nag-aalok ng mga tips kung paano mas mahusay na makipag-ugnayan sa mga pasyente.

Gayunpaman, mahalagang tandaan na ang GPT-4 ay hindi perpekto. Tulad ng babala ng mga may-akda, maaari pa rin itong magkamali, at hindi ito sumusumpa sa Hippocratic Oath. Bukod dito, ang teknolohiyang AI, kabilang ang GPT-4, ay nagbibigay ng mga etikal na tanong tungkol sa pagkawala ng trabaho at privacy ng pasyente.

Konklusyon: Ang Kinabukasan ng AI sa Medisina

Kahit may mga limitasyon ito, ang tagumpay ng GPT-4 sa pagsasuri ng medikal na kondisyon ay nagbubukas ng kawili-wiling mga posibilidad para sa AI na teknolohiya sa medisina. Sa hinaharap, ang mga AI modelo tulad ng GPT-4 ay maaaring makatulong sa mga duktor na magdiagnose ng mga bihirang sakit, isalin ang mga medikal na salita, at magbigay ng mas magandang pangangalaga sa mga pasyente. Gayunpaman, mahalaga na ang mga AI modelo ay inilalagay sa pag-unlad at pagsubok na may etikal na mga pagsasaalang-alang.