ChatGPT 4.0 „zdał” egzaminy stomatologiczne w USA i UK
ChatGPT 4.0 „zdał” egzaminy stomatologiczne w USA i UK
Spis treści
Z badania przeprowadzonego przez naukowców z Hongkongu wynika, że ChatGPT 4.0 uzyskał wystarczający odsetek poprawnych odpowiedzi, by zdobyć prawo wykonywania zawodu lekarza stomatologa w Stanach Zjednoczonych i Wielkiej Brytanii. W przypadku USA było to 80,7% prawidłowych odpowiedzi, w przypadku Zjednoczonego Królestwa – 62,7%.
Jak podali naukowcy z Uniwersytetu w Hongkongu, do tej pory nie było jasne, na ile kompetentne są duże modele językowe (LLM) oparte na sztucznej inteligencji generatywnej (GenAI) w interpretowaniu pisemnych danych oraz udzielaniu precyzyjnych odpowiedzi w stomatologii. Celem prowadzonego badania było określenie dokładności, z jaką GenAI odpowiada na pytania z egzaminów na licencję lekarza stomatologa w USA i na Wyspach Brytyjskich.
ChatGPT 3.5 nie dość zaawansowany, by zdać egzaminy
W tym celu badacze z Hongkongu do dwóch wersji: ChatGPT 3.5 oraz ChatGPT 4.0 wprowadzili 1461 pytań wielokrotnego wyboru z egzaminów licencyjnych w USA i Wielkiej Brytanii. Następnie przeanalizowali i porównali wyniki poszczególnych egzaminów.
W badaniu wykazano, że ChatGPT 3.5 odpowiedział poprawnie na 68,3% (n = 509) oraz 43,3% (n = 296) pytań na egzaminach licencyjnych w Stanach Zjednoczonych i Wielkiej Brytanii. Z kolei wyniki, jakie uzyskał ChatGPT 4.0 były znacząco wyższe: odpowiednio 80,7% (n = 601) i 62,7% (n = 429). Oznacza to, że ChatGPT 4.0 zdałby obydwa pisemne egzaminy licencyjne, podczas gdy jego starsza wersja uzyskała wyniki, które nie zapewniają zdobycia prawa wykonywania zawodu w obu państwach.
GenAI pomocny w komunikacji dentysty z pacjentem i szkoleniu stomatologów
Mimo sukcesu sztucznej inteligencji, wnioski autorów badania są ostrożne. Nowsza wersja GenAI dowiodła, że potrafi udzielać trafnych odpowiedzi na pytania wielokrotnego wyboru z pisemnych egzaminów stomatologicznych, ale badacze zastrzegają, że wynik ten nie musi być równie dobry w każdym przypadku. Zdaniem naukowców z Hongkongu AI wymaga dalszego ulepszenia, niemniej jest bardzo prawdopodobne, że wykorzystanie GenAI w stomatologii będzie miało znaczący wpływ na komunikację lekarza dentysty z pacjentem, a także szkolenie stomatologów.
W rozmowie z „Dental Tribune International” główny autor artykułu dr Walter Yu-Hang, adiunkt kliniczny protetyki na Uniwersytecie w Hongkongu, powiedział: – Obecna sytuacja jest podobna do tej z lat 90. XX wieku, kiedy Internet stał się powszechnie dostępny, a ludzie zaczęli uzyskiwać informacje za pomocą wyszukiwarek. Różnica polega na tym, że korzystając z chatbotów użytkownicy nie muszą już znać odpowiedniego słowa kluczowego, jak jest to wymagane w przypadku wyszukiwarek. Ponadto chatboty podsumowują dostępne informacje udzielając zwięzłych odpowiedzi, a użytkownicy nie muszą interpretować wielu informacji z Internetu.
Dr Hang przekonuje, że wraz z dalszym postępem w algorytmach sztucznej inteligencji i rozbudową wykorzystywanej bazy danych dokładność odpowiedzi będzie się wciąż poprawiać. Przewidywania naukowca z Hongkongu mogą się wkrótce potwierdzić – zgodnie z deklaracjami producenta OpenAI, latem tego roku dostępna będzie nowa, „znacznie potężniejsza” wersja GPT-5.0.
Badanie pt. „Performance of Generative Artificial Intelligence in Dental Licensing Examinations” zostało opublikowane w czasopiśmie naukowym „International Dental Journal”.
T.H.
Źródła: https://www.zm-online.de/
POWIĄZANE ARTYKUŁY
ChatGPT może tworzyć administracyjne notatki medyczne nawet 10 razy szybciej niż lekarze przy zachowaniu podobnej dokładności – wynika z badania przeprowadzonego przez naukowców z Uniwersytetu w Uppsali. Szwedzcy naukowcy z Uniwersytetu w Uppsali we...
Okres pandemii nie pomógł prywatnym przychodniom i gabinetom lekarskim, co znalazło odbicie w bazie danych Krajowego Rejestru Długów. Choć wraz z początkiem tego roku zaległości medyków zaczęły się zmniejszać, to już w II kwartale wzrosły. Obecnie wy...
Oddział wojewódzki Narodowego Funduszu Zdrowia w Białymstoku ogłosił 27 konkursów dotyczących leczenia stomatologicznego – wszystkie z okresem obowiązywania od 1 sierpnia do 31 grudnia 2022 r. Jak czytamy w ogłoszeniach, świadczenia miałyby być real...
Jak informuje portal poranny.pl, w 2020 r. w województwie podlaskim umowy z Narodowym Funduszem Zdrowia wypowiedziało 20 gabinetów stomatologicznych. W połowie lipca br. w województwie podlaskim umowy z NFZ-em miało podpisanych 229 gabinetów – ozna...
Kilkadziesiąt konkursów na leczenie stomatologiczne ogłosił śląski oddział wojewódzki Narodowego Funduszu Zdrowia w Katowicach. Oferty można składać do 14 września. Konkursy ogłoszone przez śląski NFZ obejmują: - świadczenia ogólnostomatologiczne u...
Grupa posłanek skierowała do ministra zdrowia interpelację, w której pyta, czy byłoby możliwe, aby higienistki stomatologiczne samodzielnie zawierały z NFZ-em umowy w zakresie świadczeń profilaktyki stomatologicznej. Autorkami interpelacji są posłan...
W roku 2016 konserwatysta, poseł do parlamentu Wielkiej Brytanii David Davies wzbudził kontrowersje, gdy zasugerował, że badania stomatologiczne mogą służyć do weryfikacji wieku nastoletnich uchodźców syryjskich i afgańskich, którzy – jego zdaniem – ...
W październiku odbędzie się zdecydowana większość egzaminów PES z dziedzin stomatologicznych. Centrum Egzaminów Medycznych opublikowało też wytyczne sanitarne dla osób do nich przystępujących. Jak czytamy na stronie CEM, egzamin PES z chirurgii stom...
Lekarze dentyści praktykujący w Irlandii Północnej przekazali tamtejszemu ministrowi zdrowia Robinowi Swannowi sugestię, by wprowadzić daleko idące zmiany w przestarzałych – ich zdaniem – i nieprzystających do obecnej sytuacji kontraktach NHS General...
Narodowy Fundusz Zdrowia w Lublinie poinformował o unieważnieniu postępowań w trybie konkursu ofert w sprawie zawarcia umów o udzielanie świadczeń stomatologicznych. Unieważnione konkursy dotyczyły leczenia ogólnostomatologicznego na terenie gmin Pi...
Termin składania wniosków o przystąpienie do Państwowego Egzaminu Specjalizacyjnego w sesji wiosennej 2024 r. upływa 2 stycznia 2024 r. – poinformowało Centrum Egzaminów Medycznych. Egzaminy PES ze specjalizacji lekarsko-dentystycznych będą odbywać s...
