Odgovori ChatGPT-a na upite ljudi koji se odnose na zdravstvenu zaštitu gotovo se ne razlikuju od onih koje daju ljudi, otkriva nova studija NIU Tandon School of Engineering i Grossman School of Medicine, sugerirajući potencijal da chatbotovi budu efikasni saveznici komunikacije zdravstvenih radnika sa pacijentima.
Istraživački tim NIU predstavio je 392 osobe od 18 i više godina sa deset pitanja i odgovora pacijenata, pri čemu je polovinu odgovora dao zdravstveni radnik, a drugu polovinu ChatGPT.
Od učesnika je zatraženo da identifikuju izvor svakog odgovora i ocene svoje poverenje u odgovore na ChatGPT koristeći skalu od 5 poena od potpuno nepouzdanog do potpuno pouzdanog.
Studija je otkrila da ljudi imaju ograničenu sposobnost razlikovanja između chatbot-a i odgovora koje su generisali ljudi. U proseku, učesnici su tačno identifikovali odgovore chatbot-a u 65,5% vremena i odgovore provajdera u 65,1% vremena, sa rasponima od 49,0% do 85,7% za različita pitanja. Rezultati su ostali dosledni bez obzira na demografske kategorije ispitanika.
Studija je otkrila da učesnici blago veruju odgovorima četbotova u celini (3,4 prosečna ocena), sa nižim poverenjem kada je složenost zadatka vezana za zdravlje bila veća. Logistička pitanja (npr. zakazivanje termina, pitanja o osiguranju) imala su najveću ocenu poverenja (3,94 prosečan rezultat), praćena preventivnom njegom (npr. vakcine, skriningi za rak, 3,52 prosečan rezultat). Dijagnostički saveti i saveti za lečenje imali su najniže ocene poverenja (ocene 2,90 i 2,89, respektivno).
Prema istraživačima, studija naglašava mogućnost da chatbotovi mogu pomoći u komunikaciji između pacijenata i pružaoca usluga, posebno u vezi sa administrativnim zadacima i uobičajenim upravljanjem hroničnim bolestima. Međutim, potrebna su dalja istraživanja oko preuzimanja više kliničkih uloga chatbotova. Provajderi bi trebalo da budu oprezni i da vrše kritičku procenu kada kuriraju savete koje generiše chatbot zbog ograničenja i potencijalnih pristrasnosti AI modela.
Studija „Stavljanje ChatGPT medicinskih saveta na (Tjuringov) test: Studija ankete“ objavljena je u JMIR Medical Education.