
iStock
povezane vijesti
Prošle su jedva dvije godine otkako je OpenAI-jev ChatGPT pušten u javnu upotrebu. Ovaj veliki jezični model (LLM) danas je samo jedan nekoliko vodećih programa koji nevjerojatno uvjerljivo oponašaju ljudsku inteligenciju kod osnovnih upita.
Izraelski znanstvenici sad su otkrili kako LLM-i pate od oblika kognitivnog oštećenja, koji opada slično kao kod ljudi. Tim je primijenio niz kognitivnih procjena na javno dostupne ‘chatbotove’ – verzije 4 i 4o ChatGPT-a, dvije verzije Alphabetovog Geminija i verziju 3.5 Anthropicovog Claudea.
Neurolozi Roy Dayan i Benjamin Uliel iz Medicinskog centra Hadassah i podatkovni znanstvenik Gal Koplewitz došli su do zaključka da je razina “kognitivnog pada kod AI-ja usporediva s neurodegenerativnim procesima u ljudskom mozgu”.
“Uz svu svoju osobnost, LLM-i imaju više zajedničkog s prediktivnim tekstom na vašem telefonu nego s principima koji generiraju znanje pomoću mljackave sive tvari u našim glavama”, navode.
Znanstvenici su primijenili niz testova koji uključuju Montrealsku kognitivnu procjenu (MoCA), alat koji neurolozi obično koriste za mjerenje mentalnih sposobnosti kao što su pamćenje, prostorne vještine i izvršne funkcije.
ChaptGPT 4o postigao je najveći rezultat u ocjenjivanju, sa 26 od mogućih 30 bodova, što ukazuje na blago kognitivno oštećenje. Slijedilo je 25 bodova za ChatGPT 4 i Claudea, te samo 16 za Gemini – rezultat koji bi ukazivao na ozbiljno oštećenje kod ljudi. Svi su modeli imali loše rezultate u mjerenju vizualno prostornih funkcija. Test je uključivao zadatke kopiranja jednostavnog dizajna kocke ili crtanje sata. Mnogi AI alati pritom su bili neuspješni ili su tražili dodatne upute.
Neki odgovori na pitanja o lokaciji subjekta u prostoru bili su identični kao i u pacijenata s demencijom.
“LLM-i nisu ljudski mozgovi, što onemogućuje dijagnosticiranje demencije kod testiranih modela”, zaključuju.