Штучний інтелект пройшов тест на деменцію: старіші моделі показали гірші результати
Нейрологи протестували різні версії ШІ за допомогою Монреальського тесту на розумові здібності
Дослідження: старіші моделі ШІ гірше справляються з тестами на когнітивні здібності
Нейрологи виявили цікаву закономірність: старіші моделі штучного інтелекту демонструють нижчі показники розумових здібностей порівняно з новішими версіями. Це з'ясувалося під час дослідження, результати якого опублікували в престижному науковому журналі BMJ.
Для оцінки когнітивних здібностей ШІ науковці використали Монреальський тест – той самий, що застосовують для діагностики деменції та хвороби Альцгеймера у людей. Дослідження охопило п'ять сучасних моделей штучного інтелекту: ChatGPT-4, ChatGPT-4o, Claude 3.5, Gemini 1 та Gemini 1.5.
Особливо показовим виявилося завдання з малюванням годинника, де потрібно було зобразити час 11:10. Жодна з моделей не впоралася з цим завданням бездоганно, проте старіші версії, зокрема Gemini 1 та Gemini 1.5, продемонстрували помітно гірші результати. Це завдання оцінює здатність до просторово-часового мислення.
Рішення провести таке дослідження не випадкове. Штучний інтелект все глибше інтегрується в наше життя, особливо в медичній галузі, де його використовують для виявлення прихованих симптомів захворювань. Тому важливо розуміти його можливості та обмеження.
Найстаріша з протестованих моделей – Gemini 1 – показала найнижчі результати в завданнях на увагу та запам'ятовування нової інформації. Такі когнітивні функції часто порушуються при нейродегенеративних захворюваннях у людей похилого віку.
Втім, дослідники підкреслюють, що попри певні паралелі між деградацією людського мозку та зниженням ефективності старіших моделей ШІ, природа цих явищ різна. Вони застерігають від надмірної довіри до штучного інтелекту в завданнях, які вимагають складного просторового мислення та виконавчих функцій.
Цікаво, що новіші моделі, хоч і краще впоралися з тестом, мають свої особливості. Навчання на основі відгуків користувачів зробило їх менш ефективними у відповідях на прості запитання. Окрім того, зростаюча залежність людей від ШІ, схоже, негативно впливає на наші власні здібності до критичного мислення та перевірки фактів.
Це дослідження відкриває нову сторінку в розумінні еволюції штучного інтелекту та нагадує про важливість збалансованого підходу до його використання в різних сферах життя.
Більше новин читайте на GreenPost.
