Дослідження впливу мовних моделей штучного інтелекту на когнітивні здібності

Нещодавнє глибоке дослідження, проведене відомим навчальним закладом, вивчало вплив використання великих мовних моделей (LLM) на когнітивні здібності в освітньому середовищі. Це дослідження тривало 4 місяці і залучало 54 учасників, з метою оцінки потенційного впливу використання LLM для написання завдань на функції мозку та когнітивні здібності.

Дослідницька команда поділила учасників на три групи: ті, хто використовує LLM, ті, хто використовує пошукові системи, і ті, хто покладається тільки на свій мозок. Кожна група виконала завдання з написання на різні теми в установлені терміни. Дослідження також включало четвертий раунд експерименту, в якому частина учасників змінила спосіб використання інструментів.

Для всебічної оцінки результатів учасників дослідження було використано кілька методів:

1. Запис електроенцефалографії (ЕЕГ): використовується для оцінки когнітивного залучення та навантаження.
2. Аналіз обробки природної мови (NLP): оцінка характеристик письмового контенту.
3. Інтерв'ю з учасниками: зрозуміти суб'єктивний досвід.
4. Людські викладачі та оцінювання AI: оцінка результатів написання.

Дослідження показали, що учасники, які використовували LLM, продемонстрували суттєві відмінності в кількох аспектах:

• Однорідність написання: Статті групи LLM демонструють високу узгодженість по різних темах.
• Використання іменованих сутностей: Група LLM використовує найбільшу кількість специфічних іменованих сутностей.
• Нейронні з'єднання: Група LLM виявила найслабше зв'язування мозкових мереж.
• Відчуття належності до статті: група LLM має найнижче відчуття належності до своїх творів.
• Здатність до спогадів: Група LLM показала найгірші результати при посиланні на власний щойно завершений матеріал.

У порівнянні, група, яка покладається лише на мозок, показала найкращі результати в різноманітності письма, активності мережі мозку та відчутті належності статті. Результати групи пошукових систем зазвичай перебувають між двома іншими групами.

Дослідження також виявило, що після зміни способу використання інструментів, моделі активності мозку учасників також змінюються. Учасники, які переходили від LLM до використання лише власного мозку, показували слабкіші нейронні зв'язки, тоді як учасники, які переходили від використання лише мозку до LLM, демонстрували кращу здатність до відтворення пам'яті.

Ці результати дослідження спровокували роздуми про застосування LLM в освіті. Хоча інструменти LLM можуть підвищити ефективність письма, надмірна залежність від них може вплинути на розвиток когнітивних здібностей, особливо для молодих користувачів. Дослідники радять провести більше довгострокових досліджень, щоб зрозуміти їхній вплив на людський мозок, перш ніж широко визнавати користь LLM для людства.

Варто зазначити, що це дослідження ще не пройшло рецензування колегами. Його не слід розуміти як повне заперечення цінності LLM, а швидше як нагадування про те, що нам потрібно обережно і стратегічно використовувати ці інструменти, щоб максимізувати їх переваги, одночасно мінімізуючи потенційні негативні наслідки.