Як ChatGPT і критичне мислення змінюють студентські роботи: несподівані результати дослідження
Нове дослідження доводить, що доступ студентів до ChatGPT допомагає їм створювати роботи з кращими оцінками і більш професійним виглядом. Але цікаво, що тренінг з критичного мислення виявився ефективним у зовсім іншій площині — він вплинув на різноманітність та унікальність ідей, які традиційна система оцінювання не завжди враховує.
Як проходило дослідження: розподіл та завдання
В експерименті взяли участь 1 053 першокурсники, що вивчають економіку, менеджмент і фінанси в університеті Бокконі. Їх поділили на чотири групи:
- Перша отримала доступ до ChatGPT Edu на базі GPT-4o.
- Друга пройшла тренінг з причинно-наслідкового мислення.
- Третя поєднала обидва підходи.
- Контрольна група не отримала жодної з інтервенцій.
Усі учасники мали 45 хвилин, щоб розв’язати реальну бізнес-завдання — запропонувати рекомендації для підвищення популярності університетського мерчу серед випускників.
ChatGPT підвищує оцінки і наближає студентів до експертів
Студенти з доступом до ChatGPT отримали в середньому на 0,86 бала більше за п’ятибальною шкалою, ніж ті, хто не користувався цією технологією (які набрали 2,09). Їхні відповіді не тільки були лаконічнішими, а й набагато більше відповідали рекомендаціям трьох професіоналів у маркетингу.
Щоб зрозуміти, у чому саме полягає вплив штучного інтелекту, дослідники проаналізували такі складові, як:
- Логічність викладу.
- Стиль письма.
- Кількість ідей у роботі.
- Різноманітність пропозицій.
За підрахунками, близько половини позитивного ефекту можна було пояснити саме покращеннями в цих аспектах. Це свідчить, що ChatGPT розвивав не лише форму, а й зміст відповідей студентів.
Тренінг із критичного мислення породжує унікальні ідеї
Інша група — ті, хто пройшов навчання за методикою причинно-наслідкового мислення — проявили помітно іншу перевагу. Вони краще розуміли, як пов’язані між собою причини та наслідки, критично оцінювали свої рішення і враховували ситуації, за яких запропоновані стратегії можуть не спрацювати.
Їхні відповіді вирізнялися:
- Більшим застосуванням механістичного та фальсифікаційного підходів.
- Різноманіттям думок, які відрізнялися від інших учасників.
- Глибиною і нестандартністю мислення.
Однак їхні роботи не отримували вищих балів за традиційною системою оцінювання, а подекуди навіть демонстрували дещо гірші результати. Справа у тому, що такі якості, як оригінальність і складність ідей, не були предметом оцінки. Шкала віддавала перевагу більш звичним розв’язкам і кількості ідей, а не їх унікальності.
Синергія ChatGPT і критичного мислення
Найцікавіше, що студенти, які отримали і доступ до ChatGPT, і тренінг з критичного мислення, поєднали переваги обох підходів.
Їхні роботи:
- Мали високі оцінки і багато ідей, як у групи ChatGPT.
- Відрізнялися унікальністю та різнобарв’ям мислення, наче у критичного мислення.
- Демонстрували краще узгодження логіки й глибше розуміння механізмів і можливостей несправжності тверджень.
Це показує, що немає необхідності обирати між розвитком когнітивних навичок і роботі зі штучним інтелектом — вони доповнюють один одного і відкривають більші можливості для студентів.
Як коментує експерт
Фінансовий директор OpenAI Сара Фраєр у соцмережах зауважила: «Штучний інтелект і критичне мислення не в конфлікті, вони справді доповнюють одне одного». Вона додала, що «AI допомагає швидко створювати якісний контент, але гарний вигляд не завжди означає глибокі роздуми».
Проблема оцінювання та майбутнє навчання
Дослідники звернули увагу, що оцінювання досі базується на традиційних критеріях, які недооцінюють оригінальні та нестандартні ідеї студентів, особливо в епоху, коли AI здатний генерувати бездоганні тексти.
Основні аспекти оцінки включали:
- Згоду з рекомендаціями профі у сфері маркетингу.
- Кількість представлених ідей.
- Загальну логічність викладу.
Оцінювачі — 20 навчальних магістрів — ставили високі бали тим, чиї роботи були схожі на фахові відповіді і демонстрували структуру і чіткість. Водночас відповіді з унікальним, але відмінним від більшості підходом отримували нижчий бал.
Завдання для освітян полягає в тому, щоб переглянути підходи до викладання та оцінювання. Вони повинні включати критерії, що цінують оригінальність, різноманіття думок і глибину аналізу — особливо у світі, де AI майже миттєво генерує бездоганний текст.
Варто також пам’ятати, що експеримент вимірював лише якість представлених робіт, а не глибину знань, які студенти дійсно засвоїли. Відповідно, невідомо, чи справді легкий доступ до ChatGPT веде до кращого розуміння матеріалу, чи лише дає змогу отримати “гарний” результат.
