Исследование: генеративный ИИ улучшает обучение на курсах по разработке ПО

Исследователи из Университета Dongyang Mirae в Южной Корее опубликовали новую статью на arXiv, в которой рассматривается влияние ChatGPT на качество образования в области компьютерных наук. Результаты показывают, что генеративный ИИ может быть полезным для студентов.

Исследователи Сонхи Хванг, Юду Ким и Хиджин Ли работали с 36 студентами, изучающими компьютерные науки. Эксперимент включал два этапа и продлился месяц.

На первом этапе работу всех 36 студентов оценивали на основе показателей производительности, таких как качество кода, инновации и соблюдение требований проекта. 15 лучших перешли на второй этап, где выбрали единственного финалиста.

Исследователи обнаружили, что те студенты, которые много использовали ChatGPT на разных этапах проекта, включая генерацию идей, документирование, разработку программного обеспечения и обеспечение качества, имели более высокие показатели и баллы. Сравнительный анализ между студентами первого и второго раунда выявил значительную разницу в их опыте использования искусственного интеллекта для разработки софта.

Опрос перед конкурсом указывает на разницу в использовании GPT среди участников, сравнивая финалистов первого тура и тех, кто не прошёл этот этап

Процент участников, которые использовали ChatGPT для различных задач

В опросе после исследования его авторы обнаружили, что 78% согласны с идеей полезности ИИ для более глубокого понимания сложных тем. Три четверти студентов заявили, что ChatGPT значительно улучшил их практические навыки, и столько же отметили, что ИИ положительно повлиял на их карьерный рост.

В этой таблице суммируются уровни удовлетворенности участников относительно влияния ChatGPT на их обучение, практические навыки и развитие карьеры. Ответы
классифицируются как положительные (Pos), нейтральные (Neu) и отрицательные (Neg)

Между тем исследователи из Пенсильванского университета обнаружили, что турецкие старшеклассники, у которых был доступ к ChatGPT при выполнении практических математических задач, показали худшие результаты в тесте по сравнению с учениками, у которых не было доступа к ИИ-помощнику. Те, у кого был ChatGPT, верно решили на 48% больше практических задач, но в конечном итоге набрали на 17% меньше баллов на тесте по теме, которую изучали. Однако в опросах, сопровождавших эксперимент, студенты заявили, что не считают, будто ChatGPT заставил их меньше учиться. Студенты с репетитором ИИ считали, что они сдали тест значительно лучше, хотя это было не так.