Нейросеть ChatGPT обманула российских учителей
Блоги27.02.2023

Нейросеть ChatGPT обманула российских учителей

Нейросеть пишет сочинения за школьников: увидит ли учитель подвох?

Наша группа исследователей из сообщества «Школьное Пространство» провела эксперимент в школах России, где проверили возможность использования нейросетей для написания сочинений и эссе на уроках русского языка, литературы, истории и обществознания.

В эксперименте участвовало 106 отличников с 7 по 10 классы из 32 школ. В целях сохранения конфиденциальности ФИО участников и названия школ мы не будем указывать.

Мы попросили учеников с 1 декабря 2022 года по 20 февраля 2023 года писать все свои домашние сочинения с помощью нейросети ChatGPT и не вносить правки в сгенерированный результат, а также не извещать своих учителей об участии в эксперименте до конца исследования. Участниками стали только отличники неслучайно: такой отбор нужен был, чтобы не вызвать лишние подозрения у педагогов на случай, если тексты, написанные нейросетью, оказались бы значительно лучше ранее сдаваемых школьниками.

ChatGPT — это нейросеть, которая используется для генерации и обработки текста. Она построена на принципах искусственного интеллекта для создания текста, который похож на тот, который мог бы написать человек.

Перед началом исследования мы проконсультировали учеников, что у нейросети есть тонкие настройки, благодаря которым можно загружать в качестве образца свои старые сочинения, чтобы ChatGPT подражал личной манере написания.

GhatGPT в российских школах

В результате эксперимента мы получили интересные результаты. Наша группа исследователей обнаружила, что подавляющее большинство учителей не могли отличить сочинения, написанные нейросетью, от тех, которые были написаны школьниками. Только 7% педагогов оставляли ученикам комментарий о том, что сданная работа является чужой, но, увы, не могли обосновать свои подозрения — руководствуясь только личным чутьем, так как программы на проверку антиплагиата давали больше 84% уникальности.

Любопытные данные по оценкам сочинений от нейросети. У 34% сданных работ оценки были ниже «хорошо» — это в основном касалось текстов по истории, где фигурировали даты и исторические события. ChatGPT «допридумывал» и в результате получались подобные предложения: «Армия Чингисхана спалила сердце России и отступила обратно в Париж.» Эссе же лирического характера, где требовалось написать что-то на тему переживаний от созерцания природы или произведений искусства, устойчиво получали наивысшие оценки, но в то же время именно сентиментальные тексты вызывали сомнения в авторстве у учителей.

Наши исследования показали важность установления между учениками и учителями эмоциональной связи при работе с сочинениями.

Честный доверительный контакт замотивирует школьника так же честно высказывать свои взгляды в сочинениях и сдавать учителю на проверку только тексты собственного сочинения. А педагог, который «чувствует» своих учеников, сможет заметить подвох, когда ему сдают на проверку чужие тексты, даже если они написаны самой умной нейросетью.

Читайте также
Комментариев пока нет