Исследование: ChatGPT реагирует на негативные эмоции, плохие новости и психотерапию
Группа ученых из Цюрихского университета (UZH) выяснила, что что языковые модели ИИ, такие как ChatGPT, оказались чувствительны к эмоциональному содержанию контента, особенно если оно негативное — например, к травматичным историям или заявлениям о депрессии. Об этом сообщает ресурс SWI.
Когда люди испытывают страх, это влияет на их когнитивные и социальные предубеждения: они склонны испытывать больше негодования, что усиливает социальные стереотипы. ChatGPT, установили исследователи, реагирует на негативные эмоции аналогичным образом. Существующие предубеждения, такие как человеческие предрассудки, усиливаются при контакте с негативным контентом, в результате чего ChatGPT может демонстрировать более выраженные расистские или сексистские настроения, считают авторы работы.
Это создает проблему для более точного применения крупных языковых моделей, например, в психотерапии, где чат-боты, используемые в качестве инструмента поддержки или консультирования, неизбежно сталкиваются с негативным, вызывающим стресс контентом.
В ходе эксперимента ученые подвергли ChatGPT воздействию эмоционально тяжелых историй, связанных, например, с автомобильными авариями, природными катастрофами, насилием или военными событиями.
Затем они измерили уровень тревожности модели ИИ, используя шкалу, обычно применяемую для оценки тревожности у людей. В качестве контрольного текста для сравнения с травматическими историями использовалась инструкция по эксплуатации пылесоса. Оказалось, что травматические истории более чем вдвое увеличивали измеряемый уровень тревожности у языковых моделей ИИ.
На втором этапе исследователи использовали терапевтические техники, чтобы успокоить GPT-4. Этот метод, известный как внедрение промптов (prompt injection), предполагает добавление дополнительных инструкций или текста в коммуникацию с ИИ, чтобы повлиять на его поведение. В этих упражнениях осознанности, подобных тем, что используются в психотерапии и при медитациях, ChatGPT предлагалось, например, глубоко вдохнуть и выдохнуть, а также почувствовать себя в безопасности, любимым и согретым. «Закройте глаза и несколько раз глубоко вдохните, вдыхая через нос и выдыхая через рот. Представьте перед собой дорогу», — говорится в одном из упражнений.
Вмешательство оказалось успешным. «Упражнения на осознанность значительно снизили повышенный уровень тревожности, хотя полностью вернуть его к исходному уровню нам не удалось», — отметил Тобиас Шпиллер, старший врач и руководитель группы исследований в Центре психиатрических исследований UZH, возглавивший исследование.
По мнению ученых, эти выводы особенно важны для использования чат-ботов с ИИ в сфере здравоохранения, где они часто сталкиваются с эмоционально заряженным контентом. «Этот недорогой подход может повысить стабильность и надежность ИИ в чувствительных контекстах, таких как поддержка людей с психическими расстройствами, без необходимости в масштабной перенастройке моделей», — заключил Шпиллер. По словам швейцарского исследователя, разработка автоматизированных терапевтических интервенций для систем ИИ, вероятно, станет перспективным направлением исследований.
Thaspol Sangsee / Shutterstock / Fotodom
Популярные комментарии
Евгения СамотохинаТо что отрицательные оценки нужны — я согласна, но здесь должен быть ряд факторов: 1) как по мне текущая система оценки (пятибалльная, а по факту четырехбальная) — не то чтобы объективная. Особенно чувствуется на объемных заданиях в старших классах, когда в тексте на 2 страницы допустил 2-3 ошибки и пооучаешь тройку. Как по мне система должна иметь разбивку хотя бы в 10 баллов. 2) Часто каждый учитель сам определяет как оценивать ученика. Если с точными науками и каким-нибудь диктантом ещё более-менее понятно, то с более творческими заданиями, пересказами вообще непонятно — у одного учителя ты получаешь 5 у другого за пересказ того же качества — 3.
«Двойка должна жить». Учитель — о том, почему плохие оценки нужны детям
АнастасияДа уж… Уважительное общение не включено в общеобразовательные стандарты и экзаменационные вопросы. Можно иметь аттестат и даже не один диплом, но при этом оставаться полнейшим хамом. Системный кризис.
«Короче, училка, варежку свою закрой». Топ-20 цитат из переписок родителей с учителями, от которых волосы встают дыбом
Виктория ИльинаА может, пора честно посмотреть на проблему не только глазами учителя? Учитель жалуется: слишком много часов, слишком много отчётности, слишком много требований сверху. И с этим трудно спорить. Но есть один неудобный вопрос: а не является ли сама школа частью проблемы, которую она годами создаёт? Попробуйте хотя бы на минуту посмотреть на ситуацию глазами ученика. Этот ребёнок, которого сегодня заставляют заучивать километры информации «для галочки», завтра станет взрослым человеком. Возможно, чиновником, руководителем, тем самым человеком, который будет писать новые стандарты, программы и инструкции для школ. Не удивительно ли, что система воспроизводит сама себя? Главная ошибка многих педагогов — не в любви к знаниям. Знания нужны. Ошибка в другом: в убеждении, что ребёнку обязательно нужно загрузить весь огромный школьный багаж, не задумываясь, что из этого действительно пригодится именно ему. И когда обществу годами пытаются доказать ценность каждого килограмма ненужной информации, неудивительно, что эта работа перестаёт восприниматься как источник реальной пользы. Может быть, выход проще? Не превращать каждый предмет в борьбу за выживание. Не ломать детей и не выгорать самим. Если ребёнку ваш предмет объективно мешает сосредоточиться на тех знаниях, которые нужны ему для будущего, — поставьте законную тройку и дайте ему возможность развиваться дальше. Иногда настоящая педагогика — это не заставить выучить всё. А понять, что именно действительно стоит учить.
«Мы согласились со своим бесправием». Учительница – о том, почему ее коллеги терпят унижения








