Петербургские ученые научили нейросеть различать эмоциональную речь человека
Ученые СПбГУ обучили нейросеть распознавать эмоциональную речь людей. Современные технологии уже могут это делать, но когда человек в своей речи ярко выражает эмоции, плачет или громко кричит, то задача сильно усложняется. Как рассказали ТАСС авторы разработки, ИИ учился на основе интервью с жертвами Холокоста,
«Лингвисты Санкт-Петербургского государственного университета модифицировали нейросеть Wav2Vec 2.0, „научив“ ее распознавать речь людей, рассказывающих о сильном эмоциональном потрясении, которое они пережили. Нейросеть была обучена на интервью с жертвами Холокоста, записанными фондом мемориального комплекса истории Холокоста Яд ва-Шем», — сообщили в СПбГУ.
В ходе своей работы ученые обработали более 26 часов разговоров. Они также составили социолингвистическую разметку, определи пол, возраст, примерный регион происхождения и родной язык людей из интервью. Все эти признаки значительно влияют на акцент и лексику человека, а значит, и на то, как качественно речь будет распознаваться ИИ.
«Мы использовали предобученную на русском языке глубокую нейросеть Wav2Vec 2.0. Идея ее работы заключается в том, чтобы выучить сопоставление каждого звука устной речи человека соответствующей букве алфавита. Конкретно данная архитектура нейросети также использует так называемый механизм внимания, для того чтобы научиться „обращать внимание“ на значимые для определения той или иной буквы по звуку признаки, что значительно повышает качество результата», — рассказал магистрант кафедры математической лингвистики СПбГУ Михаил Долгушин.
NicoElNino / Shutterstock / Fotodom
Популярные комментарии
ОльгаК сыну постоянно цепляются, хотя он выглядит аккуратно, даже иногда носит бабочку. Не нравятся его брюки. Требуют сменить их на классические, которые неудобны, мнутся, вытираются и у них вытягиваются колени. Говорят, что одет не по уставу. Но в уставе школы прописан «опрятный внешний вид». Чем мятые классические штаны с вытянутыми коленками опрятнее серых джинсов, которые и как джинсы-то не выглядят и которые ребенок носит с трикотажным пиджаком, рубашкой и бабочкой — непонятно.
«Собранный хвост — признак неблагополучной семьи»: почему детей все еще выгоняют с уроков за внешний вид
HelenКак же сложно быть подростком. Казалось бы, что нет ничего проще, как подойти к мальчику или девочке и сказать, что ты мне нравишься.Но нет, проблемы какие-то дурацкие в голове.Я своему ребенку посоветовала решать проблемы делами. Нравится кто-то? Подойди, познакомься простыми фразами: привет, как тебя зовут, самому представится, где учишься, где живёшь, есть ли домашние животные, есть ли братья сестры, чем занимается вне школы, какие есть увлечения, и прочее, угости шоколадкой, предложи сходить в кино, после уроков съесть по мороженому, на переменах поговорить об интересах. Обменяться номерами телефонов. Да куча всяких разностей. Можно ничего не говорить о своих «любовях», а входить в жизнь понравившегося человечка. Подарить карандаш простой и красивый, ручку, резинку стирательную. В столовой сесть рядом или место занять. Кидать комплименты приятные.Можно предложить сидеть вместе за партой.При влюбленностях подростков важно помнить, что самое главное, что есть у него -это жизнь и нет ничего важнее жизни. Родителям в такой трудный промежуток жизни подростка нужно быть рядом и поддерживать в ребенке самоуважение, развитие критичности мышления, рациональности общения.
Я влюбился в одноклассницу, но боюсь ей признаться. Что мне делать?
Алина Сен-ЛюкУжасная, некорректная акция, которая не учит добру и милосердию, ибо благотворительность — это когда от себя что-то отрываешь, а не у другого человека забираешь… Да и не было никогда у учителя моря цветов в вёдрах. Не все ведь в первых классах работают.
«Все эти акции вместо цветов — спекуляция чувствами учителя»: педагоги — о том, нужны ли им букеты на 1 Сентября






