Ученые научили ИИ по снимкам МРТ воссоздавать картинку, на которую смотрит человек
На шаг ближе к визуализации снов и мыслей
Ученые из Научного института Вайцмана в Израиле создали ИИ, который на основе МРТ-снимка мозга воспроизводит изображение, на которое смотрел человек. Также ИИ-инструмент может и наоборот по изображению предсказать активность мозга.
Как сообщает MIT Technology Review, исследователи надеются, что эта разработка позволит узнать больше о том, как работает мозг, и, возможно, поможет людям, страдающим от синдрома запертого сознания, общаться или поможет ученым воссоздать содержание снов.
Нейробиологи годами работали над способами использования функциональной магнитно-резонансной томографии (фМРТ) для реконструкции того, что люди видят и что происходит в их сознании. Первые попытки давали размытые и трудноразличимые изображения.
На этот раз Мишаль Ирани ее коллеги начали с анализа общедоступных данных сканирования мозга. Функциональная МРТ отслеживает движение насыщенной кислородом крови в мозге. Те области, которые «загораются» на снимке, считаются самыми активными. Один элемент снимка охватывает около трёх кубических миллиметров ткани, в каждом кубическом миллиметре примерно 16 тысяч нейронов.
Во время исследования ученые показывали восьми людям по 9 тысяч изображений. На них и обучали ИИ, у которого две ветви — одна для предсказания структуры изображения (например, где находятся цвета), а вторая для предсказания его содержимого (например, связка бананов на тарелке).
На основе этих предсказаний ИИ создает итоговую картинку. В процессе команда столкнулась с проблемой — им не хватало данных, чтобы дальше обучать ИИ. Тогда они решили добавить энкодер, который наоборот предсказывает снимок мозга по изображению. В итоге этот энкодер и создавал примеры для тренировки ИИ-декодера.
Объединив данные нескольких исследований, учёные нашли области мозга с общими функциями у разных людей. Одна реагировала на изображения еды, другая — на спорт. Получившийся «универсальный энкодер мозга» можно применять к новому человеку почти без калибровки: ему нужен один час фМРТ вместо обычных 40.
При этом модель пока еще иногда ошибается. Например, она создала картинку с изображением трех сэндвичей, а не тортом и вместо собаки в ванне нарисовала козу. Тем не менее в сравнении с другими инструментами разработка, по словам Ирани, значительно их опередила.
PeopleImages / Shutterstock / Fotodom
Популярные комментарии
Евгения СамотохинаТо что отрицательные оценки нужны — я согласна, но здесь должен быть ряд факторов: 1) как по мне текущая система оценки (пятибалльная, а по факту четырехбальная) — не то чтобы объективная. Особенно чувствуется на объемных заданиях в старших классах, когда в тексте на 2 страницы допустил 2-3 ошибки и пооучаешь тройку. Как по мне система должна иметь разбивку хотя бы в 10 баллов. 2) Часто каждый учитель сам определяет как оценивать ученика. Если с точными науками и каким-нибудь диктантом ещё более-менее понятно, то с более творческими заданиями, пересказами вообще непонятно — у одного учителя ты получаешь 5 у другого за пересказ того же качества — 3.
«Двойка должна жить». Учитель — о том, почему плохие оценки нужны детям
АнастасияДа уж… Уважительное общение не включено в общеобразовательные стандарты и экзаменационные вопросы. Можно иметь аттестат и даже не один диплом, но при этом оставаться полнейшим хамом. Системный кризис.
«Короче, училка, варежку свою закрой». Топ-20 цитат из переписок родителей с учителями, от которых волосы встают дыбом
Виктория ИльинаА может, пора честно посмотреть на проблему не только глазами учителя? Учитель жалуется: слишком много часов, слишком много отчётности, слишком много требований сверху. И с этим трудно спорить. Но есть один неудобный вопрос: а не является ли сама школа частью проблемы, которую она годами создаёт? Попробуйте хотя бы на минуту посмотреть на ситуацию глазами ученика. Этот ребёнок, которого сегодня заставляют заучивать километры информации «для галочки», завтра станет взрослым человеком. Возможно, чиновником, руководителем, тем самым человеком, который будет писать новые стандарты, программы и инструкции для школ. Не удивительно ли, что система воспроизводит сама себя? Главная ошибка многих педагогов — не в любви к знаниям. Знания нужны. Ошибка в другом: в убеждении, что ребёнку обязательно нужно загрузить весь огромный школьный багаж, не задумываясь, что из этого действительно пригодится именно ему. И когда обществу годами пытаются доказать ценность каждого килограмма ненужной информации, неудивительно, что эта работа перестаёт восприниматься как источник реальной пользы. Может быть, выход проще? Не превращать каждый предмет в борьбу за выживание. Не ломать детей и не выгорать самим. Если ребёнку ваш предмет объективно мешает сосредоточиться на тех знаниях, которые нужны ему для будущего, — поставьте законную тройку и дайте ему возможность развиваться дальше. Иногда настоящая педагогика — это не заставить выучить всё. А понять, что именно действительно стоит учить.
«Мы согласились со своим бесправием». Учительница – о том, почему ее коллеги терпят унижения
