Ученые разработали систему ИИ, которую они назвали «семантическим декодером»

ТехИнсайдерHi-Tech

ИИ может расшифровать, что слышит и видит мозг, и превратить в поток текста

Владимир Губайловский

e87d0787a2792ec7b04f6ede790f1150_ce_1613x1076x0x134.jpg
Ученые готовят томограф для фМРТ. University of Texas at Austin

Это еще не чтение мыслей, но серьезный шаг в этом направлении

Исследователи из Техасского университета в Остине разработали систему ИИ, которую они назвали «семантическим декодером». Система может преобразовывать активность мозга человека — во время прослушивания истории или просмотра видео — в непрерывный поток текста. Ученые считают, что система может помочь людям, которые находятся в сознании, но физически не могут говорить.

Семантический декодер, разработанный учеными из Техасского университета в Остине, может преобразовывать активность мозга в непрерывный поток текста. Ученые считают, что такая система помочь людям, которые находятся в сознании, но не могут говорить физически, например, тем, кто пострадал от инсульта.

Работа опирается на модель (трансформенная технология), подобную той, что используются в системах ChatGPT компании Open AI и Bard компании Google.

В отличие от других систем декодирования, эта система не требует установки имплантатов в мозг, то есть она является неинвазивной. Участникам также не нужно использовать слова только из заранее утвержденного  списка. Активность мозга измеряется с помощью фМРТ-сканера. Сначала семантический декодер обучается, пока человек прослушивает в сканере многочасовые подкасты, а сканер снимает показания мозга. После такого обучения, когда участник прослушивает новую историю или смотрит видео, машина создает текст исключительно на основе активности мозга.

Результат не является расшифровкой слово в слово. Вместо этого исследователи разработали декодер таким образом, чтобы он улавливал суть сказанного или продуманного. Пока ему это удается не всегда. Но примерно в половине случаев, отслеживая активность мозга участника, машина выдает текст близко (а иногда и точно) соответствующий смыслу исходных слов.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Возможна ли дружба между мужчиной и женщиной? Возможна ли дружба между мужчиной и женщиной?

Какое место занимает сексуальность в отношениях друзей разного пола?

Psychologies
«Плейлист волонтера»: почему это один из лучших сериалов о поиске пропавших без вести «Плейлист волонтера»: почему это один из лучших сериалов о поиске пропавших без вести

Зачем смотреть сериал и почему это одна из лучших историй про розыск людей

Forbes
Поразительные паразиты Поразительные паразиты

Есть в паразитах и своя пугающая красота: они изящно манипулируют хозяевами

ТехИнсайдер
«Я не могу написать свое имя, мне это запрещено»: Кейт Миддлтон не могла дать автографы детям «Я не могу написать свое имя, мне это запрещено»: Кейт Миддлтон не могла дать автографы детям

Кейт Миддлтон допустила редкие откровения о себе и о детях

VOICE
«Джеймс Уэбб» нашел водяной пар в атмосфере планеты близкой к Земле «Джеймс Уэбб» нашел водяной пар в атмосфере планеты близкой к Земле

Из-за чего на экзопланетах может возникать водяной пар?

ТехИнсайдер
Повелители инвойсов: как выходцы из онлайн-банков построили в Германии стартап Monite Повелители инвойсов: как выходцы из онлайн-банков построили в Германии стартап Monite

Как Иван Марьясин задумал стартап по финансовой автоматизации

Forbes
«Любовью можно управлять»: как это делать, чтобы остаться вместе надолго «Любовью можно управлять»: как это делать, чтобы остаться вместе надолго

Как мы сами влияем на продолжительность отношений?

Psychologies
Эпоха светлого: кто и когда впервые приготовил лагер — самое популярное пиво в мире? Эпоха светлого: кто и когда впервые приготовил лагер — самое популярное пиво в мире?

Как конкуренция двух пивных регионов Европы дала начало известному напитку

Вокруг света
8 полезных привычек, которые помогут крепкому сну 8 полезных привычек, которые помогут крепкому сну

Что необходимо делать перед сном, чтобы сохранить свое здоровье

ТехИнсайдер
Успевать все и оставаться королевой: 5 лайфхаков бизнесвумен, которые сделают твою жизнь лучше Успевать все и оставаться королевой: 5 лайфхаков бизнесвумен, которые сделают твою жизнь лучше

Как играючи управлять бесконечным круговоротом дел и не забывать о красоте

VOICE
«Я играю стерву. Любите ее и ненавидьте!»: Мария Горбань раскрыла секреты сериала «Звездный суд» «Я играю стерву. Любите ее и ненавидьте!»: Мария Горбань раскрыла секреты сериала «Звездный суд»

Мария Горбань сыграла вместе с Максимом Лагашкиным в комедийном сериале

VOICE
Хоопонопоно: как работает гавайский метод принятия и прощения — меняя мир, начните с себя Хоопонопоно: как работает гавайский метод принятия и прощения — меняя мир, начните с себя

Каждый из нас — часть большого мира, а большой мир живет в каждом из нас

Psychologies
Особенный ребенок Особенный ребенок

Как на ранних стадиях распознать, что с ребенком что-то не так

Лиза
Хозяйкам на заметку: 5 удивительных методов использования дрожжей, о которых вы и не догадывались Хозяйкам на заметку: 5 удивительных методов использования дрожжей, о которых вы и не догадывались

Дрожжи можно использовать не только в кулинарии!

ТехИнсайдер
Осьминоги и кальмары «пробуют» окружающий мир своими щупальцами — и у них совершенно разные вкусы Осьминоги и кальмары «пробуют» окружающий мир своими щупальцами — и у них совершенно разные вкусы

Ученые исследовали рецепторы на присосках кальмаров и осьминогов

ТехИнсайдер
5 примеров того, как научные открытия влияли на искусство 5 примеров того, как научные открытия влияли на искусство

Как научные открытия находили свое отражение в изобразительном искусстве

СНОБ
Загадка дюн Утопии: когда Марс был полон влаги и почему стал безжизненной пустыней? Загадка дюн Утопии: когда Марс был полон влаги и почему стал безжизненной пустыней?

Из-за чего сосед по Солнечной системе потерял всю свою воду

Вокруг света
Как перестать просыпаться до будильника, и почему это происходит? Интересные факты! Как перестать просыпаться до будильника, и почему это происходит? Интересные факты!

Почему некоторые люди склонны постоянно просыпаться чуть раньше будильника

ТехИнсайдер
От Дании до Японии: пять главных коронаций монархов Европы и Азии за последние 50 лет От Дании до Японии: пять главных коронаций монархов Европы и Азии за последние 50 лет

Яркие церемонии восшествия на престол и пять действующих правителей

Forbes
«Любой может сдать». За сообщения в ГИБДД о пьяных стали платить «Любой может сдать». За сообщения в ГИБДД о пьяных стали платить

За сообщения о пьяных водителях в ГИБДД начали платить по 2–4 тыс. руб.

РБК
Почему женщины ненавидят друг друга: 3 причины Почему женщины ненавидят друг друга: 3 причины

Что побуждает женщин соревноваться друг с другом — даже при хороших отношениях?

Psychologies
«Безос. Человек, создавший Amazon»: почему фильм о миллиардере оказался таким скучным «Безос. Человек, создавший Amazon»: почему фильм о миллиардере оказался таким скучным

Почему «Безос. Человек, создавший Amazon» совершенно не оправдывает ожидания

Forbes
«Челюсть отвисает от масштаба»: актриса Софья Лебедева о работе c Netfliх и AppleTV+ «Челюсть отвисает от масштаба»: актриса Софья Лебедева о работе c Netfliх и AppleTV+

Актриса Софья Лебедева — о специфике работы с мировыми продакшенами

Forbes
Идеальный партнер: в чем опасность мифа о единственном подходящем человеке — ответ ученых Идеальный партнер: в чем опасность мифа о единственном подходящем человеке — ответ ученых

Существует ли на свете идеальный партнер?

Psychologies
Весенние хиты Весенние хиты

Почаще ешь ранние овощи и зелень – сила живых витаминов может творить чудеса

Лиза
Деменция на подходе: как распознать болезнь — 8 признаков Деменция на подходе: как распознать болезнь — 8 признаков

Как не пропустить деменцию?

Psychologies
«Девушка с прицепами», или как я вышла замуж с тремя детьми «Девушка с прицепами», или как я вышла замуж с тремя детьми

История Ольги Шустваль, автора книги «Путь материнства. Рождение силы»

Psychologies
Избегать избегания: как мы проживаем утрату (не только смерть) и почему горевать — нормально Избегать избегания: как мы проживаем утрату (не только смерть) и почему горевать — нормально

Отрывок из книги «Смерть в большом городе»

Inc.
Катя Chepikk: «Стать большим артистом — это не мечта. Это мое предназначение» Катя Chepikk: «Стать большим артистом — это не мечта. Это мое предназначение»

Катя Chepikk не сомневается в своем успехе

ЖАРА Magazine
Эволюция русалочки: нужен ли под водой темный цвет кожи Эволюция русалочки: нужен ли под водой темный цвет кожи

Существует ли эволюционная выгода для русалок от темной кожи под водой?

СНОБ
Открыть в приложении