Инженеры разработали наушники, способные распознавать мимику лица пользователя

N+1Наука

Наушники со встроенным локатором распознали выражение лица по форме щек

Андрей Фокин

Ke Li et al. / Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies, 2022

Американские инженеры разработали наушники, способные распознавать мимику лица пользователя. Для этого в каждый наушник встроен миниатюрный сонар, который с помощью звуковой эхолокации считывает информацию о движениях боковой области лица, после чего алгоритм машинного обучения восстанавливает выражение лица пользователя в реальном времени с высокой точностью. Эту информацию затем можно использовать, например, для создания анимированных аватаров в приложениях для общения. Статья с описанием устройства опубликована в журнале The Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies.

Технологии распознавания мимики лица человека, которые уже давно успешно используются для создания анимации персонажей в кино видеоиграх, постепенно проникают и в нашу повседневную жизнь. Например, компания NVIDIA предложила использовать распознавание выражения лица для снижения объемов данных, передаваемых по сети во время видеозвонков. Вместо того чтобы посылать все кадры, алгоритм сжатия посылает один кадр с лицом и данные о ключевых точках на нем, после чего компьютер на принимающей стороне анимирует этот кадр с помощью нейросети.

Эта и многие другие подобные технологии распознавания мимики обычно требуют, чтобы перед лицом постоянно находилась видеокамера, что может быть не всегда удобно. Для решения этой проблемы американские инженеры придумали технологию C-Face, которая с помощью встроенных в наушники двух камер и алгоритма машинного обучения способна распознавать мимику человека в реальном времени по движениям небольшой боковой области лица, попадающей в поле зрения устройства.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Губки на роструме снизили эффективность эхолокации афалин Губки на роструме снизили эффективность эхолокации афалин

Почему афалины редко охотятся с губками на роструме?

N+1
Только не голосовое: 5 золотых правил «цифрового» этикета Только не голосовое: 5 золотых правил «цифрового» этикета

Как общаться в мессенджерах, чтобы не прослыть навязчивым занудой

Psychologies
Австралиец нашел прижизненные фотографии вымершего почти сто лет назад бандикута Австралиец нашел прижизненные фотографии вымершего почти сто лет назад бандикута

Куратор музея обнаружил в архивах черно-белые фотографии бандикута

N+1
У бактерий нашли дополнительные белки для борьбы с вирусами и бактериофагами У бактерий нашли дополнительные белки для борьбы с вирусами и бактериофагами

Ученые из MIT нашли у прокариот новый механизм борьбы с вирусными инфекциями

N+1
Вся правда о холестерине Вся правда о холестерине

Что на самом деле вызывает заболевания сердца и сосудов

kiozk originals
Какие животные страдают от экстремальных погодных условий, а какие — даже не замечают Какие животные страдают от экстремальных погодных условий, а какие — даже не замечают

При экстремальных погодных условиях страдают мелкие, короткоживущие виды

ТехИнсайдер
Два фактора ожирения, о которых мало говорят: мнение эксперта Два фактора ожирения, о которых мало говорят: мнение эксперта

Факторы, которые постоянно упускаются при лечении ожирения

ТехИнсайдер
Маневрируем в позе «зю»: разбираем главные стереотипы о балансе карьеры и материнства Маневрируем в позе «зю»: разбираем главные стереотипы о балансе карьеры и материнства

Тема совмещения материнства и карьеры давно набила оскомину

Forbes
Малазийские исследователи смоделировали внешность «пенангской женщины» Малазийские исследователи смоделировали внешность «пенангской женщины»

Как ученые восстанавливают лица древних людей?

N+1
Работа инсулина и рост нервов: открытия в биологии и медицине, сделанные женщинами Работа инсулина и рост нервов: открытия в биологии и медицине, сделанные женщинами

Женщины-лауреаты Нобелевской премии

Forbes
«Он исчез, не попрощавшись»: как уберечь себя от такого сценария «Он исчез, не попрощавшись»: как уберечь себя от такого сценария

Почему мужчина неожиданно перестал общаться и просто «пропал с радаров»?

Psychologies
Знай свою норму: от чего зависит, как быстро ты пьянеешь и как плохо тебе будет наутро? Знай свою норму: от чего зависит, как быстро ты пьянеешь и как плохо тебе будет наутро?

Почему некоторых развозит сразу, а кто-то вдруг перепьет здоровых мужиков

Maxim
Болезнь тридцатилетних. Что такое кризис четверти жизни и как его правильно прожить Болезнь тридцатилетних. Что такое кризис четверти жизни и как его правильно прожить

Почему люди испытывают кризис четверти жизни?

Inc.
Призрачный успех: почему российскому бизнесу сложно покорить китайский рынок Призрачный успех: почему российскому бизнесу сложно покорить китайский рынок

Как оценивать потенциально новый рынок Китая?

Forbes
Инсулиновая помпа восстановила структуру мозга у подростков-диабетиков Инсулиновая помпа восстановила структуру мозга у подростков-диабетиков

Как разные способы введения инсулина влияют на мозг подростков с диабетом

N+1
4 причины, почему отпуск превращается в больничный 4 причины, почему отпуск превращается в больничный

Обидно, когда, не успев начаться, наш отдых прерывается болезнью

Psychologies
Больно с детства. Что с этим делать сейчас? Больно с детства. Что с этим делать сейчас?

Что делать, если эмоциональный взрыв или конфликт случились в раннем детстве?

Psychologies
Палеонтологи отыскали останки чудовищного морского хищника, в разы превосходившего современных крокодилов Палеонтологи отыскали останки чудовищного морского хищника, в разы превосходившего современных крокодилов

Как этот древний вымерший зверь правил морем 66 миллионов лет назад

ТехИнсайдер
«Слишком хороший сын»: мой мужчина чрезмерно заботится о матери «Слишком хороший сын»: мой мужчина чрезмерно заботится о матери

Как мужчина относится к своей матери, так он будет относиться к своей жене?

Psychologies
Смех делает нас умнее: 5 причин улыбнуться прямо сейчас Смех делает нас умнее: 5 причин улыбнуться прямо сейчас

Как смех облегчает нашу жизнь?

Psychologies
Домашний тест для определения рака горла и полости рта показал точность в 90 процентов Домашний тест для определения рака горла и полости рта показал точность в 90 процентов

Может ли машина выявить рак горла и полости рта по слюне?

N+1
5 продуктов, которые можно есть перед сном, если вы хотите похудеть 5 продуктов, которые можно есть перед сном, если вы хотите похудеть

Чтобы сбросить лишний вес, есть на ночь не только можно, но и нужно!

ТехИнсайдер
В поисках Рюрика В поисках Рюрика

А был ли Рюрик?

Дилетант
«У чёрта на куличках» — это где? Даем геолокацию «куличек», где обитал тот самый чëрт «У чёрта на куличках» — это где? Даем геолокацию «куличек», где обитал тот самый чëрт

«У черта на куличках» есть реальная историческая основа, и даже конкретное место

ТехИнсайдер
Китайские ученые лишили мышей хромосомы. А потом еще одной Китайские ученые лишили мышей хромосомы. А потом еще одной

Ученые научились сшивать мышиные хромосомы между собой

N+1
Почему израильский танк Почему израильский танк

Танк "Меркава" была впервые задумана израильским генералом Исраэлем Талем

ТехИнсайдер
Физики пленили нейтральные атомы с помощью металинзы Физики пленили нейтральные атомы с помощью металинзы

Физики изготовили кремниевую металинзу для нужд оптических пинцетов и решеток

N+1
Куркумин и антибиотики в кухонном шкафу: что нужно есть, чтобы повышать иммунитет Куркумин и антибиотики в кухонном шкафу: что нужно есть, чтобы повышать иммунитет

Отрывок из книги «Что мы знаем (и не знаем) о еде»

Forbes
Владислав Миллер: «Я четко понимал, что если сейчас не оправдаю ожиданий Машкова, второго шанса не будет!» Владислав Миллер: «Я четко понимал, что если сейчас не оправдаю ожиданий Машкова, второго шанса не будет!»

Со стороны его путь видится как безусловное везение. Но случайностей не бывает

Коллекция. Караван историй
Как почистить куки в браузере: разбираемся на примере Chrome, Яндекс браузера, и Opera Как почистить куки в браузере: разбираемся на примере Chrome, Яндекс браузера, и Opera

Все рано или поздно задаются вопросом, как почистить куки файлы

CHIP
Открыть в приложении