Инженеры разработали наушники, способные распознавать мимику лица пользователя

N+1Наука

Наушники со встроенным локатором распознали выражение лица по форме щек

Андрей Фокин

Ke Li et al. / Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies, 2022

Американские инженеры разработали наушники, способные распознавать мимику лица пользователя. Для этого в каждый наушник встроен миниатюрный сонар, который с помощью звуковой эхолокации считывает информацию о движениях боковой области лица, после чего алгоритм машинного обучения восстанавливает выражение лица пользователя в реальном времени с высокой точностью. Эту информацию затем можно использовать, например, для создания анимированных аватаров в приложениях для общения. Статья с описанием устройства опубликована в журнале The Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies.

Технологии распознавания мимики лица человека, которые уже давно успешно используются для создания анимации персонажей в кино видеоиграх, постепенно проникают и в нашу повседневную жизнь. Например, компания NVIDIA предложила использовать распознавание выражения лица для снижения объемов данных, передаваемых по сети во время видеозвонков. Вместо того чтобы посылать все кадры, алгоритм сжатия посылает один кадр с лицом и данные о ключевых точках на нем, после чего компьютер на принимающей стороне анимирует этот кадр с помощью нейросети.

Эта и многие другие подобные технологии распознавания мимики обычно требуют, чтобы перед лицом постоянно находилась видеокамера, что может быть не всегда удобно. Для решения этой проблемы американские инженеры придумали технологию C-Face, которая с помощью встроенных в наушники двух камер и алгоритма машинного обучения способна распознавать мимику человека в реальном времени по движениям небольшой боковой области лица, попадающей в поле зрения устройства.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Великобритания подошла для роста гигантских секвой не хуже Калифорнии Великобритания подошла для роста гигантских секвой не хуже Калифорнии

Секвойядендроны можно высаживать для борьбы с изменением климата

N+1
Поезд пришел Поезд пришел

Как железные дороги вывели транспортную систему Москвы в мировые лидеры

Эксперт
Палеогенетики выявили средневековых представителей клана Аба Палеогенетики выявили средневековых представителей клана Аба

Ученые прочитали ядерную ДНК 19 средневековых людей из некрополя в Абашаре

N+1
Истощение эго: почему мы устаем от принятия решений Истощение эго: почему мы устаем от принятия решений

Как мы принимаем решения и почему от этого так сильно устаем?

Psychologies
Самки шимпанзе не перестали играть со своими детенышами в условиях нехватки пищи Самки шимпанзе не перестали играть со своими детенышами в условиях нехватки пищи

Ученые наблюдали за игровым поведением шимпанзе в течение десяти лет

N+1
Давай голосом. Вспоминаем историю Siri — голосового помощника, который опередил Google, продался Apple и изменил жизни миллионов Давай голосом. Вспоминаем историю Siri — голосового помощника, который опередил Google, продался Apple и изменил жизни миллионов

Отрывок из книги «Harvard Business Review: 10 лучших статей»

Inc.
Избыточная мужественность: почему слишком много тестостерона — это плохо Избыточная мужественность: почему слишком много тестостерона — это плохо

Разбираемся, как распознать опасно высокий уровень тестостерона

Maxim
Правила жизни Салмана Рушди Правила жизни Салмана Рушди

Правила жизни романиста Салмана Рушди

Правила жизни
Три женские ошибки, с которыми мы не будем мириться: позиция мужчин Три женские ошибки, с которыми мы не будем мириться: позиция мужчин

Что для людей становится «точкой невозврата» в отношениях

Psychologies
Как появилось знаменитое розовое платье Мэрилин Монро Как появилось знаменитое розовое платье Мэрилин Монро

Кто одевал Монро и почему сработал один из самых известных нарядов Монро?

Правила жизни
Трюк имени Мэрилин: лучшие платья Монро, которые скроют твои недостатки Трюк имени Мэрилин: лучшие платья Монро, которые скроют твои недостатки

Монро умела маскировать недостатки так, чтобы об их наличии никто не догадывался

VOICE
Призрачный успех: почему российскому бизнесу сложно покорить китайский рынок Призрачный успех: почему российскому бизнесу сложно покорить китайский рынок

Как оценивать потенциально новый рынок Китая?

Forbes
Скоро осень: как спасти дачные растения от предстоящих заморозков Скоро осень: как спасти дачные растения от предстоящих заморозков

Готовим растения к осеннему сезону

ТехИнсайдер
Почему короли и императоры веками вступали в близкородственные браки? Почему короли и императоры веками вступали в близкородственные браки?

Корона, кольцо, ваш двоюродный брат — что еще нужно для королевской свадьбы?

ТехИнсайдер
15 незаметных признаков очень больших денег 15 незаметных признаков очень больших денег

Настоящее богатство видно при очень внимательном рассмотрении и хорошей дедукции

Maxim
Неожиданные факты о воздухе: чем мы на самом деле дышим Неожиданные факты о воздухе: чем мы на самом деле дышим

Воздух с нами всю жизнь, но так ли хорошо мы его знаем?

ТехИнсайдер
Анализ 777 древних геномов прояснил происхождение популяций эпохи палеометалла Анализ 777 древних геномов прояснил происхождение популяций эпохи палеометалла

Историю индоевропейских языков можно проследить до ямной культуры

N+1
Юпитер ограничил параметры темной материи Юпитер ограничил параметры темной материи

Физики предложили новый метод для ограничения параметров темной материи

N+1
Археологи раскопали дом небогатых жителей Помпей Археологи раскопали дом небогатых жителей Помпей

Внутри дома в Помпеях находились предметы быта и остатки мебели

N+1
В захвате Австралии кроликами обвинили английского фермера XIX века В захвате Австралии кроликами обвинили английского фермера XIX века

Австралийские кролики происходят от особей, которых выпустил Томас Остин

N+1
Секрет куличков Секрет куличков

В мае оттуда доносился потрясающий хор прудовых лягушек

Наука и жизнь
Красота по-османски: 5 бьюти-правил турчанок, которые стоит взять на заметку Красота по-османски: 5 бьюти-правил турчанок, которые стоит взять на заметку

Мы раскрыли тайну османских красавиц — бери их ключевые бьюти-правила на заметку

VOICE
«Пускай родится мальчик»: зачем девочкам дают имена-заклинания «Пускай родится мальчик»: зачем девочкам дают имена-заклинания

Как живут девочки, которым дают имена-заклинания на рождение мальчика?

Forbes
На изящном: рабы любви, или Какой древнегреческий миф лежит в основе картины Франсуа Буше «Геркулес и Омфала» На изящном: рабы любви, или Какой древнегреческий миф лежит в основе картины Франсуа Буше «Геркулес и Омфала»

Что стоит за страстной сценой между Геркулесом и Омфалой

Правила жизни
«Слишком хороший сын»: мой мужчина чрезмерно заботится о матери «Слишком хороший сын»: мой мужчина чрезмерно заботится о матери

Как мужчина относится к своей матери, так он будет относиться к своей жене?

Psychologies
Хоккей осуждают за традицию драк и кровавых столкновений, но их просто невозможно запретить Хоккей осуждают за традицию драк и кровавых столкновений, но их просто невозможно запретить

Почему хоккей всегда будет жестким?

Maxim
«Мы вам перезвоним» «Мы вам перезвоним»

9 причин, почему тебя не берут на работу и что с этим делать

Лиза
Какие из российских яблок самые вкусные, надо ли чистить яблоки и еще 10 вопросов о главной фруктовой скрепе Какие из российских яблок самые вкусные, надо ли чистить яблоки и еще 10 вопросов о главной фруктовой скрепе

Такой привычный с детства фрукт, как яблоко, вопросов вроде бы не вызывает

Maxim
Как возникли Гималаи. Новое исследование движения индийской тектонической плиты Как возникли Гималаи. Новое исследование движения индийской тектонической плиты

Могут ли континенты бегать?

ТехИнсайдер
Три года в рабстве у чукчей: история советской ученой-этнографа Варвары Кузнецовой Три года в рабстве у чукчей: история советской ученой-этнографа Варвары Кузнецовой

Этнограф Варвара Кузнецова решила, что справится с путешествием на Чукотку

VOICE
Открыть в приложении