Инженеры разработали наушники, способные распознавать мимику лица пользователя

N+1Наука

Наушники со встроенным локатором распознали выражение лица по форме щек

Андрей Фокин

Ke Li et al. / Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies, 2022

Американские инженеры разработали наушники, способные распознавать мимику лица пользователя. Для этого в каждый наушник встроен миниатюрный сонар, который с помощью звуковой эхолокации считывает информацию о движениях боковой области лица, после чего алгоритм машинного обучения восстанавливает выражение лица пользователя в реальном времени с высокой точностью. Эту информацию затем можно использовать, например, для создания анимированных аватаров в приложениях для общения. Статья с описанием устройства опубликована в журнале The Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies.

Технологии распознавания мимики лица человека, которые уже давно успешно используются для создания анимации персонажей в кино видеоиграх, постепенно проникают и в нашу повседневную жизнь. Например, компания NVIDIA предложила использовать распознавание выражения лица для снижения объемов данных, передаваемых по сети во время видеозвонков. Вместо того чтобы посылать все кадры, алгоритм сжатия посылает один кадр с лицом и данные о ключевых точках на нем, после чего компьютер на принимающей стороне анимирует этот кадр с помощью нейросети.

Эта и многие другие подобные технологии распознавания мимики обычно требуют, чтобы перед лицом постоянно находилась видеокамера, что может быть не всегда удобно. Для решения этой проблемы американские инженеры придумали технологию C-Face, которая с помощью встроенных в наушники двух камер и алгоритма машинного обучения способна распознавать мимику человека в реальном времени по движениям небольшой боковой области лица, попадающей в поле зрения устройства.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

«Звери рейха. Образы животных и немецкая пропаганда» «Звери рейха. Образы животных и немецкая пропаганда»

Как евгеника определила облик немецкой овчарки

N+1
Исследование показало, какую сексуальную практику предпочитают устойчивые пары Исследование показало, какую сексуальную практику предпочитают устойчивые пары

Секс втроем положительно сказывается на моногамных отношениях

Psychologies
Ген ожирения объединил людей с собаками Ген ожирения объединил людей с собаками

Ученые выявили у собак ген, связанный с развитием ожирения

N+1
Почему вы просыпаетесь уставшим: 8 причин Почему вы просыпаетесь уставшим: 8 причин

Многие люди часто не просто не высыпаются, а встают разбитыми и уставшими

ТехИнсайдер
Мозг, исцеляющий себя Мозг, исцеляющий себя

Реальные истории людей, которые победили болезни и преобразили свой мозг

kiozk originals
«Ночная тварь»: история маньяка Бориса Серебрякова, который обещал вернуться после смерти «Ночная тварь»: история маньяка Бориса Серебрякова, который обещал вернуться после смерти

Серебряков производил впечатление совершенно обычного мужика

VOICE
6 вещей, которыми можно злоупотреблять, хоть все считают иначе 6 вещей, которыми можно злоупотреблять, хоть все считают иначе

Удовольствия, которых мы себя зачем-то лишили, а зря!

Maxim
Физики добились субпикосекундного переключения бозе-конденсата при комнатной температуре Физики добились субпикосекундного переключения бозе-конденсата при комнатной температуре

Физики добились потенциального улучшения оптоэлектронных устройств

N+1
Оказалось, что эмбрионы птиц проходят Оказалось, что эмбрионы птиц проходят

В какой-то момент эмбрионы птиц больше похожи на динозавров, чем на самих птиц

ТехИнсайдер
Леонид Федун покидает «Спартак»: он владел клубом 18 лет Леонид Федун покидает «Спартак»: он владел клубом 18 лет

Жизнь «Спартака» при Федуне получилась скомканной

Maxim
Йога в самиздате, ритмическая гимнастика по ТВ и суперфуд в трехлитровой банке: каким был ЗОЖ в СССР Йога в самиздате, ритмическая гимнастика по ТВ и суперфуд в трехлитровой банке: каким был ЗОЖ в СССР

Думаете, повальное увлечение ЗОЖем — явление последних 10–15 лет? А вот и нет

Правила жизни
Нарциссы: кто это и как вести себя с этими людьми Нарциссы: кто это и как вести себя с этими людьми

Разбираемся, кто такие нарциссы и как с ними взаимодействовать

РБК
6 удивительных фактов о животных, в которые многие до сих пор не верят 6 удивительных фактов о животных, в которые многие до сих пор не верят

Животные никогда не перестанут удивлять нас

ТехИнсайдер
Земля кочевая Земля кочевая

Башкирская земля всегда рада гостям

Отдых в России
«Мальчики не плачут»: в чем вред запрета на эмоции «Мальчики не плачут»: в чем вред запрета на эмоции

Почему вредно запрещать детям жаловаться и ныть?

Psychologies
Самые бюджетные бренды, в которые одеваются современные королевы и принцессы Самые бюджетные бренды, в которые одеваются современные королевы и принцессы

Масс-маркет, который можно носить по-королевски

VOICE
Формируем полезные привычки: 3 лайфхака Формируем полезные привычки: 3 лайфхака

Как без лишних усилий развить и закрепить желаемое поведение

Psychologies
Умер Михаил Горбачев. Жизнь первого и последнего президента СССР — в фотографиях Умер Михаил Горбачев. Жизнь первого и последнего президента СССР — в фотографиях

Вспоминаем, чем запомнилась эпоха Горбачева

Правила жизни
Как жара влияет на организм Как жара влияет на организм

Врач объяснил, что происходит с нашим телом под воздействием высокой температуры

Psychologies
Беги быстрее: как спорт превратился в социальный лифт и почему он не всегда работает Беги быстрее: как спорт превратился в социальный лифт и почему он не всегда работает

Почему в большом спорте одни добиваются успеха, а другие уносят с собой травмы

Forbes
Правила жизни Мадонны Правила жизни Мадонны

Правила жизни королевы поп-музыки Мадонны

Правила жизни
Репрессии, геноцид, войны: 20 фильмов о коллективной травме и катастрофах прошлого Репрессии, геноцид, войны: 20 фильмов о коллективной травме и катастрофах прошлого

Фильмы об исторических катастрофах и о попытках осмыслить природу зла

Forbes
Клеймо девочки: почему работа по дому ложится на плечи женщин Клеймо девочки: почему работа по дому ложится на плечи женщин

Отрывок из книги «Право на гнев» о разном обучении мальчиков и девочек

Forbes
Злодеи среди нас Злодеи среди нас

История нераскрытых преступлений из реальной жизни

Weekend
Вы точно мечтаете об электромобиле? Ваше мнение изменится, когда мы расскажем про их шины Вы точно мечтаете об электромобиле? Ваше мнение изменится, когда мы расскажем про их шины

Как быстро изнашиваются шины у электромобиля и как дорого стоит их замена

ТехИнсайдер
Открывая тайны Открывая тайны

Русскому географическому обществу исполняется 177 лет

Отдых в России
Дети диктатуры: как в Румынии несколько поколений обрекли на жизнь в приютах Дети диктатуры: как в Румынии несколько поколений обрекли на жизнь в приютах

Зачем диктатор Николае Чаушеску запустил систему приютов в Румынии?

Forbes
Как не испортить первый ужин на свидании Как не испортить первый ужин на свидании

Как готовить? Учимся делать это красиво (а некрасиво — не делать)

Maxim
10 вещей, которые нельзя делать с кошкой 10 вещей, которые нельзя делать с кошкой

10 вещей, которые могут навредить вашей кошке

Maxim
«Тошнит от школы». Почему дети болеют перед контрольными «Тошнит от школы». Почему дети болеют перед контрольными

О том, как на самом деле взаимодействует психическое и телесное

СНОБ
Открыть в приложении