Инженеры разработали наушники, способные распознавать мимику лица пользователя

N+1Наука

Наушники со встроенным локатором распознали выражение лица по форме щек

Андрей Фокин

Ke Li et al. / Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies, 2022

Американские инженеры разработали наушники, способные распознавать мимику лица пользователя. Для этого в каждый наушник встроен миниатюрный сонар, который с помощью звуковой эхолокации считывает информацию о движениях боковой области лица, после чего алгоритм машинного обучения восстанавливает выражение лица пользователя в реальном времени с высокой точностью. Эту информацию затем можно использовать, например, для создания анимированных аватаров в приложениях для общения. Статья с описанием устройства опубликована в журнале The Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies.

Технологии распознавания мимики лица человека, которые уже давно успешно используются для создания анимации персонажей в кино видеоиграх, постепенно проникают и в нашу повседневную жизнь. Например, компания NVIDIA предложила использовать распознавание выражения лица для снижения объемов данных, передаваемых по сети во время видеозвонков. Вместо того чтобы посылать все кадры, алгоритм сжатия посылает один кадр с лицом и данные о ключевых точках на нем, после чего компьютер на принимающей стороне анимирует этот кадр с помощью нейросети.

Эта и многие другие подобные технологии распознавания мимики обычно требуют, чтобы перед лицом постоянно находилась видеокамера, что может быть не всегда удобно. Для решения этой проблемы американские инженеры придумали технологию C-Face, которая с помощью встроенных в наушники двух камер и алгоритма машинного обучения способна распознавать мимику человека в реальном времени по движениям небольшой боковой области лица, попадающей в поле зрения устройства.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Зоолог впервые заснял самого крупного грызуна Австралии и Океании Зоолог впервые заснял самого крупного грызуна Австралии и Океании

Зоолог впервые запечатлел на фото и видео низинную мохнатую крысу

N+1
Рыбников и Ларионова: неидеальная история любви самой красивой пары советского кинематографа Рыбников и Ларионова: неидеальная история любви самой красивой пары советского кинематографа

Николай Рыбников всю жизнь любил только одну женщину - Аллу Ларионову

VOICE
Чувствительность к горькой пище связана с заболеваниями почек и биполярным расстройством Чувствительность к горькой пище связана с заболеваниями почек и биполярным расстройством

Как отвращение к горькому вкусу брокколи связано с вашим здоровьем?

ТехИнсайдер
Все время спешим и ничего не успеваем: виноват ли в этом цифровой прогресс? Все время спешим и ничего не успеваем: виноват ли в этом цифровой прогресс?

Отрывок из книги «Времени в обрез: ускорение жизни при цифровом капитализме»

Psychologies
«Дневник невидимки»: история необычной старшеклассницы с обычными проблемами «Дневник невидимки»: история необычной старшеклассницы с обычными проблемами

Отрывок из «Дневника невидимки» — романа о том, как оставаться собой

Forbes

Иногда мир становится словно картонным...

VOICE
«Хочу быть вместе с ней»: каким был Михаил Горбачев в мемуарах своей жены Раисы «Хочу быть вместе с ней»: каким был Михаил Горбачев в мемуарах своей жены Раисы

В день смерти Михаила Горбачева Forbes Woman обратился к мемуарам его жены Раисы

Forbes
Как отпустить человека, которого любишь: 4 шага Как отпустить человека, которого любишь: 4 шага

Как отпустить любовь и сохранить себя

Psychologies
5 книг, которые помогут пережить расставание 5 книг, которые помогут пережить расставание

Книги, которые помогут найти точки опоры после расставания

СНОБ
5 причин, почему нас пугают современные отношения 5 причин, почему нас пугают современные отношения

Как изменились отношения и почему мы стали их бояться?

Psychologies
Ученые измерили скорость воды в акведуках древнего Рима. Им помогли ископаемые бактерии Ученые измерили скорость воды в акведуках древнего Рима. Им помогли ископаемые бактерии

Как расходовалась вода в акведуке и какова была степень его загрузки?

ТехИнсайдер
Какие животные страдают от экстремальных погодных условий, а какие — даже не замечают Какие животные страдают от экстремальных погодных условий, а какие — даже не замечают

При экстремальных погодных условиях страдают мелкие, короткоживущие виды

ТехИнсайдер
«Пока не сыграл в ящик»: как составить список самых важных дел «Пока не сыграл в ящик»: как составить список самых важных дел

Как составить bucket list и при этом избежать ошибок?

Psychologies
На службе у зла: кто составлял «серую зону» между нацистами и их жертвами На службе у зла: кто составлял «серую зону» между нацистами и их жертвами

Как Третий рейх вовлекал в преступления тех, кто сам страдал от нацистов

Forbes
Вы точно мечтаете об электромобиле? Ваше мнение изменится, когда мы расскажем про их шины Вы точно мечтаете об электромобиле? Ваше мнение изменится, когда мы расскажем про их шины

Как быстро изнашиваются шины у электромобиля и как дорого стоит их замена

ТехИнсайдер
«Слишком хороший сын»: мой мужчина чрезмерно заботится о матери «Слишком хороший сын»: мой мужчина чрезмерно заботится о матери

Как мужчина относится к своей матери, так он будет относиться к своей жене?

Psychologies
Сойти за своего: как адаптироваться к жизни в другой стране Сойти за своего: как адаптироваться к жизни в другой стране

Как интегрироваться в новое общество и преодолеть культурные барьеры?

Psychologies
Шансы выжить невелики: что будет, если человека ударит молнией Шансы выжить невелики: что будет, если человека ударит молнией

Электрические разряды редко проходят для людей без последствий

Вокруг света
Почему даже домашние кошки охотятся на диких животных и играют с полумертвой добычей? Почему даже домашние кошки охотятся на диких животных и играют с полумертвой добычей?

Почему домашние кошки, оказавшись за порогом, превращаются в свирепого хищника?

ТехИнсайдер
Гонки с Чикатило: история Александра Пичушкина, который мечтал стать самым известным маньяком в СССР Гонки с Чикатило: история Александра Пичушкина, который мечтал стать самым известным маньяком в СССР

Битцевский маньяк собирался довести число своих жертв до 64

VOICE
«Облачно, возможны косатки». Морской биолог рассказывает, как они живут и общаются между собой «Облачно, возможны косатки». Морской биолог рассказывает, как они живут и общаются между собой

Отрывок из книги «Облачно, возможны косатки» — как косатки видят и слышат

N+1
Как завести автомобиль, у которого сел аккумулятор Как завести автомобиль, у которого сел аккумулятор

Как безопасно завести машину с севшим аккумулятором?

ТехИнсайдер
Игра в кубики Игра в кубики

Как накачать нужные мышцы пресса

Лиза
В Узбекистане нашли следы пребывания древних людей возрастом около 90 тысяч лет В Узбекистане нашли следы пребывания древних людей возрастом около 90 тысяч лет

Археологи исследовали памятник Куксарай-2, расположенный на Западном Тянь-Шане

N+1
Храните искусство в банке: 10 корпоративных коллекций современного искусства Храните искусство в банке: 10 корпоративных коллекций современного искусства

Зачем банки покупают, коллекционируют и где выставляют произведения искусства?

Forbes
После людей После людей

Призраки прошлого служат наглядным напоминанием об ошибках человечества

Вокруг света
Как зарабатывать на рекламе на автомобиле и не получить штрафы Как зарабатывать на рекламе на автомобиле и не получить штрафы

Как превратить автомобиль в средство продвижения рекламы в массы?

РБК
Водители с признаками Водители с признаками

Научный подход к искоренению пьянства на дорогах

Автопилот
Макс-фактор Макс-фактор

О том, почему Pro Max в итоге не промах

Автопилот
Советские мультфильмы, которые учили детей вредному Советские мультфильмы, которые учили детей вредному

Если пересмотреть мультики нашего детства, то к многим из них возникают вопросы

Maxim
Открыть в приложении