Инженеры разработали наушники, способные распознавать мимику лица пользователя

N+1Наука

Наушники со встроенным локатором распознали выражение лица по форме щек

Андрей Фокин

Ke Li et al. / Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies, 2022

Американские инженеры разработали наушники, способные распознавать мимику лица пользователя. Для этого в каждый наушник встроен миниатюрный сонар, который с помощью звуковой эхолокации считывает информацию о движениях боковой области лица, после чего алгоритм машинного обучения восстанавливает выражение лица пользователя в реальном времени с высокой точностью. Эту информацию затем можно использовать, например, для создания анимированных аватаров в приложениях для общения. Статья с описанием устройства опубликована в журнале The Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies.

Технологии распознавания мимики лица человека, которые уже давно успешно используются для создания анимации персонажей в кино видеоиграх, постепенно проникают и в нашу повседневную жизнь. Например, компания NVIDIA предложила использовать распознавание выражения лица для снижения объемов данных, передаваемых по сети во время видеозвонков. Вместо того чтобы посылать все кадры, алгоритм сжатия посылает один кадр с лицом и данные о ключевых точках на нем, после чего компьютер на принимающей стороне анимирует этот кадр с помощью нейросети.

Эта и многие другие подобные технологии распознавания мимики обычно требуют, чтобы перед лицом постоянно находилась видеокамера, что может быть не всегда удобно. Для решения этой проблемы американские инженеры придумали технологию C-Face, которая с помощью встроенных в наушники двух камер и алгоритма машинного обучения способна распознавать мимику человека в реальном времени по движениям небольшой боковой области лица, попадающей в поле зрения устройства.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Губки на роструме снизили эффективность эхолокации афалин Губки на роструме снизили эффективность эхолокации афалин

Почему афалины редко охотятся с губками на роструме?

N+1
Открывая тайны Открывая тайны

Русскому географическому обществу исполняется 177 лет

Отдых в России
Грудное молоко помешало бактерии вызвать воспаление в кишечнике новорожденного Грудное молоко помешало бактерии вызвать воспаление в кишечнике новорожденного

Как материнское грудное молоко защает ребенка от дисбиоза и воспаления кишечника

N+1
Фарт инженера Павлуцкого Фарт инженера Павлуцкого

В местах этих на долю человека выпадет немало испытаний

Наука и жизнь
Астероидные кольца, сила гравитации и сжатие звездного облака: откуда взялась Луна Астероидные кольца, сила гравитации и сжатие звездного облака: откуда взялась Луна

Почему ни одна из гипотез не может объяснить, как на самом деле «родилась» Луна

Maxim
Папины принцессы: чем живут и как выглядят скрытные дочери мировых политиков Папины принцессы: чем живут и как выглядят скрытные дочери мировых политиков

Теперь в башнях прячут наследниц современных политиков

VOICE
Что хорошего и что плохого в сериалах по «Звездным войнам»? Обсуждаем и критикуем проекты Disney+ Что хорошего и что плохого в сериалах по «Звездным войнам»? Обсуждаем и критикуем проекты Disney+

Разбираемся, за что стоит похвалить Disney+, а за что — покритиковать

Правила жизни
Почему август в России считают проклятым месяцем? Почему август в России считают проклятым месяцем?

Кризисы, катастрофы и трагедии, которые происходили с Россией в августе

Maxim
Опасные люди: как их распознать, если они кажутся «нормальными» Опасные люди: как их распознать, если они кажутся «нормальными»

Опаснее всего не явные тираны, а те, кто поначалу кажутся нормальными

Psychologies
Как стать эффективным: 9 простых советов Как стать эффективным: 9 простых советов

Вы упорно работаете, отдаете все силы, но результата почему-то все нет?

Psychologies
Блокировка рецептора помогла мышам восстановиться после инсульта Блокировка рецептора помогла мышам восстановиться после инсульта

Лечение пептидом привело к улучшению локомоторных и сенсомоторных функций

N+1
Бразильская команда: как правильно искать менеджеров в Сан-Паулу и Рио Бразильская команда: как правильно искать менеджеров в Сан-Паулу и Рио

Что нужно знать перед тем, как нанять управленца для запуска проекта в Бразилии

Forbes
Злодеи среди нас Злодеи среди нас

История нераскрытых преступлений из реальной жизни

Weekend
Что крадут наши эмоции: 7 фактов Что крадут наши эмоции: 7 фактов

Факты о негативном влиянии эмоций на нашу жизнь

Psychologies
Фрагмент книги «О чем молчит Ласточка» — потенциального международного бестселлера о сложных отношениях Фрагмент книги «О чем молчит Ласточка» — потенциального международного бестселлера о сложных отношениях

Отрывок из «О чем молчит Ласточка» — сложной истории об отношениях двух мужчин

Правила жизни
Хрупкое мужское эго Хрупкое мужское эго

Почему сегодня вокруг стало так много мужчин-истеричек

Лиза
5 картин, иллюстрирующих эпоху неопределенности — время, в котором мы все живем сегодня 5 картин, иллюстрирующих эпоху неопределенности — время, в котором мы все живем сегодня

Пять художников и иллюстраторов изобразили, как представляют неопределенность

Правила жизни
Кристина Асмус: «Я суперзакрытый человек» Кристина Асмус: «Я суперзакрытый человек»

Кристина Асмус — о материнстве и желтых сплетнях

Лиза
Счастье не за горами Счастье не за горами

Пермь – культурная столица Урала. Есть повод присмотреться к ней поближе

Лиза
Здоровое тело: 10 привычек стройных людей, о которых всегда нужно помнить Здоровое тело: 10 привычек стройных людей, о которых всегда нужно помнить

Стройность — это образ жизни! И ему вполне можно научиться

ТехИнсайдер
Переменчивая как погода Переменчивая как погода

Тося Чайкина шутит, что она уже никакой не фрешмен

OK!
Как сегодня выглядит блондинка Габриэль из любимого сериала 90-х Как сегодня выглядит блондинка Габриэль из любимого сериала 90-х

Как сложилась жизнь "Габриэль" Рене О`Коннор?

VOICE
Керамика, мечи и украшения: в Германии найдены богатые могилы каменного века и раннего Средневековья Керамика, мечи и украшения: в Германии найдены богатые могилы каменного века и раннего Средневековья

Найденные сокровища говорят о долгой истории проживания людей у ​​реки Дунай

ТехИнсайдер
Советские мультфильмы, которые учили детей вредному Советские мультфильмы, которые учили детей вредному

Если пересмотреть мультики нашего детства, то к многим из них возникают вопросы

Maxim
Уровень воды в Ниле позволил египтянам подвозить камень к месту строительства пирамид Уровень воды в Ниле позволил египтянам подвозить камень к месту строительства пирамид

Как египтяне возводили пирамиды Гизы?

N+1
Новые открытия в Помпеях рассказывают подробности жизни римского среднего класса Новые открытия в Помпеях рассказывают подробности жизни римского среднего класса

Каким был римский средний класс?

ТехИнсайдер
Не созданы для брака: 3 признака, что вам будет плохо в семейной жизни Не созданы для брака: 3 признака, что вам будет плохо в семейной жизни

Вдруг одиночество — идеальный вариант для вас?

Psychologies
Астрономы ФИАН открыли более 40 «хаотичных» радиопульсаров Астрономы ФИАН открыли более 40 «хаотичных» радиопульсаров

Открытие новых радиотранзиентов поможет больше узнать об их происхождении

ТехИнсайдер
Кинематограф управляет вашими эмоциями. На что нужно обратить внимание Кинематограф управляет вашими эмоциями. На что нужно обратить внимание

Десятилетие за десятилетием киноискусство овладевает умами

ТехИнсайдер
Пауки могут спать и даже впадать в Пауки могут спать и даже впадать в

Возможно, пауки не просто отдыхают, но и видят сны

ТехИнсайдер
Открыть в приложении