Инженеры разработали наушники, способные распознавать мимику лица пользователя

N+1Наука

Наушники со встроенным локатором распознали выражение лица по форме щек

Андрей Фокин

Ke Li et al. / Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies, 2022

Американские инженеры разработали наушники, способные распознавать мимику лица пользователя. Для этого в каждый наушник встроен миниатюрный сонар, который с помощью звуковой эхолокации считывает информацию о движениях боковой области лица, после чего алгоритм машинного обучения восстанавливает выражение лица пользователя в реальном времени с высокой точностью. Эту информацию затем можно использовать, например, для создания анимированных аватаров в приложениях для общения. Статья с описанием устройства опубликована в журнале The Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies.

Технологии распознавания мимики лица человека, которые уже давно успешно используются для создания анимации персонажей в кино видеоиграх, постепенно проникают и в нашу повседневную жизнь. Например, компания NVIDIA предложила использовать распознавание выражения лица для снижения объемов данных, передаваемых по сети во время видеозвонков. Вместо того чтобы посылать все кадры, алгоритм сжатия посылает один кадр с лицом и данные о ключевых точках на нем, после чего компьютер на принимающей стороне анимирует этот кадр с помощью нейросети.

Эта и многие другие подобные технологии распознавания мимики обычно требуют, чтобы перед лицом постоянно находилась видеокамера, что может быть не всегда удобно. Для решения этой проблемы американские инженеры придумали технологию C-Face, которая с помощью встроенных в наушники двух камер и алгоритма машинного обучения способна распознавать мимику человека в реальном времени по движениям небольшой боковой области лица, попадающей в поле зрения устройства.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Китайские ученые лишили мышей хромосомы. А потом еще одной Китайские ученые лишили мышей хромосомы. А потом еще одной

Ученые научились сшивать мышиные хромосомы между собой

N+1
Гонки с Чикатило: история Александра Пичушкина, который мечтал стать самым известным маньяком в СССР Гонки с Чикатило: история Александра Пичушкина, который мечтал стать самым известным маньяком в СССР

Битцевский маньяк собирался довести число своих жертв до 64

VOICE
Старинное приспособленье: как слиться с любимым существом Старинное приспособленье: как слиться с любимым существом

Гаметофиты и спорофиты: как клетки учатся сливаться друг с другом

СНОБ
Сверхновая 1181 года вписалась в модель слияния двух белых карликов Сверхновая 1181 года вписалась в модель слияния двух белых карликов

Возникновение сверхновой произошло из-за слияния двух белых карликов

N+1
Как убедить партнера попробовать что-то новое в постели Как убедить партнера попробовать что-то новое в постели

Как разнообразить сексуальную жизнь, не задев друг друга?

Psychologies
Эту актрису похитили спецслужбы КНДР — ради того, чтобы она прославила кино Северной Кореи Эту актрису похитили спецслужбы КНДР — ради того, чтобы она прославила кино Северной Кореи

Чхве Ынхи снялась в сотнях фильмов, а затем годы провела в плену правителя КНДР

VOICE
«Сила женщины в ее слабости»: почему важно быть разной «Сила женщины в ее слабости»: почему важно быть разной

Чередование противоположностей поможет женщинам стать полноценными личностями

Psychologies
Все совпадения неслучайны: 6 криминальных сериалов, основанных на реальных событиях Все совпадения неслучайны: 6 криминальных сериалов, основанных на реальных событиях

Криминальные сериалы, в основу которых легли реальные трагические истории

Forbes
Бесплатная медицина и очередь за визой: что нужно знать при переезде в Канаду Бесплатная медицина и очередь за визой: что нужно знать при переезде в Канаду

К каким неожиданностям стоит приготовиться при переезде в Канаду?

Forbes
В поиске ответов: зачем Ксения Дукалис и Андрей Бебуришвили задают вопросы о сексе В поиске ответов: зачем Ксения Дукалис и Андрей Бебуришвили задают вопросы о сексе

Почему говорить о сексе нужно, зачем в этом диалоге нужны селебрити

Forbes
Правила жизни Майкла Скотта Правила жизни Майкла Скотта

Правила жизни лучшего регионального менеджера

Правила жизни
«Человек не имеет значения ни для кого, кроме самого себя» «Человек не имеет значения ни для кого, кроме самого себя»

Говард Лавкрафт о том, что по-настоящему ужасно

Weekend
Палеогенетики прочитали геном «воина с грифоном» из дворца Нестора Палеогенетики прочитали геном «воина с грифоном» из дворца Нестора

Палеогенетики исследовали происхождение древних популяций

N+1
Дачное настроение Дачное настроение

Боремся с сорняками, ищем применение для старой бочки и высаживаем клумбы

Лиза
3 привычки, которые помогут партнерам стать ближе 3 привычки, которые помогут партнерам стать ближе

Инструкция, которая поможет вам укрепить отношения

Psychologies
6 крутых функций Telegram, о которых вы могли не знать 6 крутых функций Telegram, о которых вы могли не знать

Некоторые малоизвестные функции мессенджера Telegram могут вас удивить

TechInsider
История одной вещи: орешки со сгущенкой — один из самых любимых советских десертов История одной вещи: орешки со сгущенкой — один из самых любимых советских десертов

Рассказываем о орешках со сгущенкой из СССР и делимся рецептом

Правила жизни
Планетологи отыскали досолнечные зерна в грунте астероида Рюгу Планетологи отыскали досолнечные зерна в грунте астероида Рюгу

Ученые нашли на астероидах зерна, образовавшиеся до рождения Солнечной системы

N+1
Топ-10 лучших вариантов осеннего маникюра с акцентом: ты должна их попробовать! Топ-10 лучших вариантов осеннего маникюра с акцентом: ты должна их попробовать!

Маникюр с акцентом на один-два ногтя

VOICE
7 вопросов о здоровье, которые стоит задать матери 7 вопросов о здоровье, которые стоит задать матери

Предугадайте свои болезни, узнав, о чем стоит беспокоиться по материнской линии

Psychologies
Вопрос психологу: как научиться говорить «нет» Вопрос психологу: как научиться говорить «нет»

Как научиться говорить слово «нет» в нужные моменты без чувства вины

Правила жизни
Невидим, свободен... Невидим, свободен...

Теоретики рассматривали двумерные структуры на основе углерода ещё в XX веке

Наука и жизнь
Ищу проверенного косметолога Ищу проверенного косметолога

7 «красных флажков» при знакомстве с косметологом

Лиза
Как воспитать в ребенке внутреннюю свободу — советы Димы Зицера Как воспитать в ребенке внутреннюю свободу — советы Димы Зицера

Что делать, если у ребенка конфликт с учителем?

СНОБ
Пауки могут спать и даже впадать в Пауки могут спать и даже впадать в

Возможно, пауки не просто отдыхают, но и видят сны

TechInsider
Температура в холодильнике: какой она должна быть и как её регулировать Температура в холодильнике: какой она должна быть и как её регулировать

Как настроить оптимальную температуру в холодильнике

CHIP
Своим путем Своим путем

Роман Васильев — нетипичный представитель актерской профессии

OK!
Правила секса Светланы Бондарчук Правила секса Светланы Бондарчук

Приглашенный главный редактор делится открытиями на пути принятия себя

Psychologies
Жанр под подозрением Жанр под подозрением

10 интеллектуальных детективов

Weekend
Правила самогонщиков: почему медь вкуснее нержавейки и как отсечь хвосты на глаз Правила самогонщиков: почему медь вкуснее нержавейки и как отсечь хвосты на глаз

Рано или поздно любой благородный муж приходит к мысли о самогоноварении

Maxim
Открыть в приложении