Инженеры разработали наушники, способные распознавать мимику лица пользователя

N+1Наука

Наушники со встроенным локатором распознали выражение лица по форме щек

Андрей Фокин

Ke Li et al. / Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies, 2022

Американские инженеры разработали наушники, способные распознавать мимику лица пользователя. Для этого в каждый наушник встроен миниатюрный сонар, который с помощью звуковой эхолокации считывает информацию о движениях боковой области лица, после чего алгоритм машинного обучения восстанавливает выражение лица пользователя в реальном времени с высокой точностью. Эту информацию затем можно использовать, например, для создания анимированных аватаров в приложениях для общения. Статья с описанием устройства опубликована в журнале The Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies.

Технологии распознавания мимики лица человека, которые уже давно успешно используются для создания анимации персонажей в кино видеоиграх, постепенно проникают и в нашу повседневную жизнь. Например, компания NVIDIA предложила использовать распознавание выражения лица для снижения объемов данных, передаваемых по сети во время видеозвонков. Вместо того чтобы посылать все кадры, алгоритм сжатия посылает один кадр с лицом и данные о ключевых точках на нем, после чего компьютер на принимающей стороне анимирует этот кадр с помощью нейросети.

Эта и многие другие подобные технологии распознавания мимики обычно требуют, чтобы перед лицом постоянно находилась видеокамера, что может быть не всегда удобно. Для решения этой проблемы американские инженеры придумали технологию C-Face, которая с помощью встроенных в наушники двух камер и алгоритма машинного обучения способна распознавать мимику человека в реальном времени по движениям небольшой боковой области лица, попадающей в поле зрения устройства.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Возраст отдельных изображений Альтамиры оценили более чем в 20-30 тысяч лет Возраст отдельных изображений Альтамиры оценили более чем в 20-30 тысяч лет

Рисунки в пещере Альтамира могут иметь возраст в 20-30 тысяч лет

N+1
История одной песни: Slayer, «Angel of Death», 1986 История одной песни: Slayer, «Angel of Death», 1986

Вещица про холокост и Освенцим, которая переменила рельеф экстремального металла

Maxim
Культурный виноград появился на Сардинии больше трех тысяч лет назад Культурный виноград появился на Сардинии больше трех тысяч лет назад

Самый ранний культурный виноград выращивали на Сардинии

N+1
«Жанна д’Арк из Сирии»: как Назик аль-Абид добивалась свободы для страны и для женщин «Жанна д’Арк из Сирии»: как Назик аль-Абид добивалась свободы для страны и для женщин

Назик аль-Абид — женщина-генерал, посвятившая жизнь борьбе за права женщин

Forbes
10 вещей, которые нужно успеть сделать для пожилых родителей 10 вещей, которые нужно успеть сделать для пожилых родителей

Список бесценных вещей, которые вы можете сделать для ваших родителей

Maxim
Стесняюсь спросить: почему женщинам бывает тяжело достичь оргазма с партнером? Стесняюсь спросить: почему женщинам бывает тяжело достичь оргазма с партнером?

Что делать, если оргазм не наступает без подручных средств?

Правила жизни
Как завести автомобиль, у которого сел аккумулятор Как завести автомобиль, у которого сел аккумулятор

Как безопасно завести машину с севшим аккумулятором?

ТехИнсайдер
Кукла Маша, кукла Даша: 10 культовых игрушек из советского детства Кукла Маша, кукла Даша: 10 культовых игрушек из советского детства

Куклы-пупсы, неваляшки и другие неизменные атрибуты советского детства

Правила жизни
Города вечной жизни: 5 мест в мире, где введен запрет на смерть Города вечной жизни: 5 мест в мире, где введен запрет на смерть

Местных жителей этих городов смерть не застанет врасплох

Maxim
Милиция его не искала: история «тольяттинского потрошителя», который убивал и насиловал детей Милиция его не искала: история «тольяттинского потрошителя», который убивал и насиловал детей

Во время убийств он испытывал «высшее наслаждение»

VOICE
От Нобелевской до Букеровской: как женщины впервые получали литературные премии От Нобелевской до Букеровской: как женщины впервые получали литературные премии

О женщинах, которые первыми получили крупнейшие в мире литературные премии

Forbes
Эту актрису похитили спецслужбы КНДР — ради того, чтобы она прославила кино Северной Кореи Эту актрису похитили спецслужбы КНДР — ради того, чтобы она прославила кино Северной Кореи

Чхве Ынхи снялась в сотнях фильмов, а затем годы провела в плену правителя КНДР

VOICE
Неочевидные детали, на которые нужно обратить внимание при покупке б/у смартфона Неочевидные детали, на которые нужно обратить внимание при покупке б/у смартфона

Как купить подержанный телефон и не облажаться

Maxim
От чего стоит отказаться при повышенном сахаре в крови: 9 опасных продуктов, о которых должен знать каждый От чего стоит отказаться при повышенном сахаре в крови: 9 опасных продуктов, о которых должен знать каждый

От эти продуктов лучше отказаться — на время или навсегда

ТехИнсайдер
Японский «кроссворд» Даллеса Японский «кроссворд» Даллеса

Вторая мировая война завершилась на борту американского линкора «Миссури»

Дилетант
Как мы дошли до спотифая? Краткая история звукозаписи Как мы дошли до спотифая? Краткая история звукозаписи

Звучащая речь из 19 века преодолела свой путь в 21 век силами не одного ученого

ТехИнсайдер
«Южному парку» 25 лет: что мы поняли за эти годы «Южному парку» 25 лет: что мы поняли за эти годы

«Южный парк»: можно ли его смотреть детям?

Psychologies
«Не слушайте бабушек»: Людмила Петрановская объяснила, почему современные мамы чаще выгорают «Не слушайте бабушек»: Людмила Петрановская объяснила, почему современные мамы чаще выгорают

Почему родители XXI века привыкли испытывать постоянное чувство вины?

Psychologies
Как стартап россиян по выявлению NFT-подделок привлек $11 млн от инвестора Google Как стартап россиян по выявлению NFT-подделок привлек $11 млн от инвестора Google

Есть ли у стартапа Optic серьезные конкуренты и будущее?

Forbes
Почему современные животные не бывают такими огромными, как динозавры? Почему современные животные не бывают такими огромными, как динозавры?

Могут ли возникнуть животные, в сравнении с которыми покажутся карликами слоны?

ТехИнсайдер
Машинное обучение предсказало толщину нейтронной кожи свинца Машинное обучение предсказало толщину нейтронной кожи свинца

Физики рассчитали толщину нейтронной оболочки в ядре изотопа свинца-208

N+1
Каких врачей нужно посещать людям старше 30 лет и почему: рекомендации терапевта Каких врачей нужно посещать людям старше 30 лет и почему: рекомендации терапевта

Каких специалистов вам следует посетить в зависимости от вашего пола и возраста?

Psychologies
Задача-максимум: как правильно ставить перед собой цели и достигать их Задача-максимум: как правильно ставить перед собой цели и достигать их

Почему часто мы оказываемся слишком далеко от поставленных задач?

Psychologies
Резинки-пружинки и другие небезопасные аксессуары, которые портят твои волосы Резинки-пружинки и другие небезопасные аксессуары, которые портят твои волосы

Сегодня мы расскажем тебе, какие аксессуары и как могут навредить твоим локонам

VOICE
7 причин влюбиться в интроверта 7 причин влюбиться в интроверта

Почему вам стоит построить отношения с интровертом

Psychologies
«А судьи кто?»: как искусственный интеллект помогает человеку в суде «А судьи кто?»: как искусственный интеллект помогает человеку в суде

Способны ли роботы заменить судью и насколько это этично?

ТехИнсайдер
Рипофобия: когда стремление к чистоте превращается в одержимость Рипофобия: когда стремление к чистоте превращается в одержимость

Что такое рипофобия и как с ней справиться?

Psychologies
Федерико Феллини — о вреде продюсеров и изнанке кинематографа. Фрагмент автобиографии режиссера «Делать фильм» Федерико Феллини — о вреде продюсеров и изнанке кинематографа. Фрагмент автобиографии режиссера «Делать фильм»

Отрывок из автобиографии великого итальянского режиссера Федерико Феллини

Правила жизни
5 практик, которые помогают контролировать мысли и эмоции (даже чужие) 5 практик, которые помогают контролировать мысли и эмоции (даже чужие)

Как эмоциональный интеллект помогает концентрироваться на важных для вас вещах

Inc.
Из-за чего судятся акционеры одной из самых популярных франшиз «Мозгобойня» Из-за чего судятся акционеры одной из самых популярных франшиз «Мозгобойня»

Почему сеть паб-квизов «Мозгобойня» раздирает корпоративный конфликт

Forbes
Открыть в приложении