Инженеры разработали наушники, способные распознавать мимику лица пользователя

N+1Наука

Наушники со встроенным локатором распознали выражение лица по форме щек

Андрей Фокин

Ke Li et al. / Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies, 2022

Американские инженеры разработали наушники, способные распознавать мимику лица пользователя. Для этого в каждый наушник встроен миниатюрный сонар, который с помощью звуковой эхолокации считывает информацию о движениях боковой области лица, после чего алгоритм машинного обучения восстанавливает выражение лица пользователя в реальном времени с высокой точностью. Эту информацию затем можно использовать, например, для создания анимированных аватаров в приложениях для общения. Статья с описанием устройства опубликована в журнале The Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies.

Технологии распознавания мимики лица человека, которые уже давно успешно используются для создания анимации персонажей в кино видеоиграх, постепенно проникают и в нашу повседневную жизнь. Например, компания NVIDIA предложила использовать распознавание выражения лица для снижения объемов данных, передаваемых по сети во время видеозвонков. Вместо того чтобы посылать все кадры, алгоритм сжатия посылает один кадр с лицом и данные о ключевых точках на нем, после чего компьютер на принимающей стороне анимирует этот кадр с помощью нейросети.

Эта и многие другие подобные технологии распознавания мимики обычно требуют, чтобы перед лицом постоянно находилась видеокамера, что может быть не всегда удобно. Для решения этой проблемы американские инженеры придумали технологию C-Face, которая с помощью встроенных в наушники двух камер и алгоритма машинного обучения способна распознавать мимику человека в реальном времени по движениям небольшой боковой области лица, попадающей в поле зрения устройства.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

«Мозг: еда и новизна. Почему нас тянет к новому и вкусному» «Мозг: еда и новизна. Почему нас тянет к новому и вкусному»

Как еда вызывает эмоции

N+1
Зачем бытовая техника следит за нами и чем это может быть опасно Зачем бытовая техника следит за нами и чем это может быть опасно

Как хакеры могут испортить тебе жизнь одним нажатием кнопки

Maxim
Эта привычка может повысить риск развития деменции на 43% Эта привычка может повысить риск развития деменции на 43%

Употребление большого количества сахара может повысить риск развития деменции

ТехИнсайдер
Гид по метаверсу от Покраса Гид по метаверсу от Покраса

Покрас Лампас — о метаверсе, метаценностях и метамодернизме

Собака.ru
Эмоциональный интеллект Эмоциональный интеллект

Новое представление о том, что значит быть «умным»

kiozk originals
Когда голод превращается в раздражительность: 3 совета для контроля эмоций Когда голод превращается в раздражительность: 3 совета для контроля эмоций

Как телесные ощущения воздействуют на эмоции

Psychologies
Платья непрямого действия Платья непрямого действия

Путеводитель по сюрреалистическим мирам Эльзы Скьяпарелли

Weekend
Как быстро очистить подошву утюга от пригара: возвращаем бытовой технике прежний вид Как быстро очистить подошву утюга от пригара: возвращаем бытовой технике прежний вид

Мы знаем, как вернуть утюгу былой блеск и чистоту

ТехИнсайдер
Не только для подогрева еды Не только для подогрева еды

10 неочевидных способов использования микроволновки в быту

Лиза
Строгая красота Строгая красота

Проект, в котором соединились классические элементы с современной эстетикой

SALON-Interior
Земля кочевая Земля кочевая

Башкирская земля всегда рада гостям

Отдых в России
Принцесса и драконы: 7 теорий заговора вокруг гибели Дианы Спенсер Принцесса и драконы: 7 теорий заговора вокруг гибели Дианы Спенсер

За 25 лет после гибели Дианы возникло много конспирологических теорий ее кончины

Правила жизни
15 незаметных признаков очень больших денег 15 незаметных признаков очень больших денег

Настоящее богатство видно при очень внимательном рассмотрении и хорошей дедукции

Maxim
«Разные инструменты давления на жертву»: чем отличается буллинг у детей и взрослых «Разные инструменты давления на жертву»: чем отличается буллинг у детей и взрослых

Травля в детских и взрослых коллективах проходит по-разному.

Forbes
Дайте «Оскар» этой богине! Дайте «Оскар» этой богине!

В мире более 70 пород кошек, и выделить самых красивых очень сложно

Лиза
Убийцы Барби и Кен: как молодые супруги стали главными маньяками Канады Убийцы Барби и Кен: как молодые супруги стали главными маньяками Канады

Они годами вселяли страх в молодых женщин и девочек пригорода Торонто

VOICE
«В офисе «степлеры летают»: чем буллинг на рабочем месте опасен для компаний «В офисе «степлеры летают»: чем буллинг на рабочем месте опасен для компаний

Почему представители старшего поколения чаще подвержены буллингу на работе?

Forbes
Любовные похождения Маяковского: тройничок, аборты, дети, самоубийство и та самая Лиля Брик Любовные похождения Маяковского: тройничок, аборты, дети, самоубийство и та самая Лиля Брик

Маяковский был нагл, эпатажен и груб, но в то же время был ранимым человеком

ТехИнсайдер
Смертоносные цветы куноити: кем были женщины-ниндзя в японской истории Смертоносные цветы куноити: кем были женщины-ниндзя в японской истории

Какими были куноити в Японии и почему так сложно изучать женскую историю?

Forbes
Просьба о помощи — это слабость: что такое контрзависимость и как от нее избавиться Просьба о помощи — это слабость: что такое контрзависимость и как от нее избавиться

В чем причина контрзависимого поведения и как вести себя в отношениях

Forbes
«Боец музыкального фронта» «Боец музыкального фронта»

Жавдет Айдаров навсегда остался настоящим ленинградцем

Дилетант
Леонид Федун покидает «Спартак»: он владел клубом 18 лет Леонид Федун покидает «Спартак»: он владел клубом 18 лет

Жизнь «Спартака» при Федуне получилась скомканной

Maxim
Навязанные «удобства» Навязанные «удобства»

Без чего автомобиль может легко обойтись?

Автопилот
В поисках Рюрика В поисках Рюрика

А был ли Рюрик?

Дилетант
Настоящие «убийцы Tesla». Как китайцы из BYD захватывают мир Настоящие «убийцы Tesla». Как китайцы из BYD захватывают мир

BYD: от батареек до крупнейшего на планете производителя электромобилей

РБК
9 правил, которые нужно помнить на случай ядерного взрыва 9 правил, которые нужно помнить на случай ядерного взрыва

Как спастись от ядерного взрыва

ТехИнсайдер
8 программ для записи видео с экрана ноутбука 8 программ для записи видео с экрана ноутбука

Самые подходящие программы для записи видео с экрана компьютера

CHIP
Правила жизни Салмана Рушди Правила жизни Салмана Рушди

Правила жизни романиста Салмана Рушди

Правила жизни
Можно ли удлинить ногтевое ложе? Да! Рассказываем, как это сделать Можно ли удлинить ногтевое ложе? Да! Рассказываем, как это сделать

Что делать, если природа не подарила тебе изящные ногти?

VOICE
Святое Собеседование: рождение жанра Святое Собеседование: рождение жанра

Живописец Ян ван Эйк жил по принципу: «любой каприз за ваши деньги»

Дилетант
Открыть в приложении