Инженеры разработали наушники, способные распознавать мимику лица пользователя

N+1Наука

Наушники со встроенным локатором распознали выражение лица по форме щек

Андрей Фокин

Ke Li et al. / Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies, 2022

Американские инженеры разработали наушники, способные распознавать мимику лица пользователя. Для этого в каждый наушник встроен миниатюрный сонар, который с помощью звуковой эхолокации считывает информацию о движениях боковой области лица, после чего алгоритм машинного обучения восстанавливает выражение лица пользователя в реальном времени с высокой точностью. Эту информацию затем можно использовать, например, для создания анимированных аватаров в приложениях для общения. Статья с описанием устройства опубликована в журнале The Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies.

Технологии распознавания мимики лица человека, которые уже давно успешно используются для создания анимации персонажей в кино видеоиграх, постепенно проникают и в нашу повседневную жизнь. Например, компания NVIDIA предложила использовать распознавание выражения лица для снижения объемов данных, передаваемых по сети во время видеозвонков. Вместо того чтобы посылать все кадры, алгоритм сжатия посылает один кадр с лицом и данные о ключевых точках на нем, после чего компьютер на принимающей стороне анимирует этот кадр с помощью нейросети.

Эта и многие другие подобные технологии распознавания мимики обычно требуют, чтобы перед лицом постоянно находилась видеокамера, что может быть не всегда удобно. Для решения этой проблемы американские инженеры придумали технологию C-Face, которая с помощью встроенных в наушники двух камер и алгоритма машинного обучения способна распознавать мимику человека в реальном времени по движениям небольшой боковой области лица, попадающей в поле зрения устройства.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Пластиковый мусор в гнездах стал смертельной ловушкой для аистят Пластиковый мусор в гнездах стал смертельной ловушкой для аистят

Как пластиковый мусор в гнездах вредит потомству белых аистов

N+1
Забытый король вестернов Том Микс: ковбой с простреленным горлом и легенда Голливуда Забытый король вестернов Том Микс: ковбой с простреленным горлом и легенда Голливуда

Том Микс — реальный ковбой со сломанным носом и простреленным горлом

Maxim
Самый научный и логичный в мире: 10 фактов о корейском алфавите Самый научный и логичный в мире: 10 фактов о корейском алфавите

Хангыль: самый простой, логичный и необычный алфавит мира

ТехИнсайдер
«Пришло то самое время, когда надо поверить в себя» «Пришло то самое время, когда надо поверить в себя»

Маша Шейх получила широкую известность благодаря своей работе в группе #2Маши

OK!
Иммунитет от хамства: как реагировать на грубость Иммунитет от хамства: как реагировать на грубость

Как защититься от хамства, не опускаясь до него?

Psychologies
Доисторические британцы раздробили редкий горный хрусталь и положили в погребения Доисторические британцы раздробили редкий горный хрусталь и положили в погребения

Он символизировал трансформацию мертвых и их связь с живыми

N+1
В глубинах океана есть загадочный В глубинах океана есть загадочный

Глубоко в океане есть «затерянный город», и это место не похоже ни на что другое

ТехИнсайдер
Как бережно подталкивать людей к изменениям Как бережно подталкивать людей к изменениям

Действительно, влиять на других людей очень сложно, но это умение можно развить

Psychologies
Беги быстрее: как спорт превратился в социальный лифт и почему он не всегда работает Беги быстрее: как спорт превратился в социальный лифт и почему он не всегда работает

Почему в большом спорте одни добиваются успеха, а другие уносят с собой травмы

Forbes
Кристоф Андре: «Как я упражняюсь в счастье» Кристоф Андре: «Как я упражняюсь в счастье»

Отрывок из книги Кристофа Андре «И не забудь быть счастливым»

Psychologies
Кинематограф управляет вашими эмоциями. На что нужно обратить внимание Кинематограф управляет вашими эмоциями. На что нужно обратить внимание

Десятилетие за десятилетием киноискусство овладевает умами

ТехИнсайдер
«Смотришь на эти вывески, и они честно заявляют — стало хуже». Что не так с ребрендингом западных компаний, попавших в руки российских бизнесменов «Смотришь на эти вывески, и они честно заявляют — стало хуже». Что не так с ребрендингом западных компаний, попавших в руки российских бизнесменов

Почему правильный ребрендинг — это важно? И почему он не у всех получается?

Inc.
Потерянный человек в потерянном раю Потерянный человек в потерянном раю

Памяти Натальи Нестеровой

Weekend
Авангард Леонтьев. Счастливчик Авангард Леонтьев. Счастливчик

«Только сейчас начал понимать, как мне везло в жизни»

Коллекция. Караван историй
Как перестать пускать деньги на ветер: 4 работающих совета Как перестать пускать деньги на ветер: 4 работающих совета

Если постараться, перевоспитать можно даже отъявленного транжиру!

VOICE
Водители с признаками Водители с признаками

Научный подход к искоренению пьянства на дорогах

Автопилот
Яна Сексте: Яна Сексте:

Бомба замедленного действия — Яна Сексте

Караван историй
De feminis: отрывок из новой книги Владимира Сорокина, которую он посвятил женщинам De feminis: отрывок из новой книги Владимира Сорокина, которую он посвятил женщинам

Отрывок из сборника рассказов Владимира Сорокина De feminis — «О женщинах»

Forbes
Никита Ковтунов — об учебе у Брусникина и преподавании в Gogol School Никита Ковтунов — об учебе у Брусникина и преподавании в Gogol School

Никита Ковтунов — об универсальности артиста и русской литературе

РБК
Почему даже домашние кошки охотятся на диких животных и играют с полумертвой добычей? Почему даже домашние кошки охотятся на диких животных и играют с полумертвой добычей?

Почему домашние кошки, оказавшись за порогом, превращаются в свирепого хищника?

ТехИнсайдер
Библия сексуальной революции и космические мечты: что почитать у Роберта Хайнлайна Библия сексуальной революции и космические мечты: что почитать у Роберта Хайнлайна

Знаковые романы Роберта Хайнлайна

ТехИнсайдер
Вот что будет с телом, если каждый день стоять в планке Вот что будет с телом, если каждый день стоять в планке

Действительно ли планка — идеальное упражнение?

ТехИнсайдер
Зачем бытовая техника следит за нами и чем это может быть опасно Зачем бытовая техника следит за нами и чем это может быть опасно

Как хакеры могут испортить тебе жизнь одним нажатием кнопки

Maxim
Почему израильский танк Почему израильский танк

Танк "Меркава" была впервые задумана израильским генералом Исраэлем Талем

ТехИнсайдер
Фрагмент книги «О чем молчит Ласточка» — потенциального международного бестселлера о сложных отношениях Фрагмент книги «О чем молчит Ласточка» — потенциального международного бестселлера о сложных отношениях

Отрывок из «О чем молчит Ласточка» — сложной истории об отношениях двух мужчин

Правила жизни
Красота по-османски: 5 бьюти-правил турчанок, которые стоит взять на заметку Красота по-османски: 5 бьюти-правил турчанок, которые стоит взять на заметку

Мы раскрыли тайну османских красавиц — бери их ключевые бьюти-правила на заметку

VOICE
Как включить клавиатуру на ноутбуке: все проще, чем кажется Как включить клавиатуру на ноутбуке: все проще, чем кажется

Рассказываем о том, как включить клавиатуру на ноутбуке несколькими способами

CHIP
Почему императоров убивают? Пример из истории России Почему императоров убивают? Пример из истории России

Почему убили императора Павла I

ТехИнсайдер
Пять золотых Пять золотых

В истории наградной системы особое место занимают золотые офицерские кресты

Дилетант
Как быстро очистить подошву утюга от пригара: возвращаем бытовой технике прежний вид Как быстро очистить подошву утюга от пригара: возвращаем бытовой технике прежний вид

Мы знаем, как вернуть утюгу былой блеск и чистоту

ТехИнсайдер
Открыть в приложении