Инженеры разработали наушники, способные распознавать мимику лица пользователя

N+1Наука

Наушники со встроенным локатором распознали выражение лица по форме щек

Андрей Фокин

Ke Li et al. / Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies, 2022

Американские инженеры разработали наушники, способные распознавать мимику лица пользователя. Для этого в каждый наушник встроен миниатюрный сонар, который с помощью звуковой эхолокации считывает информацию о движениях боковой области лица, после чего алгоритм машинного обучения восстанавливает выражение лица пользователя в реальном времени с высокой точностью. Эту информацию затем можно использовать, например, для создания анимированных аватаров в приложениях для общения. Статья с описанием устройства опубликована в журнале The Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies.

Технологии распознавания мимики лица человека, которые уже давно успешно используются для создания анимации персонажей в кино видеоиграх, постепенно проникают и в нашу повседневную жизнь. Например, компания NVIDIA предложила использовать распознавание выражения лица для снижения объемов данных, передаваемых по сети во время видеозвонков. Вместо того чтобы посылать все кадры, алгоритм сжатия посылает один кадр с лицом и данные о ключевых точках на нем, после чего компьютер на принимающей стороне анимирует этот кадр с помощью нейросети.

Эта и многие другие подобные технологии распознавания мимики обычно требуют, чтобы перед лицом постоянно находилась видеокамера, что может быть не всегда удобно. Для решения этой проблемы американские инженеры придумали технологию C-Face, которая с помощью встроенных в наушники двух камер и алгоритма машинного обучения способна распознавать мимику человека в реальном времени по движениям небольшой боковой области лица, попадающей в поле зрения устройства.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

У древних британских кельтов выявили матрилокальность У древних британских кельтов выявили матрилокальность

Ученые выяснили, что для кельтов железного века была характерна матрилокальность

N+1
Пилоты, солдаты, цензоры: каким профессиям по-настоящему угрожает искусственный интеллект Пилоты, солдаты, цензоры: каким профессиям по-настоящему угрожает искусственный интеллект

Отрывок из книги «Искусственный интеллект и экономика»

Inc.
Наиболее сохранившиеся животные ледникового периода Наиболее сохранившиеся животные ледникового периода

Эти доисторические животные дают возможность заглянуть в прошлое

ТехИнсайдер
Болезнь тридцатилетних. Что такое кризис четверти жизни и как его правильно прожить Болезнь тридцатилетних. Что такое кризис четверти жизни и как его правильно прожить

Почему люди испытывают кризис четверти жизни?

Inc.
Почему взрослые дети не уважают зрелых родителей: мнение и советы психоаналитика Почему взрослые дети не уважают зрелых родителей: мнение и советы психоаналитика

Почему мы считаем родительские убеждения устаревшими и обесцениваем их опыт

Psychologies
Средневековые английские монахи пострадали от кишечных паразитов Средневековые английские монахи пострадали от кишечных паразитов

Больше половины обследованных августинцев из Кембриджа были заражены гельминтами

N+1
Милиция его не искала: история «тольяттинского потрошителя», который убивал и насиловал детей Милиция его не искала: история «тольяттинского потрошителя», который убивал и насиловал детей

Во время убийств он испытывал «высшее наслаждение»

VOICE
Что такое настоящая любовь к женщине: смешная и мудрая цитата Романа Карцева Что такое настоящая любовь к женщине: смешная и мудрая цитата Романа Карцева

Монологи Романа Карцева смешат нас до сих пор

VOICE
Атмосфера 90-х и озеро-море: как москвичка отдохнула в санатории на Иссык-Куле за 250 тысяч рублей Атмосфера 90-х и озеро-море: как москвичка отдохнула в санатории на Иссык-Куле за 250 тысяч рублей

Отзыв о двухнедельном путешествии по Кыргызстану

Вокруг света
Время во Вселенной может не существовать вовсе! Но вот почему этого не стоит бояться Время во Вселенной может не существовать вовсе! Но вот почему этого не стоит бояться

Существует ли время?

ТехИнсайдер
Ищу проверенного косметолога Ищу проверенного косметолога

7 «красных флажков» при знакомстве с косметологом

Лиза
Правила жизни Салмана Рушди Правила жизни Салмана Рушди

Правила жизни романиста Салмана Рушди

Правила жизни
Металлоорганический сокатализатор помог получить аммиак электролизом Металлоорганический сокатализатор помог получить аммиак электролизом

Химики из США нашли сокатализатор на основе кобальта

N+1
Студент Эйнштейн Студент Эйнштейн

Путь Эйнштейна в науку был совсем не таким прямым и естественным

Наука и жизнь
7 российских брендов, которые используют традиционные элементы в дизайне одежды 7 российских брендов, которые используют традиционные элементы в дизайне одежды

Российские бренды, вдохновленные сказками и историей

СНОБ
Оказалось, что вода спонтанно превращается в перекись — и с этим связана сезонность простуды и гриппа Оказалось, что вода спонтанно превращается в перекись — и с этим связана сезонность простуды и гриппа

Ученые доказали, что микрокапли воды могут превращаться в перекись сами по себе

ТехИнсайдер
Металлические стекла оказались частично жидкими Металлические стекла оказались частично жидкими

Доказано, что часть атомов в металлических стеклах движется подобно жидкости

N+1
Январское извержение вулкана Тонга запустило цунами высотой 90 метров Январское извержение вулкана Тонга запустило цунами высотой 90 метров

Высота цунами, вызванного извержением вулкана, составляла 90 метров

N+1
«Человек не имеет значения ни для кого, кроме самого себя» «Человек не имеет значения ни для кого, кроме самого себя»

Говард Лавкрафт о том, что по-настоящему ужасно

Weekend
5 дневных привычек, которые мешают тебе нормально заснуть ночью 5 дневных привычек, которые мешают тебе нормально заснуть ночью

Проблемы со сном беспокоят многих. Как их избежать?

Лиза
Как перестать лениться и начать действовать: советы писателя Эрика Баркера Как перестать лениться и начать действовать: советы писателя Эрика Баркера

Как начать работать и довести дело до конца?

Правила жизни
Почему «тургеневская барышня» — не комплимент: многие бездумно используют это обидное словосочетание Почему «тургеневская барышня» — не комплимент: многие бездумно используют это обидное словосочетание

«Ты такая нежная и изящная — прямо-таки тургеневская девушка!»

VOICE
«Автостопом по мозгу. Когда вся вселенная у тебя в голове». Все об устройстве и работе мозга «Автостопом по мозгу. Когда вся вселенная у тебя в голове». Все об устройстве и работе мозга

Пора заглянуть внутрь: что же происходит в мозге, когда мы ничем не заняты?

N+1
Вселенная художника Дмитрия Врубеля: от Брежнева до Босха и Гагарина Вселенная художника Дмитрия Врубеля: от Брежнева до Босха и Гагарина

Почему Дмитрий Врубель гораздо больше, чем просто автор политического плаката

Forbes
Онлайн-конфигураторы ПК: выбираем лучший Онлайн-конфигураторы ПК: выбираем лучший

У каждого крупного ритейлера есть собственный конфигуратор ПК

CHIP
Девушка с плаката: как пропаганда использовала женcкие образы во время войн в XX веке Девушка с плаката: как пропаганда использовала женcкие образы во время войн в XX веке

Ккак именно женские образы использовались для воздействия на фронт и тыл

Forbes
Он держался до последнего: какого рода слово Он держался до последнего: какого рода слово

Так как правильно: "горячий кофе" или все же "горячее"?

ТехИнсайдер
Растения, которые должны быть в доме у настоящего мужика Растения, которые должны быть в доме у настоящего мужика

Никаких фиалок и хлорофитумов. Только хардкор!

Maxim
Из-за глобального потепления живородящие ящерицы начали стареть до рождения Из-за глобального потепления живородящие ящерицы начали стареть до рождения

Тепловой стресс укорачивает длину теломер у матерей и их потомства

N+1
«Свобода определяется рамками»: как пианист Риад Маммадов переосмысляет классику «Свобода определяется рамками»: как пианист Риад Маммадов переосмысляет классику

Риад Маммадов — как строится карьера классических музыкантов в России?

Forbes
Открыть в приложении