Как Иван Пупырев разработал технологию Soli

ForbesHi-Tech

«Мне говорили, что это никогда не будет работать»: как российский инженер Google научил телефон понимать жесты

Ирина Юзбекова

mg_6963-2-1.jpg__1573649342__99631.jpg
Фото ivanpoupyrev.com

Российский инженер Иван Пупырев в 2014 году начал работать над технологией Soli, которая спустя пять лет позволила Google выпустить первый в мире смартфон, понимающий взмахи рук пользователя — Pixel 4. Forbes поговорил с изобретателем о проблемах, с которыми столкнулись создатели смартфона, о новых проектах российского изобретателя и сложностях в работе с талантливыми людьми.

15 октября 2019 года компания Google презентовала свои новые продукты, в том числе показала следующую версию своего смартфона — Pixel 4. Новинка умеет распознавать пользователя по лицу под любым углом. Кроме того, устройство получило новую технологию — Motion Sense, которая позволяет ему понимать жесты пользователя. Рядом с камерой Pixel 4 расположился мини-радар, который понимает движения рук человека без прикосновения к экрану. Над его созданием в рамках проекта Soli, основанном на технологии радарного датчика, последние пять лет работал Иван Пупырев, руководитель проектов лаборатории Google Advanced Technology and Projects (ATAP), которая занимается нестандартными разработками.

До того, как прийти в Google, Пупырев, выпускник Московского авиационного института (МАИ), успел поработать с Disney и Sony. В Disney он создал 17 интерактивных технологий, часть из которых компания задействовала в своих парках аттракционов. Самая главная из них — Touché, которая позволяла распознавать прикосновения человека к предмету, растению или даже воде.

Работая в Sony, Пупырев еще до появления первого iPhone в 2007 году, предлагал выпустить мобильный телефон с сенсорным дисплеем, но в компании не поддержали эту идею, хотя Пупырев уверен, что японская корпорация могла опередить появление iPhone. Пупырев и его коллеги из Sony придумали другой проект — Gummi. Это небольшой дисплей, на котором для перемещения объектов можно водить пальцем по оборотной стороне устройства. Sony применила технологию задней сенсорной панели на игровой консоли PlayStation Vita, которую выпустила в 2011 году.

Forbes побеседовал с инженером о невербальном взаимодействии человека с техникой, привычке людей к кнопкам, «умных куртках» и «сумасшедших идеях», которые работают.

Чем отличаются технология Soli и датчик Motion Sense в смартфоне Pixel 4?

Motion Sense – это не другая технология, это та же самая Soli. С точки зрения брендинга Pixel 4 в Google решили назвать ее Motion Sense. В телефоне у нее более узкое применение: она должна распознавать взаимодействия пользователя с телефоном. Для того, чтобы пользователю было понятнее, что это за технология, ее назвали Motion Sense.

Какой функционал Soli задействован в смартфоне?

Само по себе технология может делать много вещей. Так как она новая и была создана с нуля, мы решили ограничить ее использование. Кроме того, мы столкнулись с большим количеством технических трудностей при ее внедрении.

Сейчас технология используется для распознавания человеческих действий. Философия применения Soli в интерфейсах состоит в том, что смартфон должен понимать, что вокруг него происходит и это не должно требовать от пользователя каких-то специальных действий. Это то, что мы называем невербальное взаимодействие — без использования голоса или кнопок. Мы заинтересованы в том, чтобы телефон был умный как человек, и понимал, что происходит вокруг, понимал контекст.

Сейчас, например, в нем есть функция, которая позволяет жестом убавить звук звонящего телефона. Можно жестом отключить звонок или будильник. Это очень удобно, потому что когда в семь утра звонит будильник и ты пытаешься проснуться, тебе не надо брать телефон и нажимать какую-то кнопку – ты просто протягиваешь руку и звук отключается сам.

В Pixel 4 есть также технология идентификации пользователя по лицу. Тут всегда возникает вопрос, когда должны включаться камеры распознавания. Если они работают все время, то у вашего телефона быстро сядет батарейка. Поэтому телефон должен распознавать «знаки», которые сигнализируют о том, что пользователь намеревается использовать эту функцию. Soli позволяет нашему телефону понимать намерения. Если Pixel 4 лежит на столе, а рука пользователя протягивается к нему, в этот момент камеры уже активируются и начинают работать еще до того, как владелец поднес телефон к лицу. Эта комбинация сенсоров ускоряет процесс, и сохраняет заряд батарейки.

Последняя функция состоит в том, что когда телефон лежит на столе, а вас рядом нет, то его дисплей выключается. А когда вы подходите к телефону, он снова включается.

Сенсор может делать гораздо больше, но все эти вещи — новые для пользователя. Поэтому мы бы хотели, чтобы пользователи привыкли к тому, что есть сейчас, а потом подумаем о расширении возможностей.

С какими сложностями вы столкнулись при внедрении Soli в Pixel 4?

Внедрение любой технологии, разработанной в лаборатории, в продукт — это долгий и тяжелый процесс. Когда вы работаете над исследованием, вам надо показать, что технология работает хотя бы один раз. Когда вы работаете над продуктом, нужно показать, что технология работает всегда. Вам нужно принять во внимание огромное количество ситуаций, при которых она не будет работать. Что происходит с Soli, когда человек роняет телефон, что происходит, когда другие сенсоры включены, есть ли какое-то ненужное взаимодействие между другими сенсорами и Soli? Ни у одной компании в мире нет опыта внедрения радара в мобильный телефон. Поэтому нет никакой документации на этот счет.

Поскольку индустрия мобильных телефонов уже довольно развитая, большое количество знаний о том, как делать телефон, находится на фабриках. У фабрик, которые делают телефоны, есть много наработанных производственных технологий. Но когда они получают новую технологию, они тоже не знают, что с ней делать. Им нужно выстраивать новую продуктовую линию, тренировать операторов на фабрике, определять возникающие проблемы, потому что они еще никогда не внедряли эту технологию. Нужно учитывать огромное количество деталей, потому что, когда ты выпускаешь миллион телефонов, маленькая деталь может повлиять на тысячи людей.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Сны Софьи Павловны Сны Софьи Павловны

Софья Эрнст рассказала о том, каково быть женой гендиректора Первого канала

Tatler
Жан-Поль Готье: Танцуют все! Жан-Поль Готье: Танцуют все!

Интервью Сергея Николаевича с великим модельером Жан-Полем Готье

СНОБ
Центр подготовки Центр подготовки

Что делать, чтобы новогодняя вечеринка прошла без вреда для организма?

Cosmopolitan
Фанни Ардан: «Я хочу, чтобы со мной обращались, как с человеком, а не как с женщиной» Фанни Ардан: «Я хочу, чтобы со мной обращались, как с человеком, а не как с женщиной»

В интервью актриса рассказала о новой картине, феминизме, ностальгии

Forbes
Выведем нос на чистую воду Выведем нос на чистую воду

Типичное осложнение гриппа и простуд – гайморит

Здоровье
Скрабы и патчи могут старить? 7 ошибок в уходе за кожей Скрабы и патчи могут старить? 7 ошибок в уходе за кожей

Выясняем, какие привычки могут привести к быстрому старению

Cosmopolitan
По баллистической траектории: самолеты, которые никогда не летали По баллистической траектории: самолеты, которые никогда не летали

Это был уникальный проект российского палубного истребителя

Популярная механика
«Мы создали монстра»: как миллиардер Масаеси Сон собрал фонд на $100 млрд и потерял доверие рынка «Мы создали монстра»: как миллиардер Масаеси Сон собрал фонд на $100 млрд и потерял доверие рынка

Чем грозит Масаеси Сону разрастание кризиса внутри его бизнес-империи?

Forbes
«В нулевые было одно правило: я трачу много — значит, я существую». Как изменилась гастрономическая культура в России «В нулевые было одно правило: я трачу много — значит, я существую». Как изменилась гастрономическая культура в России

Русская гастрономия переживает очередное перерождение

Forbes
Когда чужая зависть вызывает в нас чувство стыда Когда чужая зависть вызывает в нас чувство стыда

Как так получается, что человек, желая защитить себя от зависти, испытывает стыд

Psychologies
Правильное спортивное питание: полезные фитнес-рекомендации на каждый день Правильное спортивное питание: полезные фитнес-рекомендации на каждый день

Как планировать здоровый фитнес-рацион, чтобы похудеть и справиться с нагрузками

Cosmopolitan
Все сама Все сама

Когда и как уместно самой сделать первый шаг?

StarHit
Какое качество нам важнее всего видеть в партнере Какое качество нам важнее всего видеть в партнере

Какое качество больше всего ценят в потенциальном партнере мужчины и женщины?

Psychologies
Неуправляемый Неуправляемый

Как справиться с собственным ребенком и призвать его к порядку?

Лиза
«Кормление грудью — пуля в голову карьеры»: с какими проблемами сталкиваются на работе молодые матери «Кормление грудью — пуля в голову карьеры»: с какими проблемами сталкиваются на работе молодые матери

Как совмещать карьеру и грудное вскармливание?

Forbes
Страх полетов: иногда это не то, чем кажется Страх полетов: иногда это не то, чем кажется

То, что мы называем аэрофобией, может быть проявлением разных состояний

Psychologies
Пьеса для двоих Пьеса для двоих

Между Большой Дмитровкой и Тверской есть тихий Глинищевский переулок

Seasons of life
Идеальный стейк: как выбрать хорошее мясо по отличной цене Идеальный стейк: как выбрать хорошее мясо по отличной цене

Что делать, если хочется сэкономить деньги и насладиться качественным стейком

Популярная механика
Сила воли... и скальпель: как я похудела на 60 кило после уменьшения желудка Сила воли... и скальпель: как я похудела на 60 кило после уменьшения желудка

Наша героиня решила вопрос с лишним весом с помощью хирургической операции

Cosmopolitan
Любовь в мегаполисе Любовь в мегаполисе

Альбина Джанабаева и Валерий Меладзе — о новой песне и любви

OK!
7 продуктов, которые убивают влечение и плохо сказываются на либидо 7 продуктов, которые убивают влечение и плохо сказываются на либидо

Советуем съесть перед свиданием что-нибудь другое

Playboy
Вышли в тираж Вышли в тираж

Как в Российской империи развивались книгоиздание и печатное дело

Forbes
Специи: что с чем и зачем Специи: что с чем и зачем

Одними и теми же специями можно испортить одно блюдо и улучшить вкус другого.

Здоровье
Мужчины, которым не хочется секса Мужчины, которым не хочется секса

Если вам кажется, что партнер охладел, не спешите с выводами

Psychologies
Дольше живет тот, кто осознает свое счастье Дольше живет тот, кто осознает свое счастье

Научившись замечать хорошее в своей жизни, мы делаем ее гораздо более приятной

Psychologies
10 вариантов самодельных гирлянд на Новый год: праздник своими руками 10 вариантов самодельных гирлянд на Новый год: праздник своими руками

Сделать гирлянды для праздника можно и без особых финансовых затрат

Популярная механика
Эпатаж по-украински. Что важного сказал Коломойский в интервью NYT Эпатаж по-украински. Что важного сказал Коломойский в интервью NYT

На каждое предложение найдется свой покупатель, на каждое общество — свой комик

СНОБ
Как утеплить окна дома и не бояться зимней стужи Как утеплить окна дома и не бояться зимней стужи

В сказке про Снежную королеву всему виной был злополучный сквозняк

Cosmopolitan
Весовые категории. Как Haval F7x будет конкурировать с Renault Arkana Весовые категории. Как Haval F7x будет конкурировать с Renault Arkana

Можно ли Haval F7x равнять с Mercedes и как китайцы собираются взорвать рынок?

РБК
Миллионер из хрущоб: можно ли изменить свой социальный статус благодаря шерингу по подписке Миллионер из хрущоб: можно ли изменить свой социальный статус благодаря шерингу по подписке

Сервисы, предлагающие в аренду предметы повседневной жизни, набирают обороты

РБК
Открыть в приложении