Как Иван Пупырев разработал технологию Soli

ForbesHi-Tech

«Мне говорили, что это никогда не будет работать»: как российский инженер Google научил телефон понимать жесты

Ирина Юзбекова

mg_6963-2-1.jpg__1573649342__99631.jpg
Фото ivanpoupyrev.com

Российский инженер Иван Пупырев в 2014 году начал работать над технологией Soli, которая спустя пять лет позволила Google выпустить первый в мире смартфон, понимающий взмахи рук пользователя — Pixel 4. Forbes поговорил с изобретателем о проблемах, с которыми столкнулись создатели смартфона, о новых проектах российского изобретателя и сложностях в работе с талантливыми людьми.

15 октября 2019 года компания Google презентовала свои новые продукты, в том числе показала следующую версию своего смартфона — Pixel 4. Новинка умеет распознавать пользователя по лицу под любым углом. Кроме того, устройство получило новую технологию — Motion Sense, которая позволяет ему понимать жесты пользователя. Рядом с камерой Pixel 4 расположился мини-радар, который понимает движения рук человека без прикосновения к экрану. Над его созданием в рамках проекта Soli, основанном на технологии радарного датчика, последние пять лет работал Иван Пупырев, руководитель проектов лаборатории Google Advanced Technology and Projects (ATAP), которая занимается нестандартными разработками.

До того, как прийти в Google, Пупырев, выпускник Московского авиационного института (МАИ), успел поработать с Disney и Sony. В Disney он создал 17 интерактивных технологий, часть из которых компания задействовала в своих парках аттракционов. Самая главная из них — Touché, которая позволяла распознавать прикосновения человека к предмету, растению или даже воде.

Работая в Sony, Пупырев еще до появления первого iPhone в 2007 году, предлагал выпустить мобильный телефон с сенсорным дисплеем, но в компании не поддержали эту идею, хотя Пупырев уверен, что японская корпорация могла опередить появление iPhone. Пупырев и его коллеги из Sony придумали другой проект — Gummi. Это небольшой дисплей, на котором для перемещения объектов можно водить пальцем по оборотной стороне устройства. Sony применила технологию задней сенсорной панели на игровой консоли PlayStation Vita, которую выпустила в 2011 году.

Forbes побеседовал с инженером о невербальном взаимодействии человека с техникой, привычке людей к кнопкам, «умных куртках» и «сумасшедших идеях», которые работают.

Чем отличаются технология Soli и датчик Motion Sense в смартфоне Pixel 4?

Motion Sense – это не другая технология, это та же самая Soli. С точки зрения брендинга Pixel 4 в Google решили назвать ее Motion Sense. В телефоне у нее более узкое применение: она должна распознавать взаимодействия пользователя с телефоном. Для того, чтобы пользователю было понятнее, что это за технология, ее назвали Motion Sense.

Какой функционал Soli задействован в смартфоне?

Само по себе технология может делать много вещей. Так как она новая и была создана с нуля, мы решили ограничить ее использование. Кроме того, мы столкнулись с большим количеством технических трудностей при ее внедрении.

Сейчас технология используется для распознавания человеческих действий. Философия применения Soli в интерфейсах состоит в том, что смартфон должен понимать, что вокруг него происходит и это не должно требовать от пользователя каких-то специальных действий. Это то, что мы называем невербальное взаимодействие — без использования голоса или кнопок. Мы заинтересованы в том, чтобы телефон был умный как человек, и понимал, что происходит вокруг, понимал контекст.

Сейчас, например, в нем есть функция, которая позволяет жестом убавить звук звонящего телефона. Можно жестом отключить звонок или будильник. Это очень удобно, потому что когда в семь утра звонит будильник и ты пытаешься проснуться, тебе не надо брать телефон и нажимать какую-то кнопку – ты просто протягиваешь руку и звук отключается сам.

В Pixel 4 есть также технология идентификации пользователя по лицу. Тут всегда возникает вопрос, когда должны включаться камеры распознавания. Если они работают все время, то у вашего телефона быстро сядет батарейка. Поэтому телефон должен распознавать «знаки», которые сигнализируют о том, что пользователь намеревается использовать эту функцию. Soli позволяет нашему телефону понимать намерения. Если Pixel 4 лежит на столе, а рука пользователя протягивается к нему, в этот момент камеры уже активируются и начинают работать еще до того, как владелец поднес телефон к лицу. Эта комбинация сенсоров ускоряет процесс, и сохраняет заряд батарейки.

Последняя функция состоит в том, что когда телефон лежит на столе, а вас рядом нет, то его дисплей выключается. А когда вы подходите к телефону, он снова включается.

Сенсор может делать гораздо больше, но все эти вещи — новые для пользователя. Поэтому мы бы хотели, чтобы пользователи привыкли к тому, что есть сейчас, а потом подумаем о расширении возможностей.

С какими сложностями вы столкнулись при внедрении Soli в Pixel 4?

Внедрение любой технологии, разработанной в лаборатории, в продукт — это долгий и тяжелый процесс. Когда вы работаете над исследованием, вам надо показать, что технология работает хотя бы один раз. Когда вы работаете над продуктом, нужно показать, что технология работает всегда. Вам нужно принять во внимание огромное количество ситуаций, при которых она не будет работать. Что происходит с Soli, когда человек роняет телефон, что происходит, когда другие сенсоры включены, есть ли какое-то ненужное взаимодействие между другими сенсорами и Soli? Ни у одной компании в мире нет опыта внедрения радара в мобильный телефон. Поэтому нет никакой документации на этот счет.

Поскольку индустрия мобильных телефонов уже довольно развитая, большое количество знаний о том, как делать телефон, находится на фабриках. У фабрик, которые делают телефоны, есть много наработанных производственных технологий. Но когда они получают новую технологию, они тоже не знают, что с ней делать. Им нужно выстраивать новую продуктовую линию, тренировать операторов на фабрике, определять возникающие проблемы, потому что они еще никогда не внедряли эту технологию. Нужно учитывать огромное количество деталей, потому что, когда ты выпускаешь миллион телефонов, маленькая деталь может повлиять на тысячи людей.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Квантовый переход Квантовый переход

Внутренняя трансформация — процесс непростой и болезненный

Yoga Journal
Заняться летним зимой Заняться летним зимой

Может, если зимой делать все то же, что и летом, в итоге станет теплее

Maxim
Витамины в косметике Витамины в косметике

Новый бьюти-тренд: крем, обогащённый витаминами, и приём витаминных добавок

Худеем правильно
Почему иллюзия богатства, успеха и красивой жизни по‑прежнему хорошо продается — на примере историй главных аферистов 2010-х Почему иллюзия богатства, успеха и красивой жизни по‑прежнему хорошо продается — на примере историй главных аферистов 2010-х

Пусть их истории фейк, зато люди сопереживают и любят их по-настоящему

Esquire
15 вопросов о фитнесе, после которых захочется на тренировку 15 вопросов о фитнесе, после которых захочется на тренировку

Всеобъемлющий гид на тему фитнеса

Esquire
Главная школа стартапера: миллиардер Дэвид Даффилд об опыте, который нужен успешному предпринимателю Главная школа стартапера: миллиардер Дэвид Даффилд об опыте, который нужен успешному предпринимателю

Чему может научить предпринимателя большая компания?

Forbes
12 «всегда» и 10 «никогда»: простые привычки для поддержания здоровья 12 «всегда» и 10 «никогда»: простые привычки для поддержания здоровья

Инвестиции в здоровье не всегда требуют денег

Maxim
В другой стране как дома В другой стране как дома

Переехать в другую страну сложно, но ещё сложнее жить по чужим правилам

Здоровье
Джокер & мы. Как киноперсонаж используется на российском ТВ для травли несогласных Джокер & мы. Как киноперсонаж используется на российском ТВ для травли несогласных

Наши телепропагандисты все больше уделяют внимание либеральным интеллектуалам

СНОБ
Проект года: Марина Лошак Проект года: Марина Лошак

Директор Пушкинского музея Марина Лошак обещает нам большие перемены

Glamour
Джозеф Шугерман: Как создать крутой рекламный текст. Отрывок из книги Джозеф Шугерман: Как создать крутой рекламный текст. Отрывок из книги

Приемы, делающих рекламное объявление эффективным

СНОБ
Свободный график или деньги в конверте. Что имеют в виду 72% россиян, готовые стать фрилансерами Свободный график или деньги в конверте. Что имеют в виду 72% россиян, готовые стать фрилансерами

Почти три четверти россиян теоретически готовы уйти в «свободное плаванье»

СНОБ
Магазины без будущего: куда и почему уходят гипермаркеты Магазины без будущего: куда и почему уходят гипермаркеты

Гипермаркеты в их традиционном формате не имеют будущего

Forbes
«В странах СНГ не принято рассматривать благотворительность как бизнес-задачу»: основатель фонда «Таблеточки» о том, как сделать помощь людям эффективной «В странах СНГ не принято рассматривать благотворительность как бизнес-задачу»: основатель фонда «Таблеточки» о том, как сделать помощь людям эффективной

Интервью с Ольгой Кудиненко — учредителем благотворительного фонда «Таблеточки»

Forbes
Худой психопат и толстый политик: Кристиан Бейл и все его трансформации в кино Худой психопат и толстый политик: Кристиан Бейл и все его трансформации в кино

Посмотрим, как Кристиан Бейл менялся для разных фильмов

Cosmopolitan
Центр подготовки Центр подготовки

Что делать, чтобы новогодняя вечеринка прошла без вреда для организма?

Cosmopolitan
Танец в аду: история девушки, выжившей в лагере смерти Танец в аду: история девушки, выжившей в лагере смерти

Эдит Ева Эгер в мемуарах рассказывает об ужасах холокоста и стойкости людей

Forbes
Налей и отойди: почему мы становимся потребителями-отшельниками Налей и отойди: почему мы становимся потребителями-отшельниками

Мы стремимся к одиночеству в процессе потребления

Forbes
Северный гигант Северный гигант

Новый вездеход от КамАЗ, который легко пройдет по тундре и болоту

Популярная механика
Какое качество нам важнее всего видеть в партнере Какое качество нам важнее всего видеть в партнере

Какое качество больше всего ценят в потенциальном партнере мужчины и женщины?

Psychologies
От премьеров к миллиардерам: из чего вырос ресторан братьев Ротенбергов От премьеров к миллиардерам: из чего вырос ресторан братьев Ротенбергов

Семья миллиардеров Ротенбергов поначалу хотела сделать ресторан только для своих

Forbes
Анна Михалкова: «Нет никакой трагедии в том, чтобы остаться одному» Анна Михалкова: «Нет никакой трагедии в том, чтобы остаться одному»

В прокат выходит фильм Анны Пармас «Давай разведемся»

GQ
Как глава Mariott добился роста капитализации сети на 226% в эпоху Airbnb Как глава Mariott добился роста капитализации сети на 226% в эпоху Airbnb

Арне Соренсон либо сошел с ума, либо принял лучшее решение в своей карьере

Forbes
Алена Зеленовская: Новый закон СПЧ о домашнем насилии: вопросов больше, чем ответов Алена Зеленовская: Новый закон СПЧ о домашнем насилии: вопросов больше, чем ответов

Как решить проблему домашнего насилия

СНОБ
Рак кожи, надоевшая роль, возрастная жена: самое интересное о Хью Джекмане Рак кожи, надоевшая роль, возрастная жена: самое интересное о Хью Джекмане

Всё ли так гладко за этим красивым фасадом жизни Хью Джекмана?

Cosmopolitan
Михаил Антонов: Побеждает команда, которая стремится создать технологии завтрашнего дня Михаил Антонов: Побеждает команда, которая стремится создать технологии завтрашнего дня

Почему даже неуспешный проект может принести пользу?

СНОБ
Новый Jeep Compass. Переход через Рубикон Новый Jeep Compass. Переход через Рубикон

Фактически он - воплощение итальянских творческих решений с 2,4-литровым мотором

4x4 Club
Профессии будущего: чему стоит учиться уже сегодня Профессии будущего: чему стоит учиться уже сегодня

Какие профессии могут появиться в ближайшие полвека

РБК
Муза Муза

Царевна новой русской кухни

Собака.ru
Мороз по дому: как выбрать подходящий холодильник Мороз по дому: как выбрать подходящий холодильник

Ни одну современную квартиру невозможно представить себе без холодильника

Популярная механика
Открыть в приложении