Когда мы думаем о покупках, мы часто воспринимаем их как раздражение, связанное с долгим ожиданием. Что, если бы вы могли просто войти, взять то, что вам нужно, и просто уйти? Вдохновленные Amazon Go (расположенный в Сиэтле), Wirecard и YND решили вместе переосмыслить процесс покупок, аналогично тому, что мы уже сделали с проектом Smartbar. Это приводит нас к следующему сотрудничеству с Wirecard Innovation Labs… войдите в Butik.

💪 Wirecard x YND: набираем обороты

Когда Wirecard попросил нас изучить возможности покупок нового поколения, мы обнаружили, что нам нужно решить множество проблем. Например, сколько трений вы действительно можете убрать из процесса покупки? Можем ли мы сделать его более естественным и в то же время быстрее? И, конечно же, понравится ли это клиентам? В ответ на эти вопросы мы разработали концепцию умного торгового автомата, который идентифицирует клиентов с помощью технологии распознавания лиц. В этом сообщении мы поделимся своими выводами и ответами на эти вопросы.

Что такое Бутик

Концепция Butik основана на биометрической платежной технологии YND, разработанной вместе с Wirecard, что обеспечивает «невидимый» опыт оплаты. Эту технологию можно легко развернуть в различных средах и сценариях использования. Используя компьютерное зрение, Butik знает, какие продукты вывозит или кладет обратно покупатель, и автоматически обрабатывает оплату за товары.

Как это работает

Технология, лежащая в основе Butik, обладает всем «умом» на встроенном оборудовании. Автономный модуль выполняет все вычисления для распознавания лиц и продуктов. В текущих настройках Butik не требует дополнительного клиентского приложения, так как клиенты предварительно зарегистрированы. Приложение магазина, работающее на Butik, разработано, чтобы сделать технологию доступной для пользователей на демонстрациях и торговых выставках. Он имитирует процесс оплаты, запускаемый после того, как пользователь закроет дверь. Система предназначена для интеграции с любым платежным стеком и клиентским приложением в зависимости от варианта использования.

Мы создали минимальную версию, оснащенную одной камерой для распознавания лиц, одной камерой для распознавания продуктов, четырьмя интеллектуальными датчиками веса и электронными замками для контроля доступа.

Текущая версия Butik демонстрирует возможности полностью автоматизированного процесса покупок с компьютерным зрением. Это доказывает, что можно достичь точного и защищенного от несанкционированного доступа решения, используя видеокамеры и набор интеллектуальных весов.

Во время разработки мы смогли повторно использовать большую часть фреймворка распознавания лиц и технологии обнаружения присутствия из проекта Smartbar, поэтому идентификация клиентов заключалась в основном в соединении существующих компонентов с помощью электромагнитных замков, обеспечивающих доступ.

Обнаружение продуктов было для нас относительно новой темой, поэтому, естественно, именно здесь мы потратили большую часть наших усилий по машинному обучению. Мы создали решение с использованием компьютерного зрения, дополненное другими датчиками (включая точные весы на основе 4 тензометров) для проверки результатов. Когда покупатель берет продукт из Butik, он обнаруживается нашим «мозгом» с видеосвязью, который перепроверяет его по входным данным весов (чтобы подтвердить соответствие разницы в весе).

Это позволяет нам гарантировать, что система сможет справиться с определенными попытками взлома, такими как:

  • Взять товар и вернуть обратно только упаковку (например, положить обратно пустую банку)
  • Обнаружение «внешних» предметов, не принадлежащих к инвентарю в Бутике
  • Обнаружение, когда товары спрятаны или прикрыты друг за другом

В нашей витрине смоделированный платеж обрабатывается только после того, как покупатель закрыл двери, и между тем есть несколько действий, которые могут изменить статус виртуальной корзины. Мы отслеживаем все изменения в инвентаре и отображаем текущий статус корзины на встроенном OLED-дисплее. Таким образом, покупатель всегда знает, какие товары он выбрал и сколько он в конечном итоге заплатит.

Чтобы предотвратить несанкционированный доступ к Butik во время атаки со спуфингом, мы используем недавно разработанное решение для защиты от спуфинга. Он использует DNN, чтобы определить, настоящее ли лицо или фальшивое.

После нескольких часов тестирования Butik в нашем офисе мы впервые развернули его за пределами офиса в Spielfeld Digital Hub. Для этого партнерства с Wirecard и Visa Innovation Labs мы выбрали продукты для здоровья и хорошего самочувствия для Butik, чтобы проверить концепцию возможности розничной торговли в таких местах, как тренажерные залы, фитнес-клубы, спа и т. Д. Этот вариант использования позволяет клиентам легко выбирать и оплачивать простые товары такие как полотенца и массажные ролики. Наличие отдельного прилавка с преданным персоналом не всегда возможно, и в этом заключается преимущество Butik: он обеспечивает простой шоппинг в местах, где раньше розничная торговля была невозможна.

Что ждет Бутик?

Первая демонстрация Butik 1.0 в настоящее время развернута в Центре инноваций Visa в берлинском Шпильфельде. Он представляет Butik как торговый автомат, который можно использовать в таких условиях жизни, как тренажерные залы или спа. В будущих обновлениях мы рассмотрим возможность добавления дополнительных камер (спереди и сбоку), функции охлаждения, аналитики и многого другого. Butik также использовался в офисах Wirecard в Мюнхене. Команда Wirecard будет использовать его для демонстрации биометрических платежей на нескольких выставках в течение года.

Этот пост написали Ники Джеки Дельфин и Михал Доминик Костшева, наш руководитель специальных проектов в YND. Вам нужна сила мозга? Не стесняйтесь обращаться к нам по адресу [email protected] с вопросами о ваших технических проектах.

Эта история опубликована в The Startup, крупнейшем предпринимательском издании Medium, за которым следят +369 832 человека.

Подпишитесь, чтобы получать наши главные новости здесь.