Приложение компьютерного зрения для розничной торговли

Ритейлерам и брендам приходится иметь дело с общей проблемой: отслеживанием товара. Система управления запасами является наиболее сложной задачей, поскольку требует много времени и внимания и не добавляет ценности продажам. Торговые представители и мерчандайзеры должны отслеживать и проверять различные KPI — артикулы, облицовку, уровень заполненности витрин, конкурентов, промо и т. д. Для брендов, имеющих большой ассортимент продуктов в различных категориях, это становится еще более сложным и может привести к ошибкам.

Customertimes (CT), ведущий издатель программного обеспечения и системный интегратор в экосистеме Salesforce, специализируется на предоставлении приложений для компаний, производящих товары народного потребления и здравоохранения. Продукты CT включают мобильные приложения для повышения эффективности продаж и компьютерное зрение для проверки магазинов на базе искусственного интеллекта. Продукты CT — CT Mobile, CT Presenter и CT Vision — широко используются ведущими брендами потребительских товаров и товаров для здоровья, такими как Bayer, Danone, L’Oréal, Pernod Ricard, Abbott и т. д. Компания Customertimes признана Институтом оптимизации продвижения (POI) одним из лидеров рынка розничных продаж.

В рамках своего инновационного потока компания Customertimes решила добавить в свой продукт CT Vision возможности дополненной реальности, чтобы продемонстрировать будущее розничного аудита и исполнения. CT Vision уже используется многими компаниями, такими как Danone и L’Oréal, на своих планшетах. Идея заключалась в том, чтобы сделать шаг вперед — расширить возможности представителей, оснастив их носимыми устройствами дополненной реальности, которые могли бы помочь им эффективно выполнять свою работу.

Имея информацию о продукте — наличие товара, фактическую витрину в сравнении с целевой, отсутствующие артикулы и т. д. — буквально перед глазами, представители могут быть гораздо более эффективными и сосредоточиться на устранении ошибок, а не просто сообщать о них. Более того, такая технология может помочь сэкономить время на проверке магазина и, таким образом, позволить представителям тратить больше времени на продажу новых предложений, рекламных акций и т. д.

Открытая архитектура CT Vision и различные API-интерфейсы сделали возможной прямую интеграцию с AR очками. Поскольку у Customertimes не было собственного опыта в области дополненной реальности, они опросили нескольких поставщиков услуг и выбрали Скайвелл Софтвер для разработки приложения компьютерного зрения с элементами дополненной реальности.

Для реализации этого проекта компания наша компания использовала свой большой опыт в области разработки программного обеспечения для ритейл индустрии. Только на основе этой компетенции мы смогли разработать AR приложение, интегрирующееся с серверной частью CT Vision и обеспечивающее непрерывный процесс от захвата изображения до распознавания и визуализации изображений с помощью дополненной реальности.

Как вы понимаете, создание такого продвинутого решения для распознавания изображений в розничной торговле предполагает использование комбинации различных технологий. Для пилотного проекта Customertimes предоставили AR-очки EPSON Moverio BT-300. Это устройство намного легче, чем у конкурентов, и его стоимость также намного ниже.

Со своей стороны, мы использовали Unity и SDK Vuforia, чтобы получить максимально гибкое решение, то есть такое, которое может работать как с очками с поддержкой AR, так и с мобильными устройствами. Это сыграло важную роль при выборе технологического стека, поскольку одним из основных требований было то, что решение должно поддерживать обе визуализации, упомянутые выше. Но обо всем по порядку.

Выбрав подходящий SDK, мы сузили выбор до Vuforia и Wikitude. Однако после проведения обширного исследования мы обнаружили, что Wikitude может поддерживать визуализацию только в мобильных приложениях, несмотря на то, что на их веб-сайте утверждается, что поддерживаются и носимые устройства.

Итак, для визуализации информации в AR мы выбрали базовый SDK Vuforia, который позволяет качественно отслеживать объекты и позволяет нам полностью реализовать программное обеспечение для управления запасами, которое имел в виду клиент. SDK Vuforia оказался универсальным решением для проекта компьютерного зрения, а движок Unity дал нам возможность адаптировать решение для всех платформ. На сегодняшний день платформа построена только для Android, но в будущем ее планируется развернуть и на других платформах.

При выборе правильного технологического стека и дальнейшего программирования было крайне важно учитывать ряд требований к решению.

Для Customertimes было важно, чтобы решение было правильно протестировано и настроено. Важными этапами разработки были получение контроля над гироскопом и автофокусом камеры, регулировка передачи и подготовка данных.

Также было крайне важно, чтобы все было сделано в сжатые сроки, что должно было быть продемонстрировано на мероприятии для клиентов Customertimes в Париже.

Также было необходимо обеспечить гибкость команды. Поскольку сроки были очень сжатыми, команда, работавшая над проектом, должна была быть максимально доступной для клиента, гибкой в ​​плане реализации и быстрой в преодолении трудностей.

Специалисты компании Customertimes уделили особое внимание масштабируемости решения, чтобы его можно было легко масштабировать в будущем и добавлять новые модули, а также некоторые новые функции.

Чтобы создать универсальное решение, нам нужно было выбрать стек технологий, который обеспечил бы работу стеллажей на всех платформах (iOS, Windows и т. д.) и на разных устройствах. И это стало возможным благодаря пакетам Unity и Vuforia SDK.

Заказчик выбрал команду Скайвелл Софтвер благодаря опыту и инсайдерским ноу-хау. Это включает в себя ограничение по времени — именно мы взяли на себя ответственность разработать решение в столь сжатые сроки. Кроме того, мы предоставили клиенту своевременную и точную информацию о результатах, обнаруженных в ходе исследования. Таким образом, все дополнительные преимущества сыграли решающую роль в решении клиента выбрать нас в качестве партнера по исследованиям и разработке.