Zorky: компьютерное зрение для поиска заказов в ритейле
SDK компьютерного зрения и админ-панель для мобильного приложения сотрудника магазина. Сотрудник наводит камеру на стеллаж — Zorky за секунды находит и подсвечивает нужный заказ или коробку с обувью. Даже без интернета.
Задача
Сотрудники пунктов выдачи и магазинов ищут заказы на стеллажах глазами: перебирают десятки коробок и этикеток. Это долго, дорого и приводит к ошибкам при выдаче, а в распродажи время поиска растёт быстрее нагрузки. Облачное распознавание не подходит: на складах и в подсобках сеть нестабильна, а кадры с камеры нельзя отправлять за периметр.
Решение
Разработали Zorky — on-device модель, которая распознаёт цифровые коды на этикетках в видеопотоке и подсвечивает совпадения прямо в кадре. Модуль встраивается в существующее мобильное приложение сотрудника через единый Kotlin Multiplatform SDK для Android и iOS, а мультитенантная админ-панель управляет пользователями, устройствами, ML-моделями и метриками качества.
Заказ по 4 последним цифрам, обувь по 3 цифрам артикула, весь сектор со счётчиком «Найдено X из Y»
Модель работает на устройстве, кадры не покидают телефон — в сеть уходят только обезличенные метрики
Один public API для Android 24+ и iOS 15+, адаптеры CameraX и CVPixelBuffer, приватный Maven
Пользователи и роли, парк устройств, версии моделей с A/B и откатом, аналитика и отчёты
Результат
- Распознавание за ≤2 секунды независимо от числа заказов на полке
- Целевые Precision и Recall от 95%, IoU от 0.85 на обязательной матрице устройств
- Работа на бюджетных смартфонах, включая Huawei без Google Mobile Services
- Enterprise-готовность: мультитенантность, SSO, аудит, SBOM, интеграция с SAP, 152-ФЗ
- Продуктовый сайт: zorky.softverno.ru