Распознавание образов

Распознавание бутылок: история сока через камеру

Сделали прототип сайта, который распознаёт бутылку через камеру телефона и показывает видео о производстве сока.

Прототип

Как это было

Контекст

У клиента родители производят соки на небольшом семейном заводе. Они уже начали поставлять продукцию в розничные сети и хотели показывать покупателям, как делают сок.

Задача и сложности

Покупатель не должен был устанавливать приложение. QR-кодов на бутылках тоже не предполагалось: один код на баннере у полки открывал бы сайт, а дальше камера должна была распознать саму бутылку и запустить нужный ролик.

Что сделали

Сняли примерно по 3000 фотографий каждой бутылки с разных ракурсов и в разных местах. Обучили модель и запустили её локально на телефоне. Собрали прототип сайта: пользователь разрешает доступ к камере, наводит её на бутылку и смотрит видео.

Результат

Дошли до прототипа. Это было в начале мобилизации, когда инженеры уезжали или становились недоступны для работы. Передали заказчику прототип, исходники и модель бесплатно.

Детали

Технологии и инструменты
Распознавание образов, локальная модель машинного обучения, камера браузера

Обсудим вашу задачу

Расскажите, что нужно сделать или что сейчас не работает.