Orbbec для киосков self-checkout: 3D-контроль корзины

Киоск самообслуживания продаёт скорость: покупатель сканирует товары и уходит. Но каждый ритейлер, запускающий self-checkout, платит за неё потерями — товар не просканирован, просканирован дешёвый штрихкод вместо дорогого, положен в пакет мимо весовой зоны. Оператор физически не успевает контролировать все терминалы, а видеонаблюдение фиксирует инцидент постфактум: картинка есть, потери уже случились. Производители киосков и интеграторы ритейл-оборудования ищут решение, которое видит зону упаковки и корзину в момент совершения операции — и при этом не требует останавливать поток покупателей. Камера глубины Orbbec даёт терминалу объёмное зрение над корзиной и упаковочной зоной: она не просто записывает видео, а измеряет сцену в метрах, поэтому факт «в корзине появился предмет, которого не было в чеке» становится машинным событием, а не подозрением оператора.

Как камера глубины решает задачу

Камера глубины следит за двумя зонами терминала — упаковочным столом и полкой для корзины — и непрерывно строит их объёмную карту. Алгоритм сравнивает последовательные состояния сцены: сколько предметов появилось и исчезло, когда именно это произошло, в какой момент сканирования. Несовпадение — например, на столе возник предмет, но сканирования в этот интервал не было — генерирует событие для оператора или системного запроса покупателю: «Проверьте, всё ли отсканировано». Ключевое отличие от 2D-камеры в том, что глубина устойчива к главному врагу видеораспознавания — путанице печатных узоров: однотонная куртка в корзине для обычной камеры почти не отличается от фона, а для карты глубины это объёмный объект с чёткими границами.

Второй контур — контроль самого процесса сканирования. Камера видит, когда рука покупателя подносит товар к сканеру, и связывает событие сканирования с конкретным предметом в кадре. Это закрывает классическую схему подмены: сканируется дешёвый товар, а в пакет ложится дорогой — алгоритм фиксирует, что предмет, предъявленный на сканирование, и предмет, ушедший в пакет, различаются объёмом и геометрией. Терминал получает возможность задавать вопросы ровно тогда, когда они уместны, не досаждая добросовестным покупателям в девяноста девяти случаях из ста.

Третье — весы и антивозврат. Карта глубины измеряет объём упакованной покупки: если после оплаты в зоне пакета возник объём, не соответствующий чеку ни по числу предметов, ни по габаритам, событие уходит оператору до выхода покупателя из зоны терминала. Всё это работает без видеокамеры наблюдения в привычном смысле: обработка ведётся по геометрии сцены, данные компактны, а для покупателя это выглядит как просто быстрый терминал, который иногда задаёт уточняющий вопрос.

Побочный, но ценный слой — аналитика самого терминала. Те же карты сцены отвечают на вопросы, которые ритейлер обычно не может сформулировать по логам: покупатели кладут товары в пакет до сканирования или после, на каком шаге растёт очередь, сколько людей отказывается от покупки на этапе упаковки, какие зоны терминала создают замешательство. Это данные проектирования следующего поколения киосков: высота стола, положение сканера, ширина зоны упаковки — всё можно проверить по фактическому поведению, а не по опросам. Сенсор, купленный для контроля потерь, попутно становится инструментом UX-исследований без единой дополнительной камеры.

Какую камеру взять

Киоск — это серийное изделие: камера монтируется в козырёк или корпус над зоной упаковки, работает рядом с экраном и считывателем, и её цена входит в стоимость каждого терминала. Платформа Orbbec Astra с активным подсветом создана под такие ближние сцены; для отработки алгоритмов берётся полноразмерная модель, в серийный корпус встраивается Mini-серия.

Вариант	Технология	Почему	Цена
Astra Mini Pro	компактная камера глубины для встраиваемых систем	серийный киоск: врезка в козырёк терминала, ближняя рабочая зона под корзину и стол, OEM-цена на тираж	49 000 ₽
Astra Mini S	компактная камера глубины для встраиваемых решений	вариант для линейки терминалов, где нужна отдельная модификация серии под собственную механику корпуса	65 000 ₽
Astra 2	структурированный свет + IMU	прототип и отработка алгоритмов: диапазон 0,6–8 м, структурированный свет, точный вблизи, полноразмерный корпус для стенда	99 900 ₽

Astra Mini Pro — основной компонент серийного терминала: компактный корпус встраивается в козырёк над зоной упаковки так, что покупатель его не замечает. Структурированный свет платформы Astra даёт плотную карту глубины именно вблизи — на дистанции между козырьком и столом, где работает контроль корзины. Для производителя устройства важна и цена: сорок девять тысяч за компонент на тираже терминалов — это статья, которая окупается защитой от потерь в первые же месяцы эксплуатации сети.

Astra 2 — модель для этапа разработки: на стенде вы воспроизводите фактическую геометрию терминала, прогоняете сотни сцен «положил — отсканировал — упаковал» и настраиваете пороги событий. Структурированный свет точнее всего работает вблизи, а IMU упрощает стендовые эксперименты с наклоном камеры. После того как логика событий сходится, тот же код через Orbbec SDK v2 переносится на Mini-модуль в корпусе терминала — платформа общая, смена модели не переписывает приложение.

Astra Mini S занимает промежуточную позицию в линейке и имеет смысл в двух случаях: когда ваша линейка терминалов требует отдельной модификации серии под иную механику врезки, и когда вы хотите развести в производстве «дежурный» компонент и компонент для ревизий с особыми требованиями. Цена в шестьдесят пять тысяч — это плата за гибкость линейки, а не за «лучшую картинку»: по классу задачи вблизи обе Mini-модели работают в одной зоне, поэтому выбирать между ними стоит по механике корпуса и плану ревизий, а не по характеристикам глубины.

Технические особенности сегмента

Свет в торговом зале

Зона self-checkout — это локальная подсветка сканера, свет от экрана и общий зал с большими окнами по периметру. Активный подсвет Astra закрывает переменную освещённость: карта глубины не зависит от того, светит ли солнце на кассовую линию или зал работает в вечернем режиме. Практические ограничения стоит проверить на прототипе: блики на полиэтиленовых пакетах и зеркальные поверхности упаковки дают зоны неуверенных измерений — они фильтруются, а остаточная неопределённость закладывается в пороги событий. ИК-подсвет невидим и не слепит покупателей — терминал не превращается в источник дискомфорта. Столь же незаметна камера для соседних систем зала: подсветка не конфликтует со сканерами штрихкодов и считывателями карт, а узкая, рассчитанная под терминал зона обзора не задевает соседние кассы.

Дистанции и геометрия установки

Вся рабочая сцена терминала умещается в ближнюю зону: козырёк находится в пределах метра от упаковочного стола, корзина — на полке под ним. Это профиль платформы Astra: структурированный свет даёт максимальную точность именно на коротких дистанциях, где длиннобазные стереосистемы работают на пределе геометрии. На эскизе корпуса рассчитываются поле зрения и зона перекрытия: камера над столом должна видеть и поверхность стола, и борта корзины, и руки покупателя, не захватывая проход за спиной — лишнее поле зрения добавляет ложные события и раздражает операторов.

Софт и события терминала

Интеграция ведётся через Orbbec SDK v2: поток глубины и RGB обрабатывается на бортовом компьютере киоска, тяжёлый сервер не нужен. Типовая схема — фон сцены пустой зоны, детектор изменений объёма, привязка событий к таймингам сканирования и оплаты, пороги для вопросов покупателю. События уходят в кассовое ПО терминала через простой интерфейс — камеры и SDK остаются ниже уровня бизнес-логики, и обновление алгоритмов не трогает кассовое ядро. Для сетей это означает один стандартный модуль на все точки продаж вместо кастомных доработок на каждом формате магазина. Практика внедрения добавляет ещё два пункта: самодиагностику сенсора в регламент утреннего включения терминала (окно камеры в торговом зале быстро обрастает отпечатками) и хранение метрик событий на стороне ритейлера — по ним видно, где пороги слишком строги и сколько добросовестных покупателей получили лишний вопрос.

Частые вопросы

Это аналог видеонаблюдения над кассой?

Нет. Видеокамера записывает картинку, которую человек разбирает после инцидента; камера глубины измеряет сцену в момент операции и порождает машинные события: предмет появился без сканирования, объём пакета не совпал с чеком, рука прошла мимо сканера. Оператор получает адресное уведомление с точным временем, а не час записей для просмотра. Запись картинки при этом можно вести параллельно, но основа контроля — геометрия.

Замедлит ли контроль очередь у терминалов?

Наоборот: правильно настроенные пороги сокращают количество вопросов покупателям. Терминал спрашивает только тогда, когда геометрия сцены расходится с операциями чека, — добросовестный покупатель проходит без пауз. Камера работает на потоке глубины со штатной частотой кадров и не добавляет задержки в цикл сканирования; обработка ведётся параллельно с кассовым приложением.

Почему не камеру с ИИ-распознаванием на 2D-кадре?

2D-распознавание зависит от света, текстуры и ракурса: однотонный товар на однотонном фоне для него почти невидим, а сетка одинаковых товаров в корзине превращается в неразличимый узор. Глубина решает задачу уровня выше: предметы различаются объёмом и границами независимо от их расцветки. Комбинация «геометрия как основа, цветная камера как дополнение» устойчивее чисто визуальных систем — и обе камеры уже встроены в платформу Astra.

Подберём камеру под ваш терминал: Каталог Orbbec на LUWAM — прототипирование на нашем демо-стенде, счёт для юрлица, гарантия 1 год. Карточки моделей: Astra Mini Pro и Astra 2.