Умные зеркала и примерочные на камерах глубины Orbbec

Умное зеркало в магазине — это примерочная, которая продаёт: покупатель встаёт перед зеркалом, и на его отражении появляются размерные рекомендации, предложения аксессуаров, смена цвета товара одним касанием. Производители retail-инсталляций знают, что живёт этот продукт ровно до тех пор, пока система видит человека перед зеркалом — а обычная 2D-камера, спрятанная в раму, видит плохо: примерочная — это приглушённый свет, узкие ракурсы, покупательница в чёрном платье на тёмном фоне, ребёнок, перебегающий кадр. Системы распознавания на плоской картинке теряют фигуру, путают людей и врут в рекомендациях размера — самый чувствительный для ритейлера сбой. Камера глубины Orbbec Astra решает базовую задачу продукта: устойчиво видеть силуэт и позу покупателя в реальных условиях примерочной, измерять фигуру и держать интерактивность без касаний.

Как камера глубины решает задачу

Камера в раме зеркала строит объёмную карту зоны перед собой: силуэт покупателя отделяется от фона по геометрии, а не по цвету пикселей. Чёрное платье на тёмном фоне — классический тупик 2D-распознавания — для карты глубины не проблема: объект виден, потому что он ближе фона и имеет форму. Из этой геометрии извлекается всё, на чём держится продукт: положение и поза человека (куда он смотрит, куда протянул руку), контур фигуры и её параметры (рост, ширина плеч, посадка по силуэту), факт присутствия и перемещения между зонами. Интерактив включается ровно тогда, когда кто-то стоит перед зеркалом, и переключается жестом или сменой позы — без экрана поверх стекла и без кассира с пультом.

Второй контур — подбор размера. Силуэт в трёх измерениях даёт измеримые параметры фигуры, которые сопоставляются с размерными сетками брендов: зеркало показывает не «примерьте M», а обоснованную рекомендацию — и объясняет её фактом посадки на объёмной модели покупателя. Для ритейла это прямой рычаг конверсии и возвратов: рекомендация, которая садится, превращает примерочную в инструмент продаж вместо места разочарования. Тот же контур обслуживает и одежду на отражении: виртуальная примерка накладывает модель изделия на объёмную фигуру, и оно «садится» по фактической геометрии, а не по усреднённому силуэту.

Третье — аналитика примерочных без видеонаблюдения. Карта глубины отвечает на вопросы мерчандайзинга: сколько людей заходило, сколько взаимодействовало с зеркалом, сколько запросило другой размер или цвет, какая зона примерочной работает лучше. Всё это считается по геометрии силуэтов — изображения лиц не нужны, что упрощает и этику продукта, и согласования с покупателями и регуляторами. Магазин получает метрики конверсии примерочной, а не архив записей.

Та же механика переносится на соседние точки пути покупателя. В отделе денима или спортивной одежды сеть из нескольких модулей показывает, где примерка превращается в покупку, а где человек уносит одежду обратно на полку — и что именно он делал перед возвратом: не нашёл размер, не дождался консультанта, увидел брак. В обувном отделе зеркало-экран с камерой показывает посадку модели на объёмной фигуре, не заставляя садиться и разуваться. Для сетей это унифицированный сенсорный компонент: одна и та же камера, одно SDK, разные приложения под каждую зону — вместо зоопарка специализированных решений от разных вендоров.

Какую камеру взять

Зеркало — серийное изделие: камера встраивается в раму или корпус, работает в связке с дисплеем и подсветкой, и её цена входит в каждое выпускаемое изделие. Платформа Astra с активным подсветом создана под такие ближние интерактивные сцены; линейка делится на полноразмерную модель для стендов и Mini-серию для встраивания.

Вариант	Технология	Почему	Цена
Astra Mini Pro	компактная камера глубины для встраиваемых систем	серийное зеркало и примерочная: врезка в раму, ближняя рабочая зона перед зеркалом, OEM-цена на тираж изделий	49 000 ₽
Astra Mini S	компактная камера глубины для встраиваемых решений	модификация для линеек с собственной механикой: отдельная версия серии под конструкцию рамы	65 000 ₽
Astra 2	структурированный свет + IMU	стенд и отработка: диапазон 0,6–8 м, структурированный свет точен вблизи, полноразмерный корпус для лаборатории и демо-зоны	99 900 ₽

Astra Mini Pro — компонент серийного изделия: компактный корпус монтируется за окном в раме, поле зрения настраивается под зону перед зеркалом — обычно один-два метра, где стоит покупатель. Структурированный свет платформы Astra плотно работает именно на этой дистанции, и активная подсветка снимает зависимость от приглушённого света примерочной. Для производителя линейки зеркал важно и это, и цена: компонент за сорок девять тысяч позволяет держать розничную цену изделия, при которой магазин может оснастить не одну VIP-примерочную, а весь зал.

Astra 2 — инструмент разработки и демонстраций: на стенде вы отрабатываете зоны активации, жесты и сценарии рекомендаций, а полноразмерный корпус удобен и для демо-зоны у вашего клиента — тем более что диапазон 0,6–8 м позволяет покрыть и одиночное зеркало, и целую примерочную линию одним устройством. IMU помогает при юстировке наклона в раме: геометрия установки влияет на поле зрения, и её надо знать точно. Приложение переносится на Mini-модуль без смены SDK.

Технические особенности сегмента

Свет в примерочной

Приглушённый, тёплый, часто контровой свет от лампочек по периметру зеркала — худшая среда для 2D-распознавания и штатная для активной камеры глубины: карта строится по собственной ИК-подсветке и мало зависит от света зала. Структурированный свет точен вблизи и на однотонных поверхностях, поэтому силуэт покупателя считывается даже в чёрном тотал-луке на тёмной стене. Что учесть в конструкции: зеркальная поверхность самого изделия даёт ложные отражения — камеру располагают так, чтобы в её поле зрения попадал покупатель, а не отражение соседней примерочной; стеклянные перегородки отсекаются ракурсом и программной маской. ИК-подсвет невидим и не искажает световую сцену, которую выверяет дизайнер магазина.

Дистанции и зона активации

Вся сцена умещается в двух метрах перед зеркалом — и это профиль ближней зоны Astra. Поле зрения рассчитывается на этапе эскиза рамы: камера должна видеть фигуру целиком — от обуви до макушки при рекомендуемой высоте монтажа, — но не захватывать проход за спиной, где движется посторонний персонал. Наклон и высота установки определяют, с какого расстояния система активируется: обычно интерактив включается, когда покупатель подошёл ближе к зеркалу, и это геометрический порог, а не эвристика на картинке. Для линии из нескольких зеркал модули ставятся на каждое изделие — зоны не пересекаются, и система различает, перед каким зеркалом стоит покупатель. Отдельно стоит посчитать зону для колясок и сидячих покупателей: нижняя граница поля зрения должна доходить до пола, иначе ребёнок в коляске «исчезает» из сцены, а сидящий человек обрезается по пояс.

Софт и продукты поверх камеры

Забор данных — через Orbbec SDK v2: поток глубины и RGB обрабатывается на борту изделия, выделение силуэта и оценка позы живут в вашем приложении, наружу — только события и метрики. Стек совместим с ROS 2 для исследовательских прототипов; в серийном зеркале вся обработка умещается на мини-ПК внутри изделия. Архитектурно важно держать слой рекомендаций отдельно от сенсорного слоя: камера отдаёт силуэт и позу, а размерные сетки, каталог и стилистика подменяются без переделки сенсорной части — это позволяет клонировать продукт под разных ритейлеров с одной прошивкой. Для эксплуатации сети изделий закладывайте удалённый мониторинг сенсоров: счётчики потока и самопроверка по эталонной сцене в ночном режиме показывают, какой модуль в зале засветился окном или потерял юстировку, — до того, как покупатель заметит «мёртвое» зеркало.

Частые вопросы

Не нарушает ли камера в зеркале приватность покупателей?

Продукт строится на геометрии силуэта, а не на лицах: система видит фигуру, позу и движения, и не нуждается в идентификации личности. Данные агрегируются в метрики — заходы, взаимодействия, запросы размеров, — изображения не хранятся без отдельного решения ритейлера. Камера глубины здесь этичнее обычного видеонаблюдения: она отвечает на вопросы конверсии примерочной, не снимая «портреты» покупателей.

Что если перед зеркалом стоят двое?

Камера различает фигуры в кадре, и продукт решает сам, как себя вести: обычно активным выбирается тот, кто ближе к зеркалу или жестом подтвердил управление, — для рекомендаций размера это корректно, ведь замер ведётся по конкретному силуэту. Перекрытия — один человек перед другим — обрабатываются трекингом по глубине: дальняя фигура видна по оставшимся точкам и восстанавливается, когда граница между телами читается геометрически. Для примерочных с парным шопингом — мама с дочерью, пара — это штатный режим, и продукт стоит проектировать сразу с переключением активного пользователя, а не с «одним главным» в кадре.

Почему не Femto Bolt — она тоже видит в темноте?

Видит, и превосходно — но iToF-платформа создавалась под помещения с людьми на дистанции до 5,5 м и стоит как прибор, а не как компонент. В зеркале вся сцена — два метра, и здесь структурированный свет Astra даёт плотную карту силуэта при цене компонента, подходящей для серийного изделия. Femto Bolt выигрывает на больших сценах и мультикамерных инсталляциях; для рамы зеркала это лишний бюджет и лишний корпус.

Соберём умное зеркало на платформе Orbbec: Каталог Orbbec на LUWAM — прототипирование на нашем демо-стенде, счёт для юрлица, гарантия 1 год. Карточки моделей: Astra Mini Pro и Astra 2.