Главная → Orbbec → ToF или стерео

ToF или стерео: что выбрать для камеры глубины

Как работает стереопара

Две камеры, разнесённые на базу, снимают одну сцену. Алгоритм ищет одинаковые точки на обоих изображениях и по смещению вычисляет расстояние — та же геометрия, что у человеческого зрения. Чем больше база и разрешение, тем точнее результат на дистанции.

Сильная сторона — плотное облако и текстура: стереокамера отдаёт цвет вместе с глубиной, а современные модели вроде Orbbec Gemini 335Lg дополнительно подсвечивают сцену инфракрасным проектором, чтобы работать на однотонных стенах. Слабая сторона — вычислительная нагрузка и чувствительность к освещению: в темноте без подсветки текстуры не за что «зацепиться».

Как работает ToF

ToF (time-of-flight) излучает модулированный ИК-свет и измеряет фазу отражённого сигнала. Каждый пиксель сенсора получает значение дальности напрямую, без поиска соответствий между кадрами. Поэтому ToF стабилен на гладких и однотонных поверхностях, где стерео «слепнет»: белая стена, пол, металлический лист.

Ограничения тоже понятны: дальность обычно до 5–6 м, на ярком солнце ИК-подсветка тонет в засветке, а точность падает с расстоянием квадратично. Для задач «до 3 метров, стабильно, в помещении» ToF часто удобнее.

Сравнение по параметрам

Где стерео выигрывает

• Мобильные роботы и AMR. Нужна дальность 5–10 м, чтобы заранее видеть препятствия и строить маршрут. Стерео с ИК-подсветкой работает и в тёмных складах, и на улице.
• Уличные задачи. Солнце — главный враг ToF; стерео переносит яркий свет лучше.
• Объекты с текстурой и цветом. Если нужна не только геометрия, но и распознавание объектов, стереокамера даёт RGB-картинку и глубину в одном кадре.
• Большие сцены. Паллетизация, захват коробок, инспекция — там, где объект в 2–5 метрах.

Где выигрывает ToF

• Однородные поверхности. Белые стены, гипсокартон, металл без текстуры — ToF не «слепнет».
• Ближняя зона. Жесты, счёт людей, объём короба на столе — на 0,3–1,5 м ToF точнее и стабильнее.
• Меньше вычислений. Если контроллер слабый (микрокомпьютер, встраиваемая плата), ToF разгружает процессор.
• Помещения с ровным светом. Внутри склада, офиса, торгового зала ToF работает предсказуемо.

Как выбирать по задаче

Что проверить на своём объекте

Ни одна таблица не заменит тест на реальной сцене. До покупки стоит проверить четыре вещи:

1. Освещение. Снимите сцену утром, днём и вечером: если есть окна или солнце, разница будет заметна.
2. Поверхности. Проверьте на тех материалах, которые будут в работе: плёнка, металл, спецодежда, белые стены.
3. Дальность. Поставьте объект на максимальном удалении и посмотрите, где заканчивается стабильная глубина.
4. Частота и задержка. Для робота важно не разрешение, а стабильные 30 fps и предсказуемая задержка.

Если сцена смешанная — часть объектов близко и однотонно, часть далеко — часто выгоднее не выбирать, а комбинировать: ToF на ближнюю зону, стерео на обзор. Такая схема описана в материале SLAM плюс камеры глубины.

Практические нюансы

Калибровка

Стерео требует калибровки: без неё глубина «плывёт» по краям кадра. ToF калибруется на заводе, но тоже требует проверки при изменении температуры и после ударов. Типичные ошибки и порядок проверки разобраны в статье калибровка камеры глубины.

Интерфейс и контроллер

Для роботов важна не только оптика, но и интерфейс: USB 3, GMSL2, Ethernet. GMSL2 позволяет тянуть кабель на 10–15 м без потери и синхронизировать несколько камер — это критично для AMR, где контроллер стоит в одном месте, а камеры по периметру. Про подключение к Jetson — в статье камера глубины с Jetson.

Несколько камер

Если камер несколько, нужно синхронизировать кадры и следить за полосой пропускания USB. На одном хосте две-три камеры часто конфликтуют по питанию и шине — об этом есть отдельный разбор в блоге.

Алгоритм выбора за пять шагов

Когда нет времени на тесты, помогает последовательность. Первое — определите максимальную дистанцию до объекта: если она больше 6 м, ToF отпадает. Второе — посмотрите на поверхности: если в сцене много однотонных стен и металла, стерео потребует подсветки, а ToF будет стабильнее. Третье — оцените свет: окна, солнце, яркие лампы смещают выбор в сторону стерео. Четвёртое — посчитайте вычислительный бюджет: слабый контроллер лучше дружит с ToF. Пятое — проверьте интерфейс: USB 3 или GMSL2, длина кабеля, синхронизация нескольких камер.

Если два критерия тянут в разные стороны, берите камеру с активной подсветкой: она закрывает часть слабых мест стерео и остаётся универсальной. Для узкой задачи вроде счёта людей или объёма короба на столе ToF проще и дешевле в интеграции.

И главное: перед закупкой партии камер проведите тест на одной — на своей сцене, со своим светом и своими объектами. Ошибка в выборе на этапе проектирования стоит дороже, чем неделя тестов. Если нужна помощь с подбором — инженеры LUWAM подскажут модель под сценарий и проверят совместимость с контроллером.

Частые вопросы

Откуда берётся погрешность

У стерео ошибка растёт квадратично с дистанцией: на 1 м это миллиметры, на 5 м — уже сантиметры, а на 10 м может уйти за десять. Причина в геометрии: чем дальше объект, тем меньше смещение между кадрами и тем сильнее влияет шум сенсора. Поэтому у стереокамер дальность всегда указывают вместе с базой и разрешением, а не «до 10 м» без оговорок.

У ToF ошибка зависит от фазы отражённого сигнала и накопления заряда. На близких дистанциях она мала, но на краях объектов появляются «летающие пиксели» — значения, которые смешивают объект и фон. Это лечится фильтрацией и настройкой экспозиции, но требует внимания при разработке.

Оба типа камер страдают от блестящих поверхностей: зеркало, полированный металл, мокрая плёнка дают выбросы. Если в сцене есть такие материалы, помогает поляризация, смена угла или комбинация камер.

Четыре сценария из практики

1. Склад, AMR между стеллажами. Проходы узкие, свет неровный, нужна дальность 6–8 м. Выбор — стерео с ИК-подсветкой и защитой IP65: ToF на такой дистанции теряет точность, а в проходах появляются однотонные стены.
2. Паллетизация коробок. Объект в 1,5–3 м, коробки однотонные, но разных цветов. Работает стерео: текстура есть, дальность в пределах комфорта. Если коробки белые и матовые — добавляют подсветку.
3. Счёт людей на входе. Дистанция 2–4 м, поверхность — одежда и пол. ToF справляется лучше: не нужна текстура, стабильная геометрия, меньше вычислений на встраиваемом контроллере.
4. Инспекция фасада с дрона. Солнце, дальность 3–8 м, поверхности разные. Стерео выигрывает за счёт работы при ярком свете; ToF на солнце теряет дальность.

В смешанных проектах часто ставят две камеры разного типа: одна отвечает за обзор и дальность, вторая — за ближнюю зону и стабильность. Пример такой схемы — в статье SLAM плюс камеры глубины.

Что влияет на точность в эксплуатации

• Температура. При нагреве сенсора уплывает калибровка: на производстве это замечают через 30–40 минут работы.
• Вибрация. На роботе камера крепится к раме, и люфт крепления даёт ошибку больше, чем сама оптика.
• Загрязнение. Пыль на защитном стекле снижает контраст и «съедает» дальность — на складах это постоянная история.
• Задержка. Для движущегося робота важнее не точность в миллиметрах, а стабильные 30 fps и предсказуемая задержка обработки.

Поэтому при выборе смотрят не на паспортную точность, а на поведение камеры в тех условиях, где она будет работать: температура, вибрация, пыль, освещение.