Стереокамера на NVIDIA Jetson Nano
Обновление: два разъёма MIPI CSI на новой несущей плате Jetson Nano (комплект ревизии B01) технически не синхронизированы
NVIDIA выпустила новую ревизию платы Jetson Nano — B01 — с двумя слотами камер, но полноценным это обновление назвать нельзя.
Тесты в Arducam показали, что синхронизировать две камеры на Jetson Nano B01 можно только с двумя камерами с глобальным затвором и внешним запуском. Поэтому Arducam планирует выпустить новую плату в формате HAT, которая решит эту проблему.
Подробнее об этой проблеме — в статье «Синхронны ли камеры? Проблемы и решения для двух разъёмов камер (J13 и J49) на Jetson Nano B01».
Синхронное зрение для нескольких камер
Мультиплексирование камер и стереозрение — задача сложнее, чем разработка печатной платы камеры, особенно на встраиваемых одноплатных компьютерах вроде Raspberry Pi и Jetson Nano. Справляются с ней немногие компании, и Arducam — одна из них. За годы работы над решениями с несколькими камерами — от SPI и MIPI до USB — Arducam выпустила плату Stereo Camera HAT для действительно синхронной работы двух камер.
Изначально плату Arducam Stereo Camera HAT разработали и протестировали для Raspberry Pi, чтобы обойти ограничение «одного порта камеры»: плата Raspberry Pi видит её как одну подключённую камеру. Новая плата HAT даёт хорошее стереозрение на стандартных платах Raspberry Pi и открывает возможности для новых проектов, например построения карты глубины.
Следующим шагом Arducam занялась платформой Jetson Nano. Интерфейсы у неё похожие, так что задача решаема, а характеристики выше — платформа мощнее. Инженеры Arducam добились результата: плата Arducam Stereo Camera HAT теперь работает с Jetson Nano.
Как плата Arducam Stereo Camera HAT работает с Jetson Nano и формирует стереоизображения, показано в демонстрационном видео на YouTube.
Подойдёт любой модуль
Главное достоинство платы Stereo HAT в том, что это плата HAT. Термин «HAT» звучит как понятие из мира Raspberry Pi, но и для Jetson Nano это гибкое аппаратное решение. Плата HAT служит мостом, а не заменой, поэтому ради стереорежима не придётся отказываться от привычного модуля камеры: можно оставить прежний сенсор, но использовать сразу два.
Если же хотите попробовать другой модуль камеры, посмотрите модули Arducam. Есть серия модулей IMX219 для Jetson Nano — от широкоугольного до модуля с автофокусом, и даже вариант с выносным сенсором на удлинительном кабеле — «шпионская» камера. Для модулей камер Arducam выпускает объективы M12 с разными углами обзора и разной дисторсией.
Arducam планирует перенести на эту платформу и серию модулей камер MIPI. Тогда на Jetson Nano можно будет использовать широкий выбор камер MIPI — от камер с глобальным затвором (до 2 Мп) до камер высокого разрешения (до 18 Мп).
Проекты с 3D-камерами на платформе NVIDIA Jetson Nano
Как сказано выше, у Jetson Nano интерфейсы похожи на интерфейсы Raspberry Pi, но характеристики мощнее. Поэтому он лучше подходит для проектов встраиваемого машинного зрения и компьютерного зрения: зрения роботов, построения карты глубины и других. Таким проектам часто нужно несколько камер, и с платой Arducam Stereo Camera HAT на Jetson Nano можно сделать то, чего обычно ждут от TX1/TX2.
