Главные проблемы машинного зрения на периферии: как Arducam RoAD помогает роботам-манипуляторам нового поколения
В промышленной автоматизации и робототехнике манипуляторы — это «мускулы» современного цеха. Быстрые операции «взять и положить», точная сборка, сортировка по качеству — во всех этих задачах умные роботы взаимодействуют с меняющейся средой через системы машинного зрения. Но когда от манипулятора требуют ловкости и скорости на уровне человека, становятся заметны серьёзные ограничения традиционного оборудования машинного зрения.
Что такое Arducam RoAD?
Самый короткий путь от прототипа к серийному производству — по оценке Arducam.
RoAD расшифровывается как Robotics of Arducam — «робототехника Arducam», а само слово road означает «дорога». Путь робота от прототипа на лабораторном столе до парка машин в реальной работе часто упирается в разрыв между хрупкими комплектами разработчика и дорогими промышленными сенсорами. Arducam RoAD создана, чтобы закрыть этот разрыв. Свой 14-летний опыт во встраиваемом машинном зрении Arducam превратила в единую промышленную экосистему, рассчитанную на долгий срок службы. Гибкость для разработчиков сочетается с гарантией долгосрочных поставок: архитектура машинного зрения, которую вы строите сегодня, без переделок масштабируется на машины, которые вы выпустите завтра, и поддерживается ещё долгие годы.
Ниже — о том, как серия камер Arducam с сенсорами Sony IMX900, ISX031 и AR0234 даёт промышленным манипуляторам чёткое и надёжное зрение для ответственных задач.
1. Инженерное узкое место: пять главных проблем машинного зрения манипуляторов
Современная робототехника требует всё большей производительности и гибкости, и традиционные системы машинного зрения на манипуляторах часто не справляются с жёсткими условиями работы:
- Быстрое движение и смаз. Быстро движущиеся сочленения манипулятора вызывают у обычных камер сильный смаз и искажения скользящего затвора — получить резкий снимок быстро перемещающейся детали почти невозможно.
- Сложное и меняющееся освещение. В цехе меняется внешний свет, возникают резкие тени, мерцают светодиодные светильники — всё это легко «ослепляет» обычные сенсоры и приводит к потере данных.
- Сверхвысокие требования к точности. Для задач с субмиллиметровой точностью нужны сверхвысокое разрешение и точность до пикселя: даже малейшее искажение изображения приводит к промаху при захвате или неточной установке детали.
- Тяжёлые промышленные условия. Манипулятор постоянно вибрирует, на него действуют пыль и влага, а длинная прокладка кабелей делает ненадёжными обычные USB-кабели и кабели бытового класса.
- Растущая зависимость от данных для ИИ. Интеллект современных роботов опирается на машинное обучение и инференс моделей ИИ. Но «мусор на входе — мусор на выходе»: некачественные, зашумлённые входные данные резко снижают точность нейросетей.
2. Выход из тупика: что даёт машинному зрению роботов Arducam RoAD
Серию Arducam RoAD с нуля разрабатывали под эти пять задач — для бескомпромиссного захвата изображения и быстрой передачи данных:
- Без смаза (глобальный затвор и высокая частота кадров). Сенсоры с глобальным затвором (например, AR0234 и IMX900) полностью устраняют артефакты скользящего затвора и смаз: быстро движущиеся детали «замораживаются» в кадре даже на высоких рабочих скоростях.
- Расширенный HDR для сложного освещения. Встроенный HDR с несколькими экспозициями (например, у ISX031 — HDR до 120 дБ и подавление мерцания светодиодов) сохраняет видимость при сильном контрасте, глубоких тенях и мерцающем светодиодном освещении цеха.
- Высокое разрешение для точной детализации. Чёткое изображение передаёт мельчайшие допуски и детали конструкции, и манипулятор получает точную визуальную обратную связь для высокоточных операций.
- Промышленная надёжность и передача GMSL2 на большие расстояния. Технология GMSL2 и надёжные разъёмы позволяют удлинять кабель до 15 м без потери пакетов данных; система выдерживает механический износ, скручивание и тяжёлые условия цеха.
- Лучшие входные данные для ИИ. Серия RoAD специализируется только на захвате и передаче изображения и сама не выполняет обработку ИИ. Зато она даёт чистый исходный сигнал — без искажений и смаза — и передаёт алгоритмам ИИ и периферийным вычислительным платформам данные высокого качества. Это заметно повышает точность и надёжность инференса моделей.
3. Продукты: производительные модули камер для манипуляторов
Под разную грузоподъёмность, интерфейсы и требования к сенсору экосистема Arducam RoAD и связанные с ней линейки предлагают несколько проверенных на практике вариантов:
1. Цветной синхронизированный стереокомплект на Sony IMX900 с глобальным затвором
- Особенности: комплект из двух синхронизированных камер GMSL на цветном сенсоре Sony IMX900 с глобальным затвором даёт точное восприятие глубины и стереозрение без смаза — специально для точного управления роботами.
- Модель: синхронизированный стереокомплект камер GMSL Arducam IMX900
2. Промышленные решения на Sony ISX031 с расширенным динамическим диапазоном
- Особенности: HDR 120 дБ, встроенный ISP и подавление мерцания светодиодов (LFM) — линейка на сенсоре ISX031 рассчитана на сложное контрастное освещение цеха. Доступны несколько вариантов исполнения:
- Интерфейс MIPI для Jetson: камера MIPI 3MP ISX031 для NVIDIA Jetson Orin Nano/NX
- USB3 без установки драйверов: камера USB3 UVC 3MP ISX031
- Защищённый многоканальный комплект GMSL2: 8-канальный комплект камер GMSL2 3MP ISX031 для Jetson AGX Orin (IP67, кабель до 15 м)
Видео о камерах на ISX031 — на YouTube.
3. Комплекты камер на AR0234 с глобальным затвором для робототехники
- Особенности: комплекты разработаны специально для платформ NVIDIA Jetson. Сенсоры высокого разрешения с глобальным затвором (например, AR0234 на 2,3 Мп) и встроенный ISP позволяют собрать синхронизированную стереосистему или многокамерную систему без артефактов движения.
- Комплекты: синхронизированный стереокомплект из двух камер с глобальным затвором для Jetson Orin, 4-канальный многокамерный комплект для NVIDIA Jetson Orin Nano/NX
Общий обзор решений Arducam для машинного зрения роботов — в статье «Arducam RoAD: решения машинного зрения для робототехники».
Хотите перевести робота от прототипа к серийному выпуску и получить промышленный захват изображения без смаза? Подробные характеристики и совместимость смотрите по ссылкам выше. Чтобы обсудить интеграцию машинного зрения под ваш проект, напишите нам на quote@arducam-russia.ru.
