К содержимому
  1. Главная
  2. Блог
  3. Система динамического слежения за целью на DepthAI и OAK (OAK-1)

Система динамического слежения за целью на DepthAI и OAK (OAK-1)

23 мая 2021 · По материалам Arducam

Если объединить OAK-1 с Raspberry Pi 4 и поворотным кронштейном, получится камера слежения в реальном времени: она следует за выбранной целью и всё время держит её в центре кадра.

Короткая демонстрация — в видео на YouTube.

Система слежения за целью на MobileNet-SSD, OAK, Raspberry Pi 4 и поворотном кронштейне

Система динамического слежения на OpenCV AI Kit

Как работает система:

Задачи OAK-1:

  • снимать видео в реальном времени, по которому MobileNet обнаруживает объекты, и вычислять смещение центра объекта относительно центра кадра;
  • пересчитывать смещение в углы поворота и наклона с помощью ПИД-регулятора (пропорционально-интегрально-дифференциального);
  • передавать итоговые результаты на Raspberry Pi.

Задачи Raspberry Pi 4:

  • питать OAK-1 и кронштейн;
  • управлять OAK-1: запускать камеру и модель и выполнять все вычисления;
  • поворачивать кронштейн так, чтобы следить за объектом и держать его в центре кадра.

Задача кронштейна:

  • поворачивать OAK-1 вслед за объектом.

Встроенная камера OAK-1 (IMX378) оснащена объективом с автофокусом, поэтому объект остаётся в фокусе, пока камера движется за ним. Кронштейн питается от выводов GPIO Raspberry Pi, но его можно запитать и от внешнего источника. Объекты здесь обнаруживает MobileNet-SSD — предобученная модель, которая распознаёт до 21 класса объектов, — но для обнаружения и слежения за другими объектами можно использовать и другие модели.

Где применяются камеры слежения за целью

Применение камер слежения за целью

Системы захвата цели

Эта функция широко используется в «следующих» дронах: в режиме «следуй за мной» квадрокоптер сам прокладывает путь и автономно следует за заданной целью.

Роботы-сопровождающие для логистики и потребительского рынка

Распознавание и слежение за целью широко применяются в цепочках поставок: складские роботы повышают эффективность управления запасами, снижают число ошибок персонала и экономят логистические расходы. Слежение за целью используют и многие человекоподобные роботы и игрушки-роботы, чтобы лучше взаимодействовать с людьми.

Камеры для конференций

Ещё одно удачное применение камер слежения — умные видеоконференции. Во время удалённого совещания веб-камера автоматически следит за ведущим и переключается на того участника, который начинает говорить.

Управление движением и встраиваемое машинное зрение

Управление движением со встраиваемым машинным зрением

Встраиваемое оборудование с алгоритмами машинного зрения может оказаться одним из самых выгодных способов заметно сократить расходы на НИОКР во многих задачах управления движением. А снижение производственных затрат с самого начала пойдёт на пользу потребителям как на промышленном, так и на розничном рынке.

Ещё по теме

Запросить цену

Укажите количество — пришлём коммерческое предложение.