Комплект разработчика Pico4ML Pro TinyML
Общие сведения
За большими прорывами всегда стоят небольшие, но уверенные шаги. Так и с исследованиями Arducam в области TinyML. В мае 2021 года Arducam впервые запустила TensorFlow Lite на своей первой плате на RP2040 — так появилась Arducam Pico4ML.
ПредысторияArducam Pico4ML оснащалась ЖК-экраном 0,96 дюйма, камерой QVGA 320 × 240 при 60 к/с, микрофоном и инерциальным датчиком (IMU) и включала три предобученных примера TensorFlow Lite: обнаружение человека (Person Detection), распознавание ключевого слова (Wake Word Detection) и волшебную палочку (Magic Wand). С выпуском Arducam Mega понадобился адаптер для нескольких камер. Разработчики снова исходили из принципа Arducam «добавлять ценность, сохраняя доступную цену» и пришли к простой, но содержательной идее: объединить и улучшить. Это ещё один небольшой, но уверенный шаг — так появилась Arducam Pico4ML-Pro.
Особенности
- Развитие TinyML. Pico4ML Pro — новейший продукт Arducam в области TinyML: он сочетает преимущества предыдущего поколения и получил много новых функций.
- Всё в одном. В комплекте — одна камера и модуль микрофона. Поддерживаются распознавание лиц, распознавание жестов и обнаружение ключевого слова.
- Коснитесь и смотрите. ЖК-экран 2,4 дюйма, встроены все предобученные примеры. Прошивать ничего не нужно: работа полностью без программирования — достаточно коснуться экрана и смотреть результат.
- Продуманное исполнение. Дисплей более высокого разрешения, подключение до четырёх камер Mega, интеллектуальное распознавание и обнаружение движения. В комплекте — аккуратный корпус.
- Своя волшебная палочка. Можно собрать собственную волшебную палочку и обучать модели машинного обучения для Raspberry Pi Pico. С Pico4ML Pro можно создать, обучить и развернуть свой проект Magic Wand.
Характеристики
| Микроконтроллер | RP2040 |
|---|---|
| Напряжение питания | 3,3 В |
| Входное напряжение (предел) | 5 В |
| Постоянный ток на вывод ввода-вывода | 652 мА |
| Тактовая частота | 133 МГц |
| Флеш-память | 2 МБ |
| SRAM | 264 КБ |
| USB | Контроллер USB 1.1 и PHY, режимы хоста и устройства |
| Интерфейс камер | 4 интерфейса SPI для камер Mega и 1 однопроводной (1-wire) интерфейс для камеры HM01B0 |
| Слот для SD-карты | Есть |
| ЖК-экран | Есть |
| IMU | Есть |
| Микрофон | Есть |
| Сенсорное управление | Есть |
| Wi-Fi | Есть |
Модель
Комплект разработчика Arducam Pico4ML Pro TinyML Dev Kit:
| Артикул | Экран | Звук | Напряжение питания | Входное напряжение | Постоянный ток | Интерфейс камер | Флеш-память | USB |
|---|---|---|---|---|---|---|---|---|
| B0432 | ЖК-экран 2,4 дюйма | Встроенный микрофон | 3,3 В | 5 В | 652 мА | 4 интерфейса SPI для камер Mega и 1 однопроводной (1-wire) интерфейс для камеры HM01B0 | 2 МБ | Контроллер USB 1.1 и PHY, режимы хоста и устройства |
Демонстрация
Видео к этому материалу опубликовано на YouTube. Пришлём ссылку по запросу на quote@arducam-russia.ru.
Быстрый старт
Оборудование
Установка в корпус
Программное обеспечение
КраткоКомплект оснащён сенсорным экраном — все функции управляются касанием.
Несколько камер
ИнструкцияПодключите до четырёх SPI-камер Arducam Mega — на четырёх частях экрана одновременно будут показаны их видеопотоки. Коснитесь экрана в любом месте, чтобы вернуться на главный экран.
Обнаружение человека
ИнструкцияВстроенная камера Pico4ML-Pro снимает изображение и оценивает вероятность того, что в кадре человек. Если вероятность выше 50 %, процент показывается зелёным, если ниже — красным. Коснитесь экрана в любом месте, чтобы вернуться на главный экран.
Фотосъёмка
ИнструкцияПодключите камеру Mega к интерфейсу 01, выберите разрешение, делайте снимки и сохраняйте их. Нажмите кнопку WiFi и подключитесь к точке доступа
arducam_pico4ml — после этого один кадр можно получить по адресу http://192.168.4.1:8080/g.ПримечаниеМаксимальное разрешение на рисунке указано только для Mega 3MP. Для 5MP максимальное разрешение — 2592 × 1944. Убедитесь, что в слот вставлена SD-карта.
Обнаружение ключевого слова
ИнструкцияВстроенный микрофон позволяет Pico4ML-Pro постоянно отслеживать ключевые слова. Распознаются слова «yes» и «no». Коснитесь экрана в любом месте, чтобы вернуться на главный экран.
Волшебная палочка
ИнструкцияБлагодаря встроенному IMU плата Pico4ML-Pro превращается в волшебную палочку. Взмахните ею в одной плоскости, рисуя «заклинания» в виде арабских цифр, — плата угадает нарисованную цифру. Коснитесь экрана в любом месте, чтобы вернуться на главный экран.
USB-накопитель
ИнструкцияКоснитесь значка USB и подключите Pico4ML-Pro к компьютеру, чтобы просмотреть сделанные снимки. Коснитесь экрана в любом месте, чтобы вернуться на главный экран.
ПримечаниеУбедитесь, что в слот вставлена SD-карта.