Link to this sectionКраткое руководство: Seeed Studio reCamera с Ultralytics YOLO26#

reCamera была представлена сообществу AI на YOLO Vision 2024 (YV24), ежегодном гибридном мероприятии Ultralytics. Она создана преимущественно для периферийных AI-приложений, предлагая мощные вычислительные возможности и простое развертывание.

Благодаря поддержке разнообразных аппаратных конфигураций и ресурсов с открытым исходным кодом, это идеальная платформа для прототипирования и развертывания инновационных компьютерного зрения решений на граничных устройствах.

Link to this sectionПочему стоит выбрать reCamera?#

Серия reCamera создана специально для периферийных AI-приложений с учетом потребностей разработчиков и инноваторов. Вот почему она выделяется:

• Производительность на базе RISC-V: В основе лежит процессор SG200X, построенный на архитектуре RISC-V, обеспечивающий исключительную производительность для задач граничного ИИ при сохранении энергоэффективности. Благодаря способности выполнять 1 триллион операций в секунду (1 TOPS), он легко справляется с требовательными задачами, такими как обнаружение объектов в реальном времени.

• Оптимизированные видеотехнологии: Поддержка современных стандартов сжатия видео, включая H.264 и H.265, позволяет уменьшить требования к хранилищу и пропускной способности без потери качества. Такие функции, как HDR-изображение, 3D-шумоподавление и коррекция линз, обеспечивают профессиональное качество картинки даже в сложных условиях.

• Энергоэффективная двойная обработка: В то время как SG200X выполняет сложные AI-задачи, небольшой 8-битный микроконтроллер управляет более простыми операциями для экономии энергии, что делает reCamera идеальным выбором для устройств с питанием от батарей или маломощных систем.

• Модульная и обновляемая конструкция: reCamera построена по модульному принципу и состоит из трех основных компонентов: основной платы, платы сенсора и базовой платы. Такая конструкция позволяет разработчикам легко заменять или обновлять компоненты, обеспечивая гибкость и перспективность для развивающихся проектов.

Link to this sectionБыстрая настройка оборудования reCamera#

Пожалуйста, следуй краткому руководству по reCamera для первичной настройки устройства, такой как подключение к сети WiFi и доступ к веб-интерфейсу Node-RED для быстрого просмотра результатов обнаружения.

Link to this sectionИнференс с использованием предустановленных моделей YOLO26#

На reCamera предустановлены четыре модели Ultralytics YOLO26, и ты можешь просто выбрать нужную модель в панели управления Node-RED.

• Обнаружение (YOLO26n)
• Классификация (YOLO26n-cls)
• Сегментация (YOLO26n-seg)
• Оценка позы (YOLO26n-pose)

Шаг 1: Если ты подключил reCamera к сети, введи IP-адрес reCamera в браузере, чтобы открыть панель управления Node-RED. Если ты подключил reCamera к ПК через USB, можешь ввести 192.168.42.1. Здесь ты увидишь, что модель обнаружения YOLO26n загружена по умолчанию.

Шаг 2: Нажми на зеленый кружок в правом нижнем углу, чтобы перейти к редактору потоков Node-RED.

Шаг 3: Нажми на узел model и выбери On Device.

Шаг 4: Выбери одну из четырех предустановленных моделей YOLO26n и нажми Done. Например, здесь мы выберем YOLO26n Pose

Шаг 5: Нажми Deploy и, когда развертывание завершится, нажми Dashboard.

Теперь ты сможешь увидеть работу модели оценки позы YOLO26n!

Link to this sectionЭкспорт в cvimodel: конвертация твоей модели YOLO26#

Если ты хочешь использовать собственную обученную модель YOLO26 с reCamera, выполни следующие действия.

Здесь мы сначала конвертируем модель PyTorch в ONNX, а затем в формат модели MLIR. Наконец, MLIR будет сконвертирован в cvimodel для запуска инференса на устройстве.

Link to this sectionЭкспорт в ONNX#

Экспортируй модель Ultralytics YOLO26 в формат модели ONNX.

Link to this sectionУстановка#

Чтобы установить необходимые пакеты, выполни:

pip install ultralytics

Подробные инструкции и лучшие практики по процессу установки ищи в нашем руководстве по установке Ultralytics. Если при установке необходимых пакетов для YOLO26 у тебя возникнут трудности, обратись к нашему руководству по распространенным проблемам за решениями и советами.

Link to this sectionИспользование#

from ultralytics import YOLO

# Load a YOLO26 model
model = YOLO("yolo26n.pt")

# Export the model to ONNX format
model.export(format="onnx", opset=14)  # creates 'yolo26n.onnx'

Для получения дополнительной информации о процессе экспорта посети страницу документации Ultralytics по экспорту.

Link to this sectionЭкспорт ONNX в MLIR и cvimodel#

Получив модель ONNX, обратись к странице Конвертация и квантование AI-моделей, чтобы конвертировать модель ONNX в MLIR, а затем в cvimodel.

Link to this sectionБенчмарки#

Скоро будет доступно.

Link to this sectionРеальные сценарии использования reCamera#

Передовые возможности компьютерного зрения и модульная конструкция reCamera делают ее подходящей для широкого спектра реальных сценариев, помогая разработчикам и компаниям легко решать уникальные задачи.

• Обнаружение падений: Разработанная для целей безопасности и здравоохранения, reCamera может обнаруживать падения в реальном времени, что идеально подходит для ухода за пожилыми людьми, больниц и промышленных условий, где критически важна быстрая реакция.

• Обнаружение средств индивидуальной защиты (СИЗ): reCamera может использоваться для обеспечения безопасности на рабочем месте, отслеживая соблюдение требований по СИЗ в реальном времени. Это помогает определить, носят ли рабочие каски, перчатки или другое защитное снаряжение, что снижает риски в промышленных условиях.

• Обнаружение пожаров: Возможности обработки в реальном времени делают reCamera отличным выбором для обнаружения пожаров в промышленных и жилых зонах, обеспечивая раннее предупреждение для предотвращения потенциальных катастроф.

• Обнаружение отходов: Она также может использоваться для приложений по обнаружению отходов, что делает ее отличным инструментом для экологического мониторинга и управления отходами.

• Обнаружение автозапчастей: В производственной и автомобильной отраслях она помогает в обнаружении и анализе автомобильных деталей для контроля качества, мониторинга сборочной линии и управления инвентаризацией.

Link to this sectionFAQ#

Link to this sectionКак установить и настроить reCamera в первый раз?#

Чтобы настроить свою reCamera впервые, выполни следующие шаги:

1. Подключи reCamera к источнику питания
2. Подключи ее к сети WiFi, используя краткое руководство по reCamera
3. Открой веб-интерфейс Node-RED, введя IP-адрес устройства в браузере (или используй 192.168.42.1, если подключено через USB)
4. Начни использовать предустановленные модели YOLO26 сразу через интерфейс панели управления

Link to this sectionМогу ли я использовать свои обученные модели YOLO26 с reCamera?#

Да, ты можешь использовать собственные модели YOLO26 с reCamera. Процесс включает:

1. Экспорт твоей модели PyTorch в формат ONNX с помощью model.export(format="onnx", opset=14)
2. Конвертацию модели ONNX в формат MLIR
3. Конвертацию MLIR в формат cvimodel для инференса на устройстве
4. Загрузку сконвертированной модели на твою reCamera

Для подробных инструкций обратись к руководству по конвертации и квантованию AI-моделей.

Link to this sectionЧем reCamera отличается от обычных IP-камер?#

В отличие от обычных IP-камер, которым требуется внешнее оборудование для обработки данных, reCamera:

• Интегрирует AI-обработку прямо на устройство с помощью процессора RISC-V SG200X
• Предлагает 1 TOPS вычислительной мощности для периферийных AI-приложений в реальном времени
• Имеет модульную конструкцию, позволяющую обновлять и кастомизировать компоненты
• Поддерживает продвинутые видеотехнологии, такие как сжатие H.264/H.265, HDR-изображение и 3D-шумоподавление
• Поставляется с предустановленными моделями Ultralytics YOLO26 для немедленного использования

Эти функции делают reCamera автономным решением для периферийных AI-приложений, не требующим дополнительного внешнего оборудования для обработки.