Hướng dẫn bắt đầu nhanh: Raspberry Pi với Ultralytics YOLO11

Hướng dẫn toàn diện này cung cấp hướng dẫn chi tiết để triển khai Ultralytics YOLO11 trên các thiết bị Raspberry Pi . Ngoài ra, nó còn giới thiệu các điểm chuẩn hiệu suất để chứng minh khả năng của YOLO11 trên các thiết bị nhỏ và mạnh mẽ này.

Xem: Raspberry Pi 5 cập nhật và cải tiến.

Raspberry Pi là gì?

Raspberry Pi là một máy tính bảng đơn nhỏ, giá cả phải chăng. Nó đã trở nên phổ biến cho một loạt các dự án và ứng dụng, từ tự động hóa nhà theo sở thích đến sử dụng công nghiệp. Các bo mạch Raspberry Pi có khả năng chạy nhiều hệ điều hành khác nhau và chúng cung cấp các chân GPIO (Đầu vào / Đầu ra Mục đích chung) cho phép tích hợp dễ dàng với các cảm biến, bộ truyền động và các thành phần phần cứng khác. Chúng có nhiều mẫu khác nhau với các thông số kỹ thuật khác nhau, nhưng tất cả đều có chung triết lý thiết kế cơ bản là chi phí thấp, nhỏ gọn và linh hoạt.

So sánh dòng Raspberry Pi

Hệ điều hành Raspberry Pi là gì?

Raspberry Pi OS (trước đây gọi là Raspbian) là một hệ điều hành giống Unix dựa trên bản phân phối Debian GNU/Linux cho dòng máy tính bảng đơn nhỏ gọn Raspberry Pi được phân phối bởi Raspberry Pi Foundation. Hệ điều hành Raspberry Pi được tối ưu hóa cao cho Raspberry Pi với CPU ARM và sử dụng môi trường máy tính để bàn LXDE đã được sửa đổi với trình quản lý cửa sổ xếp chồng Openbox. Hệ điều hành Raspberry Pi đang được phát triển tích cực, với trọng tâm là cải thiện tính ổn định và hiệu suất của càng nhiều gói Debian càng tốt trên Raspberry Pi.

Flash Raspberry Pi OS to Raspberry Pi

Điều đầu tiên cần làm sau khi chạm tay vào Raspberry Pi là flash thẻ micro-SD với hệ điều hành Raspberry Pi, lắp vào thiết bị và khởi động vào HĐH. Thực hiện theo cùng với Tài liệu chi tiết Bắt đầu của Raspberry Pi để chuẩn bị thiết bị của bạn cho lần sử dụng đầu tiên.

Dựng Ultralytics

Có hai cách để thiết lập Ultralytics trên Raspberry Pi để xây dựng dự án Computer Vision tiếp theo của bạn. Bạn có thể sử dụng bất kỳ gói nào trong số chúng.

• Bắt đầu với Docker
• Bắt đầu mà không cần Docker

Bắt đầu với Docker

Cách nhanh nhất để bắt đầu với Ultralytics YOLO11 trên Raspberry Pi sẽ chạy với hình ảnh docker được dựng sẵn cho Raspberry Pi.

Thực hiện lệnh dưới đây để kéo container Docker và chạy trên Raspberry Pi. Điều này dựa trên hình ảnh docker arm64v8/debian chứa Debian 12 (Bookworm) trong môi trường Python3.

t=ultralytics/ultralytics:latest-arm64 && sudo docker pull $t && sudo docker run -it --ipc=host $t

Sau khi hoàn tất, hãy chuyển đến Dùng NCNN trên phần Raspberry Pi.

Bắt đầu mà không cần Docker

Cài đặt Ultralytics Gói

Ở đây chúng ta sẽ cài đặt Ultralytics gói trên Raspberry Pi với các phụ thuộc tùy chọn để chúng ta có thể xuất các mô hình PyTorch sang các định dạng khác nhau.

1. Cập nhật danh sách gói, cài đặt pip và nâng cấp lên mới nhất

   sudo apt update
   sudo apt install python3-pip -y
   pip install -U pip
   

2. Cài đặt ultralytics Gói pip với các phụ thuộc tùy chọn

   pip install ultralytics[export]
   

3. Khởi động lại thiết bị

   sudo reboot
   

Dùng NCNN trên Raspberry Pi

Trong số tất cả các định dạng xuất mô hình được hỗ trợ bởi Ultralytics, NCNN mang lại hiệu suất suy luận tốt nhất khi làm việc với các thiết bị Raspberry Pi vì NCNN được tối ưu hóa cao cho các nền tảng di động / nhúng (chẳng hạn như kiến trúc ARM). Do đó, khuyến nghị của chúng tôi là sử dụng NCNN với Raspberry Pi.

Chuyển đổi Model sang NCNN và Chạy suy luận

Mô hình YOLO11n trong PyTorch định dạng được chuyển đổi thành NCNN để chạy suy luận với mô hình đã xuất.

from ultralytics import YOLO

# Load a YOLO11n PyTorch model
model = YOLO("yolo11n.pt")

# Export the model to NCNN format
model.export(format="ncnn")  # creates 'yolo11n_ncnn_model'

# Load the exported NCNN model
ncnn_model = YOLO("yolo11n_ncnn_model")

# Run inference
results = ncnn_model("https://ultralytics.com/images/bus.jpg")

# Export a YOLO11n PyTorch model to NCNN format
yolo export model=yolo11n.pt format=ncnn  # creates 'yolo11n_ncnn_model'

# Run inference with the exported model
yolo predict model='yolo11n_ncnn_model' source='https://ultralytics.com/images/bus.jpg'

Điểm chuẩn Raspberry Pi 5 YOLO11

Các tiêu chuẩn YOLO11 đã được chạy bởi Ultralytics nhóm nghiên cứu về chín định dạng mô hình khác nhau để đo tốc độ và độ chính xác : PyTorch , TorchScript , ONNX , OpenVINO , TF SavedModel , TF GraphDef , TF Nhẹ, PaddlePaddle , NCNN . Điểm chuẩn được chạy trên Raspberry Pi 5 ở độ chính xác FP32 với kích thước hình ảnh đầu vào mặc định là 640.

Biểu đồ so sánh

Chúng tôi chỉ đưa ra điểm chuẩn cho các mẫu YOLO11n và YOLO11s vì các mẫu khác có kích thước quá lớn để chạy trên Raspberry Pis và không mang lại hiệu suất tốt.

Bảng so sánh chi tiết

Bảng dưới đây thể hiện kết quả chuẩn cho hai mô hình khác nhau (YOLO11n, YOLO11s) trên chín định dạng khác nhau ( PyTorch , TorchScript , ONNX , OpenVINO , TF SavedModel , TF GraphDef , TF Nhẹ, PaddlePaddle , NCNN ), chạy trên Raspberry Pi 5, cung cấp cho chúng ta trạng thái, kích thước, số liệu mAP50-95(B) và thời gian suy luận cho mỗi kết hợp.

Tái tạo kết quả của chúng tôi

Để tái tạo những điều trên Ultralytics Điểm chuẩn trên tất cả các định dạng xuất, hãy chạy mã này:

from ultralytics import YOLO

# Load a YOLO11n PyTorch model
model = YOLO("yolo11n.pt")

# Benchmark YOLO11n speed and accuracy on the COCO8 dataset for all all export formats
results = model.benchmarks(data="coco8.yaml", imgsz=640)

# Benchmark YOLO11n speed and accuracy on the COCO8 dataset for all all export formats
yolo benchmark model=yolo11n.pt data=coco8.yaml imgsz=640

Sử dụng Raspberry Pi Camera

Khi sử dụng Raspberry Pi cho các dự án Computer Vision, về cơ bản có thể là lấy nguồn cấp dữ liệu video thời gian thực để thực hiện suy luận. Đầu nối MIPI CSI tích hợp trên Raspberry Pi cho phép bạn kết nối các mô-đun camera Raspberry PI chính thức. Trong hướng dẫn này, chúng tôi đã sử dụng Mô-đun camera Raspberry Pi 3 để lấy nguồn cấp dữ liệu video và thực hiện suy luận bằng các mô hình YOLO11.

Kiểm tra máy ảnh

Thực hiện lệnh sau sau khi kết nối máy ảnh với Raspberry Pi. Bạn sẽ thấy nguồn cấp dữ liệu video trực tiếp từ máy ảnh trong khoảng 5 giây.

rpicam-hello

Suy luận bằng máy ảnh

Có 2 phương pháp sử dụng Camera Raspberry Pi để suy ra các mô hình YOLO11.

import cv2
from picamera2 import Picamera2

from ultralytics import YOLO

# Initialize the Picamera2
picam2 = Picamera2()
picam2.preview_configuration.main.size = (1280, 720)
picam2.preview_configuration.main.format = "RGB888"
picam2.preview_configuration.align()
picam2.configure("preview")
picam2.start()

# Load the YOLO11 model
model = YOLO("yolo11n.pt")

while True:
    # Capture frame-by-frame
    frame = picam2.capture_array()

    # Run YOLO11 inference on the frame
    results = model(frame)

    # Visualize the results on the frame
    annotated_frame = results[0].plot()

    # Display the resulting frame
    cv2.imshow("Camera", annotated_frame)

    # Break the loop if 'q' is pressed
    if cv2.waitKey(1) == ord("q"):
        break

# Release resources and close windows
cv2.destroyAllWindows()

rpicam-vid -n -t 0 --inline --listen -o tcp://127.0.0.1:8888

from ultralytics import YOLO

# Load a YOLO11n PyTorch model
model = YOLO("yolo11n.pt")

# Run inference
results = model("tcp://127.0.0.1:8888")

yolo predict model=yolo11n.pt source="tcp://127.0.0.1:8888"

Các phương pháp hay nhất khi sử dụng Raspberry Pi

Có một số biện pháp tốt nhất cần tuân theo để đạt hiệu suất tối đa trên Raspberry Pis chạy YOLO11.

1. Sử dụng ổ SSD

   Khi sử dụng Raspberry Pi để tiếp tục sử dụng 24x7, bạn nên sử dụng SSD cho hệ thống vì thẻ SD sẽ không thể chịu được việc ghi liên tục và có thể bị hỏng. Với đầu nối PCIe tích hợp trên Raspberry Pi 5, giờ đây bạn có thể kết nối SSD bằng bộ chuyển đổi như NVMe Base cho Raspberry Pi 5.

2. Flash không có GUI

   Khi nhấp nháy hệ điều hành Raspberry Pi, bạn có thể chọn không cài đặt môi trường Máy tính để bàn (Raspberry Pi OS Lite) và điều này có thể tiết kiệm một chút RAM trên thiết bị, để lại nhiều không gian hơn cho xử lý thị giác máy tính.

Các bước tiếp theo

Xin chúc mừng bạn đã thiết lập thành công YOLO trên Raspberry Pi của bạn! Để tìm hiểu thêm và được hỗ trợ, hãy truy cập Ultralytics YOLO11 Docs và Kashmir World Foundation .

Lời cảm ơn và trích dẫn

Hướng dẫn này ban đầu được tạo ra bởi Daan Eeltink cho Kashmir World Foundation, một tổ chức chuyên sử dụng YOLO để bảo tồn các loài có nguy cơ tuyệt chủng. Chúng tôi ghi nhận công việc tiên phong và tập trung giáo dục của họ trong lĩnh vực công nghệ phát hiện đối tượng.

Để biết thêm thông tin về các hoạt động của Kashmir World Foundation, bạn có thể truy cập trang web của họ.

FAQ

Làm thế nào để tôi thiết lập Ultralytics YOLO11 trên Raspberry Pi mà không cần sử dụng Docker?

Để thiết lập Ultralytics YOLO11 trên Raspberry Pi không có Docker, hãy làm theo các bước sau:

1. Cập nhật danh sách gói và cài đặt pip:

   sudo apt update
   sudo apt install python3-pip -y
   pip install -U pip
   

2. Cài đặt Ultralytics Gói với các phụ thuộc tùy chọn:

   pip install ultralytics[export]
   

3. Khởi động lại thiết bị để áp dụng các thay đổi:

   sudo reboot
   

Để được hướng dẫn chi tiết, hãy tham khảo phần Bắt đầu không cần Docker .

Tại sao tôi nên sử dụng Ultralytics YOLO11 của NCNN định dạng trên Raspberry Pi cho các tác vụ AI?

Ultralytics YOLO11 của NCNN Định dạng này được tối ưu hóa cao cho các nền tảng di động và nhúng, rất lý tưởng để chạy các tác vụ AI trên thiết bị Raspberry Pi. NCNN tối đa hóa hiệu suất suy luận bằng cách tận dụng kiến trúc ARM, cung cấp khả năng xử lý nhanh hơn và hiệu quả hơn so với các định dạng khác. Để biết thêm chi tiết về các tùy chọn xuất được hỗ trợ, hãy truy cập trang tài liệu Ultralytics về các tùy chọn triển khai .

Làm thế nào tôi có thể chuyển đổi mô hình YOLO11 sang NCNN định dạng nào để sử dụng trên Raspberry Pi?

Bạn có thể chuyển đổi một PyTorch Mô hình YOLO11 để NCNN định dạng sử dụng một trong hai Python hoặc CLI lệnh:

from ultralytics import YOLO

# Load a YOLO11n PyTorch model
model = YOLO("yolo11n.pt")

# Export the model to NCNN format
model.export(format="ncnn")  # creates 'yolo11n_ncnn_model'

# Load the exported NCNN model
ncnn_model = YOLO("yolo11n_ncnn_model")

# Run inference
results = ncnn_model("https://ultralytics.com/images/bus.jpg")

# Export a YOLO11n PyTorch model to NCNN format
yolo export model=yolo11n.pt format=ncnn  # creates 'yolo11n_ncnn_model'

# Run inference with the exported model
yolo predict model='yolo11n_ncnn_model' source='https://ultralytics.com/images/bus.jpg'

Để biết thêm chi tiết, hãy xem Dùng NCNN trên phần Raspberry Pi .

Sự khác biệt về phần cứng giữa Raspberry Pi 4 và Raspberry Pi 5 liên quan đến việc chạy YOLO11 là gì?

Sự khác biệt chính bao gồm:

• CPU: Raspberry Pi 4 sử dụng Broadcom BCM2711, Cortex-A72 64-bit SoC, trong khi Raspberry Pi 5 sử dụng Broadcom BCM2712, Cortex-A76 64-bit SoC.
• Max CPU Tần số: Raspberry Pi 4 có tần số tối đa là 1.8GHz, trong khi Raspberry Pi 5 đạt 2.4GHz.
• Bộ nhớ: Raspberry Pi 4 cung cấp tới 8GB LPDDR4-3200 SDRAM, trong khi Raspberry Pi 5 có LPDDR4X-4267 SDRAM, có sẵn trong các biến thể 4GB và 8GB.

Những cải tiến này góp phần nâng cao hiệu suất chuẩn cho các mẫu YOLO11 trên Raspberry Pi 5 so với Raspberry Pi 4. Tham khảo bảng So sánh dòng Raspberry Pi để biết thêm chi tiết.

Làm thế nào tôi có thể thiết lập một Mô-đun Camera Raspberry Pi để hoạt động với Ultralytics YOLO11 là gì?

Có hai phương pháp để thiết lập Camera Raspberry Pi cho suy luận YOLO11:

1. Sử dụng picamera2:

   import cv2
   from picamera2 import Picamera2
   
   from ultralytics import YOLO
   
   picam2 = Picamera2()
   picam2.preview_configuration.main.size = (1280, 720)
   picam2.preview_configuration.main.format = "RGB888"
   picam2.preview_configuration.align()
   picam2.configure("preview")
   picam2.start()
   
   model = YOLO("yolo11n.pt")
   
   while True:
       frame = picam2.capture_array()
       results = model(frame)
       annotated_frame = results[0].plot()
       cv2.imshow("Camera", annotated_frame)
   
       if cv2.waitKey(1) == ord("q"):
           break
   
   cv2.destroyAllWindows()
   

2. Sử dụng luồng TCP:

   rpicam-vid -n -t 0 --inline --listen -o tcp://127.0.0.1:8888
   

   from ultralytics import YOLO
   
   model = YOLO("yolo11n.pt")
   results = model("tcp://127.0.0.1:8888")
   

Để biết hướng dẫn thiết lập chi tiết, hãy truy cập phần Suy luận bằng máy ảnh .

📅 Được tạo ra cách đây 1 năm ✏️ Đã cập nhật cách đây 1 tháng

Ý kiến