Bỏ để qua phần nội dung

GUI thám hiểm

Explorer GUI giống như một sân chơi xây dựng bằng cách sử dụng Ultralytics API Explorer. Nó cho phép bạn chạy tìm kiếm tương tự ngữ nghĩa / vector, truy vấn SQL và thậm chí tìm kiếm bằng ngôn ngữ tự nhiên bằng cách sử dụng tính năng AI hỏi của chúng tôi được cung cấp bởi LLM.

Explorer Dashboard Ảnh chụp màn hình 1



Xem: Ultralytics Tổng quan về Bảng điều khiển Explorer

Cài đặt

pip install ultralytics[explorer]

Ghi

Tính năng Ask AI hoạt động bằng OpenAI, vì vậy bạn sẽ được nhắc đặt khóa api cho OpenAI khi bạn chạy GUI lần đầu tiên. Bạn có thể đặt nó như thế này - yolo settings openai_api_key="..."

Tìm kiếm ngữ nghĩa là một kỹ thuật để tìm hình ảnh tương tự với một hình ảnh nhất định. Nó dựa trên ý tưởng rằng các hình ảnh tương tự sẽ có nhúng tương tự. Trong giao diện người dùng, bạn có thể chọn một trong các hình ảnh khác và tìm kiếm các hình ảnh tương tự như chúng. Điều này có thể hữu ích khi bạn muốn tìm hình ảnh tương tự như một hình ảnh nhất định hoặc một tập hợp các hình ảnh không hoạt động như mong đợi.

Chẳng hạn: Trong bảng điều khiển Khám phá VOC này, người dùng chọn một vài hình ảnh máy bay như sau:

Ảnh chụp màn hình Bảng điều khiển Explorer 2

Khi thực hiện tìm kiếm tương tự, bạn sẽ thấy một kết quả tương tự:

Explorer Dashboard Ảnh chụp màn hình 3

Hỏi AI

Điều này cho phép bạn viết cách bạn muốn lọc tập dữ liệu của mình bằng ngôn ngữ tự nhiên. Bạn không cần phải thành thạo trong việc viết các truy vấn SQL. Trình tạo truy vấn được hỗ trợ bởi AI của chúng tôi sẽ tự động thực hiện điều đó dưới mui xe. Ví dụ: - bạn có thể nói - "cho tôi xem 100 hình ảnh với chính xác một người và 2. Cũng có thể có các đối tượng khác" và nó sẽ tạo truy vấn nội bộ và hiển thị cho bạn những kết quả đó. Dưới đây là một ví dụ đầu ra khi được yêu cầu "Hiển thị 10 hình ảnh với chính xác 5 người" và bạn sẽ thấy kết quả như thế này:

Explorer Dashboard Ảnh chụp màn hình 4

Lưu ý: Điều này hoạt động bằng cách sử dụng LLM dưới mui xe để kết quả có xác suất và đôi khi có thể gặp sự cố

Chạy các truy vấn SQL trên bộ dữ liệu CV của bạn

Bạn có thể chạy các truy vấn SQL trên tập dữ liệu của mình để lọc nó. Nó cũng hoạt động nếu bạn chỉ cung cấp mệnh đề WHERE. Ví dụ truy vấn SQL sẽ chỉ hiển thị các hình ảnh có ít nhất 1 người và 1 trong đó:

WHERE labels LIKE '%person%' AND labels LIKE '%dog%'

Explorer Dashboard Ảnh chụp màn hình 5

Đây là bản dựng Demo sử dụng API Explorer. Bạn có thể sử dụng API để xây dựng sổ ghi chép hoặc tập lệnh khám phá của riêng mình nhằm hiểu rõ hơn về tập dữ liệu của mình. Tìm hiểu thêm về API Explorer tại đây.



Đã tạo 2024-01-08, Cập nhật 2024-03-03
Tác giả: glenn-jocher (5), RizwanMunawar (3), AyushExel (1)

Ý kiến