Ultralytics Explorer
Начиная с версии ultralytics>=8.3.12, Ultralytics Explorer удалён. Чтобы использовать Explorer, установи pip install ultralytics==8.3.11. Аналогичные (и расширенные) возможности исследования наборов данных доступны на платформе Ultralytics.
Ultralytics Explorer — это инструмент для изучения датасетов компьютерного зрения с помощью семантического поиска, SQL-запросов, поиска по сходству векторов и запросов на естественном языке. Также он предоставляет API Python для доступа к тем же возможностям.
Смотри: Explorer API Ultralytics | Семантический поиск, SQL-запросы и функции Ask AI
Установка дополнительных зависимостей#
Для некоторых функций Explorer нужны внешние библиотеки. Они устанавливаются автоматически при использовании Explorer. Чтобы установить эти зависимости вручную, выполни следующую команду:
pip install "ultralytics[explorer]==8.3.11"Explorer поддерживает поиск по эмбеддингам и семантический поиск, а также SQL-запросы; его работу обеспечивает бессерверная векторная база данных LanceDB. В отличие от традиционных БД в памяти, она сохраняет данные на диске без потери производительности, поэтому ты можешь локально работать с большими датасетами, например COCO, не исчерпывая память.
API Explorer#
Это Python API для изучения твоих наборов данных. Оно также лежит в основе графического интерфейса Explorer. С его помощью ты можешь создавать собственные исследовательские ноутбуки или скрипты, чтобы получать полезные сведения о наборах данных.
Ознакомься со всеми возможностями и примерами использования в документации API Explorer.
Использование графического интерфейса Explorer#
Демонстрация графического интерфейса запускается в браузере и позволяет создавать эмбеддинги для набора данных, искать похожие изображения, выполнять SQL-запросы и проводить семантический поиск. Запусти её следующей командой:
yolo explorerДля функции Ask AI используется OpenAI, поэтому при первом запуске графического интерфейса система предложит указать API-ключ OpenAI. Указать его можно так — yolo settings openai_api_key="..."
Часто задаваемые вопросы#
Ultralytics Explorer — это инструмент для изучения датасетов компьютерного зрения (CV) с помощью семантического поиска, SQL-запросов, поиска по сходству векторов и запросов на естественном языке. Он предоставляет графический интерфейс и API Python. Поскольку эмбеддинги хранятся на диске с помощью LanceDB, инструмент масштабируется для работы с большими датасетами без чрезмерного использования памяти.
Подробнее см. в разделе API Explorer.
Чтобы вручную установить дополнительные зависимости, необходимые для Ultralytics Explorer, выполни следующую команду
pip:pip install "ultralytics[explorer]==8.3.11"Эти зависимости необходимы для семантического поиска и выполнения SQL-запросов. В их число входит LanceDB, которая обеспечивает эффективную работу с базой данных и её масштабирование даже для больших датасетов, например COCO.
Пользоваться графической версией Ultralytics Explorer просто. Установив необходимые зависимости, запусти графический интерфейс следующей командой:
yolo explorerГрафический интерфейс предоставляет удобные средства для создания эмбеддингов датасета, поиска похожих изображений, выполнения SQL-запросов и семантического поиска. Функция Ask AI, работающая на базе OpenAI, также позволяет задавать вопросы о датасетах на естественном языке.
Информацию о хранении данных и масштабировании см. в инструкции по установке.
Функция Ask AI в Ultralytics Explorer позволяет взаимодействовать с датасетами с помощью запросов на естественном языке. Благодаря OpenAI можно задавать вопросы о датасете, не написав ни одного SQL-запроса или другой подобной команды. Чтобы воспользоваться этой функцией, при первом запуске графического интерфейса нужно указать API-ключ OpenAI:
yolo settings openai_api_key="YOUR_API_KEY"Подробнее об этой функции и её интеграции см. в разделе Использование графического интерфейса Explorer.
Да. Установи закреплённую версию с помощью
pip install ultralytics==8.3.11в ноутбуке Colab и следуй инструкциям в примере исследования VOC, чтобы создать эмбеддинги и выполнять поиск на облачных ресурсах Google. Подробнее см. в руководстве по Google Colab.
Комментарии13
Задай вопрос, поделись результатами или помоги кому-нибудь.
pooya-github
Hi,
In colab code after running !pip install ultralytics[explorer] and running: from ultralytics import explorer i got the following error:
ImportError Traceback (most recent call last) in <cell line: 1>() ----> 1 from ultralytics import explorer
ImportError: cannot import name 'explorer' from 'ultralytics' (/usr/local/lib/python3.10/dist-packages/ultralytics/init.py)
how can i fix it?
Glenn JocherUltralytics(изменено)@pooya-github the
Ultralytics Explorerfeature has been removed as ofultralytics>=8.3.12. To access similar or enhanced functionality, we recommend using Ultralytics Platform, our platform for dataset exploration and management. Let me know if you have further questions!-2
mkutu
how can I set this up with a custom dataset? Could you direct me to any resources. Thanks!
Glenn JocherUltralytics(изменено)@mkutu hello!
Setting up YOLO26 with a custom dataset can be straightforward! You'd primarily need a data YAML file to describe your dataset structure and then use it in your training command. Here’s a basic guide to get you started:
-
Prepare your data: Organize your dataset into two folders (images and labels), with corresponding files named identically.
-
Create a YAML file: This file should specify the paths to your training and validation data, the number of classes, and class names. Here's an example:
# custom_data.yaml train: path/to/train/images val: path/to/val/images nc: number_of_classes names: ['class1', 'class2', 'class3'] -
Start Training: Use the following command to train your model:
yolo train data=custom_data.yaml model=yolo26n.yaml
For exploring and managing your datasets efficiently, you might consider using the Ultralytics Explorer (removed in
ultralytics>=8.3.12; useultralytics==8.3.11or Ultralytics Platform). This tool offers features like semantic search, SQL queries, and even AI-based querying to derive insights from your data.Hope this helps! If you have any more questions, feel free to ask.
-2-
BABAFAREEDDUDEKULA
how can i run above mentioned AI using yolo v8 previously i have tried yolo v9,v8,v7,rt-detr
AloshkaD
Can you be more specific?
Glenn JocherUltralytics(изменено)Hey there! 🌟
It sounds like you've got a pretty wide range of experience with various YOLO versions and even RT-DETR! For running AI using YOLO26 specifically, the process is smoothly integrated into the Ultralytics framework, much like the versions you've mentioned.
To get started, make sure you have Ultralytics YOLO26 installed. If not, you can do so via pip:
pip install ultralyticsAnd then, to run your AI model with YOLO26, you can simply use:
from ultralytics import YOLO # Load the model model = YOLO('yolo26n.pt') # Here 'yolo26n.pt' is an example model. Replace it with your model path. # Run inference results = model('path_to_your_image_or_video')Or, if you prefer using the command line:
yolo detect predict model=yolo26n.pt source=path_to_your_image_or_videoRemember to replace 'yolo26n.pt' and 'path_to_your_image_or_video' with the actual paths to your YOLO26 model and the image or video you want to run inference on. 🚀
Since you've used various versions before, the process should feel quite familiar. If there's more specific functionality from the Ultralytics Explorer that you're interested in integrating with YOLO26, such as semantic search or SQL queries, the installation command provided in the documentation will be your first step:
pip install ultralytics[explorer]After that, you can launch the Ultralytics Explorer with:
yolo explorerAnd dive into explore mode (Explorer requires
ultralytics==8.3.11, as it was removed inultralytics>=8.3.12)! For any further details or if you've got a unique use case in mind, feel free to share more specifics. Happy to help further. Happy coding! 🎉1BABAFAREEDDUDEKULA
Thanks a lot my brother
2
Glenn JocherUltralytics(изменено)Note: Ultralytics Explorer was removed in
ultralytics>=8.3.12; to use it, installultralytics==8.3.11. Similar dataset exploration features are available in Ultralytics Platform.@BABAFAREEDDUDEKULA hey there! 😄
Thanks for reaching out. If you're interested in diving into the Ultralytics Explorer to explore CV datasets with semantic search, SQL queries, vector similarity search, and more, it sounds like you're on the right track!
To get started, ensure you've got the Explorer installed via:
pip install ultralytics[explorer]Once installed, you can jump straight into using the GUI by typing:
yolo explorerThis launches the GUI in your browser, where you can experiment with creating embeddings, conducting image searches, and even using SQL or natural language queries!
If you encounter any issues or have specific questions as you use the Ultralytics Explorer, feel free to drop them here. Happy exploring! 🌟
AloshkaD
The yolo explorer command will open the explorer on the local machine. How would I set it up to work on AWS while I'm connected with my local machine using ssh?
Paula DerrengerUltralytics(изменено)Note: Ultralytics Explorer was removed in
ultralytics>=8.3.12; to use it, installultralytics==8.3.11. Similar dataset exploration features are available in Ultralytics Platform.To set up the Ultralytics Explorer to work on an AWS instance while you're connected via SSH from your local machine, you can use port forwarding to access the Explorer's web interface. Here's a concise step-by-step guide:
-
SSH into AWS with Port Forwarding: Use the
-Loption to forward a local port to a port on the AWS instance. Replacelocal_portwith a port on your local machine (e.g.,8080), andaws_portwith the port the Explorer runs on (usually5000).ssh -i /path/to/your/key.pem -L local_port:localhost:aws_port user @AloshkaD -
Run Explorer on AWS: Once connected, start the Explorer on the AWS instance:
yolo explorer -
Access Explorer Locally: Open a web browser on your local machine and navigate to
localhost:local_portto access the Explorer interface.
Remember to replace
/path/to/your/key.pemwith the path to your AWS key,userwith your AWS username, andaws_instance_ipwith your AWS instance's IP address. Also, ensure that the AWS security group allows inbound traffic on theaws_port.1-
AloshkaD
Worked with a minor tweak to reference my config file. Thank you!
Paula DerrengerUltralytics@AloshkaD you're welcome! I'm glad to hear that you were able to get it working with your config file. If you have any more questions or need further assistance in the future, don't hesitate to reach out. Happy exploring with Ultralytics Explorer! 🚀😊
1