Empezar

Interfaz gráfica de Explorer

Nota de la comunidad ⚠️

Desde ultralytics>=8.3.12, Ultralytics Explorer ya no está disponible. Para usar Explorer, instala pip install ultralytics==8.3.11. En Ultralytics Platform tienes funciones similares y ampliadas para explorar conjuntos de datos.

La interfaz gráfica de Explorer está construida sobre la API de Ultralytics Explorer. Permite realizar búsquedas semánticas y por similitud vectorial, consultas SQL y consultas en lenguaje natural mediante la función Ask AI, basada en LLM.

Ultralytics Explorer GUI main dashboard interface



Ver: Descripción general del panel de Ultralytics Explorer

Instalación#

pip install "ultralytics[explorer]==8.3.11"
Nota

La función Ask AI usa OpenAI, por lo que se te pedirá que configures la clave de API de OpenAI la primera vez que ejecutes la interfaz gráfica. Configúrala con yolo settings openai_api_key="...".

La búsqueda semántica es una técnica para encontrar imágenes similares a una imagen determinada. Se basa en la idea de que las imágenes similares tienen embeddings similares. En la interfaz, puedes seleccionar una o varias imágenes y buscar imágenes similares a ellas. Esto puede resultar útil si quieres encontrar imágenes similares a una imagen determinada o a un conjunto de imágenes cuyo rendimiento no es el esperado.

Por ejemplo, en este panel de exploración de VOC, el usuario selecciona varias imágenes de aviones:

Explorer selecting airplane images for similarity search

Tras ejecutar la búsqueda por similitud, deberías ver resultados similares:

Ultralytics Explorer semantic similarity search

Ask AI#

Esta función te permite filtrar tu conjunto de datos mediante lenguaje natural, sin escribir consultas SQL. El generador de consultas basado en IA convierte tu petición en una consulta y devuelve los resultados coincidentes. Por ejemplo, puedes pedir: "muéstrame 100 imágenes con exactamente una persona y 2 perros. También puede haber otros objetos" y generará la consulta y te mostrará esos resultados. Aquí tienes un ejemplo del resultado obtenido al pedir: "Muéstrame 10 imágenes con exactamente 5 personas":

Explorer Ask AI results for images with 5 persons

Nota: Esta función utiliza modelos de lenguaje grandes, por lo que los resultados son probabilísticos y pueden ser inexactos.

Ejecuta consultas SQL en tus conjuntos de datos de visión artificial#

Puedes ejecutar consultas SQL en tu conjunto de datos para filtrarlo. También funciona si solo proporcionas la cláusula WHERE. Por ejemplo, la siguiente cláusula WHERE devuelve imágenes que contienen al menos una persona y un perro:

WHERE labels LIKE '%person%' AND labels LIKE '%dog%'

Explorer SQL query filtering images with person and dog

Esta demostración se creó con la API Explorer, que puedes usar para crear tus propios cuadernos o scripts exploratorios y obtener información útil sobre tus conjuntos de datos. Para empezar, consulta la documentación de la API Explorer.

Preguntas frecuentes#

  • La interfaz gráfica de Ultralytics Explorer es una interfaz de navegador para explorar conjuntos de datos, construida sobre la API de Ultralytics Explorer. Permite realizar búsquedas semánticas y por similitud vectorial, consultas SQL y consultas en lenguaje natural mediante la función Ask AI, basada en modelos de lenguaje grandes (LLM).

    Para instalar la interfaz gráfica de Explorer, puedes usar pip:

    pip install "ultralytics[explorer]==8.3.11"

    Nota: Para usar la función Ask AI, tendrás que configurar la clave de API de OpenAI: yolo settings openai_api_key="...".

  • La función de búsqueda semántica de la interfaz gráfica de Ultralytics Explorer permite encontrar imágenes similares a una imagen determinada a partir de sus embeddings. Esta técnica resulta útil para identificar y explorar imágenes con similitudes visuales. Para utilizarla, selecciona una o varias imágenes en la interfaz y busca imágenes similares. El resultado mostrará imágenes muy parecidas a las seleccionadas, lo que facilita la exploración eficiente del conjunto de datos y la detección de anomalías.

  • Sí. Con la función Ask AI, basada en modelos de lenguaje grandes (LLMs), puedes filtrar tus conjuntos de datos mediante consultas en lenguaje natural. No hace falta que domines SQL. Por ejemplo, puedes pedir "Muéstrame 100 imágenes con exactamente una persona y 2 perros. También puede haber otros objetos" y la IA generará la consulta adecuada en segundo plano para ofrecerte los resultados que buscas.

  • La interfaz gráfica de Ultralytics Explorer te permite ejecutar consultas SQL directamente en tu conjunto de datos para filtrar y gestionar los datos de forma eficiente. Para ejecutar una consulta, ve a la sección de consultas SQL de la interfaz y escribe la consulta. Por ejemplo, para mostrar imágenes con al menos una persona y un perro, puedes usar:

    WHERE labels LIKE '%person%' AND labels LIKE '%dog%'

    También puedes proporcionar solo la cláusula WHERE, lo que aporta más flexibilidad al proceso de consulta.

    Para obtener más información, consulta la sección de consultas SQL.

  • La interfaz gráfica de Ultralytics Explorer mejora la exploración de datos con funciones como la búsqueda semántica, las consultas SQL y las interacciones en lenguaje natural mediante Ask AI. Estas capacidades permiten a los usuarios:

    • Encontrar imágenes visualmente similares de forma eficiente.
    • Filtrar conjuntos de datos con consultas SQL complejas.
    • Usar la IA para hacer búsquedas en lenguaje natural, sin necesidad de dominar SQL.

    Estas funciones ayudan a desarrolladores, investigadores y científicos de datos a comprender y seleccionar sus conjuntos de datos.

Comentarios7

Haz una pregunta, comparte tus resultados o ayuda a otra persona.

  1. ws1065GitHub

    I executed yolo Explorer to try to open Explorer dashboard, but it shows that it should be a port monitoring error? I don't know what port it is listening on, and yolo explorer doesn't have a help command?

    1. Glenn JocherUltralytics(editado)

      Note: Ultralytics Explorer was removed in ultralytics>=8.3.12; to use it, install ultralytics==8.3.11. Similar dataset exploration features are available in Ultralytics Platform.

      @ws1065 it sounds like you're encountering a port conflict issue when trying to run the Explorer dashboard. By default, the Explorer GUI listens on port 8080. You can specify a different port by using the --port argument when launching the GUI. For example, you can try yolo explorer --port 8081. If the issue persists, please ensure you are using the latest version of the package by updating it with pip install --upgrade ultralytics[explorer]. For further details, you can refer to the Ultralytics Explorer documentation.

    1. Glenn JocherUltralytics(editado)

      To run Ultralytics YOLO with your own data and model, you'll need to follow these steps:

      1. Prepare your dataset in a format that YOLO can understand, typically consisting of images and corresponding annotation files.
      2. Train your model using the yolo train command, specifying your dataset and model configuration file.
      3. After training, you can validate, make predictions, or use other features like tracking with your trained model.

      Here's a quick example of how you might train your model:

      from ultralytics import YOLO
      
      # Create a new YOLO model from your custom config
      model = YOLO('path/to/your/model.yaml')
      
      # Train the model on your custom dataset
      model.train(data='path/to/your/dataset.yaml')

      And to make predictions:

      # Load your trained model
      model = YOLO('path/to/your/best.pt')
      
      # Predict on new images
      results = model.predict('path/to/your/images')

      Remember to replace 'path/to/your/...' with the actual paths to your files. If you need more detailed guidance, our documentation is a great place to start. 😊