Interface graphique de l'explorateur

L'interface graphique de l'explorateur est comme un terrain de jeu construit à l'aide de l'API de l'explorateurUltralytics . Elle te permet d'effectuer des recherches par similarité sémantique/vectorielle, des requêtes SQL et même des recherches en langage naturel à l'aide de notre fonction ask AI alimentée par des LLM.

Regarde : Ultralytics Aperçu du tableau de bord de l'explorateur

Installation

pip install ultralytics[explorer]

Recherche sémantique / Recherche par similarité vectorielle

La recherche sémantique est une technique permettant de trouver des images similaires à une image donnée. Elle repose sur l'idée que des images similaires auront des incrustations similaires. Dans l'interface utilisateur, tu peux sélectionner une ou plusieurs images et rechercher les images qui leur sont similaires. Cela peut être utile lorsque tu veux trouver des images similaires à une image donnée ou un ensemble d'images qui ne donnent pas les résultats escomptés.

Par exemple : Dans ce tableau de bord d'exploration du COV, l'utilisateur sélectionne quelques images d'avion comme ceci :

En effectuant une recherche de similarité, tu devrais voir un résultat similaire :

Demande à l'IA

Cela te permet d'écrire comment tu veux filtrer ton ensemble de données en utilisant le langage naturel. Tu n'as pas besoin de maîtriser l'écriture de requêtes SQL. Notre générateur de requêtes alimenté par l'IA le fera automatiquement sous le capot. Par exemple, tu peux dire : "Montre-moi 100 images avec exactement une personne et 2 chiens. Il peut y avoir d'autres objets aussi" et il générera en interne la requête et te montrera les résultats. Voici un exemple de résultat lorsqu'on te demande de "Montrer 10 images avec exactement 5 personnes" et tu verras un résultat comme celui-ci :

Note : Cette méthode utilise des LLM sous le capot, les résultats sont donc probabilistes et peuvent parfois être erronés.

Exécute des requêtes SQL sur les ensembles de données de ton CV

Tu peux exécuter des requêtes SQL sur ton ensemble de données pour le filtrer. Cela fonctionne également si tu ne fournis que la clause WHERE. L'exemple de requête SQL montre seulement les images qui contiennent au moins une personne et un chien :

WHERE labels LIKE '%person%' AND labels LIKE '%dog%'

Il s'agit d'une démo qui utilise l'API Explorer. Tu peux utiliser l'API pour créer tes propres carnets ou scripts exploratoires afin d'obtenir des informations sur tes ensembles de données. Pour en savoir plus sur l'API Explorer, clique ici.

Commentaires