Interface graphique de l'explorateur

L'interface graphique de l'explorateur est comme un terrain de jeu construit à l'aide de l'API de l'explorateurUltralytics . Elle te permet d'effectuer des recherches par similarité sémantique/vectorielle, des requêtes SQL et même des recherches en langage naturel à l'aide de notre fonction ask AI alimentée par des LLM.

Regarde : Ultralytics Aperçu du tableau de bord de l'explorateur

Installation

pip install ultralytics[explorer]

Recherche de similarité sémantique vectorielle

La recherche sémantique est une technique permettant de trouver des images similaires à une image donnée. Elle repose sur l'idée que des images similaires auront des incrustations similaires. Dans l'interface utilisateur, tu peux sélectionner une ou plusieurs images et rechercher les images qui leur sont similaires. Cela peut être utile lorsque tu veux trouver des images similaires à une image donnée ou un ensemble d'images qui ne donnent pas les résultats escomptés.

Par exemple : Dans ce tableau de bord d'exploration du COV, l'utilisateur sélectionne quelques images d'avion comme ceci :

En effectuant une recherche de similarité, tu devrais voir un résultat similaire :

Demande à l'IA

Cela te permet d'écrire comment tu veux filtrer ton ensemble de données en utilisant le langage naturel. Tu n'as pas besoin de maîtriser l'écriture de requêtes SQL. Notre générateur de requêtes alimenté par l'IA le fera automatiquement sous le capot. Par exemple, tu peux dire : "Montre-moi 100 images avec exactement une personne et 2 chiens. Il peut y avoir d'autres objets aussi" et il générera en interne la requête et te montrera les résultats. Voici un exemple de résultat lorsqu'on te demande de "Montrer 10 images avec exactement 5 personnes" et tu verras un résultat comme celui-ci :

Note : Cette méthode utilise des LLM sous le capot, les résultats sont donc probabilistes et peuvent parfois être erronés.

Exécute des requêtes SQL sur les ensembles de données de ton CV

Tu peux exécuter des requêtes SQL sur ton ensemble de données pour le filtrer. Cela fonctionne également si tu ne fournis que la clause WHERE. L'exemple de requête SQL montre seulement les images qui contiennent au moins une personne et un chien :

WHERE labels LIKE '%person%' AND labels LIKE '%dog%'

Il s'agit d'une démo qui utilise l'API Explorer. Tu peux utiliser l'API pour créer tes propres carnets ou scripts exploratoires afin d'obtenir des informations sur tes ensembles de données. Pour en savoir plus sur l'API Explorer, clique ici.

FAQ

Qu'est-ce que Ultralytics Explorer GUI et comment l'installer ?

Ultralytics Explorer GUI est une interface puissante qui débloque des capacités avancées d'exploration des données à l'aide de l'APIUltralytics Explorer. Elle te permet d'effectuer des recherches de similarité sémantique/vectorielle, des requêtes SQL et des requêtes en langage naturel à l'aide de la fonction Ask AI alimentée par de grands modèles de langage (LLM).

Pour installer l'interface graphique de l'explorateur, tu peux utiliser pip :

pip install ultralytics[explorer]

Remarque : pour utiliser la fonctionnalité Ask AI, tu devras définir la clé de l'API OpenAI : yolo settings openai_api_key="...".

Comment fonctionne la fonction de recherche sémantique dans l'interface graphique de Ultralytics Explorer ?

La fonction de recherche sémantique de l'interface graphique de Ultralytics Explorer te permet de trouver des images similaires à une image donnée en fonction de leur intégration. Cette technique est utile pour identifier et explorer les images qui partagent des similitudes visuelles. Pour utiliser cette fonction, sélectionne une ou plusieurs images dans l'interface utilisateur et exécute une recherche d'images similaires. Le résultat affichera les images qui ressemblent étroitement à celles sélectionnées, ce qui facilite l'exploration efficace des ensembles de données et la détection des anomalies.

Tu peux en savoir plus sur la recherche sémantique et d'autres fonctionnalités en visitant la section Aperçu des fonctionnalités.

Puis-je utiliser le langage naturel pour filtrer les ensembles de données dans l'interface graphique de Ultralytics Explorer ?

Oui, avec la fonction Ask AI alimentée par de grands modèles de langage (LLM), tu peux filtrer tes ensembles de données à l'aide de requêtes en langage naturel. Tu n'as pas besoin de maîtriser le langage SQL. Par exemple, tu peux demander "Montre-moi 100 images avec exactement une personne et 2 chiens. Il peut y avoir d'autres objets aussi", et l'IA générera la requête appropriée sous le capot pour fournir les résultats souhaités.

Tu peux voir un exemple de requête en langage naturel ici.

Comment exécuter des requêtes SQL sur des ensembles de données à l'aide de l'interface graphique de Ultralytics Explorer ?

Ultralytics L'interface graphique d'Explorer te permet d'exécuter des requêtes SQL directement sur ton jeu de données afin de filtrer et de gérer les données de manière efficace. Pour exécuter une requête, rends-toi dans la section Requête SQL de l'interface graphique et écris ta requête. Par exemple, pour afficher les images comportant au moins une personne et un chien, tu peux utiliser :

WHERE labels LIKE '%person%' AND labels LIKE '%dog%'

Tu peux aussi ne fournir que la clause WHERE, ce qui rend le processus d'interrogation plus flexible.

Pour plus de détails, reporte-toi à la section sur les requêtes SQL.

Quels sont les avantages de l'utilisation de l'interface graphique Ultralytics Explorer pour l'exploration des données ?

Ultralytics L'interface graphique d'Explorer améliore l'exploration des données grâce à des fonctionnalités telles que la recherche sémantique, les requêtes SQL et les interactions en langage naturel grâce à la fonction Ask AI. Ces capacités permettent aux utilisateurs de : - Trouver efficacement des images visuellement similaires. - Filtrer des ensembles de données à l'aide de requêtes SQL complexes. - Utiliser l'IA pour effectuer des recherches en langage naturel, ce qui élimine le besoin d'une expertise SQL avancée.

Ces caractéristiques en font un outil polyvalent pour les développeurs, les chercheurs et les scientifiques des données qui cherchent à obtenir des informations plus approfondies sur leurs ensembles de données.

Pour en savoir plus sur ces fonctions, consulte la documentation de l'interface graphique de l'explorateur.

Commentaires