Détection et suivi d'objets

Avec l'API de détection et de suivi d'objets sur l'appareil de ML Kit, vous pouvez localiser et suivre en temps réel les objets les plus importants dans une image ou un flux de caméra en direct. Vous pouvez également éventuellement classer les objets détectés dans l'une de plusieurs catégories générales.

La détection et le suivi d'objets avec classification grossière sont utiles pour créer des expériences de recherche visuelle en direct. Étant donné que la détection et le suivi d'objets s'effectuent rapidement et complètement sur l'appareil, il fonctionne bien en tant que partie frontale d'un pipeline de recherche visuelle plus long. Une fois que vous détectez et les objets filtre, vous pouvez les transmettre à un back - end nuage, comme Nuage Vision Product Search , ou un modèle personnalisé, comme celui que vous formé en utilisant AutoML Vision bord .

iOS Android

Capacités clés

Détection et suivi rapides des objets Détectez des objets et obtenez leur emplacement dans l'image. Suivez les objets à travers les images.
Modèle optimisé sur l'appareil Le modèle de détection et de suivi des objets est optimisé pour les appareils mobiles et destiné à être utilisé dans des applications en temps réel, même sur des appareils bas de gamme.
Détection d'objets proéminents Déterminez automatiquement l'objet le plus important dans une image.
Classement grossier Classez les objets en grandes catégories, que vous pouvez utiliser pour filtrer les objets qui ne vous intéressent pas. Les catégories suivantes sont prises en charge : articles pour la maison, articles de mode, nourriture, plantes, lieux et inconnu.

Exemple de résultats

Suivi de l'objet le plus important sur les images

Identifiant de suivi 0
Bornes (95, 45), (496, 45), (496, 240), (95, 240)
Catégorie ENDROIT
Confiance de classification 0.9296875
Identifiant de suivi 0
Bornes (84, 46), (478, 46), (478, 247), (84, 247)
Catégorie ENDROIT
Confiance de classification 0.8710938
Identifiant de suivi 0
Bornes (53, 45), (519, 45), (519, 240), (53, 240)
Catégorie ENDROIT
Confiance de classification 0.8828125

Photo : Christian Ferrer [CC BY-SA 4.0]

Plusieurs objets dans une image statique

Objet 0
Bornes (1, 97), (332, 97), (332, 332), (1, 332)
Catégorie FASHION_GOOD
Confiance de classification 0.95703125
Objet 1
Bornes (186, 80), (337, 80), (337, 226), (186, 226)
Catégorie FASHION_GOOD
Confiance de classification 0,84375
Objet 2
Bornes (296, 80), (472, 80), (472, 388), (296, 388)
Catégorie FASHION_GOOD
Confiance de classification 0.94921875
Objet 3
Bornes (439, 83), (615, 83), (615, 306), (439, 306)
Catégorie FASHION_GOOD
Confiance de classification 0,9375