Detecção e rastreamento de objetosplat_ios plat_android

Com a API de rastreamento e detecção de objetos no dispositivo do kit de ML, é possível localizar e rastrear em tempo real os objetos mais proeminentes em uma imagem ou um feed de câmera ao vivo. Como opção, também é possível classificar os objetos detectados como uma das várias categorias gerais.

A detecção e o rastreamento de objetos com classificação rudimentar é útil para criar experiências de pesquisa visual ao vivo. Como a detecção e o rastreamento de objetos ocorrem rápida e completamente no dispositivo, eles funcionam bem como o front-end de um pipeline de pesquisa visual mais longo. Depois de detectar e filtrar objetos, é possível transmiti-los para um back-end na nuvem, como o Cloud Vision Product Search, ou para um modelo personalizado, como um treinado usando o AutoML Vision Edge.

iOS Android

Principais recursos

Rápida detecção e rastreamento de objetos Detecte objetos e consiga sua localização na imagem. Rastreie objetos nas imagens.
Modelo otimizado no dispositivo O modelo de detecção e rastreamento de objetos é otimizado para dispositivos móveis e destina-se ao uso em aplicativos em tempo real, mesmo em dispositivos de baixo custo.
Detecção de objetos proeminente Determine automaticamente o objeto mais proeminente em uma imagem.
Classificação rudimentar Classifique objetos em categorias amplas, que podem ser usadas para filtrar objetos em que não se está interessado. As seguintes categorias são aceitas: artigos domésticos, artigos de moda, alimentos, plantas, lugares e desconhecidos.

Resultados de exemplo

Como acompanhar o objeto mais proeminente nas imagens

ID de acompanhamento 0
Limites (95, 45), (496, 45), (496, 240), (95, 240)
Categoria POSIÇÃO
Confiança de classificação 0,9296875
ID de acompanhamento 0
Limites (84, 46), (478, 46), (478, 247), (84, 247)
Categoria POSIÇÃO
Confiança de classificação 0,8710938
ID de acompanhamento 0
Limites (53, 45), (519, 45), (519, 240), (53, 240)
Categoria POSIÇÃO
Confiança de classificação 0,8828125

Foto: Christian Ferrer [CC BY-SA 4.0]

Vários objetos em uma imagem estática

Objeto 0
Limites (1, 97), (332, 97), (332, 332), (1, 332)
Categoria FASHION_GOOD
Confiança de classificação 0,95703125
Objeto 1
Limites (186, 80), (337, 80), (337, 226), (186, 226)
Categoria FASHION_GOOD
Confiança de classificação 0,84375
Objeto 2
Limites (296, 80), (472, 80), (472, 388), (296, 388)
Categoria FASHION_GOOD
Confiança de classificação 0,94921875
Objeto 3
Limites (439, 83), (615, 83), (615, 306), (439, 306)
Categoria FASHION_GOOD
Confiança de classificação 0,9375