Detecção e rastreamento de objetos

Com a API de detecção e rastreamento de objetos no dispositivo do ML Kit, você pode localizar e rastrear em tempo real os objetos mais proeminentes em uma imagem ou feed de câmera ao vivo. Você também pode, opcionalmente, classificar objetos detectados em uma das diversas categorias gerais.

A detecção e o rastreamento de objetos com classificação aproximada são úteis para criar experiências de pesquisa visual ao vivo. Como a detecção e o rastreamento de objetos acontecem de forma rápida e completa no dispositivo, ele funciona bem como o front-end de um pipeline de pesquisa visual mais longo. Depois de detectar e filtrar objetos, você poderá transmiti-los para um back-end de nuvem, como o Cloud Vision Product Search , ou para um modelo personalizado, como aquele que você treinou usando o AutoML Vision Edge .

Android _

Principais capacidades

Detecção e rastreamento rápido de objetos Detecte objetos e obtenha sua localização na imagem. Rastreie objetos em imagens.
Modelo otimizado no dispositivo O modelo de detecção e rastreamento de objetos é otimizado para dispositivos móveis e destinado ao uso em aplicativos em tempo real, mesmo em dispositivos de baixo custo.
Detecção de objetos proeminentes Determine automaticamente o objeto mais proeminente em uma imagem.
Classificação grosseira Classifique objetos em categorias amplas, que você pode usar para filtrar objetos nos quais não está interessado. As seguintes categorias são suportadas: produtos domésticos, produtos de moda, alimentos, plantas, lugares e desconhecidos.

Resultados de exemplo

Rastreando o objeto mais proeminente nas imagens

ID de rastreamento 0
Limites (95, 45), (496, 45), (496, 240), (95, 240)
Categoria LUGAR
Confiança na classificação 0,9296875
ID de rastreamento 0
Limites (84, 46), (478, 46), (478, 247), (84, 247)
Categoria LUGAR
Confiança na classificação 0,8710938
ID de rastreamento 0
Limites (53, 45), (519, 45), (519, 240), (53, 240)
Categoria LUGAR
Confiança na classificação 0,8828125

Foto: Christian Ferrer [CC BY-SA 4.0]

Vários objetos em uma imagem estática

Objeto 0
Limites (1, 97), (332, 97), (332, 332), (1, 332)
Categoria MODA_BOA
Confiança na classificação 0,95703125
Objeto 1
Limites (186, 80), (337, 80), (337, 226), (186, 226)
Categoria MODA_BOA
Confiança na classificação 0,84375
Objeto 2
Limites (296, 80), (472, 80), (472, 388), (296, 388)
Categoria MODA_BOA
Confiança na classificação 0,94921875
Objeto 3
Limites (439, 83), (615, 83), (615, 306), (439, 306)
Categoria MODA_BOA
Confiança na classificação 0,9375