Modelos de IA de exemplo do Azure Percept

  • Artigo

Importante

Descontinuação do Azure Percept DK:

Atualização 22 de fevereiro de 2023: está agora disponível uma atualização de firmware para os componentes do acessório Percept DK Vision and Audio (também conhecido como SOM de Visão e Áudio) e permitirá que os componentes do acessório continuem a funcionar para além da data de descontinuação.

A pré-visualização pública do Azure Percept irá evoluir para suportar novas plataformas de dispositivos edge e experiências de programadores. Como parte desta evolução, o Azure Percept DK e o Acessório de Áudio e os serviços de suporte associados do Azure para o DK Percept serão descontinuados a 30 de março de 2023.

A partir de 30 de março de 2023, o DK do Azure Percept e o Acessório de Áudio deixarão de ser suportados por quaisquer serviços do Azure, incluindo Azure Percept Studio, atualizações do SO, atualizações de contentores, visualização do fluxo Web e integração de Visão Personalizada. A Microsoft deixará de fornecer suporte de sucesso ao cliente e quaisquer serviços de suporte associados. Para obter mais informações, visite a Mensagem de Blogue de Aviso de Extinção.

O Azure Percept permite-lhe desenvolver e implementar modelos de IA diretamente no seu Azure Percept DK a partir de Azure Percept Studio. A implementação de modelos utiliza Hub IoT do Azure e IoT Edge do Azure.

Modelos de IA de exemplo

Azure Percept Studio contém modelos de exemplo para as seguintes aplicações:

  • deteção de pessoas
  • deteção de veículos
  • deteção geral de objetos
  • deteção de produtos na prateleira

Com modelos pré-preparados, não é necessária nenhuma recolha de dados de programação ou preparação. Basta implementar o modelo pretendido no DK do Azure Percept a partir do portal e abrir o fluxo de vídeo do devkit para ver o modelo a inferir em ação. A telemetria de inferência de modelos também pode ser acedida através da ferramenta Azure IoT Explorer .

Soluções de referência

Também está disponível uma solução de referência de contagem de pessoas. Esta solução de referência é uma aplicação de IA open source que fornece pessoas baseadas no edge que contam com eventos de entrada/saída de zona definidos pelo utilizador. A saída de vídeo e IA do dispositivo edge no local é saída para o Azure Data Lake, com a interface de utilizador a ser executada como um site do Azure. A inferência de IA é fornecida por um modelo de IA open source para deteção de pessoas.

Gif de solução pré-criada de análise espacial.

Soluções personalizadas sem código

Através de Azure Percept Studio, pode desenvolver soluções de visão e voz personalizadas, sem necessidade de codificação.

Para soluções de visão personalizada, estão disponíveis modelos de IA de deteção e classificação de objetos. Basta carregar e etiquetar as suas imagens de preparação, que podem ser tiradas diretamente com o Azure Percept Vision SoM do Azure Percept DK, se assim o desejar. A preparação e avaliação de modelos são facilmente realizadas no Visão Personalizada, que faz parte dos Serviços Cognitivos do Azure.


Para soluções de voz personalizadas, os modelos de assistente de voz estão atualmente disponíveis para as seguintes aplicações:

  • Hospitalidade: quarto de hotel equipado com dispositivos inteligentes controlados por voz.
  • Cuidados de saúde: instalação de cuidados de saúde equipada com dispositivos inteligentes controlados por voz.
  • Inventário: o hub de inventário equipado com dispositivos inteligentes controlados por voz.
  • Automóvel: hub automóvel equipado com dispositivos inteligentes controlados por voz.

As palavras-chave e os comandos do assistente de voz pré-criados estão disponíveis diretamente através do portal. As palavras-chave e os comandos personalizados podem ser criados e preparados no Speech Studio, que também faz parte dos Serviços Cognitivos do Azure.

Desenvolvimento avançado

Veja o GitHub de desenvolvimento avançado do Azure Percept DK para obter orientações atualizadas, tutoriais e exemplos para aspetos como:

  • Implementar um modelo de IA personalizado no DK do Azure Percept
  • Atualizar um modelo suportado com a aprendizagem de transferência
  • E muito mais