Perguntas frequentes sobre o Azure AI Video Indexer

O Azure AI Video Indexer é um aplicativo de nuvem, parte dos serviços de IA do Azure, que permite extrair os insights de seus vídeos usando modelos de vídeo e áudio do Azure AI Video Indexer. Para obter mais informações, consulte Visão Geral.

Algumas das operações que o Azure AI Video Indexer pode executar em arquivos de mídia incluem:

• Identificar e extrair a fala e identificar os locutores.
• Identificar e extrair o texto na tela em um vídeo.
• Detectar objetos em um arquivo de vídeo.
• Identifique marcas (por exemplo: Microsoft) a partir de faixas de áudio e texto na tela de um vídeo.
• Detectar e reconhecer rostos de um banco de dados de celebridades e um banco de dados de rostos definido pelo usuário.
• Extrair os tópicos discutidos, mas não necessariamente mencionados no conteúdo de áudio e vídeo.
• Criar legendas ocultas ou subtítulos com base na faixa de áudio.

Para obter mais informações e mais recursos do Azure AI Video Indexer, consulte Visão geral.

O Azure AI Video Indexer inclui uma oferta de avaliação que fornece 2.400 minutos de indexação gratuitos ao usar o site do Azure AI Video Indexer ou a API do Azure AI Video Indexer (consulte o portal do desenvolvedor).

Para indexar vídeos e áudios em escala, você pode conectar o Azure AI Video Indexer a uma assinatura paga do Microsoft Azure. Você pode encontrar mais informações de preço na página de preços.

Você pode encontrar mais informações na Guia de Introdução.

Você pode usar a interface baseada na Web do Azure AI Video Indexer para avaliar, configurar e gerenciar sua conta sem a necessidade de codificação. Quando estiver pronto para desenvolver aplicativos mais complexos, você poderá usar a API do Azure AI Video Indexer para integrar o Azure AI Video Indexer em seus próprios aplicativos, sites ou fluxos de trabalho personalizados usando tecnologias sem servidor, como Aplicativos Lógicos do Azure ou Azure Functions.

Os recursos de Identificação Facial e Reconhecimento de Celebridades do Azure AI Video Indexer são recursos de Acesso Limitado que exigem registro.

Encontre o formulário de registro e mais informações sobre o Acesso Limitado neste artigo.

Além disso, confira o seguinte: a postagem no blog do comunicado e a postagem no blog sobre investimento e proteção do reconhecimento facial.

Não, o Azure AI Video Indexer fornece a integração de vários modelos de aprendizado de máquina em um pipeline. A indexação de um arquivo de vídeo ou áudio por meio do Azure AI Video Indexer recupera um conjunto completo de insights extraídos em uma linha do tempo compartilhada sem nenhuma habilidade de aprendizado de máquina ou conhecimento sobre algoritmos necessários por parte do cliente.

O Azure AI Video Indexer dá suporte aos formatos de mídia mais comuns. Confira Matriz de suporte e limites de serviço do Azure AI Video Indexer.

No portal baseado na Web do Azure AI Video Indexer, você pode carregar um arquivo de mídia usando a caixa de diálogo de carregamento de arquivo ou apontando para uma URL que hospeda diretamente o arquivo de origem. Qualquer URL que hospeda o conteúdo de mídia usando um iFrame de conteúdo ou código incorporado não funcionará (consulte o exemplo).

Sim. Para acessar o arquivo de vídeo bruto do indexador de vídeo, você pode usar o método Obter URL de Download do Arquivo de Origem de Vídeo para obter a URL do arquivo MP4 e colocá-la na marca de vídeo.

No Azure AI Video Indexer, você pode criar um projeto e adicionar vários arquivos para compilar e renderizar como um novo arquivo. O número de arquivos de origem é definido como 10 no site e 100 na API.

A quantidade de tempo necessária para indexar um arquivo de vídeo ou áudio, usando a API do Azure AI Video Indexer e a interface baseada na Web do Azure AI Video Indexer, depende de vários parâmetros, como o comprimento e a qualidade do arquivo, o número de insights encontrados no arquivo, entre outras coisas. É recomendável que você execute alguns arquivos de teste com seu próprio conteúdo e calcule uma média para ter uma ideia melhor.

Sim, você pode integrar o Azure AI Video Indexer a tecnologias sem servidor, como Aplicativos Lógicos, Flow e Azure Functions. Você pode encontrar mais detalhes sobre os conectores do Aplicativo Lógico e do Flow para o Azure AI Video Indexer aqui. Você pode ver alguns projetos de automação feitos por parceiros no repositório de Exemplos do Azure AI Video Indexer.

Você pode ver quais regiões do Azure AI Video Indexer está disponível na página de regiões .

Sim. No Azure AI Video Indexer, você pode personalizar alguns dos modelos disponíveis para melhor atender às suas necessidades.

Por exemplo, nosso modelo Pessoa dá suporte a rostos prontos para uso de 1 milhão de reconhecimento de celebridade, mas você também pode treiná-lo para reconhecer outras faces que não estão nesse banco de dados.

Para obter detalhes, consulte artigos sobre como personalizar os modelos Pessoa, Marcas e Idioma.

Sim. Pressione o botão editar vídeo na tela da biblioteca ou o botão abrir no editor na tela do player para acessar a guia Projetos . Você pode criar um novo projeto e adicionar mais vídeos de sua biblioteca para editá-los juntos, quando terminar, você pode renderizar seu vídeo e fazer o download.

Se você quiser obter insights sobre seu novo vídeo, indexe-o com o Azure AI Video Indexer e ele aparecerá em sua biblioteca com seus insights.

Se houver vários fluxos de áudio, o Azure AI Video Indexer usará o primeiro que encontrar e processará apenas esse fluxo. Em qualquer fluxo de áudio que o Azure AI Video Indexer processa, ele usa os diferentes canais (se presentes) e os processa juntos como mono. Para a manipulação de fluxos/canais, você pode usar comandos ffmpeg no arquivo antes de indexá-lo.

Para obter uma descrição detalhada de como alternar para o domínio correto, confira Alternar entre locatários.

Um aplicativo em execução em contêineres do Kubernetes habilitados para Arc que pode ser implantado fora do Azure para extrair e consumir insights de áudio de seus arquivos de mídia. Versões futuras também fornecerão insights de vídeo.

O Azure Arc é uma ponte que estende a plataforma do Azure para ajudá-lo a criar aplicativos e serviços com a flexibilidade de execução em datacenters, na borda e em ambientes de várias nuvens. Desenvolva aplicativos nativos da nuvem com modelos consistentes de desenvolvimento, operações e segurança.

Para participar da versão prévia, você precisa de uma assinatura ativa do Azure, uma conexão com o Azure, um ambiente capaz de executar a extensão (consulte [requisitos no início rápido e permissão para ingressar na versão prévia. Você pode enviar uma solicitação para participar da visualização aqui.

Você pode seguir o início rápido e experimentar cenários automatizados do Kubernetes habilitados para Azure Arc com o Azure Arc Jumpstart.

Durante a instalação da extensão, os contêineres de aprendizado de máquina são baixados para a computação de borda. Alguns desses contêineres podem ter vários gigabytes de tamanho e o tempo de download dependerá das condições da rede. Em alguns casos, o download pode demorar mais de 15 minutos.

O Video Indexer habilitado pelo Arc requer uma classe de armazenamento configurada com readwritemany. Se uma classe de armazenamento já estiver definida como padrão do cluster durante a instalação, ela será usada. Caso contrário, se você precisar configurar um armazenamento diferente, poderá passá-lo como uma propriedade durante a instalação da extensão.

Sim. A API da extensão Video Indexer está disponível por meio da extensão de front-end. Você pode restringir o acesso a um endereço IP ou a um FQDN. Além disso, como toda a comunicação é feita por meio de protocolos de tráfego seguro, é recomendável usar um certificado de autoridade de certificação válido e definir uma camada de segurança, como NSG ou firewall, para limitar o acesso a esse ponto de extremidade.

Consulte o guia de solução de problemas.

A comunicação entre um aplicativo cliente e uma conta do Azure AI Video Indexer é criptografada usando o TLS (Transport Layer Security). O TLS é um protocolo criptográfico padrão que garante a privacidade e a integridade dos dados entre clientes e serviços pela Internet. Para obter mais informações sobre TLS, confira Protocolo TLS. O Video Indexer impõe um mínimo de TLS v1.2. Os clientes não podem controlar os naipes cifrados, escolheremos a primeira correspondência entre o cliente e o servidor, indo do forte para o mais fraco.

Sim, a menos que você exclua o arquivo do Azure AI Video Indexer, usando o site ou a API do Azure AI Video Indexer, seus arquivos de vídeo e áudio serão armazenados. Na avaliação, os arquivos de áudio e vídeo que você indexar serão armazenados na região do Azure do Leste dos EUA. Caso contrário, os arquivos de áudio e vídeo são armazenados na conta de armazenamento de sua assinatura do Azure.

Por padrão, seus dados são replicados para a região emparelhada na qual você implantou a instância do Azure AI Video Indexer. Para a região com requisitos de residência de dados, os seus dados são sempre mantidos dentro da mesma região. Para obter mais informações relacionadas, confira outras Questões de Privacidade nesta seção.

Sim, você sempre pode excluir seus arquivos de vídeo e áudio, bem como quaisquer metadados e insights extraídos deles pelo Azure AI Video Indexer. Depois de excluir um arquivo do Azure AI Video Indexer, o arquivo e seus metadados e insights são removidos permanentemente do Azure AI Video Indexer. No entanto, se você implementou sua própria solução de backup no armazenamento do Azure, o arquivo permanece no seu armazenamento do Azure.

Sim, somente os administradores de contas podem convidar e desconvidar pessoas para suas contas, bem como atribuir quem tem privilégios de edição e quem tem acesso somente para leitura.

O conteúdo de seus vídeos ou áudios cuja configuração de privacidade seja pública pode ser acessado por qualquer pessoa que tenha o link para esse conteúdo e seus insights. O conteúdo de seus vídeos e áudios cuja configuração de privacidade seja privada pode ser acessado apenas pelos usuários que foram convidados para a conta desse conteúdo. A configuração de privacidade do seu conteúdo também se aplica aos metadados e insights que o Azure AI Video Indexer extrai. A configuração de privacidade é atribuída quando você carrega o arquivo de vídeo ou áudio. É possível também alterar a configuração de privacidade após a indexação.

De acordo com os Termos do Azure Online Services (OST), você é totalmente proprietário do seu conteúdo e a Microsoft só acessará seu conteúdo e os metadados e insights que o Azure AI Video Indexer extrai do seu conteúdo de acordo com o OST e a Política de Privacidade da Microsoft.

Não, os modelos personalizados que você cria em sua conta não estão disponíveis para nenhuma outra conta. Atualmente, o Azure AI Video Indexer permite que você crie marcas, linguagem e modelos de pessoa personalizados em sua conta. Esses modelos só estão disponíveis na conta em que você criou os modelos.

Sim, o conteúdo e os insights são mantidos na região do Azure (exceto para as regiões de Singapura e Sul do Brasil), a menos que você tenha uma configuração manual na sua assinatura do Azure que usa várias regiões do Azure.

Os dados do cliente em uma região são replicados por motivos de BCDR para a região emparelhada.

O Azure AI Video Indexer é coberto pela Política de Privacidade da Microsoft. A política de privacidade explica os dados pessoais que a Microsoft processa, como a Microsoft os processa e para qual finalidade. Para saber mais sobre privacidade, consulte a Central de Confiabilidade da Microsoft.

Atualmente, o Azure AI Video Indexer tem a certificação SOC. Para examinar a certificação do Azure AI Video Indexer, consulte a Central de Confiabilidade da Microsoft.

Quando os vídeos são carregados no Azure AI Video Indexer, você pode escolher entre duas configurações de privacidade: privada e pública. Os vídeos públicos podem ser acessados por qualquer pessoa, incluindo usuários anônimos e não identificados. Os tipos privados são restritos exclusivamente aos membros da conta.

Ao carregar um vídeo no Azure AI Video Indexer, uma análise automática de conteúdo é feita por algoritmos e modelos para garantir que nenhum conteúdo impróprio seja apresentado publicamente. Se um vídeo for considerado suspeito em relação a conteúdo explícito, não será possível defini-lo como público. No entanto, os membros da conta ainda podem acessá-lo como um vídeo privado (exibi-lo, baixar as informações e artefatos extraídos e executar outras operações disponíveis para membros da conta).

Para definir o vídeo para acesso público, você pode:

• Crie sua própria camada de interface (como aplicativo ou site) e use-a para interagir com o serviço Azure AI Video Indexer. Dessa forma, o vídeo permanece privado em nosso site e seus usuários podem interagir com ele por meio de sua interface. Por exemplo, você ainda pode obter informações ou permitir a exibição do vídeo em sua própria interface.

• Solicite uma revisão humana do conteúdo, o que resultaria na remoção da restrição, supondo que o conteúdo não seja explícito.

  Essa opção poderá ser explorada se o site do Azure AI Video Indexer for usado diretamente pelos usuários como a camada de interface e para exibição pública (não autenticada).

As APIs do Azure AI Video Indexer permitem indexação, extração de metadados, gerenciamento de ativos, tradução, inserção, personalização de modelos e muito mais. Para encontrar informações mais detalhadas sobre como usar a API do Azure AI Video Indexer, consulte o portal do desenvolvedor do Azure AI Video Indexer.

Atualmente, não é oferecido nenhum SDK de cliente. A equipe do Azure AI Video Indexer está trabalhando nos SDKs e planeja entregá-los em breve.

Siga o Tutorial: introdução à API do Azure AI Video Indexer.

A API do Azure AI Video Indexer contém uma API de Autorização e uma API de Operações. A API de autorizações contém as chamadas que lhe dão o token de acesso. Cada chamada para a API de operações deve estar associada a um token de acesso, correspondendo ao escopo de autorização da chamada.

Os tokens de acesso são necessários para usar as APIs do Azure AI Video Indexer para fins de segurança. Isso garante que todas as chamadas são provenientes de você ou daqueles que têm permissões de acesso à sua conta.

• Nível da conta - os tokens de acesso no nível da conta permitem que você execute operações no nível da conta ou no nível do vídeo. Por exemplo, carregar o vídeo, listar todos os vídeos, obter insights de vídeo.
• Nível de usuário - os tokens de acesso no nível do usuário permitem que você execute operações no nível do usuário. Por exemplo, obter contas associadas.
• Nível de vídeo - os tokens de acesso ao nível de vídeo permitem que você realize operações em um vídeo específico. Por exemplo, obtenha informações sobre vídeos, faça o download de legendas, obtenha widgets etc.

Os tokens de acesso expiram a cada hora, portanto, você precisa gerar um novo token de acesso a cada hora.

Confira uma nota de versão sobre informações de logon.

Depois de registrar sua conta de email usando um provedor de identidade, você não poderá usar essa conta de email com outro provedor de identidade.

Eles são armazenados pelo serviço Azure AI Video Indexer e podem ser buscados com as APIs Obter Índice de Vídeo e Obter URL de Download de Artefato de Vídeo.

Não há encargos adicionais do Azure AI Video Indexer para chamar a API.

120 solicitações por minuto são padrão, mas podem ir até 600 solicitações por minuto.

O Azure AI Video Indexer usa um modelo de preços simples de pagamento conforme o uso com base na duração da entrada de conteúdo que você indexa. Encargos adicionais podem ser aplicáveis para codificação, streaming, armazenamento, uso da rede e unidades reservadas de mídia. Para saber mais, confira a página de preço.

Ao enviar um vídeo a ser indexado, o usuário definirá a indexação como análise de vídeo, análise de áudio ou ambos. Isso determinará quais SKUs serão cobrados. Se houver um erro de nível crítico durante o processamento, um código de erro será retornado como uma resposta. Nesse caso, não ocorre nenhuma cobrança. Um erro crítico pode ser causado por um bug em nosso código ou uma falha crítica em uma dependência interna que o serviço tem. Erros como identificação incorreta ou extração de insight não são considerados críticos e uma resposta é retornada. Em qualquer caso em que uma resposta válida (sem código de erro) for retornada, a cobrança ocorrerá.

Sim, o Azure AI Video Indexer oferece uma conta de avaliação que fornece 2.400 minutos de indexação gratuitos ao usar o site do Azure AI Video Indexer ou a API do Azure AI Video Indexer (consulte o portal do desenvolvedor).

Envie uma explicação detalhada de sua solicitação para "Suporte ao cliente do Video Indexer" visupport@microsoft.com. Incluindo: modelo de IA ao qual você está se referindo, o resultado que você gostaria de recusar, o motivo pelo qual devemos desativar os resultados e uma explicação do motivo pelo qual você está perguntando isso.

O processamento da solicitação pode levar algumas semanas.