Este artigo responde a perguntas frequentes sobre o Azure AI Video Indexer.
Perguntas gerais
O que é o Azure AI Video Indexer?
O Azure AI Video Indexer é um aplicativo de nuvem, parte dos serviços de IA do Azure, que permite extrair os insights de seus vídeos usando modelos de vídeo e áudio do Azure AI Video Indexer. Para obter mais informações, consulte Visão Geral.
O que posso fazer com o Azure AI Video Indexer?
Algumas das operações que o Azure AI Video Indexer pode executar em arquivos de mídia incluem:
- Identificar e extrair a fala e identificar os locutores.
- Identificar e extrair o texto na tela em um vídeo.
- Detectar objetos em um arquivo de vídeo.
- Identifique marcas (por exemplo: Microsoft) a partir de faixas de áudio e texto na tela de um vídeo.
- Detectar e reconhecer rostos de um banco de dados de celebridades e um banco de dados de rostos definido pelo usuário.
- Extrair os tópicos discutidos, mas não necessariamente mencionados no conteúdo de áudio e vídeo.
- Criar legendas ocultas ou subtítulos com base na faixa de áudio.
Para obter mais informações e mais recursos do Azure AI Video Indexer, consulte Visão geral.
Como faço para começar a usar o Azure AI Video Indexer?
O Video Indexer de IA do Azure inclui uma oferta de avaliação que fornece 2.400 minutos gratuitos de indexação. Você pode usá-los com o site do Video Indexer de IA do Azure ou a API do Video Indexer de IA do Azure (consulte o portal do desenvolvedor).
Para indexar vídeos e áudios em escala, você pode conectar o Azure AI Video Indexer a uma assinatura paga do Microsoft Azure. Você pode encontrar mais informações de preço na página de preços.
Você pode encontrar mais informações na Guia de Introdução.
As habilidades de codificação são necessárias para usar o Video Indexer de IA do Azure?
Você pode usar a interface baseada na Web do Azure AI Video Indexer para avaliar, configurar e gerenciar sua conta sem a necessidade de codificação. Quando estiver pronto para desenvolver aplicativos mais complexos, você pode usar a API do Video Indexer de IA do Azure para integrar o Video Indexer de IA do Azure em seus próprios aplicativos, sites ou fluxos de trabalho personalizados usando tecnologias sem servidor, como Aplicativos Lógicos do Azure ou Azure Functions.
Quais são os recursos de Acesso Limitado do Azure AI Video Indexer e como se registrar?
Os recursos de Identificação Facial e Reconhecimento de Celebridades do Azure AI Video Indexer são recursos de Acesso Limitado que exigem registro.
Encontre o formulário de registro e mais informações sobre o Acesso Limitado neste artigo.
Além disso, confira os seguintes links: a postagem no blog de anúncios e o investimento e a proteção para a postagem no blog de reconhecimento facial.
Preciso de habilidades de aprendizado de máquina para usar o Azure AI Video Indexer?
Não, o Azure AI Video Indexer fornece a integração de vários modelos de aprendizado de máquina em um pipeline. Indexar um arquivo de áudio ou vídeo com o Video Indexer de IA do Azure recupera um conjunto completo de insights. Eles são extraídos em uma linha do tempo compartilhada sem nenhuma habilidade de aprendizado de máquina ou conhecimento sobre algoritmos necessários por parte do cliente.
Quais formatos de mídia são compatíveis com o Azure AI Video Indexer?
O Azure AI Video Indexer dá suporte aos formatos de mídia mais comuns. Confira Matriz de suporte e limites de serviço do Azure AI Video Indexer.
Como faço para carregar um arquivo de mídia no Azure AI Video Indexer e quais são as limitações?
No portal baseado na Web do Azure AI Video Indexer, você pode carregar um arquivo de mídia usando a caixa de diálogo de carregamento de arquivo ou apontando para uma URL que hospeda diretamente o arquivo de origem. Qualquer URL que hospeda o conteúdo de mídia usando um código iFrame ou inserção não funciona ( veja exemplo).
Posso transmitir um vídeo usando um player de vídeo HTML5 externo
Sim. Você pode acessar o arquivo de vídeo bruto do indexador de vídeo. Use o método Obter URL de Download de Arquivo de Origem de Vídeo para obter a URL do arquivo MP4 e colocá-la na marca de vídeo.
Quantos arquivos posso costurar e renderizar em um projeto?
No Video Indexer de IA do Azure, você pode criar um projeto e adicionar vários arquivos para costurar e renderizar como um novo arquivo. O número de arquivos de origem é definido como 10 no site e 100 na API.
Quanto tempo leva para o Azure AI Video Indexer extrair insights da mídia?
O tempo necessário para indexar um arquivo de áudio ou vídeo varia. Quando você usa a API do Video Indexer de IA do Azure ou a interface baseada na Web do Video Indexer de IA do Azure, o tempo depende de vários parâmetros. Eles incluem o comprimento e a qualidade do arquivo, o número de insights encontrados no arquivo. É recomendável que você execute alguns arquivos de teste com seu próprio conteúdo e calcule uma média para ter uma ideia melhor.
Posso criar fluxos de trabalho personalizados para automatizar processos com o Azure AI Video Indexer?
Sim, você pode integrar o Azure AI Video Indexer a tecnologias sem servidor, como Aplicativos Lógicos, Flow e Azure Functions. Você pode encontrar mais detalhes sobre os conectores do Aplicativo Lógico e do Flow para o Azure AI Video Indexer aqui. Você pode ver alguns projetos de automação feitos por parceiros no repositório de Exemplos do Azure AI Video Indexer.
Em quais regiões do Azure o Azure AI Video Indexer está disponível?
Você pode ver quais regiões do Azure AI Video Indexer está disponível na página de regiões .
Posso personalizar os modelos do Azure AI Video Indexer para meu caso de uso específico?
Sim. No Video Indexer de IA do Azure, você pode personalizar alguns dos modelos disponíveis para atender melhor às suas necessidades.
Por exemplo, nosso modelo person dá suporte a 1.000.000 faces prontas para reconhecimento de celebridades, mas você também pode treiná-lo para reconhecer outros rostos que não estão nesse banco de dados.
Para obter detalhes, consulte artigos sobre como personalizar os modelos Pessoa, Marcas e Idioma.
Posso editar os vídeos em minha biblioteca?
Sim. Pressione o botão editar vídeo na exibição da biblioteca ou no botão abrir no editor da exibição do player para acessar a guia Projetos . Você pode criar um novo projeto e adicionar mais vídeos de sua biblioteca para editá-los juntos, depois de terminar, você pode renderizar seu vídeo e baixar.
Se você quiser obter informações sobre seu novo vídeo, indexe-o com o Video Indexer de IA do Azure e ele aparecerá em sua biblioteca com seus insights.
Posso indexar vários fluxos de áudio ou canais?
Se houver vários fluxos de áudio, o Video Indexer de IA do Azure usará o primeiro que encontrar e processará somente esse fluxo. Em qualquer fluxo de áudio que o Azure AI Video Indexer processa, ele usa os diferentes canais (se presentes) e os processa juntos como mono. Para a manipulação de fluxos/canais, você pode usar comandos ffmpeg no arquivo antes de indexá-lo.
Não consigo encontrar minha nova conta do Azure Resource Manager na lista de contas no site do Video Indexer de IA do Azure.
Para obter uma descrição detalhada de como alternar para o domínio correto, confira Alternar entre locatários.
Azure AI Video Indexer habilitado por perguntas do Arc
O que é a extensão habilitada para Arc do Azure AI Video Indexer?
Um aplicativo em execução em contêineres kubernetes habilitados para Arc que podem ser implantados fora do Azure para extrair e consumir insights de áudio e vídeo de seus arquivos de mídia.
O que é o Azure Arc?
O Azure Arc é uma ponte que estende a plataforma do Azure para ajudá-lo a criar aplicativos e serviços com a flexibilidade de executar entre datacenters, na borda e em ambientes multinuvem. Desenvolva aplicativos nativos da nuvem com modelos consistentes de desenvolvimento, operações e segurança.
Como posso começar a usar o Azure AI Video Indexer habilitado pelo Arc?
Você pode seguir o início rápido e experimentar cenários automatizados do Kubernetes habilitados para Azure Arc com o Azure Arc Jumpstart.
Por que o download é tão grande?
Durante a instalação da extensão, os contêineres de aprendizado de máquina são baixados para a computação de borda. Alguns desses contêineres podem ter vários gigabytes de tamanho e o tempo de download depende das condições de rede. Em alguns casos, o download pode levar mais de 15 minutos.
Preciso configurar o armazenamento para meu cluster do Kubernetes?
O Video Indexer habilitado pelo Arc requer uma classe de armazenamento configurada com readwritemany. Se uma classe de armazenamento já estiver definida como o padrão do cluster durante a instalação, ela será usada. Caso contrário, se você precisar configurar um armazenamento diferente, poderá passá-lo como uma propriedade durante a instalação da extensão.
Preciso configurar um ponto de extremidade de front-end para a extensão Video Indexer?
Sim. A API da extensão do Video Indexer está disponível por meio da extensão de front-end. Você pode restringir o acesso a um endereço IP ou a um FQDN. Toda a comunicação ocorre em protocolos de tráfego seguro, usando um certificado de AUTORIDADE de certificação válido. É recomendável definir uma camada de segurança, como NSG ou firewall, para limitar o acesso ao ponto de extremidade.
Como posso solucionar problemas do meu Azure AI Video Indexer habilitado pela instalação do Arc?
Consulte o guia de solução de problemas.
Perguntas de privacidade
Como o tráfego de rede é criptografado pelo Azure AI Video Indexer?
A comunicação entre um aplicativo cliente e uma conta do Azure AI Video Indexer é criptografada usando o TLS (Transport Layer Security). O TLS é um protocolo criptográfico padrão que garante a privacidade e a integridade dos dados entre clientes e serviços pela Internet. Para obter mais informações sobre TLS, confira Protocolo TLS. O Video Indexer impõe um mínimo de TLS v1.2. Os clientes não podem controlar os fatos de criptografia. O Video Indexer de IA do Azure escolhe a primeira correspondência entre o cliente e o servidor indo de forte para mais fraco.
Os arquivos de vídeo e áudio indexados pelo Azure AI Video Indexer são armazenados?
Sim, seus arquivos de vídeo e áudio são armazenados. Você pode excluí-los do Video Indexer de IA do Azure usando o site do Video Indexer de IA do Azure ou com APIs. Na avaliação, os arquivos de áudio e vídeo que você indexar serão armazenados na região do Azure do Leste dos EUA. Caso contrário, os arquivos de áudio e vídeo são armazenados na conta de armazenamento de sua assinatura do Azure.
Posso excluir meus arquivos armazenados no site do Azure AI Video Indexer?
Sim, você sempre pode excluir seus arquivos de vídeo e áudio, bem como quaisquer metadados e insights extraídos deles pelo Azure AI Video Indexer. Depois de excluir um arquivo do Azure AI Video Indexer, o arquivo e seus metadados e insights são removidos permanentemente do Azure AI Video Indexer. No entanto, se você implementou sua própria solução de backup no armazenamento do Azure, o arquivo permanecerá no armazenamento do Azure.
Posso controlar o acesso do usuário à minha conta do Azure AI Video Indexer?
Sim, somente os administradores de contas podem convidar e desconvidar pessoas para suas contas, bem como atribuir quem tem privilégios de edição e quem tem acesso somente para leitura.
Quem pode acessar meus arquivos de vídeo e áudio que o Video Indexer de IA do Azure indexou ou armazenou?
Seu conteúdo de áudio ou vídeo que tem o público como sua configuração de privacidade é acessível por qualquer pessoa que tenha o link para seu conteúdo de vídeo ou áudio e seus insights. O conteúdo de áudio ou vídeo que tem sua configuração de privacidade definida como privada é acessível apenas por usuários que foram convidados para a conta do conteúdo de vídeo ou áudio. A configuração de privacidade do seu conteúdo também se aplica aos metadados e insights que o Azure AI Video Indexer extrai. A configuração de privacidade é atribuída quando você carrega o arquivo de vídeo ou áudio. É possível também alterar a configuração de privacidade após a indexação.
Qual acesso a Microsoft tem aos meus arquivos de vídeo ou áudio?
De acordo com os Termos dos Serviços Online do Azure (OST), você é completamente proprietário do seu conteúdo. A Microsoft acessa apenas seu conteúdo e os metadados e insights que o Video Indexer de IA do Azure extrai do seu conteúdo de acordo com o OST e a Política de Privacidade da Microsoft.
Os modelos personalizados que crio na minha conta do Azure AI Video Indexer estão disponíveis para outras contas?
Não, os modelos personalizados criados em sua conta não estão disponíveis para nenhuma outra conta. Atualmente, o Azure AI Video Indexer permite que você crie marcas, linguagem e modelos de pessoa personalizados em sua conta. Esses modelos só estão disponíveis na conta em que você criou os modelos.
O conteúdo indexado pelo Video Indexer é mantido na região do Azure em que estou usando o Video Indexer?
Sim, o conteúdo e seus insights são mantidos dentro da região do Azure (exceto para as regiões Sul de Cingapura e Brasil). Os dados serão mantidos fora da sua região se você tiver uma configuração manual em sua assinatura do Azure que use várias regiões do Azure.
Os dados do cliente em uma região são replicados por motivos de BCDR para a região emparelhada.
Qual é a política de privacidade do Azure AI Video Indexer?
O Azure AI Video Indexer é coberto pela Política de Privacidade da Microsoft. A política de privacidade explica os dados pessoais que a Microsoft processa, como a Microsoft os processa e para qual finalidade. Para saber mais sobre privacidade, consulte a Central de Confiabilidade da Microsoft.
Quais certificações o Azure AI Video Indexer tem?
Atualmente, o Azure AI Video Indexer tem a certificação SOC. Para examinar a certificação do Video Indexer de IA do Azure, consulte a Central de Confiabilidade da Microsoft.
Qual é a diferença entre vídeos públicos e privados?
Quando os vídeos são carregados no Azure AI Video Indexer, você pode escolher entre duas configurações de privacidade: privada e pública. Os vídeos públicos podem ser acessados por qualquer pessoa, incluindo usuários anônimos e não identificados. Os tipos privados são restritos exclusivamente aos membros da conta.
Tentei carregar um vídeo como público e ele foi sinalizado para conteúdo impróprio ou ofensivo, o que isso significa?
Quando você carrega um vídeo no Video Indexer de IA do Azure, uma análise automática de conteúdo é feita por algoritmos e modelos para garantir que nenhum conteúdo inadequado seja apresentado publicamente. Se um vídeo for considerado suspeito como contendo conteúdo explícito, você não poderá defini-lo como público. No entanto, os membros da conta ainda podem acessá-lo como um vídeo privado (exibi-lo, baixar as informações e artefatos extraídos e executar outras operações disponíveis para membros da conta).
Aviso
Não use dados diretamente da pasta artefatos para fins de produção. Artefatos são saídas intermediárias do processo de indexação e são saídas brutas de diferentes mecanismos de IA que analisam vídeos. O esquema de artefatos pode mudar ao longo do tempo.
Para definir o vídeo para acesso público, você pode:
Crie sua própria camada de interface (como aplicativo ou site) e use-a para interagir com o serviço Azure AI Video Indexer. Dessa forma, o vídeo permanece privado em nosso site e seus usuários podem interagir com ele por meio de sua interface. Por exemplo, você ainda pode obter informações ou permitir a exibição do vídeo em sua própria interface.
Solicite uma revisão humana do conteúdo, o que resultaria na remoção da restrição supondo que o conteúdo não seja explícito.
Essa opção poderá ser explorada se o site do Azure AI Video Indexer for usado diretamente pelos usuários como a camada de interface e para exibição pública (não autenticada).
Perguntas sobre API
Quais APIs o Azure AI Video Indexer oferece?
As APIs do Azure AI Video Indexer permitem indexação, extração de metadados, gerenciamento de ativos, tradução, inserção, personalização de modelos e muito mais. Para encontrar informações mais detalhadas sobre como usar a API do Azure AI Video Indexer, consulte o portal do desenvolvedor do Azure AI Video Indexer.
Quais SDKs de cliente o Azure AI Video Indexer oferece?
Atualmente, nenhum SDK do cliente está disponível. A equipe do Azure AI Video Indexer está trabalhando nos SDKs e planeja entregá-los em breve.
Como faço para começar a usar a API do Azure AI Video Indexer?
Siga o Tutorial: introdução à API do Azure AI Video Indexer.
O que é um token de acesso de API e por que eu preciso dele?
A API do Azure AI Video Indexer contém uma API de Autorização e uma API de Operações. A API de autorizações contém as chamadas que lhe dão o token de acesso. Cada chamada para a API de operações deve estar associada a um token de acesso, correspondendo ao escopo de autorização da chamada.
Os tokens de acesso são necessários para usar as APIs do Azure AI Video Indexer para fins de segurança. Eles garantem que todas as chamadas sejam provenientes de você ou de pessoas que tenham permissões de acesso à sua conta.
Qual é a diferença entre o token de acesso de conta, o token de acesso de usuário e o token de acesso de vídeo?
- Nível da conta - os tokens de acesso no nível da conta permitem que você execute operações no nível da conta ou no nível do vídeo. Por exemplo, carregar o vídeo, listar todos os vídeos, obter insights de vídeo.
- Nível de usuário - os tokens de acesso no nível do usuário permitem que você execute operações no nível do usuário. Por exemplo, obter contas associadas.
- Nível de vídeo - os tokens de acesso ao nível de vídeo permitem que você realize operações em um vídeo específico. Por exemplo, obtenha informações sobre vídeos, faça o download de legendas, obtenha widgets etc.
Com que frequência preciso obter um novo token de acesso? Quando os tokens de acesso expiram?
Os tokens de acesso expiram a cada hora, portanto, você precisa gerar um novo token de acesso a cada hora.
Quais opções de entrada estão disponíveis para o portal do Desenvolvedor do Video Indexer de IA do Azure?
Confira uma nota de versão sobre informações de entrada.
Depois de registrar sua conta de email usando um provedor de identidade, você não poderá usar essa conta de email com outro provedor de identidade.
Onde estão os ativos JSON (como insights, transcrição etc.), associados a vídeos indexados e armazenados?
O serviço do Video Indexer de IA do Azure os armazena. Você pode buscá-los com as APIs obter índice de vídeo e obter url de download de artefato de vídeo .
Depois que um vídeo é indexado, há algum encargo extra para chamar a API?
Não há encargos extras do Video Indexer de IA do Azure para chamar a API.
Qual é o limite de carregamento de indexação?
Há um limite de solicitação de API de upload de 10 solicitações por segundo e até 120 solicitações por minuto.
Perguntas sobre cobrança
Quanto custa o Azure AI Video Indexer?
O Azure AI Video Indexer usa um modelo de preços simples de pagamento conforme o uso com base na duração da entrada de conteúdo que você indexa. Outros encargos podem ser aplicados para codificação, streaming, armazenamento, uso de rede e unidades reservadas de mídia. Para obter mais informações, consulte Preços – Video Indexer do Azure.
Qual é o custo para o Video Indexer do Azure como uma extensão do Arc?
A extensão dá suporte apenas à análise básica de áudio e vídeo. A indexação é cobrada por minuto, usando a mesma taxa que a indexação em regiões de nuvem do Azure. Para obter mais informações sobre preços, consulte Preços – Video Indexer do Azure.
Quando sou cobrado pelo uso do Azure AI Video Indexer?
Ao enviar um vídeo para ser indexado, o usuário define a indexação como análise de vídeo, análise de áudio ou ambos. A escolha determina quais SKUs são cobrados. Se houver um erro de nível crítico durante o processamento, um código de erro será retornado como uma resposta. Nesse caso, não ocorre nenhuma cobrança. Um erro crítico pode ser causado por um bug em nosso código ou uma falha crítica em uma dependência interna que o serviço tem. Erros como identificação incorreta ou extração de insights não são considerados críticos e uma resposta é retornada. Em qualquer caso em que uma resposta válida (código nenhumrror) é retornada, a cobrança ocorre.
O Azure AI Video Indexer oferece uma conta de avaliação?
Sim, o Video Indexer de IA do Azure oferece uma conta de avaliação que fornece 2.400 minutos gratuitos de indexação. Use o tempo com o site do Video Indexer de IA do Azure ou a API do Video Indexer de IA do Azure. Para obter mais informações, consulte o portal do desenvolvedor.
Recusar perguntas
Como desativar um resultado específico de um modelo público de IA?
Envie uma explicação detalhada de sua solicitação para "Suporte ao cliente do Video Indexer" visupport@microsoft.com. Inclua os seguintes detalhes: modelo de IA ao qual você está se referindo, o resultado que você deseja recusar, o motivo pelo qual devemos recusar os resultados e uma explicação de sua solicitação.
Quanto tempo demora?
O processamento da solicitação pode levar algumas semanas.