Perguntas frequentes sobre o Indexador de Vídeo de IA do Azure

O Indexador de Vídeo de IA do Azure é um aplicativo de nuvem, parte dos serviços de IA do Azure, permite que você extraia os insights de seus vídeos usando modelos de vídeo e áudio do Indexador de Vídeo de IA do Azure. Para obter mais informações, consulte Visão Geral.

Algumas das operações que o Indexador de Vídeo de IA do Azure pode executar em arquivos de mídia incluem:

• Identificar e extrair a fala e identificar os locutores.
• Identificar e extrair o texto na tela em um vídeo.
• Detectar objetos em um arquivo de vídeo.
• Identifique marcas (por exemplo: Microsoft) a partir de faixas de áudio e texto na tela em um vídeo.
• Detectar e reconhecer rostos de um banco de dados de celebridades e um banco de dados de rostos definido pelo usuário.
• Extrair os tópicos discutidos, mas não necessariamente mencionados no conteúdo de áudio e vídeo.
• Criar legendas ocultas ou subtítulos com base na faixa de áudio.

Para obter mais informações e mais recursos do Indexador de Vídeo de IA do Azure, consulte Visão geral.

O Indexador de Vídeo de IA do Azure inclui uma oferta de avaliação que fornece 2.400 minutos de indexação gratuitos ao usar o site do Indexador de Vídeo de IA do Azure ou a API do Indexador de Vídeo de IA do Azure (consulte o portal do desenvolvedor).

Para indexar vídeos e voos de áudio em escala, você pode conectar o Indexador de Vídeo de IA do Azure a uma assinatura paga do Microsoft Azure. Você pode encontrar mais informações de preço na página de preços.

Você pode encontrar mais informações na Guia de Introdução.

Você pode usar a interface baseada na Web do Indexador de Vídeo de IA do Azure para avaliar, configurar e gerenciar sua conta sem a necessidade de codificação. Quando estiver pronto para desenvolver aplicativos mais complexos, você poderá usar a API do Indexador de Vídeo de IA do Azure para integrar o Indexador de Vídeo de IA do Azure em seus próprios aplicativos, sites ou fluxos de trabalho personalizados usando tecnologias sem servidor, como Aplicativos Lógicos do Azure ou Azure Functions.

Os recursos de Identificação Facial e Reconhecimento de Celebridades do Indexador de Vídeo de IA do Azure são recursos de Acesso Limitado que exigem registro.

Encontre o formulário de registro e mais informações sobre o Acesso Limitado neste artigo.

Além disso, confira o seguinte: a postagem no blog do comunicado e a postagem no blog sobre investimento e proteção do reconhecimento facial.

Não, o Indexador de Vídeo de IA do Azure fornece a integração de vários modelos de aprendizado de máquina em um pipeline. A indexação de um arquivo de vídeo ou áudio por meio do Indexador de Vídeo de IA do Azure recupera um conjunto completo de insights extraídos em uma linha do tempo compartilhada sem nenhuma habilidade de aprendizado de máquina ou conhecimento sobre algoritmos necessários por parte do cliente.

O Indexador de Vídeo de IA do Azure dá suporte aos formatos de mídia mais comuns. Consulte Matriz de suporte e limites de serviço do Indexador de Vídeo de IA do Azure.

No portal baseado na Web do Indexador de Vídeo de IA do Azure, você pode carregar um arquivo de mídia usando a caixa de diálogo de carregamento de arquivo ou apontando para uma URL que hospeda diretamente o arquivo de origem. Qualquer URL que hospeda o conteúdo de mídia usando um iFrame de conteúdo ou código incorporado não funcionará (consulte o exemplo).

Para obter mais informações, consulte este guia de instruções.

No Indexador de Vídeo de IA do Azure, você pode criar um projeto e adicionar vários arquivos para costurar e renderizar como um novo arquivo. O número de arquivos de origem é definido como 10 no site e 100 na API.

A quantidade de tempo que leva para indexar um arquivo de vídeo ou áudio, usando a API do Indexador de Vídeo de IA do Azure e a interface baseada na Web do Indexador de Vídeo de IA do Azure, depende de vários parâmetros, como o comprimento e a qualidade do arquivo, o número de insights encontrados no arquivo, entre outras coisas. É recomendável que você execute alguns arquivos de teste com seu próprio conteúdo e calcule uma média para ter uma ideia melhor.

Sim, você pode integrar o Indexador de Vídeo de IA do Azure em tecnologias sem servidor, como Aplicativos Lógicos, Fluxo e Funções do Azure. Você pode encontrar mais detalhes sobre o Aplicativo Lógico e os conectores de fluxo para o Indexador de Vídeo de IA do Azure aqui. Você pode ver alguns projetos de automação feitos por parceiros no repositório de Exemplos do Indexador de Vídeo de IA do Azure.

Você pode ver quais regiões do Azure Azure AI Video Indexer está disponível na página de regiões .

Sim. No Indexador de Vídeo de IA do Azure, você pode personalizar alguns dos modelos disponíveis para melhor atender às suas necessidades.

Por exemplo, nosso modelo Pessoa dá suporte a rostos prontos para uso de 1 milhão de reconhecimento de celebridade, mas você também pode treiná-lo para reconhecer outras faces que não estão nesse banco de dados.

Para obter detalhes, consulte artigos sobre como personalizar os modelos Pessoa, Marcas e Idioma.

Sim. Pressione o botão Editar vídeo na tela da biblioteca ou o botão Abrir no editor na tela do player para acessar a guia Projetos . Você pode criar um novo projeto e adicionar mais vídeos da sua biblioteca para editá-los juntos, uma vez que você terminar, você pode renderizar seu vídeo e baixar.

Se você quiser obter insights sobre seu novo vídeo, indexe-o com o Indexador de Vídeo de IA do Azure e ele aparecerá em sua biblioteca com seus insights.

Se houver vários fluxos de áudio, o Indexador de Vídeo de IA do Azure pegará o primeiro que encontrar e processará apenas esse fluxo. Em qualquer fluxo de áudio que o Azure AI Video Indexer processe, ele pega os diferentes canais (se houver) e os processa juntos como mono. Para a manipulação de fluxos/canais, você pode usar comandos ffmpeg no arquivo antes de indexá-lo.

Para obter uma descrição detalhada de como alternar para o domínio correto, confira Alternar entre locatários.

Um aplicativo em execução em contêineres Kubernetes habilitados para Arc que pode ser implantado fora do Azure para extrair e consumir insights de áudio de seus arquivos de mídia. Versões futuras também fornecerão insights em vídeo.

O Azure Arc é uma ponte que estende a plataforma Azure para ajudá-lo a criar aplicativos e serviços com a flexibilidade de executar em datacenters, na borda e em ambientes de várias nuvens. Desenvolva aplicativos nativos da nuvem com desenvolvimento, operações e modelos de segurança consistentes.

Para participar da visualização, você precisa de uma assinatura ativa do Azure, uma conexão com o Azure, um ambiente capaz de executar a extensão (consulte [requisitos no início rápido e permissão para ingressar na visualização. Você pode enviar uma solicitação para participar da visualização aqui.

Você pode seguir o início rápido e experimentar cenários automatizados do Kubernetes habilitados para Azure Arc com o Azure Arc Jumpstart.

Durante a instalação da extensão, os contêineres de aprendizado de máquina são baixados para a computação de borda. Alguns desses contêineres podem ter vários gigabytes de tamanho, e o tempo de download dependerá das condições da rede. Em alguns casos, o download pode demorar mais de 15 minutos.

O Video Indexer habilitado pelo Arc requer uma classe de armazenamento configurada com readwritemany. Se uma classe de armazenamento já estiver definida como padrão do cluster durante a instalação, ela será usada. Caso contrário, se você precisar configurar um armazenamento diferente, poderá passá-lo como uma propriedade durante a instalação da extensão.

Sim. A API da extensão Video Indexer está disponível por meio da extensão frontend. Você pode restringir o acesso a um endereço IP ou a um FQDN. Além disso, como toda a comunicação é feita por meio de protocolos de tráfego seguros, recomenda-se usar um certificado de autoridade de certificação válido e definir uma camada de segurança, como NSG ou firewall, para limitar o acesso a esse ponto de extremidade.

Consulte o guia de solução de problemas.

A comunicação entre um aplicativo cliente e uma conta do Indexador de Vídeo de IA do Azure é criptografada usando TLS (Transport Layer Security). O TLS é um protocolo criptográfico padrão que garante a privacidade e a integridade dos dados entre clientes e serviços pela Internet. Para obter mais informações sobre TLS, confira Protocolo TLS. O Video Indexer impõe um mínimo de TLS v1.2. Os clientes não podem controlar os naipes de cifra, vamos escolher a primeira correspondência entre o cliente e o servidor indo de forte para mais fraco.

Sim, a menos que você exclua o arquivo do Indexador de Vídeo de IA do Azure, usando o site ou a API do Indexador de Vídeo de IA do Azure, seus arquivos de vídeo e áudio serão armazenados. Na avaliação, os arquivos de áudio e vídeo que você indexar serão armazenados na região do Azure do Leste dos EUA. Caso contrário, os arquivos de áudio e vídeo são armazenados na conta de armazenamento de sua assinatura do Azure.

Por padrão, seus dados são replicados para a região emparelhada na qual você implantou a instância do Indexador de Vídeo de IA do Azure. Para a região com requisitos de residência de dados, os seus dados são sempre mantidos dentro da mesma região. Para obter mais informações relacionadas, confira outras Questões de Privacidade nesta seção.

Sim, você sempre pode excluir seus arquivos de vídeo e áudio, bem como quaisquer metadados e insights extraídos deles pelo Indexador de Vídeo de IA do Azure. Depois de excluir um arquivo do Indexador de Vídeo de IA do Azure, o arquivo e seus metadados e insights são removidos permanentemente do Indexador de Vídeo de IA do Azure. No entanto, se você implementou sua própria solução de backup no armazenamento do Azure, o arquivo permanece no seu armazenamento do Azure.

Sim, somente os administradores de contas podem convidar e desconvidar pessoas para suas contas, bem como atribuir quem tem privilégios de edição e quem tem acesso somente para leitura.

O conteúdo de seus vídeos ou áudios cuja configuração de privacidade seja pública pode ser acessado por qualquer pessoa que tenha o link para esse conteúdo e seus insights. O conteúdo de seus vídeos e áudios cuja configuração de privacidade seja privada pode ser acessado apenas pelos usuários que foram convidados para a conta desse conteúdo. A configuração de privacidade do seu conteúdo também se aplica aos metadados e insights que o Indexador de Vídeo de IA do Azure extrai. A configuração de privacidade é atribuída quando você carrega o arquivo de vídeo ou áudio. É possível também alterar a configuração de privacidade após a indexação.

De acordo com os Termos do Azure Online Services (OST), você é o proprietário completo do seu conteúdo, e a Microsoft só acessará seu conteúdo e os metadados e insights que o Indexador de Vídeo de IA do Azure extrai do seu conteúdo de acordo com o OST e a Declaração de Privacidade da Microsoft.

Não, os modelos personalizados que você cria em sua conta não estão disponíveis para nenhuma outra conta. Atualmente, o Indexador de Vídeo de IA do Azure permite que você crie marcas, idiomas e modelos de pessoa personalizados em sua conta. Esses modelos só estão disponíveis na conta em que você criou os modelos.

Sim, o conteúdo e os insights são mantidos na região do Azure (exceto para as regiões de Singapura e Sul do Brasil), a menos que você tenha uma configuração manual na sua assinatura do Azure que usa várias regiões do Azure.

Os dados do cliente em uma região são replicados por motivos de BCDR para a região emparelhada.

O Indexador de Vídeo de IA do Azure é coberto pela Política de Privacidade da Microsoft. A política de privacidade explica os dados pessoais que a Microsoft processa, como a Microsoft os processa e para qual finalidade. Para saber mais sobre privacidade, consulte a Central de Confiabilidade da Microsoft.

O Azure AI Video Indexer atualmente tem a certificação SOC. Para revisar a certificação do Indexador de Vídeo de IA do Azure, consulte a Central de Confiabilidade da Microsoft.

Quando os vídeos são carregados no Indexador de Vídeo de IA do Azure, você pode escolher entre duas configurações de privacidade: privada e pública. Os vídeos públicos podem ser acessados por qualquer pessoa, incluindo usuários anônimos e não identificados. Os tipos privados são restritos exclusivamente aos membros da conta.

Ao carregar um vídeo no Indexador de Vídeo de IA do Azure, uma análise automática de conteúdo é feita por algoritmos e modelos para garantir que nenhum conteúdo impróprio seja apresentado publicamente. Se um vídeo for considerado suspeito em relação a conteúdo explícito, não será possível defini-lo como público. No entanto, os membros da conta ainda podem acessá-lo como um vídeo privado (exibi-lo, baixar as informações e artefatos extraídos e executar outras operações disponíveis para membros da conta).

Para definir o vídeo para acesso público, você pode:

• Crie sua própria camada de interface (como aplicativo ou site) e use-a para interagir com o serviço Indexador de Vídeo de IA do Azure. Dessa forma, o vídeo permanece privado em nosso site e seus usuários podem interagir com ele por meio de sua interface. Por exemplo, você ainda pode obter informações ou permitir a exibição do vídeo em sua própria interface.

• Solicite uma revisão humana do conteúdo, o que resultaria na remoção da restrição, supondo que o conteúdo não seja explícito.

  Essa opção pode ser explorada se o site do Indexador de Vídeo de IA do Azure for usado diretamente pelos usuários como a camada de interface e para exibição pública (não autenticada).

As APIs do Azure AI Video Indexer permitem indexação, extração de metadados, gerenciamento de ativos, tradução, incorporação, personalização de modelos e muito mais. Para encontrar informações mais detalhadas sobre como usar a API do Indexador de Vídeo de IA do Azure, consulte o portal do desenvolvedor do Indexador de Vídeo de IA do Azure.

Atualmente, não é oferecido nenhum SDK de cliente. A equipe do Indexador de Vídeo de IA do Azure está trabalhando nos SDKs e planeja entregá-los em breve.

Siga o tutorial: introdução à API do Indexador de Vídeo de IA do Azure.

A API do Indexador de Vídeo de IA do Azure contém uma API de Autorização e uma API de Operações. A API de autorizações contém as chamadas que lhe dão o token de acesso. Cada chamada para a API de operações deve estar associada a um token de acesso, correspondendo ao escopo de autorização da chamada.

Os tokens de acesso são necessários para usar as APIs do Indexador de Vídeo de IA do Azure para fins de segurança. Isso garante que todas as chamadas são provenientes de você ou daqueles que têm permissões de acesso à sua conta.

• Nível da conta - os tokens de acesso no nível da conta permitem que você execute operações no nível da conta ou no nível do vídeo. Por exemplo, carregar o vídeo, listar todos os vídeos, obter insights de vídeo.
• Nível de usuário - os tokens de acesso no nível do usuário permitem que você execute operações no nível do usuário. Por exemplo, obter contas associadas.
• Nível de vídeo - os tokens de acesso ao nível de vídeo permitem que você realize operações em um vídeo específico. Por exemplo, obtenha informações sobre vídeos, faça o download de legendas, obtenha widgets etc.

Os tokens de acesso expiram a cada hora, portanto, você precisa gerar um novo token de acesso a cada hora.

Confira uma nota de versão sobre informações de logon.

Depois de registrar sua conta de email usando um provedor de identidade, você não poderá usar essa conta de email com outro provedor de identidade.

Eles são armazenados pelo serviço Azure AI Video Indexer e podem ser obtidos com as APIs Get Video Index e Get Video Artifact Download Url .

Não há cobranças adicionais do Indexador de Vídeo de IA do Azure para chamar a API.

O Indexador de Vídeo de IA do Azure usa um modelo de preços simples de pagamento conforme o uso com base na duração da entrada de conteúdo que você indexa. Encargos adicionais podem ser aplicáveis para codificação, streaming, armazenamento, uso da rede e unidades reservadas de mídia. Para saber mais, confira a página de preço.

Ao enviar um vídeo a ser indexado, o usuário definirá a indexação como análise de vídeo, análise de áudio ou ambos. Isso determinará quais SKUs serão cobrados. Se houver um erro de nível crítico durante o processamento, um código de erro será retornado como uma resposta. Nesse caso, não ocorre nenhuma cobrança. Um erro crítico pode ser causado por um bug em nosso código ou uma falha crítica em uma dependência interna que o serviço tem. Erros como identificação incorreta ou extração de insight não são considerados críticos e uma resposta é retornada. Em qualquer caso em que uma resposta válida (sem código de erro) for retornada, a cobrança ocorrerá.

Sim, o Indexador de Vídeo de IA do Azure oferece uma conta de avaliação que fornece 2.400 minutos de indexação gratuitos ao usar o site do Indexador de Vídeo de IA do Azure ou a API do Indexador de Vídeo de IA do Azure (consulte o portal do desenvolvedor).

Envie uma explicação detalhada do seu pedido para "Suporte ao Cliente do Video Indexer". visupport@microsoft.com Incluindo: modelo de IA ao qual você está se referindo, o resultado que você gostaria de excluir, o motivo pelo qual devemos optar por não participar dos resultados e uma explicação de por que você está perguntando isso.

O processamento da solicitação pode levar algumas semanas.