Häufig gestellte Fragen zum Azure AI Video Indexer

Azure AI Video Indexer ist eine Cloudanwendung, teil von Azure AI-Diensten, mit der Sie die Einblicke aus Ihren Videos mithilfe von Azure AI Video Indexer-Video- und Audiomodellen extrahieren können. Weitere Informationen finden Sie in der Übersicht.

Zu den Vorgängen, die azure AI Video Indexer für Mediendateien ausführen kann, gehören:

• Identifizieren und Extrahieren von Sprache und Identifizieren von Sprechern
• Identifizieren und Extrahieren von Text auf dem Bildschirm in Videos
• Erkennen von Objekten in Videodateien
• Identifizieren Sie Marken (z. B. Microsoft) aus Audiospuren und Bildschirmtext in einem Video.
• Erfassen und Erkennen von Gesichtern aus einer Prominentendatenbank und einer benutzerdefinierten Datenbank mit Gesichtern
• Extrahieren von Themen, die in Audio- und Videoinhalten behandelt, aber nicht unbedingt erwähnt werden
• Erstellen von Untertiteln aus Audiospuren

Weitere Informationen und weitere Azure AI Video Indexer-Features finden Sie in der Übersicht.

Azure AI Video Indexer enthält ein Testangebot, das Ihnen 2.400 kostenlose Indizierungsminuten bietet, wenn Sie die Azure AI Video Indexer-Website oder die Azure AI Video Indexer-API verwenden (siehe Entwicklerportal).

Um Videos und Audio-Fliegen im Großen zu indizieren, können Sie Azure AI Video Indexer mit einem kostenpflichtigen Microsoft Azure-Abonnement verbinden. Weitere Preisinformationen finden Sie auf der Seite mit der Preisübersicht.

Weitere Informationen zu den ersten Schritten finden Sie unter Erste Schritte.

Sie können die webbasierte Azure AI Video Indexer-Schnittstelle verwenden, um Ihr Konto auszuwerten, zu konfigurieren und zu verwalten, ohne dass Codierung erforderlich ist. Wenn Sie bereit sind, komplexere Anwendungen zu entwickeln, können Sie die Azure AI Video Indexer-API verwenden, um Azure AI Video Indexer in Ihre eigenen Anwendungen, Websites oder benutzerdefinierten Workflows mit serverlosen Technologien wie Azure Logic Apps oder Azure Functions zu integrieren.

Gesichtserkennungs- und Prominentenerkennungsfeatures von Azure AI Video Indexer sind eingeschränkte Zugriffsfunktionen, die eine Registrierung erfordern.

Das Registrierungsformular und weitere Informationen zu eingeschränktem Zugriff finden Sie in diesem Artikel.

Beachten Sie bitte auch den Ankündigungsblogbeitrag und den Blogbeitrag zu Investitionen und Schutzvorrichtungen für die Gesichtserkennung.

Nein, Azure AI Video Indexer bietet die Integration mehrerer Machine Learning-Modelle in eine Pipeline. Durch das Indizieren einer Video- oder Audiodatei über azure AI Video Indexer wird eine vollständige Sammlung von Erkenntnissen abgerufen, die auf einer freigegebenen Zeitleiste extrahiert wurden, ohne dass maschinelles Lernen oder Wissen zu Algorithmen erforderlich ist.

Azure AI Video Indexer unterstützt die häufigsten Medienformate. Siehe Azure AI Video Indexer-Unterstützungsmatrix und Dienstgrenzwerte.

Im webbasierten Azure AI Video Indexer-Portal können Sie eine Mediendatei mithilfe des Dialogfelds "Dateiupload" hochladen oder auf eine URL verweisen, die die Quelldatei direkt hosten soll. URLs, die Medieninhalte mithilfe eines iFrames oder Einbindungscodes hosten, funktionieren nicht (siehe Beispiel).

Weitere Informationen finden Sie in dieser ausführlichen Anleitung.

In Azure AI Video Indexer können Sie ein Projekt erstellen und mehrere Dateien hinzufügen, um sie als neue Datei zu erstellen und zu rendern. Die Anzahl der Quelldateien ist auf 10 auf der Website und 100 in der API festgelegt.

Der Zeitaufwand für die Indizierung einer Video- oder Audiodatei, sowohl mithilfe der Azure AI Video Indexer-API als auch der webbasierten Azure AI Video Indexer-Schnittstelle, hängt von mehreren Parametern wie der Dateilänge und -qualität ab, der Anzahl der Erkenntnisse in der Datei, unter anderem. Es wird ein Testlauf mit mehreren Dateien Ihrer eigenen Inhalte empfohlen, um die durchschnittliche Dauer einschätzen zu können.

Ja, Sie können Azure AI Video Indexer in serverlose Technologien wie Logic Apps, Flow und Azure Functions integrieren. Weitere Details zu den Logic App - und Flow-Connectors für Azure AI Video Indexer finden Sie hier. Sie können einige Automatisierungsprojekte sehen, die von Partnern im Azure AI Video Indexer Samples-Repository durchgeführt werden.

Sie können sehen, welche Azure-Regionen Azure AI Video Indexer auf der Regionsseite verfügbar ist.

Ja. In Azure AI Video Indexer können Sie einige der verfügbaren Modelle an Ihre Anforderungen anpassen.

Unser Modell für Personen beispielsweise unterstützt von vorneherein 1.000.000 Gesichter von Prominenten, Sie können es aber auch trainieren, sodass weitere Gesichter erkannt werden, die sich nicht in dieser Datenbank befinden.

Details dazu finden Sie in den Artikeln zum Anpassen der Modelle für Personen, Marken und Sprache.

Ja. Drücken Sie die Schaltfläche "Video bearbeiten" aus der Bibliotheksanzeige oder die Schaltfläche "Im Editor öffnen" aus der Playeranzeige, um zur Registerkarte "Projekte" zu gelangen. Sie können ein neues Projekt erstellen und weitere Videos aus Ihrer Bibliothek hinzufügen, um sie zusammen zu bearbeiten, sobald Sie fertig sind, können Sie Ihr Video rendern und herunterladen.

Wenn Sie Einblicke in Ihr neues Video erhalten möchten, indizieren Sie es mit Azure AI Video Indexer, und es wird in Ihrer Bibliothek mit seinen Erkenntnissen angezeigt.

Wenn mehrere Audiodatenströme vorhanden sind, verwendet Azure AI Video Indexer den ersten, der gefunden wird, und verarbeitet nur diesen Datenstrom. In jedem Audiodatenstrom verarbeitet Azure AI Video Indexer die verschiedenen Kanäle (sofern vorhanden) und verarbeitet sie als Mono. Zur Bearbeitung von Datenströmen/Kanälen können Sie vor der Indizierung ffmpeg-Befehle auf die Datei anwenden.

Eine ausführliche Beschreibung zum Wechseln zur richtigen Domäne finden Sie unter Wechseln zwischen mehreren Mandanten.

Eine Anwendung, die in Arc-fähigen Kubernetes-Containern ausgeführt wird, die außerhalb von Azure bereitgestellt werden können, um Audioerkenntnisse aus Ihren Mediendateien zu extrahieren und zu nutzen. Zukünftige Versionen werden auch Videoeinblicke liefern.

Azure Arc ist eine Brücke, die die Azure-Plattform erweitert, um Ihnen bei der Erstellung von Anwendungen und Diensten mit der Flexibilität bei der Ausführung in Rechenzentren, am Edge und in Multi-Cloud-Umgebungen zu helfen. Entwickeln Sie cloudeigene Anwendungen mit konsistenten Entwicklungs-, Betriebs- und Sicherheitsmodellen.

Um an der Vorschau teilzunehmen, benötigen Sie ein aktives Azure-Abonnement, eine Verbindung mit Azure, eine Umgebung, die die Erweiterung ausführen kann (siehe [Anforderungen in der Schnellstartanleitung und Die Berechtigung zum Beitreten zur Vorschau). Sie können hier eine Anfrage zur Teilnahme an der Vorschau übermitteln.

Sie können entweder den Schnellstart und die Erfahrung mit Azure Arc-fähigen Kubernetes automatisierten Szenarien mit Azure Arc Jumpstart folgen.

Während der Installation der Erweiterung werden Machine Learning-Container auf die Edge-Compute heruntergeladen. Einige dieser Container können mehrere Gigabyte groß sein, und die Downloadzeit hängt von den Netzwerkbedingungen ab. In einigen Fällen kann der Download länger als 15 Minuten dauern.

Der von Arc aktivierte Videoindexer erfordert eine Speicherklasse, die mit "readwritemany" konfiguriert ist. Wenn eine Speicherklasse bereits während der Installation als Standard für den Cluster festgelegt ist, wird sie verwendet. Andernfalls können Sie ihn während der Erweiterungsinstallation als Eigenschaft übergeben, wenn Sie einen anderen Speicher konfigurieren müssen.

Ja. Die API der VideoIndexer-Erweiterung ist über die Frontend-Erweiterung verfügbar. Sie können den Zugriff auf eine IP-Adresse oder einen FQDN einschränken. Da die gesamte Kommunikation über sichere Datenverkehrsprotokolle erfolgt, wird die Verwendung eines gültigen Zertifizierungsstellenzertifikats und das Festlegen einer Sicherheitsebene wie NSG oder Firewall empfohlen, um den Zugriff auf diesen Endpunkt zu beschränken.

Weitere Informationen finden Sie im Handbuch zur Problembehandlung.

Die Kommunikation zwischen einer Clientanwendung und einem Azure AI Video Indexer-Konto wird mit Transport Layer Security (TLS) verschlüsselt. Die TLS ist ein kryptografisches Standardprotokoll, mit dem Datenschutz und Datenintegrität zwischen Clients und Diensten über das Internet sichergestellt werden. Weitere Informationen zur TLS finden Sie unter Transport Layer Security. Der Videoindexer erzwingt mindestens TLS v1.2. Kunden können die Chiffre nicht steuern, wir wählen die erste Übereinstimmung zwischen dem Client und dem Server aus, die von stark zu schwächer gehen.

Ja, es sei denn, Sie löschen die Datei aus Azure AI Video Indexer, entweder mithilfe der Azure AI Video Indexer-Website oder API, Ihre Video- und Audiodateien werden gespeichert. Bei der Testversion werden die Video- und Audiodateien, die Sie indizieren, in der Azure-Region „USA, Osten“ gespeichert. Andernfalls werden Ihre Video- und Audiodateien im Speicherkonto für Ihr Azure-Abonnement gespeichert.

Standardmäßig werden Ihre Daten in den gekoppelten Bereich repliziert, in dem Sie die Azure AI Video Indexer-Instanz bereitgestellt haben. Bei Regionen mit Anforderungen an die Datenresidenz werden Ihre Daten immer in derselben Region aufbewahrt. Weitere verwandte Informationen finden Sie in diesem Abschnitt zu weiteren Datenschutzfragen.

Ja, Sie können Ihre Video- und Audiodateien sowie alle Metadaten und Erkenntnisse, die von Azure AI Video Indexer extrahiert wurden, jederzeit löschen. Nachdem Sie eine Datei aus Azure AI Video Indexer gelöscht haben, werden die Datei und die zugehörigen Metadaten und Einblicke dauerhaft aus azure AI Video Indexer entfernt. Wenn Sie jedoch eine eigene Sicherungslösung im Azure-Speicher implementiert haben, verbleibt die Datei in Ihrem Azure-Speicher.

Ja, nur Kontoadministratoren können Personen für ihre jeweiligen Konten ein- und ausladen sowie Bearbeitungsrechte und schreibgeschützten Zugriff zuweisen.

Auf Ihre Video- oder Audioinhalte mit der Datenschutzeinstellung „Öffentlich“ kann jeder zugreifen, der über den Link zu Ihren Video- oder Audioinhalten und den zugehörigen Erkenntnissen verfügt. Auf Video- oder Audioinhalte mit der Datenschutzeinstellung „Privat“ können nur Benutzer zugreifen, die dazu eingeladen wurden. Die Datenschutzeinstellung Ihrer Inhalte gilt auch für die Metadaten und Einblicke, die Azure AI Video Indexer extrahiert. Die Datenschutzeinstellung wird beim Hochladen Ihrer Video- oder Audiodatei festgelegt. Sie können die Datenschutzeinstellung auch nach der Indizierung ändern.

Gemäß den Azure Online Services-Bedingungen (OST) besitzen Sie Ihre Inhalte vollständig, und Microsoft greift nur auf Ihre Inhalte und die Metadaten und Erkenntnisse zu, die Azure AI Video Indexer aus Ihren Inhalten gemäß ost und der Microsoft-Datenschutzerklärung extrahiert.

Nein, die benutzerdefinierten Modelle, die Sie in Ihrem Konto erstellen, stehen keinem anderen Konto zur Verfügung. Azure AI Video Indexer ermöglicht es Ihnen derzeit, benutzerdefinierte Marken, Sprache und Personenmodelle in Ihrem Konto zu erstellen. Diese Modelle stehen nur in dem Konto zur Verfügung, in dem Sie sie erstellt haben.

Ja, der Inhalt und die gewonnenen Informationen befinden sich weiterhin in der entsprechenden Azure-Region (mit Ausnahme von „Singapur“ und „Brasilien, Süden“). Eine Ausnahme stellt die manuelle Konfiguration, die mehrere Azure-Regionen verwendet, im Azure-Abonnement dar.

Kundendaten in einer Region werden aus BCDR-Gründen in die gekoppelte Region repliziert.

Der Azure AI Video Indexer wird von den Microsoft-Datenschutzbestimmungen abgedeckt. Die Datenschutzerklärung erläutert die von Microsoft verarbeiteten personenbezogenen Daten sowie die Art und die Zwecke der Verarbeitung dieser Daten durch Microsoft. Weitere Informationen zum Datenschutz finden Sie im Microsoft Trust Center.

Azure AI Video Indexer verfügt derzeit über die SOC-Zertifizierung. Informationen zur Überprüfung der Zertifizierung von Azure AI Video Indexer finden Sie im Microsoft Trust Center.

Wenn Videos in azure AI Video Indexer hochgeladen werden, können Sie aus zwei Datenschutzeinstellungen wählen: privat und öffentlich. Öffentliche Videos sind für alle zugänglich, einschließlich anonymer und nicht identifizierter Benutzer. Private Videos sind ausschließlich auf Mitglieder des Kontos beschränkt.

Beim Hochladen eines Videos in den Azure AI Video Indexer erfolgt eine automatische Inhaltsanalyse durch Algorithmen und Modelle, um sicherzustellen, dass keine unangemessenen Inhalte öffentlich präsentiert werden. Wenn ein Video als möglicherweise anstößig eingestuft wird, kann es nicht als „öffentlich“ festgelegt werden. Die Mitglieder des Kontos können jedoch weiterhin als privates Video darauf zugreifen (anzeigen, Erkenntnisse und extrahierte Artefakte herunterladen und andere Vorgänge ausführen, die Kontomitgliedern zur Verfügung stehen).

Um ein Video für den öffentlichen Zugriff festzulegen, haben Sie folgende Möglichkeiten:

• Erstellen Sie Ihre eigene Schnittstellenebene (z. B. App oder Website), und verwenden Sie sie, um mit dem Azure AI Video Indexer-Dienst zu interagieren. Auf diese Weise bleibt das Video auf unserer Website privat, und Ihre Benutzer können über Ihre Schnittstelle damit interagieren. In Ihrer Schnittstelle können Sie beispielsweise weiterhin Erkenntnisse abrufen oder die Anzeige des Videos zulassen.

• Fordern Sie die Überprüfung des Inhalts durch eine Person an. Unter der Voraussetzung, dass der Inhalt tatsächlich nicht anstößig ist, führt dies zur Aufhebung der Einschränkung.

  Diese Option kann untersucht werden, wenn die Azure AI Video Indexer-Website direkt von Ihren Benutzern als Schnittstellenebene und für die öffentliche (nicht authentifizierte) Anzeige verwendet wird.

Die APIs von Azure AI Video Indexer ermöglichen das Indizieren, Extrahieren von Metadaten, Die Ressourcenverwaltung, Übersetzung, Einbettung, Anpassung von Modellen und vieles mehr. Ausführlichere Informationen zur Verwendung der Azure AI Video Indexer-API finden Sie im Azure AI Video Indexer-Entwicklerportal.

Derzeit werden keine Client-SDKs angeboten. Das Azure AI Video Indexer-Team arbeitet an den SDKs und plant, sie bald bereitzustellen.

Folgen Sie dem Lernprogramm: Erste Schritte mit der Azure AI Video Indexer-API.

Die Azure AI Video Indexer-API enthält eine Autorisierungs-API und eine Operations-API. Die Autorisierungs-API enthält Aufrufe, über die Sie Zugriffstoken erhalten. Jeder Aufruf der Operations-API sollte einem Zugriffstoken zugeordnet sein und mit dem Autorisierungsbereich des Aufrufs übereinstimmen.

Zugriffstoken sind erforderlich, um die Azure AI Video Indexer-APIs für Sicherheitszwecke zu verwenden. Dadurch wird sichergestellt, dass alle Aufrufe von Ihnen oder zugriffsberechtigten Personen auf Ihr Konto stammen.

• Kontoebene: Mit Zugriffstoken auf Kontoebene können Sie Vorgänge auf der Kontoebene oder der Videoebene durchführen. Beispiele dafür sind das Hochladen von Videos, Auflisten aller Videos, Abrufen von Videoinformationen usw.
• Benutzerebene: Mit Zugriffstoken auf Benutzerebene können Sie Vorgänge auf der Benutzerebene durchführen. Ein Beispiel hierfür ist das Abrufen von zugeordneten Konten.
• Videoebene: Mit Zugriffstoken auf Videoebene können Sie Vorgänge für ein bestimmtes Video durchführen. Beispiele hierfür sind das Abrufen von Videoinformationen, Herunterladen von Untertiteln, Abrufen von Widgets usw.

Zugriffstoken laufen nach einer Stunde ab. Daher müssen Sie einmal pro Stunde ein neues Zugriffstoken generieren.

Informationen zu Anmeldeinformationen finden Sie in den Versionshinweisen.

Nachdem Sie Ihr E-Mail-Konto mithilfe eines Identitätsanbieters registriert haben, können Sie das betreffende E-Mail-Konto nicht mehr mit einem anderen Identitätsanbieter verwenden.

Sie werden vom Azure AI Video Indexer-Dienst gespeichert und können mit den APIs zum Herunterladenvon Videoartefakten abgerufen werden.

Es gibt keine zusätzlichen Gebühren von Azure AI Video Indexer zum Aufrufen der API.

Azure AI Video Indexer verwendet ein einfaches Pay-as-You-Go-Preismodell basierend auf der Dauer der Inhaltseingabe, die Sie indiziert haben. Zusätzliche Gebühren können für Codierung, Streaming, Speicher, Netzwerknutzung und reservierte Einheiten für Medien anfallen. Weitere Informationen hierzu finden Sie in der Preisübersicht.

Beim Senden eines Videos, das indiziert werden soll, definiert der Benutzer die gewünschte Indizierung als Videoanalyse, als Audioanalyse oder beides. Dadurch wird bestimmt, welche SKUs in Rechnung gestellt werden. Wenn während der Verarbeitung ein schwerwiegender Fehler auftritt, wird als Antwort darauf ein Fehlercode zurückgegeben. In solch einem Fall erfolgt keine Abrechnung. Ein schwerwiegender Fehler kann durch einen Fehler in unserem Code oder durch einen kritischen Fehler in einer internen Abhängigkeit des Diensts verursacht werden. Fehler wie falsche Identifizierung oder Erkenntnisextraktion gelten nicht als schwerwiegend, und es wird eine Antwort zurückgegeben. In jedem Fall, in dem eine gültige Antwort (ohne Fehlercode) zurückgegeben wird, erfolgt eine Abrechnung.

Ja, Azure AI Video Indexer bietet ein Testkonto, das Ihnen 2.400 kostenlose Indizierungsminuten bietet, wenn Sie die Azure AI Video Indexer-Website oder die Azure AI Video Indexer-API verwenden (siehe Entwicklerportal).

Senden Sie eine detaillierte Erläuterung Ihrer Anfrage an "Video Indexer Customer Support" visupport@microsoft.com. Einschließlich: KI-Modell, auf das Sie verweisen, das Ergebnis, auf das Sie sich abmelden möchten, der Grund, warum wir die Ergebnisse ablehnen sollten, und eine Erklärung, warum Sie dies fragen.

Die Verarbeitung der Anforderung kann einige Wochen dauern.