Was ist Azure KI Content Understanding (Vorschau)?

Wichtig

• Azure KI Content Understanding ist als Vorschau verfügbar. Öffentliche Vorschauversionen bieten frühzeitigen Zugriff auf Features, die sich in der aktiven Entwicklung befinden.
• Features, Ansätze und Prozesse können sich vor der allgemeinen Verfügbarkeit (General Availability, GA) noch ändern oder eine eingeschränkte Funktionalität aufweisen.
• Weitere Informationen finden Sie in den ergänzenden Nutzungsbedingungen für Microsoft Azure-Vorschauversionen.

Azure KI Content Understanding ist ein neuer auf generativer KI basierender Azure KI-Dienst, der für die Verarbeitung/Erfassung von Inhalten beliebiger Typen (Dokumente, Bilder, Videos und Audio) in einem benutzerdefinierten Ausgabeformat entwickelt wurde.

Content Understanding bietet einen optimierten Prozess, um große Mengen unstrukturierter Daten zu analysieren. Dadurch wird die Amortisationszeit verkürzt, indem eine Ausgabe generiert wird, die in Automatisierungs- und Analyseworkflows integriert werden kann.

Gründe für die Verarbeitung mit Content Understanding

• Vereinfachen und Optimieren von Workflows. Azure KI Content Understanding standardisiert die Extraktion von Inhalten, Strukturen und Erkenntnissen aus verschiedenen Inhaltstypen in einem einheitlichen Prozess.

• Vereinfachen der Feldextraktion. Die Feldextraktion von Content Understanding vereinfacht das Generieren einer strukturierten Ausgabe aus unstrukturierten Inhalten. Definieren Sie ein Schema zum Extrahieren, Klassifizieren oder Generieren von Feldwerten ohne komplexes Prompt-Engineering.

• Verbessern der Genauigkeit. Content Understanding verwendet mehrere KI-Modelle, um für Informationen gleichzeitig Analysen und Kreuzvalidierungen durchzuführen, was zu genaueren und zuverlässigeren Ergebnissen führt.

• Konfidenzbewertungen und Grounding. Content Understanding stellt die Genauigkeit extrahierter Werte sicher und minimiert gleichzeitig die Kosten für menschliche Überprüfung.

Anwendungsfälle für Content Understanding

• Automatisierung. Content Understanding unterstützt Automatisierungsszenarien, indem unstrukturierte Inhalte in strukturierte Daten konvertiert werden, die in verschiedene Workflows und Anwendungen integriert werden können. Konfidenzbewertungen minimieren die menschliche Überprüfung und senken die Kosten. Automatisieren Sie beispielsweise Beschaffungs- und Zahlungsprozesse, indem Sie Felder aus Rechnungen extrahieren.

• Suchen und Retrieval Augmented Generation (RAG). Content Understanding ermöglicht die Erfassung von Inhalten beliebiger Modalitäten in den Suchindex. Die strukturierte Ausgabedarstellung verbessert die Relevanz für RAG-Szenarien.

• Analysen und Berichte: Die extrahierten Feldausgaben von Content Understanding verbessern Analysen und Berichte, sodass Unternehmen wertvolle Erkenntnisse gewinnen, umfassendere Analysen durchführen und fundierte Entscheidungen basierend auf genauen Berichten treffen können.

Anwendungen

Zu den gängigen Anwendungen für Content Understanding gehören folgende:

Application	Beschreibung	Schnellstart
Analysen nach Anrufen	Unternehmen und Callcenter können Erkenntnisse aus Anrufaufzeichnungen generieren, um wichtige KPIs nachzuverfolgen, die Produkterfahrung zu verbessern, Geschäftsinformationen zu generieren, differenzierte Kundenerfahrungen zu schaffen und Abfragen schneller und genauer zu beantworten.	Schnellstart für Analysen nach Anrufen
Medienobjektverwaltung	Software- und Medienanbieter können Content Understanding verwenden, um für Verwaltungslösungen für Medienobjekte umfangreichere, gezielte Informationen aus Videos zu extrahieren.	Schnellstart für Medienobjektverwaltung
Steuerautomatisierung	Steuerberatungsunternehmen können Content Understanding verwenden, um eine einheitliche Ansicht von Informationen aus verschiedenen Dokumenten zu generieren und umfassende Steuererklärungen zu erstellen.	Schnellstart für Steuerautomatisierung
Diagrammverständnis	Unternehmen können das Diagrammverständnis verbessern, indem sie die Analyse und Interpretation verschiedener Diagrammtypen mithilfe von Content Understanding automatisieren.	Schnellstart für das Diagrammverständnis

Weitere Beispiele finden Sie unter Schnellstart.

Komponenten

Komponente	Beschreibung
Analyzer	Das Analysetool ist die Kernkomponente von Content Understanding. Es ermöglicht Kunden, Einstellungen für die Inhaltsextraktion und das Feldextraktionsschema zu konfigurieren. Nach der Konfiguration wendet das Analysetool diese Einstellungen konsistent an, um alle eingehenden Daten zu verarbeiten.
Inhaltsextraktion	Mit der Inhaltsextraktion können Benutzer die Arten von Informationen angeben, die in eingehenden Inhalten identifiziert und extrahiert werden sollen. Vom Benutzer angegebene Informationen umfassen Optionen wie OCR für Text, Layoutanalysen, Barcodes, Tabellen und vieles mehr. So können Benutzer sich auf die relevantesten Inhaltselemente konzentrieren.
Add-Ons	Content Understanding-Add-Ons verbessern die Inhaltsextraktion, indem hinzugefügte Elemente wie Barcodes, Tabellen und erkannte Gesichter integriert werden.
Feldextraktion	Mit der Feldextraktion können Benutzer die Struktur und das Schema der gewünschten Felder definieren, die aus Eingabedateien extrahiert werden sollen. Eine vollständige Liste der unterstützten Feldtypen finden Sie unter Dienstgrenzwerte. Felder können über eine der folgenden Methoden generiert werden: • Extrahieren: Extrahieren Sie Werte direkt, wie sie im eingegebenen Inhalt angezeigt werden, z. B. Datumsangaben aus Quittungen oder Elementdetails aus Rechnungen. • Klassifizieren: Klassifizieren Sie Inhalte aus einer vordefinierten Gruppe von Kategorien, z. B. Anrufstimmung oder Diagrammtyp. • Generieren: Generieren Sie Werte frei aus Eingabedaten, z. B. Zusammenfassen einer Audiounterhaltung oder Erstellen von Szenenbeschreibungen aus Videos.
Grounding-Quelle	Content Understanding identifiziert die spezifischen Regionen in Inhalten, aus denen der Wert generiert wurde. Die Grounding-Quelle ermöglicht es Benutzern in Automatisierungsszenarien, schnell die Richtigkeit der Feldwerte zu überprüfen, was zu einer höheren Vertrauenswürdigkeit der extrahierten Daten führt.
Genauigkeitsbewertung	Content Understanding bietet Konfidenzbewertungen von 0 bis 1, um die Zuverlässigkeit der Ergebnisse zu schätzen. Hohe Bewertungen deuten auf eine genaue Datenextraktion hin, wodurch die direkte Verarbeitung in Automatisierungsworkflows ermöglicht wird.

Verantwortungsvolle KI

Azure KI Content Understanding wurde entwickelt, um vor der Verarbeitung schädlicher Inhalte wie grafischer Gewalt und Gewaltverherrlichung, Hassreden und Mobbing, Ausbeutung, Missbrauch u. v. m. zu schützen. Weitere Informationen und eine vollständige Liste der verbotenen Inhalte finden Sie in unserem Transparenzhinweis und unseren Verhaltensregeln.

Geänderte Inhaltsfilterung

Azure KI Content Understanding unterstützt jetzt das Deaktivieren der Inhaltsfilterung für genehmigte Kunden. Die Abonnement-IDs mit genehmigten geänderten Inhaltsfiltern wirken sich auf die Ausgabe von Azure KI Content Understanding aus.

Wichtig

• Beantragen Sie geänderte Inhaltsfilter über dieses Formular: Azure OpenAI Limited Access Review: Modified Content Filters.
• Weitere Informationen dazu finden Sie unterInhaltsfilterung.

Datenschutz und Sicherheit

Entwickler, die den Content Understanding-Dienst verwenden, sollten die Richtlinien von Microsoft zu Kundendaten überprüfen. Weitere Informationen finden Sie auf unserer Seite Daten, Schutz und Datenschutzerklärung.

Wichtig

Wenn Sie Microsoft-Produkte oder -Dienste zur Verarbeitung biometrischer Daten verwenden, sind Sie für Folgendes verantwortlich: (i) Unterrichten der betroffenen Personen, auch über die Aufbewahrungsfristen und die Vernichtung; (ii) Einholen der Zustimmung der betroffenen Personen und (iii) Löschen der biometrischen Daten, soweit dies nach den geltenden Datenschutzvorschriften angemessen und erforderlich ist. Der Begriff „Biometrische Daten“ hat die in Artikel 4 der Datenschutz-Grundverordnung (DSGVO) und gegebenenfalls in anderen Datenschutzvorschriften festgelegte Bedeutung. Weitere Informationen finden Sie unter Daten und Datenschutz bei der Gesichtserkennung.

Erste Schritte

Unsere Schnellstartanleitungen helfen Ihnen, schnell mit der Verwendung des Content Understanding-Diensts zu beginnen:

• Schnellstart zum Azure KI Foundry-Portal
• Rest-API – Schnellstart