Arbeta med ostrukturerade data

Lagra, styr och bearbeta ostrukturerade filer, såsom dokument, bilder, ljud och video, tillsammans med strukturerad data i Unity Catalog.

Get started

Prova ett exempel från början till slut för att se hur bitarna passar ihop.

Guide Beskrivning
FILE-funktionen snabbstart Skapa en tabell med en FILE kolumn och arbeta med filer med funktioner FILE .
Handledning för ostrukturerad data Lagra, förfråga, bearbeta och dela ostrukturerade filer med hjälp av Unity Catalog-volymer.

Lagra och referensfiler

Välj hur du ska lagra och referera filer baserat på om du kommer åt dem via sökväg eller som värden i en tabell.

Approach Beskrivning
Unity Catalog-volymer Styr lagringen för filer som inte är tabellar. Ladda upp, organisera och kom åt filer i en volym via sökväg.
FILTYP Referensfiler och deras metadata som förstaklassvärden i en tabell, styrda av åtkomst till raderna som refererar till dem. För typdefinitionen, se FIL-typreferensen.
Binära datakälla Spara råbytena i en fil i en BINARY kolumn.
Bilddatakälla Läs bildfiler in i en DataFrame.

Processfiler

Efter att du har lagrat dina filer i Unity-katalogen, extrahera innehåll, kör anpassad kod och bygg pipelines.

Task Beskrivning
Analysdokument Extrahera strukturerat innehåll från dokument med ai_parse_document andra AI-funktioner.
Processa filer med UDF:er Läs filmetadata och bytes, och generera nya filer med egen kod i UDF.
Inmata filer som FILE-referenser Ladda filer i tabeller som FILE referenser.
Skapa ett filflöde Bearbeta filer hela vägen i en och samma pipeline.
Sök filer i en volym Indexera filerna i en volym så att användare och agenter kan söka i dem.

Hantera filer

Kontrollera vem som kan komma åt filer och hantera deras livscykel med Unity Catalog.

Capability Beskrivning
Volymåtkomstkontroll Bevilja behörigheter för volymer för att kontrollera vem som kan läsa och skriva filer utifrån sökväg.
filhanterad livscykel Låt Azure Databricks hantera lagring och livscykel för de filer som en tabell refererar till.
Radfilter på FILE-kolumner Begränsa åtkomsten till filer genom att applicera radfilter på de rader som refererar till dem.