Utiliser des données non structurées

Stockez, gouvernez et traitez des fichiers non structurés, tels que des documents, images, audio et vidéo, ainsi que des données structurées dans le catalogue Unity.

Get started

Essayez un exemple de bout en bout pour voir comment les pièces s’emboîtent.

Guide	Description
Démarrage rapide des fonctions FILE	Créez une table avec une colonne FILE et travaillez avec des fichiers à l’aide des fonctions FILE.
Tutoriel sur les données non structurées	Stockez, interrogez, traitez et partagez des fichiers non structurés à l’aide des volumes du catalogue Unity.

Stocker et référer des fichiers

Choisissez comment stocker et référencer les fichiers en fonction de l’accès par chemin ou sous forme de valeurs dans une table.

Approche	Description
Volumes d'Unity Catalog	Régler le stockage pour les fichiers non tabulaires. Téléchargez, organisez et accédez aux fichiers dans un volume par chemin.
Type de fichier	Les fichiers de référence et leurs métadonnées sont des valeurs de première classe dans une table, régies par l’accès aux lignes qui les référencent. Pour la définition du type, voir la référence du type FILE.
Source de données binaire	Stockez les octets bruts d’un fichier dans une BINARY colonne.
Source des données d’image	Lisez des fichiers image dans un DataFrame.

Fichiers de procédé

Après avoir stocké vos fichiers dans le catalogue Unity, extrais le contenu, exécute du code personnalisé et crée des pipelines.

Tâche	Description
Analyse des documents	Extraire du contenu structuré à partir de documents avec ai_parse_document et d’autres fonctions d’IA.
Fichiers de processus avec des UDF	Lisez les métadonnées et octets des fichiers, et générez de nouveaux fichiers en utilisant votre propre code dans les UDF.
Importez des fichiers sous forme de références FILE	Importez des fichiers dans des tableaux en tant que références FILE.
Construire un pipeline de fichiers	Traitez les fichiers de bout en bout au sein d’un pipeline.
Recherche dans un volume	Indexez les fichiers dans un volume afin que les utilisateurs et les agents puissent y rechercher.

Fichiers de gouvernance

Contrôlez qui peut accéder aux fichiers et gérer leur cycle de vie avec Unity Catalog.

Capacité	Description
Contrôle d’accès au volume	Accordez des privilèges sur les volumes pour contrôler qui peut lire et écrire des fichiers par chemin.
CYCLE DE VIE DU FICHIER GÉRÉ	Laissez Azure Databricks gérer le stockage et le cycle de vie des fichiers qu’une table référence.
Filtres de ligne sur les colonnes de type FICHIER	Restreignez l’accès aux fichiers en appliquant des filtres de lignes aux lignes qui les référencent.