Bekerja dengan data tak terstruktur

Menyimpan, mengatur, dan memproses file tidak terstruktur, seperti dokumen, gambar, audio, dan video, bersama data terstruktur di Unity Catalog.

Get started

Coba contoh end-to-end untuk melihat bagaimana potongan-potongan tersebut saling menyatu.

Guide	Description
Fungsi FILE mulai cepat	Buat tabel dengan kolom FILE dan gunakan fungsi FILE untuk bekerja dengan file.
Tutorial tentang data tidak terstruktur	Simpan, kueri, proses, dan bagikan file tidak terstruktur menggunakan volume Unity Catalog.

Menyimpan dan merujuk file

Pilih cara menyimpan dan mereferensikan file berdasarkan apakah Anda mengaksesnya melalui jalur atau sebagai nilai dalam tabel.

Approach	Description
Volume pada Unity Catalog	Kelola penyimpanan untuk file nontabular. Unggah, atur, dan akses file dalam satu volume berdasarkan jalur.
Tipe FILE	File referensi dan metadata terkait sebagai nilai utama dalam tabel, yang ditentukan oleh akses ke baris yang merujuknya. Untuk definisi tipe, lihat referensi tipe FILE.
Sumber data biner	Simpan byte mentah dari sebuah file dalam sebuah BINARY kolom.
Sumber data gambar	Baca file gambar ke dalam DataFrame.

Proses file

Setelah Anda menyimpan file Anda di Unity Catalog, ekstrak konten, jalankan kode kustom, dan bangun pipeline.

Tugas	Description
Mengurai dokumen	Ekstrak konten terstruktur dari dokumen dengan ai_parse_documentdan fungsi AI lainnya.
Proses file dengan UDF	Baca metadata file dan byte, serta buat file baru, menggunakan kode Anda sendiri di UDF.
Memasukkan file sebagai referensi FILE	Muat file ke dalam tabel sebagai referensi FILE.
Buat pipeline berkas	File proses dari ujung ke ujung dalam sebuah pipeline.
Cari berkas dalam volume	Indeks file dalam volume agar pengguna dan agen dapat mencarinya.

Kelola file

Kendalikan siapa yang dapat mengakses file dan mengelola siklus hidupnya dengan Unity Catalog.

Kapabilitas	Description
Kontrol akses volume	Berikan hak istimewa pada volume untuk mengontrol siapa yang dapat membaca dan menulis file berdasarkan jalur.
SIKLUS HIDUP FILE YANG DIKELOLA	Biarkan Azure Databricks mengelola penyimpanan dan siklus hidup file yang dirujuk oleh tabel.
Filter baris pada kolom FILE	Batasi akses ke file dengan menerapkan filter baris pada baris yang mereferensikannya.