Menggunakan Katalog Unity dengan Streaming Terstruktur

Gunakan Streaming Terstruktur dengan Unity Catalog untuk mengelola tata kelola data untuk beban kerja inkremental dan streaming Anda di Azure Databricks. Dokumen ini menguraikan fungsionalitas yang didukung dan menyarankan praktik terbaik untuk menggunakan Katalog Unity dan Streaming Terstruktur bersama-sama.

Fungsionalitas Streaming Terstruktur apa yang didukung Oleh Katalog Unity?

Katalog Unity tidak menambahkan batas eksplisit untuk sumber dan sink Streaming Terstruktur yang tersedia di Azure Databricks. Model tata kelola data Unity Catalog memungkinkan Anda melakukan streaming data dari tabel terkelola dan eksternal di Unity Catalog. Anda juga dapat menggunakan lokasi eksternal yang dikelola oleh Unity Catalog untuk berinteraksi dengan data menggunakan URI penyimpanan objek. Anda dapat menulis ke tabel eksternal menggunakan nama tabel atau jalur file. Anda harus berinteraksi dengan tabel terkelola di Unity Catalog menggunakan nama tabel.

Gunakan lokasi eksternal yang dikelola oleh Katalog Unity saat menentukan jalur untuk titik pemeriksaan Streaming Terstruktur. Untuk mempelajari selengkapnya tentang menyambungkan penyimpanan dengan aman dengan Katalog Unity, lihat Koneksi ke penyimpanan objek cloud menggunakan Katalog Unity.

Dukungan fitur streaming terstruktur berbeda tergantung pada versi Databricks Runtime yang Anda jalankan dan apakah Anda menggunakan mode akses kluster yang ditetapkan atau bersama. Untuk detailnya, lihat Batasan streaming untuk Katalog Unity.

Untuk demo end-to-end menggunakan Streaming Terstruktur di Unity Catalog, lihat Tutorial: Menjalankan alur analitik lakehouse end-to-end.

Fungsionalitas Streaming Terstruktur apa yang tidak didukung pada Katalog Unity?

Untuk daftar fitur Streaming Terstruktur yang tidak didukung di Katalog Unity, lihat Batasan streaming untuk Katalog Unity.