Membuat layanan tertaut untuk Azure Databricks

  • 5 menit

Untuk menjalankan notebook di ruang kerja Azure Databricks, alur Azure Data Factory harus dapat tersambung ke ruang kerja; yang membutuhkan autentikasi. Untuk mengaktifkan koneksi yang diautentikasi, Anda harus melakukan dua tugas konfigurasi:

  1. Membuat token akses untuk ruang kerja Azure Databricks Anda.
  2. Membuat layanan tertaut di sumber daya Azure Data Factory yang menggunakan token akses untuk menyambung ke Azure Databricks.

Membuat token akses

Token akses menyediakan metode autentikasi untuk Azure Databricks sebagai alternatif kredensial dalam bentuk nama pengguna dan kata sandi. Anda dapat membuat token akses untuk aplikasi, menentukan periode kedaluwarsa setelah itu token harus dibuat ulang dan diperbarui di aplikasi klien.

Untuk membuat token Akses, gunakan opsi Hasilkan token baru pada tab Pengembang di halaman Pengaturan Pengguna di portal Azure Databricks.

A screenshot of the Access tokens tab in the User Settings page in the Azure Databricks portal.

Membuat layanan tertaut

Untuk tersambung ke Azure Databricks dari Azure Data Factory, Anda perlu membuat layanan tertaut untuk komputasi Azure Databricks. Anda dapat membuat layanan tertaut di halaman Layanan tertaut di bagian Kelola Azure Data Factory Studio.

A screenshot of the New linked service wizard in Azure Data Factory Studio.

Saat membuat layanan tertaut Azure Databricks, Anda harus menentukan pengaturan konfigurasi berikut:

Pengaturan Deskripsi
Nama Nama unik untuk layanan tertaut
Deskripsi Deskripsi yang baik
Runtime integrasi Runtime integrasi yang digunakan untuk menjalankan aktivitas dalam layanan tertaut ini. Baca Runtime integrasi di Azure Data Factory untuk detail selengkapnya.
Langganan Azure Langganan Azure pada Azure Databricks yang diprovisikan
Ruang kerja Databricks Ruang kerja Azure Databricks
Kluster Kluster Spark tempat kode aktivitas akan dijalankan. Anda dapat membuat Azure Databricks yang secara dinamis memprovisikankluster pekerjaan sesuai permintaan atau Anda dapat menentukan kluster yang ada di ruang kerja.
Jenis autentikasi Cara koneksi tertaut akan diautentikasi oleh Azure Databricks. Misalnya, menggunakan token akses (dalam hal ini, Anda perlu menentukan token akses yang dibuat untuk ruang kerja Anda).
Mengonfigurasi kluster Versi runtime Databricks, versi Python, jenis node pekerja, dan jumlah node pekerja untuk kluster Anda.