Bagikan melalui

Apa itu kumpulan Azure Databricks?

  • Artikel

Kumpulan Azure Databricks adalah sekumpulan instans yang menganggur dan siap digunakan. Saat node kluster dibuat menggunakan instans diam, waktu mulai kluster dan penskalan otomatis berkurang. Jika pool tidak memiliki instans diam, pool akan meluas dengan mengalokasikan instans baru dari penyedia instans untuk mengakomodasi permintaan kluster.

Ketika kluster merilis instans, instans kembali ke kumpulan dan bebas untuk digunakan oleh kluster lain. Hanya kluster yang dilampirkan pada kumpulan saja yang dapat menggunakan instans yang tidak aktif dari kumpulan tersebut.

Azure Databricks tidak menagih biaya DBU saat instans tidak aktif di kumpulan. Tagihan penyedia instans tetap berlaku. Lihat harga.

Anda dapat mengelola kumpulan menggunakan UI atau dengan memanggil INSTANCE Pools API.

Buatlah sebuah pool.

Untuk membuat kumpulan, Anda harus memiliki izin untuk membuat kumpulan. Secara default, hanya admin ruang kerja yang memiliki izin pembuatan kumpulan. Grup dapat diberi allow-instance-pool-create hak menggunakan API Grup.

Untuk membuat kumpulan menggunakan UI:

  1. Klik Komputasi ikon komputasi di bilah samping.
  2. Klik tab Kumpulan .
  3. Klik tombol Buat Kumpulan .
  4. Tentukan konfigurasi kumpulan.
  5. Klik tombol Buat.

Melampirkan kluster ke kumpulan

Untuk melampirkan kluster ke kumpulan menggunakan UI pembuatan kluster, pilih kumpulan dari dropdown Jenis Driver atau Jenis Pekerja saat Anda mengonfigurasi kluster. Kumpulan yang tersedia tercantum di bagian atas setiap daftar dropdown. Anda dapat menggunakan kumpulan yang sama atau kumpulan yang berbeda untuk node driver dan node pekerja.

Jika menggunakan Clusters API, Anda harus menentukan driver_instance_pool_id untuk node driver dan instance_pool_id untuk node pekerja.

Untuk praktik terbaik lainnya yang terkait dengan kumpulan, lihat Praktik terbaik kumpulan.

Izin kumpulan

Ada tiga tingkat izin untuk kumpulan: TIDAK ADA IZIN, DAPAT MELAMPIRKAN KE, dan DAPAT MENGELOLA. Tabel berikut berisi daftar kemampuan untuk setiap izin.

Kemampuan TIDAK ADA IZIN DAPAT MELAMPIRKAN KE DAPAT MENGELOLA
Melampirkan kluster ke kumpulan x x
Menghapus kumpulan x
Mengedit kumpulan x
Ubah izin x

Admin ruang kerja memiliki izin CAN MANAGE pada semua kumpulan di ruang kerja mereka. Pengguna secara otomatis memiliki izin CAN MANAGE pada kumpulan yang mereka buat.

Mengonfigurasi izin kumpulan

Bagian ini menjelaskan cara mengelola izin menggunakan UI ruang kerja. Anda juga dapat menggunakan Api Izin atau penyedia Databricks Terraform.

Anda harus memiliki izin CAN MANAGE pada kumpulan untuk mengonfigurasi izin.

  1. Di bilah samping, klik Komputasi.

  2. Klik tab Kumpulan .

  3. Pilih kumpulan yang ingin Anda perbarui.

  4. Klik tombol Izin .

  5. Di Pengaturan Izin, klik menu drop-down Pilih pengguna, grup, atau perwakilan layanan... dan pilih pengguna, grup, atau perwakilan layanan.

    Mengatur izin kumpulan

  6. Pilih izin dari menu drop-down izin.

  7. Klik Tambahkan, lalu klik Simpan.

Menghapus kumpulan

Menghapus kumpulan akan menghentikan instans kumpulan yang tidak aktif dan menghapus konfigurasinya. Untuk menghapus kumpulan, klik Hapus Ikon ikon dalam tindakan di halaman Kumpulan. Jika Anda menghapus kumpulan:

  • Kluster berjalan yang dilampirkan ke kumpulan akan terus berjalan, tetapi tidak dapat mengalokasikan instans selama pengubahan ukuran atau peningkatan skala.
  • Kluster yang dihentikan yang dilampirkan ke kumpulan akan gagal dimulai.

Penting

Anda tidak dapat membatalkan tindakan ini.