Bagikan melalui

Skala manual

  • Artikel

Catatan

Kami akan menghentikan Azure HDInsight di AKS pada 31 Januari 2025. Sebelum 31 Januari 2025, Anda harus memigrasikan beban kerja anda ke Microsoft Fabric atau produk Azure yang setara untuk menghindari penghentian tiba-tiba beban kerja Anda. Kluster yang tersisa pada langganan Anda akan dihentikan dan dihapus dari host.

Hanya dukungan dasar yang akan tersedia hingga tanggal penghentian.

Penting

Fitur ini masih dalam mode pratinjau. Ketentuan Penggunaan Tambahan untuk Pratinjau Microsoft Azure mencakup lebih banyak persyaratan hukum yang berlaku untuk fitur Azure yang dalam versi beta, dalam pratinjau, atau belum dirilis ke ketersediaan umum. Untuk informasi tentang pratinjau khusus ini, lihat Azure HDInsight pada informasi pratinjau AKS. Untuk pertanyaan atau saran fitur, kirimkan permintaan di AskHDInsight dengan detail dan ikuti kami untuk pembaruan lebih lanjut di Komunitas Azure HDInsight.

HDInsight di AKS memberikan elastisitas dengan opsi untuk meningkatkan dan menurunkan skala jumlah node kluster. Elastisitas ini bekerja untuk membantu meningkatkan pemanfaatan sumber daya dan meningkatkan efisiensi biaya.

Utilitas untuk menskalakan kluster

HDInsight di AKS menyediakan metode berikut untuk menskalakan kluster secara manual:

Utilitas Deskripsi
Portal Azure Buka HDInsight Anda di panel kluster AKS, pilih Ukuran kluster di menu sebelah kiri, lalu pada panel Ukuran kluster, ketik jumlah simpul pekerja, dan pilih Simpan
REST API Untuk menskalakan HDInsight yang sedang berjalan pada kluster AKS menggunakan REST API, buat permintaan POST berikutnya pada sumber daya yang sama dengan jumlah yang diperbarui di profil komputasi.

Anda dapat menggunakan portal Azure untuk mengakses menu "Ukuran kluster" di halaman navigasi kluster. Di bilah Ukuran kluster, ubah "Jumlah simpul pekerja," dan simpan perubahan untuk meningkatkan atau menurunkan skala kluster.

Cuplikan layar memperlihatkan UI untuk memilih ukuran kluster dan mengonfigurasi skala manual.

Dampak operasi penskalaan pada kluster

Setiap operasi penskalaan memicu mulai ulang layanan, yang dapat menyebabkan kesalahan pada pekerjaan yang sudah berjalan.

Saat Anda menambahkan simpul ke HDInsight operasional pada kluster AKS (tingkatkan skala):

  • Operasi penskalakan yang berhasil menggunakan skala manual akan menambahkan simpul pekerja ke kluster.
  • Pekerjaan baru dapat dikirimkan dengan aman ketika proses penskalakan selesai.
  • Jika operasi penskalaan gagal, kegagalan meninggalkan kluster Anda dalam status "Gagal".
  • Anda dapat mengharapkan untuk mengalami kegagalan pekerjaan selama operasi penskalakan saat layanan dimulai ulang.

Jika Anda menghapus simpul (menurunkan skala) dari HDInsight pada kluster AKS:

  • Pekerjaan yang tertunda atau berjalan gagal ketika operasi penskalakan selesai. Kegagalan ini terjadi karena beberapa layanan dimulai ulang selama proses penskalaan. Dampak perubahan jumlah node kluster bervariasi untuk setiap jenis kluster.

Penting

  • Untuk menghindari kesalahan kuota selama operasi penskalaan, silakan rencanakan kuota dalam langganan Anda. Jika Anda memiliki kuota yang tidak mencukup, Anda dapat meningkatkan kuota dengan dokumentasi ini.
  • Jika penurunan skala memilih simpul kepala, yang menghosting koordinator/masuk dan layanan lainnya, itu akan mengakibatkan waktu henti.

Pertanyaan Umum

Umum

Pertanyaan Jawaban
Berapa node minimum yang dapat saya tambahkan/hapus selama operasi penskalaan? Satu Simpul.
Berapa banyak simpul yang didukung oleh HDInsight pada kluster AKS? 500 simpul per kluster (dalam pratinjau publik).
Bagaimana cara menurunkan skala kluster saya secara manual? Dalam permintaan ARM, perbarui computeProfile.count atau ikuti langkah-langkah yang disebutkan untuk menurunkan skala menggunakan portal Azure.
Bisakah saya menambahkan tindakan skrip kustom ke kluster selama penskalaan manual? Tindakan skrip berlaku untuk jenis kluster Apache Spark
Bagaimana cara mendapatkan log kegagalan penskalaan manual untuk node kluster? Log tersedia dalam modul Analitik log, lihat Integrasi Azure Monitor.
Apakah autoscaling berbasis beban atau jadwal didukung? Ya. Untuk informasi selengkapnya, lihat Penskalaan otomatis.

Trino

Pertanyaan Jawaban
Apakah layanan Trino saya akan dimulai ulang setelah operasi penskalakan? Ya, layanan dimulai ulang selama operasi penskalakan.
Pertanyaan Jawaban
Apa dampak operasi penskalaan pada kluster Apache Flink? Setiap operasi penskalaan kemungkinan akan memicu mulai ulang layanan, yang menyebabkan kegagalan pekerjaan. Pekerjaan baru dapat dikirimkan ketika proses penskalakan selesai. Di Apache Flink, menurunkan skala pemicu pekerjaan dimulai ulang dan operasi peningkatan skala tidak dapat memicu mulai ulang pekerjaan.

Apache Spark

Pertanyaan Jawaban
Apa dampak operasi penskalaan pada kluster Spark? Operasi penurunan skala manual dapat memicu mulai ulang layanan head node.

Catatan

Disarankan agar Anda mengelola kuota yang ditetapkan pada langganan sebelum operasi penskalakan untuk menghindari kesalahan kuota. Sebelum menurunkan skala, harap dicatat bahwa agar HDInsight pada kluster AKS Trino beroperasi, diperlukan minimal lima simpul aktif.