Apa saja konfigurasi simpul default dan yang direkomendasikan untuk Azure HDInsight?

Artikel ini membahas konfigurasi simpul default dan yang direkomendasikan untuk kluster Azure HDInsight.

Tabel berikut mencantumkan ukuran komputer virtual (VM) default dan yang direkomendasikan untuk kluster HDInsight. Informasi ini diperlukan untuk memahami ukuran VM yang akan digunakan saat Anda membuat skrip PowerShell atau Azure CLI untuk menyebarkan kluster HDInsight.

Jika Anda membutuhkan lebih dari 32 simpul pekerja dalam kluster, pilih ukuran head node dengan setidaknya 8 core dan RAM 14 GB.

Satu-satunya jenis kluster yang memiliki disk data adalah kluster Kafka dan HBase dengan fitur Accelerated Writes diaktifkan. HDInsight mendukung ukuran disk P30 dan S30 dalam skenario ini. Untuk semua jenis kluster lainnya, HDInsight menyediakan ruang disk terkelola dengan kluster. Mulai 11/07/2019 dan seterusnya, ukuran disk terkelola dari setiap simpul dalam kluster yang baru dibuat adalah 128 GB. Ini tidak dapat diubah.

Spesifikasi semua jenis VM minimum yang direkomendasikan yang digunakan dalam dokumen ini dirangkum dalam tabel berikut.

Size vCPU Ukuran Memori: GiB Penyimpanan sementara (SSD) GiB Maksimal lalu lintas data penyimpanan: IOPS / Baca MBps / Tulis MBps Disk /throughput data maks: IOPS NIC Maks/ Bandwidth jaringan yang diharapkan (Mbps)
Standard_D3_v2 4 14 200 12000 / 187 / 93 16 / 16x500 4 / 3000
Standard_D4_v2 8 28 400 24000 / 375 / 187 32 / 32x500 8 / 6000
Standard_D5_v2 16 56 800 48000 / 750 / 375 64 / 64x500 8 / 12000
Standard_D12_v2 4 28 200 12000 / 187 / 93 16 / 16x500 4 / 3000
Standard_D13_v2 8 56 400 24000 / 375 / 187 32 / 32x500 8 / 6000
Standard_D14_v2 16 112 800 48000 / 750 / 375 64 / 64x500 8 / 12000
Standard_A1_v2 1 2 10 1000 / 20 / 10 2 / 2x500 2 / 250
Standard_A2_v2 2 4 20 2000 / 40 / 20 4 / 4x500 2 / 500
Standard_A4_v2 4 8 40 4000 / 80 / 40 8 / 8x500 4 / 1000

Untuk informasi selengkapnya tentang spesifikasi setiap jenis VM, lihat dokumen berikut ini:

Semua wilayah yang didukung

Note

Untuk mendapatkan pengidentifikasi SKU untuk digunakan di powershell dan skrip lainnya, tambahkan Standard_ ke awal semua SKU VM dalam tabel di bawah ini. Misalnya, D12_v2 akan menjadi Standard_D12_v2.

Jenis kluster Hadoop HBase Interactive Query Spark Kafka
Head: ukuran VM default E4_v3 E4_v3 D13_v2 E8_v3,
D13_v2*
E4_v3
Head: ukuran VM minimum yang direkomendasikan D5_v2 D3_v2 D13_v2 D12_v2,
D13_v2*
D3_v2
Pekerja: ukuran VM default E8_v3 E4_v3 D14_v2 E8_v3 4 E4_v3 dengan 2 disk S30 per broker
Pekerja: ukuran VM minimum yang direkomendasikan D5_v2 D3_v2 D13_v2 D12_v2 D3_v2
ZooKeeper: ukuran VM default A4_v2 A4_v2 A4_v2
ZooKeeper: ukuran VM minimum yang direkomendasikan A4_v2 A4_v2 A4_v2

* = Ukuran VM untuk kluster Spark Enterprise Security Package (ESP)

Note

  • Pekerja dikenal sebagai Wilayah untuk jenis kluster HBase.

Langkah berikutnya