Apa konfigurasi node default dan yang disarankan untuk Azure HDInsight?
Artikel ini membahas konfigurasi simpul default dan yang direkomendasikan untuk kluster Microsoft Azure HDInsight.
Konfigurasi simpul default dan minimum yang direkomendasikan serta ukuran komputer virtual untuk kluster
Tabel berikut mencantumkan ukuran komputer virtual (VM) default dan yang direkomendasikan untuk kluster Microsoft Azure HDInsight. Informasi ini diperlukan untuk memahami ukuran VM yang akan digunakan ketika Anda membuat skrip PowerShell atau Azure CLI untuk menyebarkan kluster Microsoft Azure HDInsight.
Jika Anda membutuhkan lebih dari 32 simpul pekerja dalam sebuah kluster, pilih ukuran head simpul dengan setidaknya 8 inti dan RAM 14 GB.
Satu-satunya jenis kluster yang memiliki disk data adalah kluster Kafka dan HBase dengan fitur Accelerated Writes diaktifkan. Microsoft Azure HDInsight mendukung ukuran disk P30 dan S30 dalam skenario ini. Untuk semua jenis kluster lainnya, Microsoft Azure HDInsight menyediakan ruang disk terkelola dengan kluster. Mulai 11/07/2019 dan seterusnya, ukuran disk terkelola dari setiap simpul dalam kluster yang baru dibuat adalah 128 GB. Hal ini tidak bisa diubah.
Spesifikasi semua jenis VM minimum yang direkomendasikan yang digunakan dalam dokumen ini diringkas dalam tabel berikut.
Ukuran | vCPU | Memori: GiB | Penyimpanan sementara (SSD) GiB | Maks throughput penyimpanan sementara: IOPS / Baca MBps / Tulis MBps | Maks disk data/throughput maksimum: IOPS | NIC/Bandwidth jaringan maksimum yang diharapkan (Mbps) |
---|---|---|---|---|---|---|
Standard_D3_v2 | 4 | 14 | 200 | 12000 / 187 / 93 | 16/16x500 | 4/3000 |
Standard_D4_v2 | 8 | 28 | 400 | 24000 / 375 / 187 | 32/32x500 | 8/6000 |
Standard_D5_v2 | 16 | 56 | 800 | 48000 / 750 / 375 | 64/64x500 | 8/12000 |
Standard_D12_v2 | 4 | 28 | 200 | 12000 / 187 / 93 | 16/16x500 | 4/3000 |
Standard_D13_v2 | 8 | 56 | 400 | 24000 / 375 / 187 | 32/32x500 | 8/6000 |
Standard_D14_v2 | 16 | 112 | 800 | 48000 / 750 / 375 | 64/64x500 | 8/12000 |
Standard_A1_v2 | 1 | 2 | 10 | 1000 / 20 / 10 | 2 / 2x500 | 2 / 250 |
Standard_A2_v2 | 2 | 4 | 20 | 2000/40/20 | 4 / 4x500 | 2/500 |
Standard_A4_v2 | 4 | 8 | 40 | 4000 / 80 / 40 | 8 / 8x500 | 4 / 1000 |
Untuk informasi selengkapnya tentang spesifikasi setiap jenis VM, lihat dokumen berikut ini:
- Ukuran komputer virtual tujuan umum:
Dv2
seri 1-5 - Ukuran komputer virtual yang dioptimalkan memori:
Dv2
seri 11-15 - Ukuran komputer virtual tujuan umum:
Av2
seri 1-8
Wilayah yang Didukung
Catatan
Untuk mendapatkan pengidentifikasi SKU untuk digunakan dalam powershell dan skrip lainnya, tambahkan Standard_
ke awal semua SKU VM dalam tabel di bawah ini. Misalnya, D12_v2
akan menjadi Standard_D12_v2
.
Jenis kluster | Hadoop | HBase | Interactive Query | Spark | Kafka |
---|---|---|---|---|---|
Head: ukuran VM default | E4_v3 | E4_v3 | D13_v2 | E8_v3, D13_v2* |
E4_v3 |
Head: ukuran VM minimum yang direkomendasikan | D5_v2 | D3_v2 | D13_v2 | D12_v2, D13_v2* |
D3_v2 |
Pekerja: ukuran VM default | E8_v3 | E4_v3 | D14_v2 | E8_v3 | 4 E4_v3 dengan 2 disk S30 per perantara |
Pekerja: ukuran VM minimum yang direkomendasikan | D5_v2 | D3_v2 | D13_v2 | D12_v2 | D3_v2 |
ZooKeeper: ukuran VM default | A4_v2 | A4_v2 | A4_v2 | ||
ZooKeeper: ukuran VM minimum yang direkomendasikan | A4_v2 | A4_v2 | A4_v2 |
* = Ukuran VM untuk kluster Spark Enterprise Security Package (ESP)
Catatan
- Pekerja dikenal sebagai Region untuk jenis kluster HBase.
Langkah berikutnya
Saran dan Komentar
https://aka.ms/ContentUserFeedback.
Segera hadir: Sepanjang tahun 2024 kami akan menghentikan penggunaan GitHub Issues sebagai mekanisme umpan balik untuk konten dan menggantinya dengan sistem umpan balik baru. Untuk mengetahui informasi selengkapnya, lihat:Kirim dan lihat umpan balik untuk