Azure HDInsight の既定および推奨のノード構成

  • [アーティクル]

この記事では、Azure HDInsight クラスターの既定および推奨のノード構成について説明します。

次の表は、HDInsight クラスターの既定および推奨の仮想マシン (VM) のサイズを示しています。 この情報は、HDInsight クラスターをデプロイする PowerShell または Azure CLI スクリプトを作成するときに、使用する VM のサイズを把握するために必要です。

クラスターで 32 以上のワーカー ノードが必要になる場合、少なくとも 8 コア、14 GB のヘッド ノードのサイズを選択してください。

データ ディスクがあるクラスターの種類は、高速書き込み機能が有効な Kafka および HBase クラスターのみです。 HDInsight は、これらのシナリオで P30 と S30 のディスク サイズをサポートしています。 その他のすべてのクラスターの種類について、HDInsight では、クラスターにマネージド ディスク領域が用意されています。 2019 年 11 月 7 日以降、新しく作成されるクラスター内の各ノードのマネージド ディスク サイズは 128 GB です。 これは変更できません。

このドキュメントで使用されているすべての最小推奨 VM の種類の仕様を次の表にまとめます。

サイズ vCPU メモリ:GiB 一時ストレージ (SSD) GiB 一時ストレージの最大スループット: IOPS/読み取り MBps/書き込み MBps 最大データ ディスク数/スループット: IOPS 最大 NIC 数/想定ネットワーク帯域幅 (Mbps)
Standard_D3_v2 4 14 200 12000/187/93 16 / 16x500 4/3,000
Standard_D4_v2 8 28 400 24000/375/187 32 / 32x500 8/6,000
Standard_D5_v2 16 56 800 48000/750/375 64 / 64x500 8/12,000
Standard_D12_v2 4 28 200 12000/187/93 16 / 16x500 4/3,000
Standard_D13_v2 8 56 400 24000/375/187 32 / 32x500 8/6,000
Standard_D14_v2 16 112 800 48000/750/375 64 / 64x500 8/12,000
Standard_A1_v2 1 2 10 1000/20/10 2 / 2x500 2/250
Standard_A2_v2 2 4 20 2000/40/20 4 / 4x500 2/500
Standard_A4_v2 4 8 40 4000/80/40 8 / 8x500 4/1,000

各 VM の種類の仕様の詳細については、次のドキュメントを参照してください。

サポートされているすべてのリージョン

Note

PowerShell やその他のスクリプトで使用する SKU 識別子を取得するには、次の表のすべての VM SKU の先頭に Standard_ を追加します。 たとえば、D12_v2 は Standard_D12_v2 になります。

クラスターの種類 Hadoop hbase Interactive Query Spark Kafka
ヘッド: 既定の VM サイズ E4_v3 E4_v3 D13_v2 E8_v3,
D13_v2*		 E4_v3
ヘッド: 最小推奨 VM サイズ D5_v2 D3_v2 D13_v2 D12_v2、
D13_v2*		 D3_v2
worker: 既定の VM サイズ E8_v3 E4_v3 D14_v2 E8_v3 4 E4_v3 (ブローカーあたり 2 S30 ディスク)
ワーカー: 最小推奨 VM サイズ D5_v2 D3_v2 D13_v2 D12_v2 D3_v2
ZooKeeper: 既定の VM サイズ A4_v2 A4_v2 A4_v2
ZooKeeper: 最小推奨 VM サイズ A4_v2 A4_v2 A4_v2

* = Spark Enterprise セキュリティ パッケージ (ESP) クラスターの VM サイズ

Note

  • Worker は、HBase クラスター タイプでは Region と呼ばれます。

次のステップ