次の方法で共有


az synapse spark pool

Spark プールを管理します。

コマンド

名前 説明 状態
az synapse spark pool create

Spark プールを作成します。

Core GA
az synapse spark pool delete

Spark プールを削除します。

Core GA
az synapse spark pool list

すべての Spark プールを一覧表示します。

Core GA
az synapse spark pool show

Spark プールを取得します。

Core GA
az synapse spark pool update

Spark プールを更新します。

Core GA
az synapse spark pool wait

Spark プールの条件が満たされるまで、CLI を待機状態にします。

Core GA

az synapse spark pool create

Spark プールを作成します。

az synapse spark pool create --name
                             --node-count
                             --node-size {Large, Medium, None, Small, XLarge, XXLarge, XXXLarge}
                             --resource-group
                             --spark-version
                             --workspace-name
                             [--delay]
                             [--enable-auto-pause {false, true}]
                             [--enable-auto-scale {false, true}]
                             [--enable-dynamic-exec {false, true}]
                             [--max-executors]
                             [--max-node-count]
                             [--min-executors]
                             [--min-node-count]
                             [--no-wait]
                             [--node-size-family {HardwareAcceleratedFPGA, HardwareAcceleratedGPU, MemoryOptimized, None}]
                             [--spark-config-file-path]
                             [--spark-events-folder]
                             [--spark-log-folder]
                             [--tags]

Spark プールを作成します。

az synapse spark pool create --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--spark-version 2.4 --node-count 3 --node-size Medium --spark-config-file-path 'path/configfile.txt'

必須のパラメーター

--name -n

Spark プールの名前。

--node-count

ノードの数。

プロパティ
パラメーター グループ: Node Arguments
--node-size

ビッグ データ プール内の各ノードが持つコンピューティング能力のレベル。.

プロパティ
パラメーター グループ: Node Arguments
指定可能な値: Large, Medium, None, Small, XLarge, XXLarge, XXXLarge
--resource-group -g

リソース グループの名前。 az configure --defaults group=<name>を使用して既定のグループを構成できます。

--spark-version

サポートされている Spark バージョンは 2.4 になりました。

プロパティ
パラメーター グループ: Component Version Arguments
--workspace-name

ワークスペース名。

オプションのパラメーター

次のパラメーターは省略可能ですが、コマンドを正常に実行するには、状況に応じて 1 つ以上が必要になる場合があります。

--delay

単位が分の遅延時間。

プロパティ
パラメーター グループ: AutoPause Arguments
--enable-auto-pause

自動一時停止を有効にするフラグ。

プロパティ
パラメーター グループ: AutoPause Arguments
指定可能な値: false, true
--enable-auto-scale

自動スケールを有効にするフラグ。

プロパティ
パラメーター グループ: AutoScale Arguments
指定可能な値: false, true
--enable-dynamic-exec

動的実行プログラムの割り当てが有効かどうかを示します。

プロパティ
パラメーター グループ: DynamicExecutor Arguments
指定可能な値: false, true
--max-executors

割り当てられた Executor の最大数。

プロパティ
パラメーター グループ: DynamicExecutor Arguments
--max-node-count

最大ノード数。

プロパティ
パラメーター グループ: AutoScale Arguments
--min-executors

割り当てられた Executor の最小数。

プロパティ
パラメーター グループ: DynamicExecutor Arguments
--min-node-count

最小ノード数。

プロパティ
パラメーター グループ: AutoScale Arguments
--no-wait

実行時間の長い操作が完了するまで待つ必要はありません。

プロパティ
規定値: False
--node-size-family

ビッグ データ プールが提供するノードの種類。

プロパティ
パラメーター グループ: Node Arguments
規定値: MemoryOptimized
指定可能な値: HardwareAcceleratedFPGA, HardwareAcceleratedGPU, MemoryOptimized, None
--spark-config-file-path

Spark プールのプロパティ構成ファイルの絶対パス。

プロパティ
パラメーター グループ: Environment Configuration Arguments
--spark-events-folder

Spark イベント フォルダー。

プロパティ
パラメーター グループ: Default Folder Arguments
規定値: /events
--spark-log-folder

既定の Spark ログ フォルダー。

プロパティ
パラメーター グループ: Default Folder Arguments
規定値: /logs
--tags

スペース区切りのタグ: key[=value] [key[=value] ...]既存のタグをクリアするには、"" を使用します。

グローバル パラメーター
--debug

ログの詳細度を上げて、すべてのデバッグ ログを表示します。

プロパティ
規定値: False
--help -h

このヘルプ メッセージを表示して終了します。

--only-show-errors

エラーのみを表示し、警告を抑制します。

プロパティ
規定値: False
--output -o

出力フォーマット。

プロパティ
規定値: json
指定可能な値: json, jsonc, none, table, tsv, yaml, yamlc
--query

JMESPath クエリ文字列。 詳細と例については、http://jmespath.org/ を参照してください。

--subscription

サブスクリプションの名前または ID。 az account set -s NAME_OR_IDを使用して既定のサブスクリプションを構成できます。

--verbose

ログの詳細度を高める。 完全なデバッグ ログには --debug を使用します。

プロパティ
規定値: False

az synapse spark pool delete

Spark プールを削除します。

az synapse spark pool delete [--ids]
                             [--name]
                             [--no-wait]
                             [--resource-group]
                             [--subscription]
                             [--workspace-name]
                             [--yes]

Spark プールを削除します。

az synapse spark pool delete --name testpool --workspace-name testsynapseworkspace --resource-group rg

オプションのパラメーター

次のパラメーターは省略可能ですが、コマンドを正常に実行するには、状況に応じて 1 つ以上が必要になる場合があります。

--ids

1 つ以上のリソース ID (スペース区切り)。 これは、'Resource Id' 引数のすべての情報を含む完全なリソース ID である必要があります。 --ids または他の 'Resource Id' 引数を指定する必要があります。

プロパティ
パラメーター グループ: Resource Id Arguments
--name -n

Spark プールの名前。

プロパティ
パラメーター グループ: Resource Id Arguments
--no-wait

実行時間の長い操作が完了するまで待つ必要はありません。

プロパティ
規定値: False
--resource-group -g

リソース グループの名前。 az configure --defaults group=<name>を使用して既定のグループを構成できます。

プロパティ
パラメーター グループ: Resource Id Arguments
--subscription

サブスクリプションの名前または ID。 az account set -s NAME_OR_IDを使用して既定のサブスクリプションを構成できます。

プロパティ
パラメーター グループ: Resource Id Arguments
--workspace-name

ワークスペース名。

プロパティ
パラメーター グループ: Resource Id Arguments
--yes -y

確認を求めないでください。

プロパティ
規定値: False
グローバル パラメーター
--debug

ログの詳細度を上げて、すべてのデバッグ ログを表示します。

プロパティ
規定値: False
--help -h

このヘルプ メッセージを表示して終了します。

--only-show-errors

エラーのみを表示し、警告を抑制します。

プロパティ
規定値: False
--output -o

出力フォーマット。

プロパティ
規定値: json
指定可能な値: json, jsonc, none, table, tsv, yaml, yamlc
--query

JMESPath クエリ文字列。 詳細と例については、http://jmespath.org/ を参照してください。

--verbose

ログの詳細度を高める。 完全なデバッグ ログには --debug を使用します。

プロパティ
規定値: False

az synapse spark pool list

すべての Spark プールを一覧表示します。

az synapse spark pool list --resource-group
                           --workspace-name

すべての Spark プールを一覧表示します。

az synapse spark pool list --workspace-name testsynapseworkspace --resource-group rg

必須のパラメーター

--resource-group -g

リソース グループの名前。 az configure --defaults group=<name>を使用して既定のグループを構成できます。

--workspace-name

ワークスペース名。

グローバル パラメーター
--debug

ログの詳細度を上げて、すべてのデバッグ ログを表示します。

プロパティ
規定値: False
--help -h

このヘルプ メッセージを表示して終了します。

--only-show-errors

エラーのみを表示し、警告を抑制します。

プロパティ
規定値: False
--output -o

出力フォーマット。

プロパティ
規定値: json
指定可能な値: json, jsonc, none, table, tsv, yaml, yamlc
--query

JMESPath クエリ文字列。 詳細と例については、http://jmespath.org/ を参照してください。

--subscription

サブスクリプションの名前または ID。 az account set -s NAME_OR_IDを使用して既定のサブスクリプションを構成できます。

--verbose

ログの詳細度を高める。 完全なデバッグ ログには --debug を使用します。

プロパティ
規定値: False

az synapse spark pool show

Spark プールを取得します。

az synapse spark pool show [--ids]
                           [--name]
                           [--resource-group]
                           [--subscription]
                           [--workspace-name]

Spark プールを取得します。

az synapse spark pool show --name testpool --workspace-name testsynapseworkspace --resource-group rg

オプションのパラメーター

次のパラメーターは省略可能ですが、コマンドを正常に実行するには、状況に応じて 1 つ以上が必要になる場合があります。

--ids

1 つ以上のリソース ID (スペース区切り)。 これは、'Resource Id' 引数のすべての情報を含む完全なリソース ID である必要があります。 --ids または他の 'Resource Id' 引数を指定する必要があります。

プロパティ
パラメーター グループ: Resource Id Arguments
--name -n

Spark プールの名前。

プロパティ
パラメーター グループ: Resource Id Arguments
--resource-group -g

リソース グループの名前。 az configure --defaults group=<name>を使用して既定のグループを構成できます。

プロパティ
パラメーター グループ: Resource Id Arguments
--subscription

サブスクリプションの名前または ID。 az account set -s NAME_OR_IDを使用して既定のサブスクリプションを構成できます。

プロパティ
パラメーター グループ: Resource Id Arguments
--workspace-name

ワークスペース名。

プロパティ
パラメーター グループ: Resource Id Arguments
グローバル パラメーター
--debug

ログの詳細度を上げて、すべてのデバッグ ログを表示します。

プロパティ
規定値: False
--help -h

このヘルプ メッセージを表示して終了します。

--only-show-errors

エラーのみを表示し、警告を抑制します。

プロパティ
規定値: False
--output -o

出力フォーマット。

プロパティ
規定値: json
指定可能な値: json, jsonc, none, table, tsv, yaml, yamlc
--query

JMESPath クエリ文字列。 詳細と例については、http://jmespath.org/ を参照してください。

--verbose

ログの詳細度を高める。 完全なデバッグ ログには --debug を使用します。

プロパティ
規定値: False

az synapse spark pool update

Spark プールを更新します。

az synapse spark pool update [--delay]
                             [--enable-auto-pause {false, true}]
                             [--enable-auto-scale {false, true}]
                             [--enable-dynamic-exec {false, true}]
                             [--force {false, true}]
                             [--ids]
                             [--library-requirements]
                             [--max-executors]
                             [--max-node-count]
                             [--min-executors]
                             [--min-node-count]
                             [--name]
                             [--no-wait]
                             [--node-count]
                             [--node-size {Large, Medium, None, Small, XLarge, XXLarge, XXXLarge}]
                             [--package]
                             [--package-action {Add, Remove}]
                             [--resource-group]
                             [--spark-config-file-path]
                             [--subscription]
                             [--tags]
                             [--workspace-name]

Spark プールのタグを更新します。

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--tags key1=value1

Spark プールの自動スケール構成を更新します。

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--enable-auto-scale --min-node-count 3 --max-node-count 100

Spark プールのカスタム ライブラリを更新します。

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--package-action Add --package package1.jar package2.jar

Spark プールの構成ファイルを更新します。

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--spark-config-file-path 'path/configfile.txt'

Spark プールの動的実行プログラムの割り当て構成を更新します。

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--enable-dynamic-exec --min-executors 3 --max-executors 10

オプションのパラメーター

次のパラメーターは省略可能ですが、コマンドを正常に実行するには、状況に応じて 1 つ以上が必要になる場合があります。

--delay

単位が分の遅延時間。

プロパティ
パラメーター グループ: AutoPause Arguments
--enable-auto-pause

自動一時停止を有効にするフラグ。

プロパティ
パラメーター グループ: AutoPause Arguments
指定可能な値: false, true
--enable-auto-scale

自動スケールを有効にするフラグ。

プロパティ
パラメーター グループ: AutoScale Arguments
指定可能な値: false, true
--enable-dynamic-exec

動的実行プログラムの割り当てが有効かどうかを示します。

プロパティ
パラメーター グループ: DynamicExecutor Arguments
指定可能な値: false, true
--force

強制操作のフラグ。

プロパティ
規定値: False
指定可能な値: false, true
--ids

1 つ以上のリソース ID (スペース区切り)。 これは、'Resource Id' 引数のすべての情報を含む完全なリソース ID である必要があります。 --ids または他の 'Resource Id' 引数を指定する必要があります。

プロパティ
パラメーター グループ: Resource Id Arguments
--library-requirements

ライブラリ要件ファイル。

プロパティ
パラメーター グループ: Environment Configuration Arguments
--max-executors

割り当てられた Executor の最大数。

プロパティ
パラメーター グループ: DynamicExecutor Arguments
--max-node-count

最大ノード数。

プロパティ
パラメーター グループ: AutoScale Arguments
--min-executors

割り当てられた Executor の最小数。

プロパティ
パラメーター グループ: DynamicExecutor Arguments
--min-node-count

最小ノード数。

プロパティ
パラメーター グループ: AutoScale Arguments
--name -n

Spark プールの名前。

プロパティ
パラメーター グループ: Resource Id Arguments
--no-wait

実行時間の長い操作が完了するまで待つ必要はありません。

プロパティ
規定値: False
--node-count

ノードの数。

プロパティ
パラメーター グループ: Node Arguments
--node-size

ビッグ データ プール内の各ノードが持つコンピューティング能力のレベル。.

プロパティ
パラメーター グループ: Node Arguments
指定可能な値: Large, Medium, None, Small, XLarge, XXLarge, XXXLarge
--package

ワークスペース パッケージ名の一覧。

プロパティ
パラメーター グループ: Custom Libraries Arguments
--package-action

Apache Spark プールからワークスペース パッケージを追加または削除する場合は、パッケージ アクションを指定する必要があります。

プロパティ
パラメーター グループ: Custom Libraries Arguments
指定可能な値: Add, Remove
--resource-group -g

リソース グループの名前。 az configure --defaults group=<name>を使用して既定のグループを構成できます。

プロパティ
パラメーター グループ: Resource Id Arguments
--spark-config-file-path

Spark プールのプロパティ構成ファイルの絶対パス。

プロパティ
パラメーター グループ: Environment Configuration Arguments
--subscription

サブスクリプションの名前または ID。 az account set -s NAME_OR_IDを使用して既定のサブスクリプションを構成できます。

プロパティ
パラメーター グループ: Resource Id Arguments
--tags

スペース区切りのタグ: key[=value] [key[=value] ...]既存のタグをクリアするには、"" を使用します。

--workspace-name

ワークスペース名。

プロパティ
パラメーター グループ: Resource Id Arguments
グローバル パラメーター
--debug

ログの詳細度を上げて、すべてのデバッグ ログを表示します。

プロパティ
規定値: False
--help -h

このヘルプ メッセージを表示して終了します。

--only-show-errors

エラーのみを表示し、警告を抑制します。

プロパティ
規定値: False
--output -o

出力フォーマット。

プロパティ
規定値: json
指定可能な値: json, jsonc, none, table, tsv, yaml, yamlc
--query

JMESPath クエリ文字列。 詳細と例については、http://jmespath.org/ を参照してください。

--verbose

ログの詳細度を高める。 完全なデバッグ ログには --debug を使用します。

プロパティ
規定値: False

az synapse spark pool wait

Spark プールの条件が満たされるまで、CLI を待機状態にします。

az synapse spark pool wait --big-data-pool-name
                           [--created]
                           [--custom]
                           [--deleted]
                           [--exists]
                           [--ids]
                           [--interval]
                           [--resource-group]
                           [--subscription]
                           [--timeout]
                           [--updated]
                           [--workspace-name]

必須のパラメーター

--big-data-pool-name

ビッグ データ プール名。

オプションのパラメーター

次のパラメーターは省略可能ですが、コマンドを正常に実行するには、状況に応じて 1 つ以上が必要になる場合があります。

--created

'provisioningState' が 'Succeeded' で作成されるまで待ちます。

プロパティ
パラメーター グループ: Wait Condition Arguments
規定値: False
--custom

条件がカスタム JMESPath クエリを満たすまで待ちます。 例: provisioningState!='InProgress'、instanceView.statuses[?code=='PowerState/running']。

プロパティ
パラメーター グループ: Wait Condition Arguments
--deleted

削除されるまで待ちます。

プロパティ
パラメーター グループ: Wait Condition Arguments
規定値: False
--exists

リソースが存在するまで待ちます。

プロパティ
パラメーター グループ: Wait Condition Arguments
規定値: False
--ids

1 つ以上のリソース ID (スペース区切り)。 これは、'Resource Id' 引数のすべての情報を含む完全なリソース ID である必要があります。 --ids または他の 'Resource Id' 引数を指定する必要があります。

プロパティ
パラメーター グループ: Resource Id Arguments
--interval

ポーリング間隔 (秒単位)。

プロパティ
パラメーター グループ: Wait Condition Arguments
規定値: 30
--resource-group -g

リソース グループの名前。 az configure --defaults group=<name>を使用して既定のグループを構成できます。

プロパティ
パラメーター グループ: Resource Id Arguments
--subscription

サブスクリプションの名前または ID。 az account set -s NAME_OR_IDを使用して既定のサブスクリプションを構成できます。

プロパティ
パラメーター グループ: Resource Id Arguments
--timeout

最大待機時間 (秒単位)。

プロパティ
パラメーター グループ: Wait Condition Arguments
規定値: 3600
--updated

provisioningState が 'Succeeded' で更新されるまで待ちます。

プロパティ
パラメーター グループ: Wait Condition Arguments
規定値: False
--workspace-name

ワークスペース名。

プロパティ
パラメーター グループ: Resource Id Arguments
グローバル パラメーター
--debug

ログの詳細度を上げて、すべてのデバッグ ログを表示します。

プロパティ
規定値: False
--help -h

このヘルプ メッセージを表示して終了します。

--only-show-errors

エラーのみを表示し、警告を抑制します。

プロパティ
規定値: False
--output -o

出力フォーマット。

プロパティ
規定値: json
指定可能な値: json, jsonc, none, table, tsv, yaml, yamlc
--query

JMESPath クエリ文字列。 詳細と例については、http://jmespath.org/ を参照してください。

--verbose

ログの詳細度を高める。 完全なデバッグ ログには --debug を使用します。

プロパティ
規定値: False