az synapse spark pool

  • Referensi

Mengelola kumpulan Spark.

Perintah

Nama Deskripsi Jenis Status
az synapse spark pool create

Buat kumpulan Spark.

 Inti GA
az synapse spark pool delete

Menghapus kumpulan Spark.

 Inti GA
az synapse spark pool list

Mencantumkan semua kumpulan Spark.

 Inti GA
az synapse spark pool show

Dapatkan kumpulan Spark.

 Inti GA
az synapse spark pool update

Perbarui kumpulan Spark.

 Inti GA
az synapse spark pool wait

Tempatkan CLI dalam status menunggu sampai kondisi kumpulan Spark terpenuhi.

 Inti GA

az synapse spark pool create

Edit

Buat kumpulan Spark.

az synapse spark pool create --name
                             --node-count
                             --node-size {Large, Medium, None, Small, XLarge, XXLarge, XXXLarge}
                             --resource-group
                             --spark-version
                             --workspace-name
                             [--delay]
                             [--enable-auto-pause {false, true}]
                             [--enable-auto-scale {false, true}]
                             [--enable-dynamic-exec {false, true}]
                             [--max-executors]
                             [--max-node-count]
                             [--min-executors]
                             [--min-node-count]
                             [--no-wait]
                             [--node-size-family {HardwareAcceleratedFPGA, HardwareAcceleratedGPU, MemoryOptimized, None}]
                             [--spark-config-file-path]
                             [--spark-events-folder]
                             [--spark-log-folder]
                             [--tags]

Contoh

Buat kumpulan Spark.

az synapse spark pool create --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--spark-version 2.4 --node-count 3 --node-size Medium --spark-config-file-path 'path/configfile.txt'

Parameter yang Diperlukan

--name -n

Nama kumpulan Spark.

--node-count

Jumlah simpul.

--node-size

Tingkat daya komputasi yang dimiliki setiap simpul di kumpulan Big Data.

nilai yang diterima: Large, Medium, None, Small, XLarge, XXLarge, XXXLarge
--resource-group -g

Nama grup sumber daya. Anda dapat mengonfigurasi grup default menggunakan az configure --defaults group=<name>.

--spark-version

Versi Spark yang didukung sekarang adalah 2.4.

--workspace-name

Nama ruang kerja.

Parameter Opsional

--delay

Waktu penundaan yang unitnya adalah menit.

--enable-auto-pause

Bendera mengaktifkan jeda otomatis.

nilai yang diterima: false, true
--enable-auto-scale

Bendera mengaktifkan skala otomatis.

nilai yang diterima: false, true
--enable-dynamic-exec

Menunjukkan apakah Alokasi Pelaksana Dinamis diaktifkan atau tidak.

nilai yang diterima: false, true
--max-executors

Jumlah maksimum pelaksana yang dialokasikan.

--max-node-count

Jumlah simpul maks.

--min-executors

Jumlah minimum pelaksana yang dialokasikan.

--min-node-count

Jumlah simpul min.

--no-wait

Jangan menunggu operasi jangka panjang selesai.

nilai default: False
--node-size-family

Jenis simpul yang disediakan kumpulan Big Data.

nilai yang diterima: HardwareAcceleratedFPGA, HardwareAcceleratedGPU, MemoryOptimized, None
nilai default: MemoryOptimized
--spark-config-file-path

Jalur absolut file konfigurasi properti kumpulan Spark.

--spark-events-folder

Folder peristiwa Spark.

nilai default: /events
--spark-log-folder

Folder log Spark default.

nilai default: /logs
--tags

Tag yang dipisahkan spasi: key[=value] [key[=value] ...]. Gunakan "" untuk menghapus tag yang ada.

Parameter Global
--debug

Meningkatkan verbositas pengelogan untuk menampilkan semua log debug.

--help -h

Menampilkan pesan bantuan ini dan keluar.

--only-show-errors

Hanya menampilkan kesalahan, menyembunyikan peringatan.

--output -o

Format output.

nilai yang diterima: json, jsonc, none, table, tsv, yaml, yamlc
nilai default: json
--query

String kueri JMESPath. Lihat http://jmespath.org/ untuk informasi selengkapnya beserta contohnya.

--subscription

Nama atau ID langganan. Anda dapat mengonfigurasi langganan default menggunakan az account set -s NAME_OR_ID.

--verbose

Meningkatkan verbositas pengelogan. Gunakan --debug untuk log waktu lengkap.

az synapse spark pool delete

Edit

Menghapus kumpulan Spark.

az synapse spark pool delete [--ids]
                             [--name]
                             [--no-wait]
                             [--resource-group]
                             [--subscription]
                             [--workspace-name]
                             [--yes]

Contoh

Menghapus kumpulan Spark.

az synapse spark pool delete --name testpool --workspace-name testsynapseworkspace --resource-group rg

Parameter Opsional

--ids

Satu atau beberapa ID sumber daya (dibatasi ruang). Ini harus menjadi ID sumber daya lengkap yang berisi semua informasi argumen 'Id Sumber Daya'. Anda harus menyediakan argumen --ids atau 'Resource Id' lainnya.

--name -n

Nama kumpulan Spark.

--no-wait

Jangan menunggu operasi jangka panjang selesai.

nilai default: False
--resource-group -g

Nama grup sumber daya. Anda dapat mengonfigurasi grup default menggunakan az configure --defaults group=<name>.

--subscription

Nama atau ID langganan. Anda dapat mengonfigurasi langganan default menggunakan az account set -s NAME_OR_ID.

--workspace-name

Nama ruang kerja.

--yes -y

Jangan meminta konfirmasi.

nilai default: False
Parameter Global
--debug

Meningkatkan verbositas pengelogan untuk menampilkan semua log debug.

--help -h

Menampilkan pesan bantuan ini dan keluar.

--only-show-errors

Hanya menampilkan kesalahan, menyembunyikan peringatan.

--output -o

Format output.

nilai yang diterima: json, jsonc, none, table, tsv, yaml, yamlc
nilai default: json
--query

String kueri JMESPath. Lihat http://jmespath.org/ untuk informasi selengkapnya beserta contohnya.

--subscription

Nama atau ID langganan. Anda dapat mengonfigurasi langganan default menggunakan az account set -s NAME_OR_ID.

--verbose

Meningkatkan verbositas pengelogan. Gunakan --debug untuk log waktu lengkap.

az synapse spark pool list

Edit

Mencantumkan semua kumpulan Spark.

az synapse spark pool list --resource-group
                           --workspace-name

Contoh

Mencantumkan semua kumpulan Spark.

az synapse spark pool list --workspace-name testsynapseworkspace --resource-group rg

Parameter yang Diperlukan

--resource-group -g

Nama grup sumber daya. Anda dapat mengonfigurasi grup default menggunakan az configure --defaults group=<name>.

--workspace-name

Nama ruang kerja.

Parameter Global
--debug

Meningkatkan verbositas pengelogan untuk menampilkan semua log debug.

--help -h

Menampilkan pesan bantuan ini dan keluar.

--only-show-errors

Hanya menampilkan kesalahan, menyembunyikan peringatan.

--output -o

Format output.

nilai yang diterima: json, jsonc, none, table, tsv, yaml, yamlc
nilai default: json
--query

String kueri JMESPath. Lihat http://jmespath.org/ untuk informasi selengkapnya beserta contohnya.

--subscription

Nama atau ID langganan. Anda dapat mengonfigurasi langganan default menggunakan az account set -s NAME_OR_ID.

--verbose

Meningkatkan verbositas pengelogan. Gunakan --debug untuk log waktu lengkap.

az synapse spark pool show

Edit

Dapatkan kumpulan Spark.

az synapse spark pool show [--ids]
                           [--name]
                           [--resource-group]
                           [--subscription]
                           [--workspace-name]

Contoh

Dapatkan kumpulan Spark.

az synapse spark pool show --name testpool --workspace-name testsynapseworkspace --resource-group rg

Parameter Opsional

--ids

Satu atau beberapa ID sumber daya (dibatasi ruang). Ini harus menjadi ID sumber daya lengkap yang berisi semua informasi argumen 'Id Sumber Daya'. Anda harus menyediakan argumen --ids atau 'Resource Id' lainnya.

--name -n

Nama kumpulan Spark.

--resource-group -g

Nama grup sumber daya. Anda dapat mengonfigurasi grup default menggunakan az configure --defaults group=<name>.

--subscription

Nama atau ID langganan. Anda dapat mengonfigurasi langganan default menggunakan az account set -s NAME_OR_ID.

--workspace-name

Nama ruang kerja.

Parameter Global
--debug

Meningkatkan verbositas pengelogan untuk menampilkan semua log debug.

--help -h

Menampilkan pesan bantuan ini dan keluar.

--only-show-errors

Hanya menampilkan kesalahan, menyembunyikan peringatan.

--output -o

Format output.

nilai yang diterima: json, jsonc, none, table, tsv, yaml, yamlc
nilai default: json
--query

String kueri JMESPath. Lihat http://jmespath.org/ untuk informasi selengkapnya beserta contohnya.

--subscription

Nama atau ID langganan. Anda dapat mengonfigurasi langganan default menggunakan az account set -s NAME_OR_ID.

--verbose

Meningkatkan verbositas pengelogan. Gunakan --debug untuk log waktu lengkap.

az synapse spark pool update

Edit

Perbarui kumpulan Spark.

az synapse spark pool update [--delay]
                             [--enable-auto-pause {false, true}]
                             [--enable-auto-scale {false, true}]
                             [--enable-dynamic-exec {false, true}]
                             [--force {false, true}]
                             [--ids]
                             [--library-requirements]
                             [--max-executors]
                             [--max-node-count]
                             [--min-executors]
                             [--min-node-count]
                             [--name]
                             [--no-wait]
                             [--node-count]
                             [--node-size {Large, Medium, None, Small, XLarge, XXLarge, XXXLarge}]
                             [--package]
                             [--package-action {Add, Remove}]
                             [--resource-group]
                             [--spark-config-file-path]
                             [--subscription]
                             [--tags]
                             [--workspace-name]

Contoh

Perbarui tag kumpulan Spark.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--tags key1=value1

Perbarui konfigurasi skala otomatis kumpulan Spark.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--enable-auto-scale --min-node-count 3 --max-node-count 100

Perbarui pustaka kustom kumpulan Spark.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--package-action Add --package package1.jar package2.jar

Perbarui file konfigurasi kumpulan Spark.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--spark-config-file-path 'path/configfile.txt'

Perbarui konfigurasi alokasi pelaksana dinamis kumpulan Spark.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--enable-dynamic-exec --min-executors 3 --max-executors 10

Parameter Opsional

--delay

Waktu penundaan yang unitnya adalah menit.

--enable-auto-pause

Bendera mengaktifkan jeda otomatis.

nilai yang diterima: false, true
--enable-auto-scale

Bendera mengaktifkan skala otomatis.

nilai yang diterima: false, true
--enable-dynamic-exec

Menunjukkan apakah Alokasi Pelaksana Dinamis diaktifkan atau tidak.

nilai yang diterima: false, true
--force

Bendera operasi paksa.

nilai yang diterima: false, true
nilai default: False
--ids

Satu atau beberapa ID sumber daya (dibatasi ruang). Ini harus menjadi ID sumber daya lengkap yang berisi semua informasi argumen 'Id Sumber Daya'. Anda harus menyediakan argumen --ids atau 'Resource Id' lainnya.

--library-requirements

File persyaratan pustaka.

--max-executors

Jumlah maksimum pelaksana yang dialokasikan.

--max-node-count

Jumlah simpul maks.

--min-executors

Jumlah minimum pelaksana yang dialokasikan.

--min-node-count

Jumlah simpul min.

--name -n

Nama kumpulan Spark.

--no-wait

Jangan menunggu operasi jangka panjang selesai.

nilai default: False
--node-count

Jumlah simpul.

--node-size

Tingkat daya komputasi yang dimiliki setiap simpul di kumpulan Big Data.

nilai yang diterima: Large, Medium, None, Small, XLarge, XXLarge, XXXLarge
--package

Daftar nama paket ruang kerja.

--package-action

Tindakan paket harus ditentukan saat Anda menambahkan atau menghapus paket ruang kerja dari kumpulan Apache Spark.

nilai yang diterima: Add, Remove
--resource-group -g

Nama grup sumber daya. Anda dapat mengonfigurasi grup default menggunakan az configure --defaults group=<name>.

--spark-config-file-path

Jalur absolut file konfigurasi properti kumpulan Spark.

--subscription

Nama atau ID langganan. Anda dapat mengonfigurasi langganan default menggunakan az account set -s NAME_OR_ID.

--tags

Tag yang dipisahkan spasi: key[=value] [key[=value] ...]. Gunakan "" untuk menghapus tag yang ada.

--workspace-name

Nama ruang kerja.

Parameter Global
--debug

Meningkatkan verbositas pengelogan untuk menampilkan semua log debug.

--help -h

Menampilkan pesan bantuan ini dan keluar.

--only-show-errors

Hanya menampilkan kesalahan, menyembunyikan peringatan.

--output -o

Format output.

nilai yang diterima: json, jsonc, none, table, tsv, yaml, yamlc
nilai default: json
--query

String kueri JMESPath. Lihat http://jmespath.org/ untuk informasi selengkapnya beserta contohnya.

--subscription

Nama atau ID langganan. Anda dapat mengonfigurasi langganan default menggunakan az account set -s NAME_OR_ID.

--verbose

Meningkatkan verbositas pengelogan. Gunakan --debug untuk log waktu lengkap.

az synapse spark pool wait

Edit

Tempatkan CLI dalam status menunggu sampai kondisi kumpulan Spark terpenuhi.

az synapse spark pool wait --big-data-pool-name
                           [--created]
                           [--custom]
                           [--deleted]
                           [--exists]
                           [--ids]
                           [--interval]
                           [--resource-group]
                           [--subscription]
                           [--timeout]
                           [--updated]
                           [--workspace-name]

Parameter yang Diperlukan

--big-data-pool-name

Nama kumpulan Big Data.

Parameter Opsional

--created

Tunggu hingga dibuat dengan 'provisioningState' di 'Berhasil'.

nilai default: False
--custom

Tunggu hingga kondisi memenuhi kueri JMESPath kustom. Misalnya provisioningState!='InProgress', instanceView.statuses[?code=='PowerState/running'].

--deleted

Tunggu hingga dihapus.

nilai default: False
--exists

Tunggu hingga sumber daya ada.

nilai default: False
--ids

Satu atau beberapa ID sumber daya (dibatasi ruang). Ini harus menjadi ID sumber daya lengkap yang berisi semua informasi argumen 'Id Sumber Daya'. Anda harus menyediakan argumen --ids atau 'Resource Id' lainnya.

--interval

Interval polling dalam hitungan detik.

nilai default: 30
--resource-group -g

Nama grup sumber daya. Anda dapat mengonfigurasi grup default menggunakan az configure --defaults group=<name>.

--subscription

Nama atau ID langganan. Anda dapat mengonfigurasi langganan default menggunakan az account set -s NAME_OR_ID.

--timeout

Tunggu maksimum dalam detik.

nilai default: 3600
--updated

Tunggu hingga diperbarui dengan provisioningState di 'Berhasil'.

nilai default: False
--workspace-name

Nama ruang kerja.

Parameter Global
--debug

Meningkatkan verbositas pengelogan untuk menampilkan semua log debug.

--help -h

Menampilkan pesan bantuan ini dan keluar.

--only-show-errors

Hanya menampilkan kesalahan, menyembunyikan peringatan.

--output -o

Format output.

nilai yang diterima: json, jsonc, none, table, tsv, yaml, yamlc
nilai default: json
--query

String kueri JMESPath. Lihat http://jmespath.org/ untuk informasi selengkapnya beserta contohnya.

--subscription

Nama atau ID langganan. Anda dapat mengonfigurasi langganan default menggunakan az account set -s NAME_OR_ID.

--verbose

Meningkatkan verbositas pengelogan. Gunakan --debug untuk log waktu lengkap.