az synapse spark pool
Správa fondů Sparku
Příkazy
| Name | Description | Typ | Stav |
|---|---|---|---|
| az synapse spark pool create |
Vytvořte fond Sparku. |
Core | GA |
| az synapse spark pool delete |
Odstraňte fond Sparku. |
Core | GA |
| az synapse spark pool list |
Zobrazí seznam všech fondů Sparku. |
Core | GA |
| az synapse spark pool show |
Získejte fond Sparku. |
Core | GA |
| az synapse spark pool update |
Aktualizujte fond Sparku. |
Core | GA |
| az synapse spark pool wait |
Umístěte rozhraní příkazového řádku do stavu čekání, dokud nebude splněna podmínka fondu Sparku. |
Core | GA |
az synapse spark pool create
Vytvořte fond Sparku.
az synapse spark pool create --name
--node-count
--node-size {Large, Medium, None, Small, XLarge, XXLarge, XXXLarge}
--resource-group
--spark-version
--workspace-name
[--delay]
[--enable-auto-pause {false, true}]
[--enable-auto-scale {false, true}]
[--enable-dynamic-exec {false, true}]
[--max-executors]
[--max-node-count]
[--min-executors]
[--min-node-count]
[--no-wait]
[--node-size-family {HardwareAcceleratedFPGA, HardwareAcceleratedGPU, MemoryOptimized, None}]
[--spark-config-file-path]
[--spark-events-folder]
[--spark-log-folder]
[--tags]
Příklady
Vytvořte fond Sparku.
az synapse spark pool create --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--spark-version 2.4 --node-count 3 --node-size Medium --spark-config-file-path 'path/configfile.txt'
Povinné parametry
Název fondu Spark.
Početuzlůch
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Node Arguments |
Úroveň výpočetního výkonu, kterou má každý uzel ve fondu velkých objemů dat.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Node Arguments |
| Přípustné hodnoty: | Large, Medium, None, Small, XLarge, XXLarge, XXXLarge |
Název skupiny prostředků Výchozí skupinu můžete nakonfigurovat pomocí az configure --defaults group=<name>.
Podporovaná verze Sparku je teď 2.4.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Component Version Arguments |
Název pracovního prostoru.
Volitelné parametry
Následující parametry jsou volitelné, ale v závislosti na kontextu se může stát, že se jeden nebo více vyžaduje, aby se příkaz úspěšně spustil.
Doba zpoždění, jejíž jednotka je minuta.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | AutoPause Arguments |
Příznak povolení automatického pozastavení
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | AutoPause Arguments |
| Přípustné hodnoty: | false, true |
Příznak povolení automatického škálování
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | AutoScale Arguments |
| Přípustné hodnoty: | false, true |
Určuje, jestli je povolené přidělení dynamického exekutoru, nebo ne.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | DynamicExecutor Arguments |
| Přípustné hodnoty: | false, true |
Maximální počet exekutorů, které jsou přidělené.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | DynamicExecutor Arguments |
Maximální počet uzlů.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | AutoScale Arguments |
Minimální počet exekutorů, které jsou přidělené.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | DynamicExecutor Arguments |
Minimální počet uzlů.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | AutoScale Arguments |
Nečekejte na dokončení dlouhotrvající operace.
| Vlastnost | Hodnota |
|---|---|
| Default value: | False |
Druh uzlů, které fond velkých objemů dat poskytuje.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Node Arguments |
| Default value: | MemoryOptimized |
| Přípustné hodnoty: | HardwareAcceleratedFPGA, HardwareAcceleratedGPU, MemoryOptimized, None |
Absolutní cesta konfiguračního souboru vlastností fondu Sparku
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Environment Configuration Arguments |
Složka událostí Sparku.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Default Folder Arguments |
| Default value: | /events |
Výchozí složka protokolu Sparku.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Default Folder Arguments |
| Default value: | /logs |
Značky oddělené mezerami: klíč[=hodnota] [klíč[=hodnota] ...]. K vymazání existujících značek použijte "".
Globální parametry
Zvyšte úroveň podrobností protokolování, aby se zobrazily všechny protokoly ladění.
| Vlastnost | Hodnota |
|---|---|
| Default value: | False |
Zobrazte tuto zprávu nápovědy a ukončete ji.
Zobrazit pouze chyby, potlačit upozornění.
| Vlastnost | Hodnota |
|---|---|
| Default value: | False |
Výstupní formát
| Vlastnost | Hodnota |
|---|---|
| Default value: | json |
| Přípustné hodnoty: | json, jsonc, none, table, tsv, yaml, yamlc |
Řetězec dotazu JMESPath Další http://jmespath.org/ informace a příklady najdete v tématu.
Název nebo ID předplatného Výchozí předplatné můžete nakonfigurovat pomocí az account set -s NAME_OR_ID.
Zvyšte úroveň podrobností protokolování. K úplnému ladění protokolů použijte příkaz --debug.
| Vlastnost | Hodnota |
|---|---|
| Default value: | False |
az synapse spark pool delete
Odstraňte fond Sparku.
az synapse spark pool delete [--ids]
[--name]
[--no-wait]
[--resource-group]
[--subscription]
[--workspace-name]
[--yes]
Příklady
Odstraňte fond Sparku.
az synapse spark pool delete --name testpool --workspace-name testsynapseworkspace --resource-group rg
Volitelné parametry
Následující parametry jsou volitelné, ale v závislosti na kontextu se může stát, že se jeden nebo více vyžaduje, aby se příkaz úspěšně spustil.
Jedno nebo více ID prostředků (oddělené mezerami) Mělo by se jednat o úplné ID prostředku obsahující všechny informace o argumentech ID prostředku. Měli byste zadat buď argumenty --ids, nebo jiné argumenty 'ID prostředku'.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Resource Id Arguments |
Název fondu Spark.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Resource Id Arguments |
Nečekejte na dokončení dlouhotrvající operace.
| Vlastnost | Hodnota |
|---|---|
| Default value: | False |
Název skupiny prostředků Výchozí skupinu můžete nakonfigurovat pomocí az configure --defaults group=<name>.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Resource Id Arguments |
Název nebo ID předplatného Výchozí předplatné můžete nakonfigurovat pomocí az account set -s NAME_OR_ID.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Resource Id Arguments |
Název pracovního prostoru.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Resource Id Arguments |
Nevyzývejte k potvrzení.
| Vlastnost | Hodnota |
|---|---|
| Default value: | False |
Globální parametry
Zvyšte úroveň podrobností protokolování, aby se zobrazily všechny protokoly ladění.
| Vlastnost | Hodnota |
|---|---|
| Default value: | False |
Zobrazte tuto zprávu nápovědy a ukončete ji.
Zobrazit pouze chyby, potlačit upozornění.
| Vlastnost | Hodnota |
|---|---|
| Default value: | False |
Výstupní formát
| Vlastnost | Hodnota |
|---|---|
| Default value: | json |
| Přípustné hodnoty: | json, jsonc, none, table, tsv, yaml, yamlc |
Řetězec dotazu JMESPath Další http://jmespath.org/ informace a příklady najdete v tématu.
Zvyšte úroveň podrobností protokolování. K úplnému ladění protokolů použijte příkaz --debug.
| Vlastnost | Hodnota |
|---|---|
| Default value: | False |
az synapse spark pool list
Zobrazí seznam všech fondů Sparku.
az synapse spark pool list --resource-group
--workspace-name
Příklady
Zobrazí seznam všech fondů Sparku.
az synapse spark pool list --workspace-name testsynapseworkspace --resource-group rg
Povinné parametry
Název skupiny prostředků Výchozí skupinu můžete nakonfigurovat pomocí az configure --defaults group=<name>.
Název pracovního prostoru.
Globální parametry
Zvyšte úroveň podrobností protokolování, aby se zobrazily všechny protokoly ladění.
| Vlastnost | Hodnota |
|---|---|
| Default value: | False |
Zobrazte tuto zprávu nápovědy a ukončete ji.
Zobrazit pouze chyby, potlačit upozornění.
| Vlastnost | Hodnota |
|---|---|
| Default value: | False |
Výstupní formát
| Vlastnost | Hodnota |
|---|---|
| Default value: | json |
| Přípustné hodnoty: | json, jsonc, none, table, tsv, yaml, yamlc |
Řetězec dotazu JMESPath Další http://jmespath.org/ informace a příklady najdete v tématu.
Název nebo ID předplatného Výchozí předplatné můžete nakonfigurovat pomocí az account set -s NAME_OR_ID.
Zvyšte úroveň podrobností protokolování. K úplnému ladění protokolů použijte příkaz --debug.
| Vlastnost | Hodnota |
|---|---|
| Default value: | False |
az synapse spark pool show
Získejte fond Sparku.
az synapse spark pool show [--ids]
[--name]
[--resource-group]
[--subscription]
[--workspace-name]
Příklady
Získejte fond Sparku.
az synapse spark pool show --name testpool --workspace-name testsynapseworkspace --resource-group rg
Volitelné parametry
Následující parametry jsou volitelné, ale v závislosti na kontextu se může stát, že se jeden nebo více vyžaduje, aby se příkaz úspěšně spustil.
Jedno nebo více ID prostředků (oddělené mezerami) Mělo by se jednat o úplné ID prostředku obsahující všechny informace o argumentech ID prostředku. Měli byste zadat buď argumenty --ids, nebo jiné argumenty 'ID prostředku'.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Resource Id Arguments |
Název fondu Spark.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Resource Id Arguments |
Název skupiny prostředků Výchozí skupinu můžete nakonfigurovat pomocí az configure --defaults group=<name>.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Resource Id Arguments |
Název nebo ID předplatného Výchozí předplatné můžete nakonfigurovat pomocí az account set -s NAME_OR_ID.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Resource Id Arguments |
Název pracovního prostoru.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Resource Id Arguments |
Globální parametry
Zvyšte úroveň podrobností protokolování, aby se zobrazily všechny protokoly ladění.
| Vlastnost | Hodnota |
|---|---|
| Default value: | False |
Zobrazte tuto zprávu nápovědy a ukončete ji.
Zobrazit pouze chyby, potlačit upozornění.
| Vlastnost | Hodnota |
|---|---|
| Default value: | False |
Výstupní formát
| Vlastnost | Hodnota |
|---|---|
| Default value: | json |
| Přípustné hodnoty: | json, jsonc, none, table, tsv, yaml, yamlc |
Řetězec dotazu JMESPath Další http://jmespath.org/ informace a příklady najdete v tématu.
Zvyšte úroveň podrobností protokolování. K úplnému ladění protokolů použijte příkaz --debug.
| Vlastnost | Hodnota |
|---|---|
| Default value: | False |
az synapse spark pool update
Aktualizujte fond Sparku.
az synapse spark pool update [--delay]
[--enable-auto-pause {false, true}]
[--enable-auto-scale {false, true}]
[--enable-dynamic-exec {false, true}]
[--force {false, true}]
[--ids]
[--library-requirements]
[--max-executors]
[--max-node-count]
[--min-executors]
[--min-node-count]
[--name]
[--no-wait]
[--node-count]
[--node-size {Large, Medium, None, Small, XLarge, XXLarge, XXXLarge}]
[--package]
[--package-action {Add, Remove}]
[--resource-group]
[--spark-config-file-path]
[--subscription]
[--tags]
[--workspace-name]
Příklady
Aktualizujte značky fondu Spark.
az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--tags key1=value1
Aktualizujte konfiguraci automatického škálování fondu Sparku.
az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--enable-auto-scale --min-node-count 3 --max-node-count 100
Aktualizujte vlastní knihovny fondu Spark.
az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--package-action Add --package package1.jar package2.jar
Aktualizujte konfigurační soubor fondu Sparku.
az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--spark-config-file-path 'path/configfile.txt'
Aktualizujte konfiguraci přidělení dynamického exekutoru fondu Sparku.
az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--enable-dynamic-exec --min-executors 3 --max-executors 10
Volitelné parametry
Následující parametry jsou volitelné, ale v závislosti na kontextu se může stát, že se jeden nebo více vyžaduje, aby se příkaz úspěšně spustil.
Doba zpoždění, jejíž jednotka je minuta.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | AutoPause Arguments |
Příznak povolení automatického pozastavení
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | AutoPause Arguments |
| Přípustné hodnoty: | false, true |
Příznak povolení automatického škálování
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | AutoScale Arguments |
| Přípustné hodnoty: | false, true |
Určuje, jestli je povolené přidělení dynamického exekutoru, nebo ne.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | DynamicExecutor Arguments |
| Přípustné hodnoty: | false, true |
Příznak vynucené operace.
| Vlastnost | Hodnota |
|---|---|
| Default value: | False |
| Přípustné hodnoty: | false, true |
Jedno nebo více ID prostředků (oddělené mezerami) Mělo by se jednat o úplné ID prostředku obsahující všechny informace o argumentech ID prostředku. Měli byste zadat buď argumenty --ids, nebo jiné argumenty 'ID prostředku'.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Resource Id Arguments |
Soubor s požadavky na knihovnu.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Environment Configuration Arguments |
Maximální počet exekutorů, které jsou přidělené.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | DynamicExecutor Arguments |
Maximální počet uzlů.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | AutoScale Arguments |
Minimální počet exekutorů, které jsou přidělené.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | DynamicExecutor Arguments |
Minimální počet uzlů.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | AutoScale Arguments |
Název fondu Spark.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Resource Id Arguments |
Nečekejte na dokončení dlouhotrvající operace.
| Vlastnost | Hodnota |
|---|---|
| Default value: | False |
Početuzlůch
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Node Arguments |
Úroveň výpočetního výkonu, kterou má každý uzel ve fondu velkých objemů dat.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Node Arguments |
| Přípustné hodnoty: | Large, Medium, None, Small, XLarge, XXLarge, XXXLarge |
Seznam názvů balíčků pracovních prostorů
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Custom Libraries Arguments |
Akce balíčku musí být zadána při přidání nebo odebrání balíčku pracovního prostoru z fondu Apache Spark.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Custom Libraries Arguments |
| Přípustné hodnoty: | Add, Remove |
Název skupiny prostředků Výchozí skupinu můžete nakonfigurovat pomocí az configure --defaults group=<name>.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Resource Id Arguments |
Absolutní cesta konfiguračního souboru vlastností fondu Sparku
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Environment Configuration Arguments |
Název nebo ID předplatného Výchozí předplatné můžete nakonfigurovat pomocí az account set -s NAME_OR_ID.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Resource Id Arguments |
Značky oddělené mezerami: klíč[=hodnota] [klíč[=hodnota] ...]. K vymazání existujících značek použijte "".
Název pracovního prostoru.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Resource Id Arguments |
Globální parametry
Zvyšte úroveň podrobností protokolování, aby se zobrazily všechny protokoly ladění.
| Vlastnost | Hodnota |
|---|---|
| Default value: | False |
Zobrazte tuto zprávu nápovědy a ukončete ji.
Zobrazit pouze chyby, potlačit upozornění.
| Vlastnost | Hodnota |
|---|---|
| Default value: | False |
Výstupní formát
| Vlastnost | Hodnota |
|---|---|
| Default value: | json |
| Přípustné hodnoty: | json, jsonc, none, table, tsv, yaml, yamlc |
Řetězec dotazu JMESPath Další http://jmespath.org/ informace a příklady najdete v tématu.
Zvyšte úroveň podrobností protokolování. K úplnému ladění protokolů použijte příkaz --debug.
| Vlastnost | Hodnota |
|---|---|
| Default value: | False |
az synapse spark pool wait
Umístěte rozhraní příkazového řádku do stavu čekání, dokud nebude splněna podmínka fondu Sparku.
az synapse spark pool wait --big-data-pool-name
[--created]
[--custom]
[--deleted]
[--exists]
[--ids]
[--interval]
[--resource-group]
[--subscription]
[--timeout]
[--updated]
[--workspace-name]
Povinné parametry
Název fondu velkých objemů dat
Volitelné parametry
Následující parametry jsou volitelné, ale v závislosti na kontextu se může stát, že se jeden nebo více vyžaduje, aby se příkaz úspěšně spustil.
Počkejte na vytvoření s 'provisioningState' v 'Succeeded'.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Wait Condition Arguments |
| Default value: | False |
Počkejte, až podmínka splňuje vlastní dotaz JMESPath. Například provisioningState!='InProgress', instanceView.statuses[?code=='PowerState/running'].
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Wait Condition Arguments |
Počkejte na odstranění.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Wait Condition Arguments |
| Default value: | False |
Počkejte, až prostředek existuje.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Wait Condition Arguments |
| Default value: | False |
Jedno nebo více ID prostředků (oddělené mezerami) Mělo by se jednat o úplné ID prostředku obsahující všechny informace o argumentech ID prostředku. Měli byste zadat buď argumenty --ids, nebo jiné argumenty 'ID prostředku'.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Resource Id Arguments |
Interval dotazování v sekundách
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Wait Condition Arguments |
| Default value: | 30 |
Název skupiny prostředků Výchozí skupinu můžete nakonfigurovat pomocí az configure --defaults group=<name>.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Resource Id Arguments |
Název nebo ID předplatného Výchozí předplatné můžete nakonfigurovat pomocí az account set -s NAME_OR_ID.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Resource Id Arguments |
Maximální čekání v sekundách.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Wait Condition Arguments |
| Default value: | 3600 |
Počkejte, dokud se neaktualizuje stav zřizování ve stavu Úspěch.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Wait Condition Arguments |
| Default value: | False |
Název pracovního prostoru.
| Vlastnost | Hodnota |
|---|---|
| Skupina parametrů: | Resource Id Arguments |
Globální parametry
Zvyšte úroveň podrobností protokolování, aby se zobrazily všechny protokoly ladění.
| Vlastnost | Hodnota |
|---|---|
| Default value: | False |
Zobrazte tuto zprávu nápovědy a ukončete ji.
Zobrazit pouze chyby, potlačit upozornění.
| Vlastnost | Hodnota |
|---|---|
| Default value: | False |
Výstupní formát
| Vlastnost | Hodnota |
|---|---|
| Default value: | json |
| Přípustné hodnoty: | json, jsonc, none, table, tsv, yaml, yamlc |
Řetězec dotazu JMESPath Další http://jmespath.org/ informace a příklady najdete v tématu.
Zvyšte úroveň podrobností protokolování. K úplnému ladění protokolů použijte příkaz --debug.
| Vlastnost | Hodnota |
|---|---|
| Default value: | False |