az synapse spark job

Gerenciar trabalhos em lote do Synapse Spark.

Comandos

Nome	Description	Tipo	Status
az synapse spark job cancel	Cancelar um trabalho do Spark.	Core	GA
az synapse spark job list	Listar todos os trabalhos do Spark.	Core	GA
az synapse spark job show	Obtenha um trabalho do Spark.	Core	GA
az synapse spark job submit	Envie um trabalho do Spark.	Core	GA

az synapse spark job cancel

Editar

Cancelar um trabalho do Spark.

az synapse spark job cancel --livy-id
                            --spark-pool-name
                            --workspace-name
                            [--yes]

Exemplos

Cancelar um trabalho do Spark.

az synapse spark job cancel --livy-id 1 --workspace-name testsynapseworkspace --spark-pool-name testsparkpool

Parâmetros Exigidos

--livy-id

A ID do trabalho do Spark.

Propriedade	Valor
Parameter group:	Spark job Arguments

--spark-pool-name

O nome do pool do Spark.

--workspace-name

O nome do espaço de trabalho.

Parâmetros Opcionais

The following parameters are optional, but depending on the context, one or more might become required for the command to execute successfully.

--yes -y

Não solicite confirmação.

Propriedade	Valor
Valor padrão:	False

Parâmetros Globais

--debug

Aumente a verbosidade de log para mostrar todos os logs de depuração.

Propriedade	Valor
Valor padrão:	False

--help -h

Mostre esta mensagem de ajuda e saia.

--only-show-errors

Mostrar apenas erros, suprimindo avisos.

Propriedade	Valor
Valor padrão:	False

--output -o

Output format.

Propriedade	Valor
Valor padrão:	json
Valores aceitos:	json, jsonc, none, table, tsv, yaml, yamlc

--query

Cadeia de caracteres de consulta JMESPath. Consulte http://jmespath.org/ para obter mais informações e exemplos.

--subscription

Nome ou ID da assinatura. Você pode configurar a assinatura padrão usando az account set -s NAME_OR_ID.

--verbose

Aumentar a verbosidade do registro em log. Use --debug para logs de depuração completos.

Propriedade	Valor
Valor padrão:	False

az synapse spark job list

Editar

Listar todos os trabalhos do Spark.

az synapse spark job list --spark-pool-name
                          --workspace-name
                          [--from-index]
                          [--size]

Exemplos

Listar todos os trabalhos do Spark.

az synapse spark job list --workspace-name testsynapseworkspace --spark-pool-name testsparkpool

Parâmetros Exigidos

--spark-pool-name

O nome do pool do Spark.

--workspace-name

O nome do espaço de trabalho.

Parâmetros Opcionais

The following parameters are optional, but depending on the context, one or more might become required for the command to execute successfully.

--from-index

Parâmetro opcional que especifica de qual índice a lista deve começar.

--size

O tamanho da lista retornada. Por padrão, é 20 e esse é o máximo.

Parâmetros Globais

--debug

Aumente a verbosidade de log para mostrar todos os logs de depuração.

Propriedade	Valor
Valor padrão:	False

--help -h

Mostre esta mensagem de ajuda e saia.

--only-show-errors

Mostrar apenas erros, suprimindo avisos.

Propriedade	Valor
Valor padrão:	False

--output -o

Output format.

Propriedade	Valor
Valor padrão:	json
Valores aceitos:	json, jsonc, none, table, tsv, yaml, yamlc

--query

Cadeia de caracteres de consulta JMESPath. Consulte http://jmespath.org/ para obter mais informações e exemplos.

--subscription

Nome ou ID da assinatura. Você pode configurar a assinatura padrão usando az account set -s NAME_OR_ID.

--verbose

Aumentar a verbosidade do registro em log. Use --debug para logs de depuração completos.

Propriedade	Valor
Valor padrão:	False

az synapse spark job show

Editar

Obtenha um trabalho do Spark.

az synapse spark job show --livy-id
                          --spark-pool-name
                          --workspace-name

Exemplos

Obtenha um trabalho do Spark.

az synapse spark job show --livy-id 1 --workspace-name testsynapseworkspace --spark-pool-name testsparkpool

Parâmetros Exigidos

--livy-id

A ID do trabalho do Spark.

Propriedade	Valor
Parameter group:	Spark job Arguments

--spark-pool-name

O nome do pool do Spark.

--workspace-name

O nome do espaço de trabalho.

Parâmetros Globais

--debug

Aumente a verbosidade de log para mostrar todos os logs de depuração.

Propriedade	Valor
Valor padrão:	False

--help -h

Mostre esta mensagem de ajuda e saia.

--only-show-errors

Mostrar apenas erros, suprimindo avisos.

Propriedade	Valor
Valor padrão:	False

--output -o

Output format.

Propriedade	Valor
Valor padrão:	json
Valores aceitos:	json, jsonc, none, table, tsv, yaml, yamlc

--query

Cadeia de caracteres de consulta JMESPath. Consulte http://jmespath.org/ para obter mais informações e exemplos.

--subscription

Nome ou ID da assinatura. Você pode configurar a assinatura padrão usando az account set -s NAME_OR_ID.

--verbose

Aumentar a verbosidade do registro em log. Use --debug para logs de depuração completos.

Propriedade	Valor
Valor padrão:	False

az synapse spark job submit

Editar

Envie um trabalho do Spark.

az synapse spark job submit --executor-size {Large, Medium, Small}
                            --executors
                            --main-definition-file
                            --name
                            --spark-pool-name
                            --workspace-name
                            [--archives]
                            [--arguments]
                            [--configuration]
                            [--language {CSharp, PySpark, Python, Scala, Spark, SparkDotNet}]
                            [--main-class-name]
                            [--python-files]
                            [--reference-files]
                            [--tags]

Exemplos

Envie um trabalho do Java Spark.

az synapse spark job submit --name WordCount_Java --workspace-name testsynapseworkspace \
--spark-pool-name testsparkpool \
--main-definition-file abfss://testfilesystem@testadlsgen2.dfs.core.windows.net/samples/java/wordcount/wordcount.jar \
--main-class-name WordCount \
--arguments abfss://testfilesystem@testadlsgen2.dfs.core.windows.net/samples/java/wordcount/shakespeare.txt \
abfss://testfilesystem@testadlsgen2.dfs.core.windows.net/samples/java/wordcount/result/ \
--executors 2 --executor-size Small

Parâmetros Exigidos

--executor-size

O tamanho do executor.

Propriedade	Valor
Valores aceitos:	Large, Medium, Small

--executors

O número de executores.

--main-definition-file

O arquivo principal usado para o trabalho.

--name -n

O nome do trabalho do Spark.

--spark-pool-name

O nome do pool do Spark.

--workspace-name

O nome do espaço de trabalho.

Parâmetros Opcionais

The following parameters are optional, but depending on the context, one or more might become required for the command to execute successfully.

--archives

A matriz de arquivos.

--arguments

Argumentos opcionais para o trabalho (Observação: use URIs de armazenamento para argumentos de arquivo).

--configuration

A configuração do trabalho do Spark.

--language

A linguagem de trabalho do Spark.

Propriedade	Valor
Valor padrão:	Scala
Valores aceitos:	CSharp, PySpark, Python, Scala, Spark, SparkDotNet

--main-class-name

O identificador totalmente qualificado ou a classe principal que está no arquivo de definição principal.

--python-files

A matriz de arquivos usada para refenence no arquivo de definição do Python principal. Exemplos incluem arquivos whl personalizados e arquivos python personalizados. Pode passar vários arquivos, como az synapse spark job sumbit <other_args> --python_files abfss://file1 abss://file2.

--reference-files

Arquivos adicionais usados para referência no arquivo de definição principal.

--tags

Marcas separadas por espaço: key[=value] [key[=value] ...]. Use "" para limpar marcas existentes.

Parâmetros Globais

--debug

Aumente a verbosidade de log para mostrar todos os logs de depuração.

Propriedade	Valor
Valor padrão:	False

--help -h

Mostre esta mensagem de ajuda e saia.

--only-show-errors

Mostrar apenas erros, suprimindo avisos.

Propriedade	Valor
Valor padrão:	False

--output -o

Output format.

Propriedade	Valor
Valor padrão:	json
Valores aceitos:	json, jsonc, none, table, tsv, yaml, yamlc

--query

Cadeia de caracteres de consulta JMESPath. Consulte http://jmespath.org/ para obter mais informações e exemplos.

--subscription

Nome ou ID da assinatura. Você pode configurar a assinatura padrão usando az account set -s NAME_OR_ID.

--verbose

Aumentar a verbosidade do registro em log. Use --debug para logs de depuração completos.

Propriedade	Valor
Valor padrão:	False

Compartilhar via

az synapse spark job

Comandos

az synapse spark job cancel

Exemplos

Parâmetros Exigidos

Parâmetros Opcionais

az synapse spark job list

Exemplos

Parâmetros Exigidos

Parâmetros Opcionais

az synapse spark job show

Exemplos

Parâmetros Exigidos

az synapse spark job submit

Exemplos

Parâmetros Exigidos

Parâmetros Opcionais

Comentários