SparkJobProperties interface
Propriétés du travail Spark.
Propriétés
| archives | Archives à utiliser dans ce travail. |
| args | Arguments de ligne de commande pour l’application. |
| class |
Classe principale pour l’application Java/Scala. |
| conf | Propriétés de configuration Spark. |
| driver |
Nombre de cœurs à utiliser pour le pilote. |
| driver |
Quantité de mémoire à utiliser pour le processus du pilote. |
| executor |
Nombre de cœurs à utiliser pour chaque exécuteur. |
| executor |
Quantité de mémoire à utiliser par processus d’exécuteur. |
| file | Fichier contenant l’application à exécuter. |
| files | fichiers à utiliser dans ce travail. |
| jars | Jars à utiliser dans ce travail. |
| name | Nom du travail. |
| num |
Nombre d’exécuteurs à lancer pour ce travail. |
Détails de la propriété
archives
Archives à utiliser dans ce travail.
archives?: string[]
Valeur de propriété
string[]
args
Arguments de ligne de commande pour l’application.
args?: string[]
Valeur de propriété
string[]
className
Classe principale pour l’application Java/Scala.
className?: string
Valeur de propriété
string
conf
Propriétés de configuration Spark.
conf?: any
Valeur de propriété
any
driverCores
Nombre de cœurs à utiliser pour le pilote.
driverCores: number
Valeur de propriété
number
driverMemory
Quantité de mémoire à utiliser pour le processus du pilote.
driverMemory: string
Valeur de propriété
string
executorCores
Nombre de cœurs à utiliser pour chaque exécuteur.
executorCores: number
Valeur de propriété
number
executorMemory
Quantité de mémoire à utiliser par processus d’exécuteur.
executorMemory: string
Valeur de propriété
string
file
Fichier contenant l’application à exécuter.
file: string
Valeur de propriété
string
files
fichiers à utiliser dans ce travail.
files?: string[]
Valeur de propriété
string[]
jars
Jars à utiliser dans ce travail.
jars?: string[]
Valeur de propriété
string[]
name
Nom du travail.
name?: string
Valeur de propriété
string
numExecutors
Nombre d’exécuteurs à lancer pour ce travail.
numExecutors: number
Valeur de propriété
number