SparkJobProperties interface
Propiedades del trabajo de Spark.
Propiedades
| archives | Archivos que se usarán en este trabajo. |
| args | Argumentos de línea de comandos para la aplicación. |
| class |
Clase principal para la aplicación Java/Scala. |
| conf | Propiedades de configuración de Spark. |
| driver |
Número de núcleos que se van a usar para el controlador. |
| driver |
Cantidad de memoria que se va a usar para el proceso del controlador. |
| executor |
Número de núcleos que se usarán para cada ejecutor. |
| executor |
Cantidad de memoria que se va a usar por proceso de ejecutor. |
| file | Archivo que contiene la aplicación que se va a ejecutar. |
| files | archivos que se usarán en este trabajo. |
| jars | Jars que se usarán en este trabajo. |
| name | Nombre del trabajo. |
| num |
Número de ejecutores que se van a iniciar para este trabajo. |
Detalles de las propiedades
archives
Archivos que se usarán en este trabajo.
archives?: string[]
Valor de propiedad
string[]
args
Argumentos de línea de comandos para la aplicación.
args?: string[]
Valor de propiedad
string[]
className
Clase principal para la aplicación Java/Scala.
className?: string
Valor de propiedad
string
conf
Propiedades de configuración de Spark.
conf?: any
Valor de propiedad
any
driverCores
Número de núcleos que se van a usar para el controlador.
driverCores: number
Valor de propiedad
number
driverMemory
Cantidad de memoria que se va a usar para el proceso del controlador.
driverMemory: string
Valor de propiedad
string
executorCores
Número de núcleos que se usarán para cada ejecutor.
executorCores: number
Valor de propiedad
number
executorMemory
Cantidad de memoria que se va a usar por proceso de ejecutor.
executorMemory: string
Valor de propiedad
string
file
Archivo que contiene la aplicación que se va a ejecutar.
file: string
Valor de propiedad
string
files
archivos que se usarán en este trabajo.
files?: string[]
Valor de propiedad
string[]
jars
Jars que se usarán en este trabajo.
jars?: string[]
Valor de propiedad
string[]
name
Nombre del trabajo.
name?: string
Valor de propiedad
string
numExecutors
Número de ejecutores que se van a iniciar para este trabajo.
numExecutors: number
Valor de propiedad
number