DatabricksCluster Třída

Definuje informace o clusteru Databricks pro použití v objektu DatabricksSection.

Inicializovat.

Konstruktor

DatabricksCluster(existing_cluster_id=None, spark_version=None, node_type=None, instance_pool_id=None, num_workers=None, min_workers=None, max_workers=None, spark_env_variables=None, spark_conf=None, init_scripts=None, cluster_log_dbfs_path=None, permit_cluster_restart=None)

Parametry

Name	Description
existing_cluster_id	str ID clusteru existujícího interaktivního clusteru v pracovním prostoru Databricks Pokud je tento parametr zadán, neměl by být zadán žádný z dalších parametrů. Default value: None
spark_version	str Verze Sparku pro cluster Spuštěný v Databricks. Příklad: 10.4.x-scala2.12. Default value: None
node_type	str Typy uzlů virtuálních počítačů Azure pro cluster spuštěný v Databricks. Příklad: "Standard_D3_v2". Default value: None
instance_pool_id	str ID fondu instancí, ke kterému je potřeba cluster připojit. Default value: None
num_workers	int Počet pracovních procesů pro cluster spuštěný v Databricks. Pokud je tento parametr zadán, neměly by být zadány min_workers parametry max_workers . Default value: None
min_workers	int Minimální počet pracovních procesů pro cluster Databricks s automatickým škálováním Default value: None
max_workers	int Počet pracovních procesů pro cluster Se spuštěným systémem Databricks s automatickým škálováním Default value: None
spark_env_variables	dict(<xref:{str:str}>) Proměnné prostředí Spark pro cluster spuštění Databricks. Default value: None
spark_conf	dict(<xref:{str:str}>) Konfigurace Sparku pro cluster spuštěný v Databricks. Default value: None
init_scripts	list[str] Označeno jako zastaralé Databricks oznámila, že inicializační skript uložený v DBFS přestane fungovat po 1. prosinci 2023. Pokud chcete tento problém zmírnit, použijte 1) globální inicializační skripty v Databricks po https://learn.microsoft.com/azure/databricks/init-scripts/global 2) okomentujte řádek init_scripts v kroku AzureML Databricks. Default value: None
cluster_log_dbfs_path	str Cesta DBFS k umístění, kam je potřeba doručovat protokoly clusterů. Default value: None
permit_cluster_restart	bool pokud je zadán existing_cluster_id, tento parametr udává, jestli je možné cluster restartovat jménem uživatele. Default value: None

Metody

validate

Ověřte zadané podrobnosti o clusteru Databricks. Ověřte, zda jsou zadány typy zadaných parametrů a zda je zadána správná kombinace parametrů. Musíte například zadat existing_cluster_id nebo zadat zbytek parametrů clusteru. Další informace naleznete v definicích parametrů konstruktoru.

validate

Ověřte zadané podrobnosti o clusteru Databricks.

Ověřte, zda jsou zadány typy zadaných parametrů a zda je zadána správná kombinace parametrů. Musíte například zadat existing_cluster_id nebo zadat zbytek parametrů clusteru. Další informace naleznete v definicích parametrů konstruktoru.

validate()

Výjimky

Typ	Description
class:azureml.exceptions.UserErrorException