Poznámka:
Přístup k této stránce vyžaduje autorizaci. Můžete se zkusit přihlásit nebo změnit adresáře.
Přístup k této stránce vyžaduje autorizaci. Můžete zkusit změnit adresáře.
Caution
Azure Synapse Runtime pro Apache Spark 3.4 ukončil podporu 31. března 2026. Ačkoliv stávající pracovní zátěže mohou běžet omezenou dobu po tomto datu, runtime již není podporován a již nepřichází opravy chyb, bezpečnostní aktualizace ani odstranění zranitelností. V důsledku toho jsou pracovní zátěže běžící na Spark 3.4 v průběhu času vystaveny rostoucím provozním a bezpečnostním rizikům.
Navíc brzy začne postupné vypínání pracovních zákázek Spark 3.4 a není zaručeno, že pracovní zátěže Spark 3.4 budou v budoucnu pokračovat. Pro minimalizaci narušení a udržení podporované platformy důrazně doporučujeme co nejdříve upgradovat své pracovní zátěže založené na Apache Spark 3.4 na Azure Synapse Runtime pro Apache Spark 3.5 (GA).
Azure Synapse Analytics podporuje více modulů runtime pro Apache Spark. Tento dokument se zabývá komponentami a verzemi modulu runtime pro Modul runtime Azure Synapse pro Apache Spark 3.4.
Verze komponent
| Komponenta | Verze |
|---|---|
| Apache Spark | 3.4.1 |
| Operační systém | Mariner 2.0 |
| Java | 11 |
| Scala | 2.12.17 |
| Delta Lake | 2.4.0 |
| Python | 3,10 |
| R | 4.2.2 |
Návod
Aktuální informace najdete v podrobném seznamu změn a konkrétní poznámky k verzi pro moduly runtime Sparku, zkontrolujte a přihlaste se k odběru verzí a aktualizací prostředí Spark Runtime.
Knihovny
Pokud chcete zkontrolovat knihovny zahrnuté ve službě Azure Synapse Runtime pro Apache Spark 3.4 pro Javu/Scala, Python a R přejděte do modulu Azure Synapse Runtime pro Poznámky k verzi Apache Spark 3.4.
Návod
spark.memoryOverheadFactor.preferred: Pokud je nastavení true, Spark upřednostní spark.driver.memoryOverheadFactor a spark.executor.memoryOverheadFactor před explicitními hodnotami definovanými spark.driver.memoryOverhead a spark.executor.memoryOverhead. Když je zapnutý, režie se vždy počítá pomocí faktoru a explicitní nastavení režijní režie jsou ignorována. Výchozí je nepravda pro zpětnou kompatibilitu.