Sdílet prostřednictvím


Azure Synapse Runtime pro Apache Spark 3.4 (EOSA)

Výstraha

Oznámení o ukončení podpory

  • Ukončení podpory pro Azure Synapse Runtime pro Apache Spark 3.4
  • Modul runtime Azure Synapse pro Apache Spark 3.4 bude zastaralý a zakázaný 31. března 2026. 

Azure Synapse Analytics podporuje více modulů runtime pro Apache Spark. Tento dokument se zabývá komponentami a verzemi modulu runtime pro Modul runtime Azure Synapse pro Apache Spark 3.4.

Verze komponent

Komponenta Verze
Apache Spark 3.4.1
Operační systém Mariner 2.0
Java 11
Scala 2.12.17
Delta Lake 2.4.0
Python 3,10
R 4.2.2

Návod

Aktuální informace najdete v podrobném seznamu změn a konkrétní poznámky k verzi pro moduly runtime Sparku, zkontrolujte a přihlaste se k odběru verzí a aktualizací prostředí Spark Runtime.

Knihovny

Pokud chcete zkontrolovat knihovny zahrnuté ve službě Azure Synapse Runtime pro Apache Spark 3.4 pro Javu/Scala, Python a R přejděte do modulu Azure Synapse Runtime pro Poznámky k verzi Apache Spark 3.4.

Návod

spark.memoryOverheadFactor.preferred: Pokud je nastavení true, Spark upřednostní spark.driver.memoryOverheadFactor a spark.executor.memoryOverheadFactor před explicitními hodnotami definovanými spark.driver.memoryOverhead a spark.executor.memoryOverhead. Když je zapnutý, režie se vždy počítá pomocí faktoru a explicitní nastavení režijní režie jsou ignorována. Výchozí je nepravda pro zpětnou kompatibilitu.