Aracılığıyla paylaş


Apache Spark 3.4 için Azure Synapse Runtime (EOSA)

Uyarı

Destek Sonu Duyurusu

  • Apache Spark 3.4 için Azure Synapse Runtime için destek sonu duyuruldu.
  • Apache Spark 3.4 için Azure Synapse Runtime, 31 Mart 2026'da kullanımdan kaldırılacaktır. 

Azure Synapse Analytics, Apache Spark için birden çok çalışma zamanını destekler. Bu belge Apache Spark 3.4 için Azure Synapse Runtime'ın çalışma zamanı bileşenlerini ve sürümlerini kapsar.

Bileşen sürümleri

Bileşen Sürüm
Apache Spark 3.4.1
İşletim Sistemi Mariner 2.0
Java 11
Scala programlama dili 2.12.17
Delta Gölü 2.4.0
Piton 3,10
R 4.2.2

İpucu

Güncel bilgiler, değişikliklerin ayrıntılı listesi ve Spark çalışma zamanları için belirli sürüm notları için Spark Çalışma Zamanı Yayınları ve Güncelleştirmeleri'ne göz atın ve abone olun.

Kitaplıklar

Java/Scala için Apache Spark 3.4 için Azure Synapse Runtime'da bulunan kitaplıkları denetlemek için Python ve R, Apache Spark 3.4 sürüm notları için Azure Synapse Runtime'a gidin.

İpucu

spark.memoryOverheadFactor.preferred: True olarak ayarlandığında, Spark spark.driver.memoryOverheadFactor ve spark.executor.memoryOverheadFactor tarafından tanımlanan açık değerler yerine önceliklendirir. Etkinleştirildiğinde, ek yük her zaman faktör kullanılarak hesaplanır ve açık overhead ayarları göz ardı edilir. Geriye dönük uyumluluk için varsayılan olarak yanlış bir özelliktir.