Apache Spark 3.4 için Azure Synapse Çalışma Zamanı (kullanım dışı)

Caution

Apache Spark 3.4 için Azure Synapse Runtime kullanım dışı bırakıldı ve destek 31 Mart 2026'da sona eriyor. Bu tarihten sonra sınırlı bir süre boyunca çalışmaya devam edebilir ancak artık desteklenmez ve hata düzeltmeleri, güvenlik güncelleştirmeleri veya güvenlik açığı düzeltme ekleri almaz. Yükseltme yapmazsanız Apache Spark 3.4 için Azure Synapse Çalışma Zamanı'nda çalışan iş yükleri desteklenmeyen bir çalışma zamanında çalışmaya devam eder. Çalışma zamanı artık kritik düzeltmeler veya güncelleştirmeler almayacağı için bu durum hem işletimsel hem de güvenlik risklerini artırır. Apache Spark 3.4 tabanlı iş yüklerinizi Apache Spark 3.5 (GA).Azure Synapse Runtime'a yükseltmenizi kesinlikle öneririz>

Azure Synapse Analytics, Apache Spark için birden çok çalışma zamanını destekler. Bu belge Apache Spark 3.4 için Azure Synapse Runtime'ın çalışma zamanı bileşenlerini ve sürümlerini kapsar.

Bileşen sürümleri

Bileşen Sürüm
Apache Spark 3.4.1
İşletim Sistemi Mariner 2.0
Java 11
Scala programlama dili 2.12.17
Delta Gölü 2.4.0
Piton 3,10
R 4.2.2

İpucu

Güncel bilgiler, değişikliklerin ayrıntılı listesi ve Spark çalışma zamanları için belirli sürüm notları için Spark Çalışma Zamanı Yayınları ve Güncelleştirmeleri'ne göz atın ve abone olun.

Kitaplıklar

Java/Scala için Apache Spark 3.4 için Azure Synapse Runtime'da bulunan kitaplıkları denetlemek için Python ve R, Apache Spark 3.4 sürüm notları için Azure Synapse Runtime'a gidin.

İpucu

spark.memoryOverheadFactor.preferred: True olarak ayarlandığında, Spark spark.driver.memoryOverheadFactor ve spark.executor.memoryOverheadFactor tarafından tanımlanan açık değerler yerine önceliklendirir. Etkinleştirildiğinde, ek yük her zaman faktör kullanılarak hesaplanır ve açık overhead ayarları göz ardı edilir. Geriye dönük uyumluluk için varsayılan olarak yanlış bir özelliktir.