Partager via

Azure Synapse Runtime pour Apache Spark 3.2 (déconseillé)

  • Article

Azure Synapse Analytics prend en charge plusieurs runtimes pour Apache Spark. Ce document couvre les composants et versions d’exécution d’Azure Synapse Runtime pour Apache Spark 3.2.

Attention

Notification de dépréciation et de désactivation pour Le runtime Azure Synapse pour Apache Spark 3.2

  • Fin du support a été annoncée pour Azure Synapse Runtime pour Apache Spark 3.2 juillet 2023. Conformément à la politique de cycle de vie du runtime Synapse pour Apache Spark, le runtime Azure Synapse pour Apache Spark 3.2 a été mis hors service le 8 juillet 2024. Les flux de travail existants continueront à s’exécuter, mais les mises à jour de sécurité et les correctifs de bogues ne seront plus disponibles. Les métadonnées restent temporairement dans l’espace de travail Synapse.
  • À compter du 8 juillet 2024, Azure Synapse a supprimé la prise en charge officielle des runtimes Spark 3.2. Toutefois, en fonction des demandes reçues de plusieurs clients, nous avons étendu l’utilisation de ce runtime jusqu’au 31 octobre 2024 et la désactivation des travaux démarre peu après.
  • Nous vous recommandons vivement de mettre à niveau vos charges de travail Apache Spark 3.2 vers Azure Synapse Runtime pour Apache Spark 3.4.
  • Pour obtenir des informations à jour, une liste détaillée des modifications et des notes de publication spécifiques pour les runtimes Spark, vérifiez et abonnez-vous aux versions et mises à jour des runtimes Spark.

Versions des composants

Composant Version
Apache Spark 3.2.1
Système d’exploitation Ubuntu 18.04
Java 1.8.0_282
Scala 2.12.15
Hadoop 3.3.1
.NET Core 3.1
.NET 2.0.0
Delta Lake 1.2
Python 3.8
R (préversion) 4,2

Synapse-Python38-CPU.yml contient la liste des bibliothèques fournies dans l’environnement Python 3.8 par défaut dans Azure Synapse Spark.

Bibliothèques

Pour vérifier les bibliothèques incluses dans Le runtime Azure Synapse pour Apache Spark 3.2 pour Java/Scala, Python et R, accédez aux notes de publication d’Azure Synapse Runtime pour Apache Spark 3.2

Étapes suivantes

Migration entre les versions d’Apache Spark - prise en charge

Pour obtenir des conseils sur la migration d’anciennes versions du runtime vers Azure Synapse Runtime pour Apache Spark 3.3 ou 3.4, reportez-vous à Runtime pour Apache Spark Overview.