Caution
Azure Synapse Apache Spark 3.4 のランタイムは非推奨となり、サポートは 2026 年 3 月 31 日に終了しました。 この日付を超えて限られた期間実行が続く可能性がある一方で、サポートされなくなり、バグ修正プログラム、セキュリティ更新プログラム、脆弱性パッチは受け取りません。
アップグレードしない場合、Azure Synapse Runtime for Apache Spark 3.4 で実行されているワークロードは、サポートされていないランタイムで引き続き動作します。 これにより、ランタイムが重要な修正プログラムや更新プログラムを受け取らなくなるので、運用上のリスクとセキュリティ上のリスクの両方が増加します。
Azure Synapse Analytics は、Apache Spark の複数のランタイムをサポートしています。 このドキュメントでは、Azure Synapse Runtime for Apache Spark 3.4 のランタイム コンポーネントとバージョンについて説明します。
コンポーネントのバージョン
| コンポーネント | バージョン |
|---|---|
| Apache Spark | 3.4.1 |
| オペレーティング システム | マリナー 2.0 |
| Java | 11 |
| スカラ (プログラミング言語) | 2.12.17 |
| Delta Lake | 2.4.0 |
| Python | 3.10 |
| R | 4.2.2 |
ヒント
最新の情報、変更の詳細な一覧、Spark ランタイムの特定のリリース ノートについては、 Spark ランタイムのリリースと更新プログラムを確認してサブスクライブします。
ライブラリ
Azure Synapse Runtime for Apache Spark 3.4 for Java/Scala、Python、R に含まれるライブラリを確認するには、「 Azure Synapse Runtime for Apache Spark 3.4 リリース ノートに移動します。
ヒント
spark.memoryOverheadFactor.preferred: trueに設定した場合、Sparkはspark.driver.memoryOverheadおよびspark.executor.memoryOverheadで定義された明示的な値よりもspark.driver.memoryOverheadとspark.executor.memoryOverheadを優先します。 有効化すると、オーバーヘッドは常にファクターを使って計算され、明示的なオーバーヘッド設定は無視されます。 デフォルトは後方互換性のためにfalseです。