Azure Synapse Runtime untuk Apache Spark 3.2 (tidak digunakan lagi)
Azure Synapse Analytics mendukung beberapa runtime untuk Apache Spark. Dokumen ini mencakup komponen dan versi runtime untuk Azure Synapse Runtime untuk Apache Spark 3.2.
Perhatian
Pemberitahuan penghentian dan penonaktifan untuk Azure Synapse Runtime untuk Apache Spark 3.2
- Akhir Dukungan diumumkan untuk Azure Synapse Runtime untuk Apache Spark 3.2 Juli 8, 2023. Sesuai dengan runtime Synapse untuk kebijakan siklus hidup Apache Spark, runtime Azure Synapse untuk Apache Spark 3.2 dihentikan per 8 Juli 2024. Alur kerja yang ada akan terus berjalan tetapi pembaruan keamanan dan perbaikan bug tidak akan lagi tersedia. Metadata untuk sementara akan tetap berada di ruang kerja Synapse.
- Mulai 8 Juli 2024, Azure Synapse menghentikan dukungan resmi untuk Runtime Spark 3.2. Namun, berdasarkan permintaan yang diterima dari beberapa pelanggan, kami telah memperpanjang penggunaan runtime ini hingga 31 Oktober 2024, dan penonaktifan pekerjaan akan segera dimulai setelah itu.
- Kami sangat menyarankan Anda meningkatkan beban kerja Apache Spark 3.2 ke Azure Synapse Runtime untuk Apache Spark 3.4.
- Untuk informasi terbaru, daftar perubahan terperinci, dan catatan rilis tertentu untuk runtime Spark, periksa dan berlangganan Rilis dan Pembaruan Runtime Spark.
Versi komponen
| Komponen | Versi |
|---|---|
| Apache Spark | 3.2.1 |
| Sistem Operasi | Ubuntu 18.04 |
| Java | 1.8.0_282 |
| Scala | 2.12.15 |
| Hadoop | 3.3.1 |
| .NET Core | 3.1 |
| .NET | 2.0.0 |
| Delta Lake | 1.2 |
| Python | 3.8 |
| R (Pratinjau) | 4.2 |
Synapse-Python38-CPU.yml berisi daftar pustaka yang dikirim di lingkungan Python 3.8 default di Azure Synapse Spark.
Pustaka
Untuk memeriksa pustaka yang disertakan dalam Azure Synapse Runtime untuk Apache Spark 3.2 untuk Java/Scala, Python dan R, buka Azure Synapse Runtime untuk Catatan Rilis Apache Spark 3.2
Langkah berikutnya
Migrasi antara versi Apache Spark - dukungan
Untuk panduan tentang migrasi dari versi runtime yang lebih lama ke Azure Synapse Runtime untuk Apache Spark 3.3 atau 3.4, lihat Ringkasan Runtime for Apache Spark.