Bagikan melalui

Memigrasikan pustaka Spark dari Azure Synapse ke Fabric

Kumpulan Azure Synapse Spark menawarkan opsi umpan dan pustaka kustom yang berbeda. Dalam Fabric, setiap runtime dilengkapi dengan sekumpulan pustaka yang telah diinstal sebelumnya (pustaka bawaan). Namun, berdasarkan skenario dan kebutuhan spesifik, Anda juga dapat menyertakan pustaka lain menggunakan pustaka lingkungan dan pustaka sebaris. Untuk memindahkan pustaka kumpulan Azure Synapse Spark ke Fabric, gunakan pustaka lingkungan.

Untuk pertimbangan pustaka Spark, lihat perbedaan antara Azure Synapse Spark dan Fabric.

Prasyarat

  • Jika Anda belum memilikinya, buat ruang kerja Fabric di penyewa Anda.
  • Jika Anda belum memilikinya, buat Lingkungan di ruang kerja Anda.

Opsi 1: Menambahkan pustaka Spark ke lingkungan kustom

Anda dapat memindahkan pustaka kumpulan Spark ke lingkungan sebagai berikut:

  1. Buka Synapse Studio: Masuk ke Azure. Navigasi ke ruang kerja Azure Synapse Anda dan buka Synapse Studio.
  2. Temukan pustaka Spark:
    • Buka Kelola area dan pilih kumpulan Apache Spark.
    • Temukan kumpulan Apache Spark, pilih Paket dan temukan pustaka Spark untuk kumpulan.
  3. Mendapatkan pustaka Spark: Temukan paket requirements.txt, environment.yml, atau ruang kerja yang diinstal di kumpulan. Dapatkan daftar pustaka yang terinstal di kumpulan.
  4. Setelah Anda memiliki pustaka Spark, tambahkan pustaka Spark kustom ke lingkungan di Fabric. Dalam Lingkungan Anda, buka Pustaka dan tambahkan pustaka:
    • Dari Pustaka Publik, Anda dapat mengunggah file .yml. Anda juga dapat menginstal pustaka menggunakan PyPI dan Conda.
    • Dari Pustaka Kustom, Anda dapat menginstal pustaka dengan menggunakan file .jar/.whl/.tar.gz.
  5. Klik Simpan dan Terbitkan perubahan.

Cuplikan layar memperlihatkan pustaka Spark.

Pelajari selengkapnya tentang menambahkan pustaka Spark ke Lingkungan.

Catatan

Perhatikan bahwa penginstalan pustaka mungkin memakan waktu.

Konten terkait

  • Last updated on