Meningkatkan alur aliran data pemetaan Azure Data Factory ke Fabric (Pratinjau)

Important

Pengalaman pemutakhiran dari Azure Data Factory Mapping Data Flows ke Fabric saat ini masih dalam pratinjau publik dan dapat berubah.

Tingkatkan alur Azure Data Factory yang berisi Pemetaan Aliran Data ke Microsoft Fabric Data Factory dengan mengikuti langkah-langkah dalam artikel ini. Artikel ini membahas jalur migrasi untuk pipeline yang menggunakan Mapping Data Flow, yang dikonversi menjadi transformasi mapping data flow (MDF) di Dataflow Gen2. Untuk memigrasikan alur yang tidak berisi Aliran Data Pemetaan, lihat Meningkatkan alur Azure Data Factory Anda ke Fabric.

Prasyarat

Sebelum memulai peningkatan, pastikan Anda memiliki hal berikut:

Skenario peningkatan yang didukung

Alat peningkatan mendukung skenario berikut:

  • Pipeline Azure Data Factory yang berisi Alur Data Pemetaan.
  • Azure Synapse Analytics alur yang berisi Aliran Data Pemetaan.
  • Migrasi lift-and-shift dari beban kerja Data Flow Pemetaan yang ada ke Fabric.

Memulai migrasi

Anda dapat mulai memigrasikan alur Azure Data Factory yang berisi Aliran Data Pemetaan dari salah satu titik entri berikut.

Titik masuk Paling cocok untuk Langkah awal
Dari Azure Data Factory Menjalankan penilaian kesiapan alur sebelum migrasi Option A: Mulai dari Azure Data Factory
Dari ruang kerja Fabric Memasang dan memigrasikan instans Azure Data Factory secara langsung dari Fabric Option B: Mulai dari Fabric

Kedua opsi lanjut ke Migrasikan pipeline.

Opsi A: Mulai dari Azure Data Factory

Gunakan opsi ini saat Anda ingin:

  • Meninjau kesiapan migrasi
  • Menjalankan penilaian migrasi
  • Mengevaluasi alur yang didukung sebelum migrasi

Mulai migrasi dari Azure Data Factory

  1. Buka portal Azure Data Factory.

  2. Pilih Migrasi ke Fabric (Pratinjau).

  3. Pilih Mulai.

    Cuplikan layar portal Azure Data Factory memperlihatkan opsi Migrasi ke Fabric (Pratinjau) dan tombol Mulai.

Meninjau penilaian migrasi

  1. Pada halaman Fabric Penilaian Migrasi (Pratinjau) , tinjau daftar alur yang didukung yang tersedia untuk migrasi.

  2. Pilih Selanjutnya.

    Cuplikan layar halaman Penilaian Migrasi Fabric mencantumkan alur yang siap untuk migrasi.

Pasang Azure Data Factory ke Fabric

  1. Pilih ruang kerja Fabric tempat Anda ingin memasang instans Azure Data Factory.

  2. Pilih Mount.

  3. Setelah operasi pemasangan selesai, pilih Lanjutkan di Fabric.

    Cuplikan layar pemilihan ruang kerja Fabric digunakan untuk memasang instans Azure Data Factory.

    Cuplikan layar Lanjutkan di Fabric untuk membuka instans Azure Data Factory yang dipasang di Microsoft Fabric.

Opsi B: Mulai dari Fabric

Gunakan opsi ini ketika Anda sudah tahu instans Azure Data Factory mana yang ingin Anda migrasikan dan ingin mulai langsung dari Fabric.

Pasang Azure Data Factory dari Fabric

  1. Buka ruang kerja Fabric Anda.

  2. Pilih Item baru.

  3. Pilih Azure Data Factory.

    Cuplikan layar ruang kerja Microsoft Fabric Pengalaman item baru memperlihatkan pilihan Azure Data Factory.

  4. Pilih instans Azure Data Factory untuk dipasang.

  5. Pilih OK.

    Cuplikan layar dialog pemilihan instans Azure Data Factory.

Memigrasikan alur

Setelah Anda memasang Azure Data Factory di Fabric, lanjutkan dengan alur kerja migrasi.

Pilih alur yang akan dimigrasikan

  1. Buka item Azure Data Factory yang dipasang di Fabric.

  2. Pilih Migrasi ke Fabric (Pratinjau).

    Cuplikan layar item Azure Data Factory yang dipasang di Fabric memperlihatkan opsi Migrasikan ke Fabric (Pratinjau).

  3. Pilih pipeline yang berisi aliran data pemetaan.

  4. Pilih Tinjau koneksi.

    Cuplikan layar pemilihan alur memperlihatkan alur siap untuk migrasi.

Petakan layanan yang tertaut ke koneksi Fabric

  1. Pada halaman Koneksi peta :

    • Tinjau layanan tertaut Azure Data Factory.
    • Petakan item-item tersebut ke koneksi Fabric.

  2. Pilih Konfirmasi.

    Cuplikan layar halaman Koneksi Peta untuk memetakan layanan tertaut Azure Data Factory ke koneksi Fabric.

Meninjau hasil migrasi

Setelah migrasi selesai, alat ini:

  • Memigrasikan alur dan Memetakan Aliran Data bersama-sama.
  • Mengonversi Aliran Data Pemetaan menjadi transformasi MDF di Dataflow Gen2.
  • Tempatkan artefak yang dimigrasikan di folder baru di ruang kerja Fabric.

Pilih Tampilkan di ruang kerja.

Cuplikan layar halaman hasil migrasi memperlihatkan sumber daya yang dimigrasikan dan statusnya.

Memvalidasi transformasi aliran data pemetaan yang dimigrasikan

Setelah migrasi, buka folder migrasi dan validasi transformasi MDF yang ditingkatkan sebelum Anda menjalankannya.

Buka item Dataflow Gen2 yang dimigrasikan

  1. Buka item Dataflow Gen2 yang dimigrasikan.

  2. Tinjau logika transformasi MDF yang dimigrasikan.

  3. Validasi grafik transformasi menggunakan toolbar transformasi MDF.

    Cuplikan layar pengalaman penulisan transformasi aliran data pemetaan memperlihatkan grafik transformasi yang dimigrasikan.

Menyimpan transformasi aliran data pemetaan yang dimigrasikan

  1. Buka menu Simpan &jalankan .

  2. Pilih Simpan.

    Cuplikan layar menu Simpan dan jalankan dalam pengalaman penulisan transformasi aliran data pemetaan.

Note

Hanya tindakan Simpan yang saat ini didukung untuk transformasi MDF selama pratinjau publik.

Jalankan pipeline yang dimigrasikan

Setelah validasi, jalankan alur Fabric yang dimigrasikan.

Konfigurasikan eksekusi alur kerja

  1. Buka pipeline Fabric yang dimigrasikan.

  2. Pilih aktivitas Aliran Data.

  3. Tinjau kueri transformasi MDF yang dipilih.

  4. Konfigurasikan pengaturan runtime Spark jika diperlukan.

    Cuplikan layar editor alur memperlihatkan konfigurasi aktivitas Aliran Data untuk transformasi aliran data pemetaan.

Jalankan pipeline yang telah dimigrasikan

  1. Validasikan pipeline.

  2. Jalankan alur secara manual atau konfigurasi jadwal dan pemicu.

    Cuplikan layar eksekusi pipeline dan opsi penjadwalan untuk pipeline yang dimigrasikan.

Memantau eksekusi transformasi aliran data pemetaan yang dimigrasikan

Anda dapat memantau eksekusi pipeline dan transformasi MDF yang dimigrasikan melalui:

  • Panel output pipeline
  • Hub Pemantauan
  • Aktivitas Berjalan
  • Detail eksekusi aktivitas aliran data

Cuplikan layar panel output alur memperlihatkan status eksekusi aktivitas Aliran Data.

Untuk melihat detail eksekusi:

  1. Buka detail eksekusi alur.

  2. Pilih aktivitas Aliran Data dari Eksekusi Aktivitas.

  3. Tinjau status eksekusi dan detail waktu proses.

    Tangkapan layar Monitoring Hub yang menampilkan eksekusi aktivitas alur dan statusnya.

    Cuplikan layar detail eksekusi aktivitas Aliran Data memperlihatkan metrik pemrosesan.

Keterbatasan

Batasan berikut saat ini berlaku selama pratinjau publik:

Wilayah Batasan
Flowlets Tidak didukung.
Pustaka Data Flow Tidak didukung.
Fungsi yang ditentukan pengguna (UDF) Tidak didukung.
Eksekusi aliran data Transformasi MDF hanya dapat dijalankan melalui aktivitas Pipeline Dataflow. Aliran data refresh tidak didukung.
Jaringan Virtual Terkelola Dukungan Virtual Network terkelola tidak tersedia.
Eksekusi runtime Spark Transformasi MDF saat ini menggunakan infrastruktur runtime Spark yang mirip dengan Azure Data Factory dan Azure Synapse Analytics Pemetaan Aliran Data.

Konten terkait

  • Last updated on