Membuat, mengonfigurasi, dan menggunakan lingkungan di Microsoft Fabric
Lingkungan Microsoft Fabric adalah item terkonsolidasi untuk semua pengaturan perangkat keras dan perangkat lunak Anda. Di lingkungan, Anda dapat memilih runtime Spark yang berbeda, mengonfigurasi sumber daya komputasi Anda, menginstal pustaka dari repositori publik atau direktori lokal, dan banyak lagi.
Tutorial ini memberi Anda gambaran umum tentang membuat, mengonfigurasi, dan menggunakan lingkungan.
Membuat lingkungan
Ada beberapa titik masuk untuk membuat lingkungan baru.
Titik masuk standar
Di hub pembuatan atau bagian Baru ruang kerja Anda, Anda dapat menemukan opsi untuk membuat lingkungan baru seperti item Fabric lainnya.
Buat selama pilihan
Saat Anda memilih lingkungan untuk notebook Anda, definisi pekerjaan Spark dan default ruang kerja, Anda bisa menemukan opsi untuk membuat lingkungan baru.
Mengonfigurasi lingkungan
Ada tiga komponen utama dalam lingkungan, yaitu komputasi Spark yang mencakup runtime, pustaka, dan sumber daya Spark. Konfigurasi komputasi dan pustaka Spark diperlukan agar penerbitan efektif, sementara sumber daya adalah penyimpanan bersama yang dapat berubah secara real time. Lihat bagian Simpan dan terbitkan perubahan untuk detail selengkapnya.
Mengonfigurasi komputasi Spark
Untuk lingkungan, Anda dapat memilih dari berbagai runtime Spark, masing-masing dengan pengaturan defaultnya sendiri dan paket yang telah diinstal sebelumnya. Untuk melihat runtime yang tersedia, navigasikan ke tab Beranda lingkungan dan pilih Runtime. Pilih runtime yang paling sesuai dengan kebutuhan Anda.
Penting
- Jika Anda memperbarui runtime lingkungan dengan konfigurasi atau pustaka yang ada, Anda harus menerbitkan ulang konten berdasarkan versi runtime yang diperbarui.
- Jika konfigurasi atau pustaka yang ada tidak kompatibel dengan versi runtime yang baru diperbarui, penerbitan gagal. Anda harus menghapus konfigurasi atau pustaka yang tidak kompatibel dan menerbitkan lingkungan lagi.
Komputasi Microsoft Fabric Spark memberikan kecepatan dan efisiensi yang tak tertandingi yang berjalan pada Spark dan pengalaman yang disesuaikan dengan persyaratan. Di lingkungan Anda, Anda dapat memilih dari berbagai kumpulan yang dibuat oleh admin ruang kerja dan admin kapasitas. Anda selanjutnya dapat menyesuaikan konfigurasi dan mengelola properti Spark agar efektif dalam sesi Spark. Untuk informasi selengkapnya, lihat Pengaturan konfigurasi komputasi Spark di lingkungan Fabric.
Mengelola pustaka
Kecuali untuk pustaka bawaan yang disediakan oleh setiap runtime Spark, lingkungan Fabric memungkinkan Anda menginstal pustaka dari sumber publik atau mengunggah pustaka kustom yang dibuat oleh Anda atau organisasi Anda. Setelah Anda berhasil menginstal pustaka, pustaka tersebut tersedia di sesi Spark Anda. Untuk informasi selengkapnya, lihat Manajemen pustaka di lingkungan Fabric. Anda juga dapat menemukan praktik terbaik dalam mengelola pustaka di Microsoft Fabric.Mengelola pustaka Apache Spark di Microsoft Fabric
Sumber
Bagian Sumber Daya di lingkungan memfasilitasi kemampuan untuk mengelola sumber daya kecil selama fase pengembangan. File yang diunggah ke lingkungan dapat diakses di seluruh buku catatan saat dilampirkan. Untuk informasi selengkapnya, lihat Mengelola sumber daya di lingkungan Fabric
Simpan dan terbitkan perubahan
Di tab Beranda pita lingkungan, Anda bisa dengan mudah menemukan dua tombol yang disebut Simpan dan Terbitkan. Mereka akan diaktifkan ketika ada perubahan tertunda yang belum disimpan atau tidak diterbitkan di bagian Pustaka dan komputasi Spark.
Anda juga akan melihat spanduk yang meminta kedua tombol ini ketika ada perubahan yang tertunda di bagian Pustaka dan komputasi Spark, mereka memiliki fungsionalitas yang sama dengan yang ada di pita.
- Perubahan yang belum disimpan hilang jika Anda me-refresh atau membiarkan browser terbuka. Pilih tombol Simpan untuk memastikan perubahan Anda direkam sebelum pergi. Penyimpanan tidak menerapkan konfigurasi tetapi menyimpannya dalam cache dalam sistem.
- Pilih Terbitkan untuk menerapkan perubahan pada Pustaka dan komputasi Spark. Halaman Perubahan tertunda akan muncul untuk peninjauan akhir sebelum penerbitan. Selanjutnya pilih Terbitkan semua untuk memulai konfigurasi di lingkungan Fabric. Proses ini mungkin memakan waktu, terutama jika perubahan pustaka terlibat.
- Untuk membatalkan proses penerbitan, pilih Tampilkan kemajuan di banner dan Batalkan operasi.
- Pemberitahuan muncul setelah penerbitan selesai. Pemberitahuan kesalahan terjadi jika ada masalah selama proses.
Catatan
Lingkungan hanya menerima satu penerbitan pada satu waktu. Tidak ada perubahan lebih lanjut yang dapat dilakukan pada pustaka atau bagian komputasi Spark selama penerbitan yang sedang berlangsung. Penerbitan tidak berdampak pada penambahan, penghapusan, atau pengeditan file dan folder di bagian Sumber Daya . Tindakan untuk mengelola sumber daya secara real-time, menerbitkan tidak memblokir perubahan di bagian sumber daya.
Melampirkan lingkungan
Lingkungan Microsoft Fabric dapat dilampirkan ke ruang kerja Rekayasa Data/Sains atau notebook dan definisi kerja Spark Anda.
Melampirkan lingkungan sebagai default ruang kerja
Temukan tab Lingkungan dengan memilih Pengaturan ruang kerja ->Rekayasa Data/Sains ->Pengaturan Spark.
Ruang kerja baru
Saat Anda bekerja di ruang kerja yang baru atau tidak menyiapkan pustaka dan pengaturan Spark, layar pengaturan Spark berikut muncul.
Admin ruang kerja dapat menentukan beban kerja default untuk seluruh ruang kerja. Nilai yang dikonfigurasi di sini efektif untuk notebook dan definisi kerja Spark yang dilampirkan ke Pengaturan Ruang Kerja.
Tombol Atur lingkungan default dapat meningkatkan pengalaman pengguna. Secara default, tombol ini diatur ke Nonaktif. Jika tidak ada properti atau pustaka Spark default yang diperlukan sebagai default ruang kerja, admin dapat menentukan runtime Spark dalam keadaan ini. Namun, jika admin ingin menyiapkan komputasi dan pustaka Spark default untuk ruang kerja, mereka dapat mengalihkan tombol ke Aktif dan dengan mudah melampirkan lingkungan sebagai default ruang kerja. Opsi ini membuat semua konfigurasi di lingkungan efektif sebagai Pengaturan Ruang Kerja.
Ruang kerja dengan pustaka atau properti Spark yang sudah ada
Fitur lingkungan adalah peningkatan besar ke bagian Rekayasa Data/Ilmu Data di Pengaturan Ruang Kerja. Sebagai bagian dari peningkatan ini, Fabric tidak lagi mendukung manajemen pustaka dan menambahkan properti Spark baru di tingkat ruang kerja. Anda dapat memigrasikan pustaka dan properti Spark yang ada ke lingkungan dan melampirkannya sebagai default ruang kerja. Untuk informasi selengkapnya, lihat Memigrasikan pustaka ruang kerja dan properti Spark ke lingkungan default.
Melampirkan lingkungan ke notebook atau definisi pekerjaan Spark
Menu Lingkungan muncul di tab Beranda definisi kerja notebook dan Spark. Lingkungan yang tersedia tercantum di menu. Jika Anda memilih lingkungan, komputasi dan pustaka Spark yang dikonfigurasi di dalamnya akan efektif setelah Anda memulai sesi Spark.
Catatan
Jika Anda beralih ke lingkungan lain saat berada dalam sesi aktif, lingkungan yang baru dipilih tidak akan berlaku hingga sesi berikutnya.
Berbagi lingkungan yang sudah ada
Microsoft Fabric mendukung berbagi item dengan tingkat izin yang berbeda.
Saat Anda berbagi item lingkungan, penerima secara otomatis menerima izin Baca. Dengan izin ini, mereka dapat menjelajahi konfigurasi lingkungan dan melampirkannya ke notebook atau pekerjaan Spark. Untuk eksekusi kode yang lancar, pastikan untuk memberikan izin baca untuk lingkungan terlampir saat berbagi notebook dan definisi pekerjaan Spark.
Selain itu, Anda dapat berbagi lingkungan dengan izin Bagikan dan Edit . Pengguna dengan izin Berbagi dapat terus berbagi lingkungan dengan orang lain. Sementara itu, penerima dengan izin Edit dapat memperbarui konten lingkungan.