Membuat, mengonfigurasi, dan menggunakan lingkungan di Microsoft Fabric
Lingkungan Microsoft Fabric adalah item terkonsolidasi untuk semua pengaturan perangkat keras dan perangkat lunak Anda. Di lingkungan, Anda dapat memilih runtime Spark yang berbeda, mengonfigurasi sumber daya komputasi Anda, menginstal pustaka dari repositori publik atau direktori lokal, dan banyak lagi.
Tutorial ini memberi Anda gambaran umum tentang membuat, mengonfigurasi, dan menggunakan lingkungan.
Ada beberapa titik masuk untuk membuat lingkungan baru.
Titik masuk standar
Di hub pembuatan atau bagian Baru ruang kerja Anda, Anda dapat menemukan opsi untuk membuat lingkungan baru seperti item Fabric lainnya.
Buat saat pemilihan
Saat Anda memilih lingkungan untuk notebook Anda, definisi pekerjaan Spark dan default ruang kerja, Anda bisa menemukan opsi untuk membuat lingkungan baru.
Ada tiga komponen utama dalam lingkungan, yaitu komputasi Spark yang mencakup runtime, pustaka, dan sumber daya Spark. Konfigurasi komputasi dan pustaka Spark diperlukan agar penerbitan efektif, sementara sumber daya adalah penyimpanan bersama yang dapat berubah secara real time. Lihat bagian Simpan dan terbitkan perubahan untuk detail selengkapnya.
Untuk lingkungan, Anda dapat memilih dari berbagai runtime Spark, masing-masing dengan pengaturan defaultnya sendiri dan paket yang telah diinstal sebelumnya. Untuk melihat runtime yang tersedia, navigasikan ke tab Beranda lingkungan dan pilih Runtime. Pilih runtime yang paling sesuai dengan kebutuhan Anda.
Penting
- Jika Anda memperbarui runtime lingkungan dengan konfigurasi atau pustaka yang ada, Anda perlu menerbitkan ulang konten tersebut berdasarkan versi runtime yang telah diperbarui.
- Jika konfigurasi atau pustaka yang ada tidak kompatibel dengan versi runtime yang baru diperbarui, penerbitan gagal. Anda harus menghapus konfigurasi atau pustaka yang tidak kompatibel dan menerbitkan lingkungan lagi.
Pemrosesan Microsoft Fabric Spark menawarkan kecepatan dan efisiensi yang tiada bandingnya dengan berjalan pada Spark serta menyediakan pengalaman yang disesuaikan dengan kebutuhan. Di lingkungan Anda, Anda dapat memilih dari berbagai pool yang dibuat oleh admin ruang kerja dan admin kapasitas. Anda selanjutnya dapat menyesuaikan konfigurasi dan mengelola properti Spark agar efektif dalam sesi Spark. Untuk informasi selengkapnya, lihat Pengaturan konfigurasi komputasi Spark di lingkungan Fabric.
Kecuali untuk pustaka bawaan yang disediakan oleh setiap runtime Spark, lingkungan Fabric memungkinkan Anda menginstal pustaka dari sumber publik atau mengunggah pustaka kustom yang dibuat oleh Anda atau organisasi Anda. Setelah Anda berhasil menginstal pustaka, pustaka tersebut tersedia di sesi Spark Anda. Untuk informasi selengkapnya, lihat Manajemen pustaka di lingkungan Fabric. Anda juga dapat menemukan praktik terbaik dalam mengelola pustaka di Microsoft Fabric.Mengelola pustaka Apache Spark di Microsoft Fabric
Bagian Sumber Daya di lingkungan memfasilitasi kemampuan untuk mengelola sumber daya kecil selama fase pengembangan. File yang diunggah ke lingkungan dapat diakses di seluruh buku catatan saat dilampirkan. Untuk informasi selengkapnya, lihat Mengelola sumber daya di lingkungan Fabric
Di tab Beranda pita lingkungan, Anda bisa dengan mudah menemukan dua tombol yang disebut Simpan dan Terbitkan. Mereka akan diaktifkan ketika ada perubahan tertunda yang belum disimpan atau tidak diterbitkan di bagian Pustaka dan komputasi Spark.
Anda juga akan melihat spanduk yang menampilkan kedua tombol ini ketika ada perubahan tertunda di bagian Pustaka dan komputasi Spark. Tombol-tombol ini memiliki fungsionalitas yang sama dengan yang ada di menu pita.
- Perubahan yang belum disimpan hilang jika Anda me-refresh atau membiarkan browser terbuka. Pilih tombol Simpan untuk memastikan perubahan Anda direkam sebelum pergi. Penyimpanan tidak menerapkan konfigurasi tetapi menyimpannya dalam cache di sistem.
- Pilih Terbitkan untuk menerapkan perubahan pada Pustaka dan komputasi Spark. Halaman Perubahan tertunda akan muncul untuk peninjauan akhir sebelum penerbitan. Selanjutnya pilih Terbitkan semua untuk memulai konfigurasi di lingkungan Fabric. Proses ini mungkin memakan waktu, terutama jika perubahan pustaka terlibat.
- Untuk membatalkan proses penerbitan, pilih Tampilkan kemajuan di banner dan Batalkan operasi.
- Pemberitahuan muncul setelah penerbitan selesai. Pemberitahuan kesalahan terjadi jika ada masalah selama proses.
Catatan
Lingkungan hanya menerima satu penerbitan pada satu waktu. Tidak ada perubahan lebih lanjut yang dapat dilakukan pada pustaka atau bagian komputasi Spark selama penerbitan yang sedang berlangsung. Penerbitan tidak berdampak pada penambahan, penghapusan, atau pengeditan file dan folder di bagian Sumber Daya . Tindakan untuk mengelola sumber daya terjadi secara real-time, dan penerbitan tidak menghalangi perubahan yang dilakukan di bagian sumber daya.
Microsoft Fabric mendukung berbagi item dengan tingkat izin yang berbeda.
Saat Anda berbagi item lingkungan, penerima secara otomatis menerima izin Baca. Dengan izin ini, mereka dapat menjelajahi konfigurasi lingkungan dan melampirkannya ke notebook atau pekerjaan Spark. Untuk eksekusi kode yang lancar, pastikan untuk memberikan izin baca untuk lingkungan terlampir saat berbagi notebook dan definisi pekerjaan Spark.
Selain itu, Anda dapat berbagi lingkungan dengan izin Bagikan dan Edit . Pengguna dengan izin Berbagi dapat terus berbagi lingkungan dengan orang lain. Sementara itu, penerima dengan izin Edit dapat memperbarui konten lingkungan.
Lingkungan Microsoft Fabric dapat dilampirkan ke ruang kerja Rekayasa Data/Sains atau notebook dan definisi kerja Spark Anda.
Penting
Setelah lingkungan dipilih sebagai default ruang kerja, hanya admin ruang kerja yang dapat memperbarui konten lingkungan default.
Temukan tab Lingkungan dengan memilih pengaturan Ruang Kerja>Rekayasa Data/Sains>pengaturan Spark.
Admin ruang kerja dapat menentukan beban kerja default untuk seluruh ruang kerja. Nilai yang dikonfigurasi pada bagian ini berlaku untuk notebook dan definisi tugas Spark yang dilampirkan ke pengaturan ruang kerja .
Tombol Atur lingkungan default dapat meningkatkan pengalaman pengguna. Secara default, tombol ini diatur ke Nonaktif. Jika tidak ada properti atau pustaka Spark default yang dibutuhkan sebagai default ruang kerja, admin dapat menentukan runtime Spark dalam situasi ini. Namun, jika admin ingin menyiapkan komputasi dan pustaka Spark bawaan untuk ruang kerja, mereka dapat mengubah toggle menjadi Aktif dan dengan mudah menjadikan lingkungan sebagai bawaan ruang kerja. Opsi ini membuat semua konfigurasi di lingkungan berlaku seperti pengaturan Workspace .
Lingkungan tersedia di bagian Beranda Definisi Pekerjaan di tab Notebook dan Spark. Melampirkan ke lingkungan memungkinkan definisi pekerjaan Notebooks dan Spark untuk mengakses pustaka, konfigurasi komputasi, dan sumber dayanya. Penjelajah akan mencantumkan semua lingkungan yang tersedia, termasuk yang dibagikan dengan Anda, dari ruang kerja saat ini, dan dari ruang kerja lain yang dapat Anda akses.
Catatan
Jika Anda beralih ke lingkungan lain selama sesi aktif, lingkungan yang baru dipilih tidak akan berlaku hingga sesi berikutnya. Saat Anda menghubungkan lingkungan dari lingkungan kerja lain, kedua lingkungan kerja harus memiliki kapasitas yang sama dan pengaturan keamanan jaringan yang serupa. Meskipun Anda dapat memilih lingkungan dari ruang kerja dengan kapasitas yang berbeda atau pengaturan keamanan jaringan, sesi akan gagal dimulai. Saat Anda melampirkan lingkungan dari ruang kerja lain, konfigurasi komputasi di lingkungan tersebut diabaikan. Sebagai gantinya, konfigurasi kumpulan dan komputasi akan default ke pengaturan ruang kerja Anda saat ini.