Bagikan melalui

Gambaran umum pemantauan Apache Spark

  • Artikel

Pemantauan Microsoft Fabric Spark dirancang untuk menawarkan pengalaman berbasis web-UI dengan kemampuan bawaan yang kaya untuk memantau kemajuan dan status aplikasi Spark yang sedang berlangsung, menelusuri aktivitas Spark sebelumnya, menganalisis dan mengoptimalkan performa, dan memfasilitasi pemecahan masalah kegagalan. Beberapa titik masuk tersedia untuk menelusuri, memantau, dan melihat detail aplikasi Spark.

Hub pemantauan

Hub Pemantauan berfungsi sebagai portal terpusat untuk menelusuri aktivitas Spark di seluruh item. Sekilas, Anda dapat melihat aplikasi Spark yang sedang berlangsung yang dipicu dari Notebook, Definisi Pekerjaan Spark, dan Alur. Anda juga dapat mencari dan memfilter aplikasi Spark berdasarkan kriteria yang berbeda dan menelusuri paling detail untuk melihat detail eksekusi Spark lainnya dari aplikasi Spark.

Item yang baru-baru ini dijalankan

Saat mengerjakan item tertentu, fitur Item Eksekusi Terbaru memungkinkan Anda menelusuri aktivitas item saat ini dan terbaru serta mendapatkan wawasan tentang pengirim, status, durasi, dan informasi lainnya untuk aktivitas yang dikirimkan oleh Anda atau orang lain.

Pemantauan kontekstual buku catatan

Pemantauan Kontekstual Notebook menawarkan kemampuan penulisan, pemantauan, dan penelusuran kesalahan pekerjaan Spark dalam satu tempat. Anda dapat memantau kemajuan pekerjaan Spark, melihat tugas dan pelaksana eksekusi Spark, dan mengakses log Spark dalam Notebook di tingkat sel Notebook. Penasihat Spark juga dibangun ke dalam Notebook untuk menawarkan saran real-time tentang kode dan eksekusi Spark sel dan melakukan analisis kesalahan.

Pemantauan sebaris definisi kerja Spark

Fitur Pemantauan Sebaris definisi kerja Spark memungkinkan Anda melihat pengiriman definisi kerja Spark dan menjalankan status secara real time, serta melihat eksekusi dan konfigurasi masa lalu definisi kerja Spark. Anda dapat menavigasi ke halaman detail aplikasi Spark untuk melihat detail selengkapnya.

Pemantauan sebaris aktivitas Pipeline Spark

Untuk Pemantauan Sebaris Aktivitas Pipeline Spark, tautan mendalam telah dibangun ke dalam aktivitas definisi kerja Notebook dan Spark dalam Alur. Anda dapat melihat detail eksekusi aplikasi Spark, rekam jepret definisi kerja Notebook dan Spark masing-masing, dan mengakses log Spark untuk pemecahan masalah. Jika aktivitas Spark gagal, pesan kesalahan sebaris juga tersedia dalam aktivitas Pipeline Spark.

Konten terkait