Not defteri içindeki Spark işlerini izleme

Microsoft Fabric not defteri, Apache Spark işleri geliştirmeye ve makine öğrenmesi denemeleri gerçekleştirmeye yönelik web tabanlı bir etkileşimli yüzeydir. Bu makalede Spark işlerinizin ilerleme durumunu izleme, Spark günlüklerine erişme, not defteri içinde öneriler alma ve not defterinin tamamına yönelik daha kapsamlı izleme bilgileri için Spark uygulama ayrıntı görünümüne veya Spark kullanıcı arabirimine gitme işlemleri özetlenmektedir.

Spark İşi ilerleme durumunu izleme

Spark işi ilerleme durumu göstergesi, her not defteri hücresi için iş yürütme durumunu izlemenize yardımcı olan gerçek zamanlı bir ilerleme çubuğuyla birlikte sağlanır. Spark işleriniz ve aşamalarınız genelinde durum ve görevlerin ilerleme durumunu görüntüleyebilirsiniz.

Screenshot showing Notebook cell and Spark job progress list.

Kaynak kullanımını izleme

Yürütücü kullanım grafiği, Spark işi yürütücülerinin ayırmasını ve kaynak kullanımını görsel olarak görüntüler. Şu anda yalnızca Spark 3.4 ve üzeri sürümlerin çalışma zamanı bilgileri bu özelliği görüntüler. Kaynaklar sekmesine tıklayın; kod hücresinin kaynak kullanımına ilişkin çizgi grafik gösterilir.

Screenshot showing Notebook cell and resource usage of code cell.

Spark Danışmanı önerilerini görüntüleme

Yerleşik Spark danışmanı, not defterinizin çalışma performansını iyileştirmeye yardımcı olmak ve hata ayıklamada yardımcı olmak için not defteri kodunuzu ve Spark yürütmelerinizi gerçek zamanlı olarak analiz eder. Üç tür yerleşik öneri vardır: Bilgi, Uyarı ve Hata. Sayı içeren simgeler, belirli bir not defteri hücresi için Spark danışmanı tarafından oluşturulan her kategorideki (Bilgi, Uyarı ve Hata) ilgili öneri sayısını gösterir.

Öneriyi görüntülemek için, başlangıçtaki oka tıklayarak ayrıntıları genişletin ve görüntüleyin.

Screenshot showing light bulb.

Danışman bölümü genişletildikten sonra, bir veya daha fazla öneri parçası görünür hale gelir.

Screenshot showing light bulb to expand the box.

Spark Danışmanı Dengesizlik Algılama

Veri dengesizliği, kullanıcıların sıklıkla karşılaştığı yaygın bir sorundur. Spark danışmanı, dengesizlik algılamayı destekler ve eğme algılanırsa, aşağıda ilgili bir analiz görüntülenir.

Screenshot showing Data Skew Analysis details.

Spark Gerçek zamanlı günlüklerine erişme

Spark günlükleri, özel durumları bulmak ve performans veya hataları tanılamak için gereklidir. Not defterindeki bağlamsal izleme özelliği, çalıştırdığınız hücre için günlükleri doğrudan size getirir. Günlüklerde arama yapabilir veya hatalara ve uyarılara göre filtreleyebilirsiniz.

Screenshot showing the real time logs under the code cell.

Spark yürütmesi hakkında not defteri düzeyinde ek bilgilere erişmek istiyorsanız, bağlam menüsünde sağlanan seçenekler aracılığıyla Spark uygulaması ayrıntıları sayfasına veya Spark kullanıcı arabirimine gidebilirsiniz.

Screenshot showing the access spark ui and monitoring detail page.