Apache Spark izlemeye genel bakış

  • Makale

Microsoft Fabric Spark izleme, devam eden Spark uygulamalarının ilerleme durumunu ve durumunu izlemek, geçmiş Spark etkinliklerine göz atmak, performansı analiz etmek ve iyileştirmek ve hataların giderilmesini kolaylaştırmak için yerleşik zengin özelliklerle web kullanıcı arabirimi tabanlı bir deneyim sunmak üzere tasarlanmıştır. Spark uygulaması ayrıntılarına göz atmak, izlemek ve görüntülemek için birden çok giriş noktası kullanılabilir.

İzleme hub'ı

İzleme Merkezi, Öğeler arasında Spark etkinliklerine göz atmak için merkezi bir portal görevi görür. Not Defterleri, Spark İş Tanımları ve İşlem Hatlarından tetiklenen devam eden Spark uygulamalarını bir bakışta görüntüleyebilirsiniz. Ayrıca Spark uygulamalarını farklı ölçütlere göre arayabilir ve filtreleyebilir ve bir Spark uygulamasının daha fazla Spark yürütme ayrıntılarını görüntülemek için detaya gidebilirsiniz.

Öğe son çalıştırmaları

Belirli öğeler üzerinde çalışırken, Son Çalıştırmalar öğesi özelliği öğenin geçerli ve son etkinliklerine göz atmanıza ve sizin veya başkaları tarafından gönderilen etkinliklerle ilgili gönderen, durum, süre ve diğer bilgiler hakkında içgörüler edinmenize olanak tanır.

Not defteri bağlamsal izleme

Not Defteri Bağlamsal İzleme, Spark işlerini tek bir yerde yazma, izleme ve hata ayıklama özelliği sunar. Spark işinin ilerleme durumunu izleyebilir, Spark yürütme görevlerini ve yürütücülerini görüntüleyebilir ve Not Defteri hücre düzeyinde bir Not Defteri içindeki Spark günlüklerine erişebilirsiniz. Spark danışmanı ayrıca Kod ve Spark hücresi yürütmesi hakkında gerçek zamanlı öneriler sunmak ve hata analizi gerçekleştirmek için Not Defteri'ne yerleşiktir.

Spark iş tanımı satır içi izleme

Spark iş tanımı Satır İçi İzleme özelliği, Spark iş tanımı gönderimini ve çalıştırma durumunu gerçek zamanlı olarak görüntülemenin yanı sıra Spark iş tanımının geçmiş çalıştırmalarını ve yapılandırmalarını görüntülemenizi sağlar. Daha fazla ayrıntı görüntülemek için Spark uygulaması ayrıntı sayfasına gidebilirsiniz.

İşlem hattı Spark etkinliği satır içi izleme

İşlem Hattı Spark Etkinliği Satır içi İzleme için, İşlem Hattı içindeki Not Defteri ve Spark iş tanımı etkinliklerinde ayrıntılı bağlantılar yerleşik olarak bulunur. Spark uygulama yürütme ayrıntılarını, ilgili Not Defteri ve Spark iş tanımı anlık görüntüsünü görüntüleyebilir ve sorun giderme için Spark günlüklerine erişebilirsiniz. Spark etkinlikleri başarısız olursa, satır içi hata iletisi Pipeline Spark etkinliklerinde de kullanılabilir.

İlgili içerik