Oversigt over overvågning af Apache Spark

Microsoft Fabric Spark-overvågning er designet til at tilbyde en webbrugergrænsefladebaseret oplevelse med indbyggede avancerede funktioner til overvågning af status og status for Igangværende Spark-programmer, gennemsyn af tidligere Spark-aktiviteter, analyse og optimering af ydeevne og lette fejlfinding af fejl. Der er flere indgangspunkter tilgængelige til gennemsyn, overvågning og visning af oplysninger om Spark-programmet.

Overvåg hub

Monitor-hubben fungerer som en central portal til gennemsyn af Spark-aktiviteter på tværs af elementer. Med et hurtigt blik kan du se igangværende Spark-applikationer, der er udløst fra notesbøger, Spark-jobdefinitioner og pipelines. Du kan også søge efter og filtrere Spark-programmer baseret på forskellige kriterier og foretage detailudledning for at få vist flere oplysninger om Spark-udførelse af et Spark-program. På Fabric-portalen skal du vælge Overvåg i navigationsruden for at åbne monitorhubben.

Element, der er seneste kørsler

Når du arbejder med bestemte elementer, giver funktionen Seneste kørsler dig mulighed for at gennemse elementets aktuelle og seneste aktiviteter og få indsigt i indsenderen, status, varighed og andre oplysninger om aktiviteter, der er indsendt af dig eller andre.

Kontekstafhængig overvågning af notesbog

Kontekstafhængig overvågning af notesbog giver mulighed for at oprette, overvåge og foretage fejlfinding af Spark-job på ét sted. Du kan overvåge Spark-jobfremskridt, se Spark-udførelsesopgaver og eksekutører samt få adgang til Spark-logfiler i en notesbogs-lignende enhed. Spark-rådgiveren er også indbygget i notebooken for at give realtidsrådgivning om kode- og celle-Spark-udførelse samt udføre fejlanalyse.

Indbygget overvågning af definition af sparkjob

Funktionen Inline-overvågning af Spark-jobdefinitionen giver dig mulighed for at få vist indsendelse og kørselsstatus for Spark-jobdefinitionen i realtid samt få vist definitionen af Spark-jobdefinitionens tidligere kørsler og konfigurationer. Du kan navigere til siden med detaljer om Spark-programmet for at få vist flere oplysninger.

Indbygget overvågning af rørledningspipelineaktivitet

For Pipeline Spark Activity Inline Monitoring er dybe links indbygget i notebooken og Spark jobdefinitionsaktiviteter inden for pipelinen. Du kan se detaljer om udførelsen af Spark-applikationer, det respektive snapshot af notebook og Spark-jobdefinition, samt få adgang til Spark-logs til fejlfinding. Hvis Spark-aktiviteterne mislykkes, er den indbyggede fejlmeddelelse også tilgængelig i Pipeline Spark-aktiviteter.