Dela via

Översikt över Apache Spark-övervakning

Microsoft Fabric Spark-övervakning är utformat för att erbjuda en webbgränssnittsbaserad upplevelse med inbyggda funktioner för att övervaka förloppet och statusen för pågående Spark-program, bläddra bland tidigare Spark-aktiviteter, analysera och optimera prestanda och underlätta felsökning. Flera startpunkter är tillgängliga för surfning, övervakning och visning av Spark-programinformation.

Övervaka hubb

Monitor Hub fungerar som en centraliserad portal för att bläddra i Spark-aktiviteter mellan objekt. Du kan snabbt se pågående Spark-program som utlöses från notebook-filer, Spark-jobbdefinitioner och pipelines. Du kan också söka efter och filtrera Spark-program baserat på olika kriterier och öka detaljnivån för att visa mer Spark-körningsinformation för ett Spark-program. I Fabric-portalen väljer du Övervaka i navigeringsfönstret för att öppna Monitor-hubben.

Senaste körningar av objekt

När du arbetar med specifika objekt kan du med funktionen Senaste körningar bläddra i objektets aktuella och senaste aktiviteter och få insikter om inskickaren, status, varaktighet och annan information för aktiviteter som skickats av dig eller andra.

Sammanhangsbaserad övervakning av notebook-filer

Kontextövervakning av anteckningsböcker erbjuder möjligheten att skapa, övervaka och felsöka Spark-jobb på en och samma plats. Du kan övervaka framsteg för Spark-jobb, visa Spark-uppgifter och -utförare och komma åt Spark-loggar på cellnivå i en notebook. Spark-rådgivaren är också inbyggd i Notebook för att ge råd i realtid om körning av kod och cell i Spark och utföra felanalys.

Infogad övervakning av Spark-jobbdefinition

Med funktionen Inline Monitoring i Spark-jobbdefinitionen kan du visa sändnings- och körningsstatus för Spark-jobbdefinitioner i realtid, samt visa Spark-jobbdefinitionens tidigare körningar och konfigurationer. Du kan gå till informationssidan för Spark-programmet om du vill visa mer information.

Infogad övervakning av Pipeline Spark-aktivitet

För Pipeline Spark-aktivitetens infogade övervakning har djupa länkar byggts in i Notebook- och Spark-jobbdefinitionernas aktiviteter inom Pipelinelinjen. Du kan visa körningsinformation för Spark-program, respektive ögonblicksbild av notebook- och Spark-jobbdefinition och få åtkomst till Spark-loggar för felsökning. Om Spark-aktiviteterna misslyckas är det infogade felmeddelandet också tillgängligt i Pipeline Spark-aktiviteter.

Relaterat innehåll