Övervaka pipelines

I det här avsnittet beskrivs övervaknings- och observerbarhetsfunktioner för Lakeflow Spark Deklarativa Pipelines.

Ämne	Description
Övervaka med hjälp av användargränssnittet	Observera förloppet och statusen för pipelineuppdateringar, och varna vid framgång eller misslyckande. Visa mått för strömmande källor, till exempel Apache Kafka och Auto Loader.
händelselogg	Extrahera detaljerad information om pipelineuppdateringar som data härkomst, datakvalitetsmått och resursanvändning med hjälp av pipelinehändelseloggen. Dessutom kan du läsa schemat för händelseloggen.
Frågehistorik	Granska och diagnostisera frågeprestanda genom att titta på frågehistoriken.
Anpassad övervakning	Definiera anpassade åtgärder som ska utföras när specifika händelser inträffar med hjälp av händelsekrokar.

Dessutom finns det felsökningsavsnitt för specifika scenarier.

Ämne	Description
Återställa en pipeline från fel vid strömningskontrollpunkt	Återställ en pipeline som har en ogiltig eller skadad kontrollpunkt för streaming.
Åtgärda höga initialiseringstider i pipelines	Åtgärda långa initialiseringstider för en pipeline genom att dela upp flöden och jämna ut belastningen mellan pipelines.