Delen via


Pijplijnen bewaken

In deze sectie worden bewakings- en waarneembaarheidsfuncties beschreven voor Lakeflow Spark-declaratieve pijplijnen.

Onderwerp Description
Bewaken met behulp van de gebruikersinterface Bekijk de voortgang en status van pijplijnupdates en ontvang een waarschuwing over het slagen of mislukken. Bekijk metrische gegevens voor streamingbronnen, zoals Apache Kafka en Auto Loader.
gebeurtenislogboek Extraheer gedetailleerde informatie over pijplijnupdates, zoals gegevensherkomst, metrische gegevens over gegevenskwaliteit en resourcegebruik met behulp van het gebeurtenislogboek van de pijplijn.
Zie ook het schema voor het gebeurtenislogboek.
Querygeschiedenis Inspecteer en diagnose van queryprestaties door de querygeschiedenis te bekijken.
Aangepaste monitoring Definieer aangepaste acties die moeten worden uitgevoerd wanneer specifieke gebeurtenissen plaatsvinden met behulp van gebeurtenishook.

Daarnaast zijn er onderwerpen voor het oplossen van problemen voor specifieke scenario's.

Onderwerp Description
Een pijplijn herstellen na een streamingcontrolepuntfout Herstel een pijplijn met een ongeldig of beschadigd controlepunt voor streaming.
Hoge initialisatietijd in pijplijnen optimaliseren Verkort hoge initialisatietijden voor een pijplijn door stromen te splitsen en te verdelen over meerdere pijpleidingen.