Sdílet prostřednictvím


Monitorování kanálů

Tato část popisuje funkce monitorování a pozorovatelnosti pro Lakeflow Spark deklarativní kanály.

Téma Description
Monitorování pomocí uživatelského rozhraní Sledujte průběh a stav aktualizací pipeline a upozorňujte na jejich úspěch nebo selhání. Zobrazte metriky pro streamované zdroje, jako jsou Apache Kafka a Auto Loader.
Protokol událostí Extrahujte podrobné informace o aktualizacích kanálu, jako jsou rodokmen dat, metriky kvality dat a využití prostředků pomocí protokolu událostí kanálu.
Kromě toho se podívejte na schéma protokolu událostí.
Historie dotazů Zkontrolujte a diagnostikujte výkon dotazů v historii dotazů.
Vlastní monitorování Definujte vlastní akce, které se mají provést, když dojde k určitým událostem, pomocí háčků událostí.

Kromě toho existují témata pro řešení potíží pro konkrétní scénáře.

Téma Description
Obnova pipeline po selhání kontrolního bodu streamování Obnovení kanálu s neplatným nebo poškozeným kontrolním bodem streamování
Oprava vysokých inicializačních časů v kanálech Rozdělením toků a vyrovnáváním jejich zatížení mezi kanály opravíte vysoké časy inicializace pro kanál.