Monitorování stavu a výkonu eventstreamu
Funkce streamů událostí Microsoft Fabric umožňuje snadno monitorovat streamovaná data událostí, stav příjmu dat a výkon příjmu dat. Tento článek vysvětluje, jak monitorovat stav eventstreamu, kontrolovat protokoly, chyby a přehledy dat pomocí metrik.
V eventstreamu existují dva typy prostředí monitorování: přehledy dat a protokoly modulu runtime. V závislosti na vybraném zdroji nebo cíli se zobrazí jedno nebo obě zobrazení.
Požadavky
Než začnete, musíte mít:
- Přístup k pracovnímu prostoru Premium s oprávněními Prohlížeče nebo vyššími oprávněními, kde se nachází položka Eventstream.
- Zdroj centra událostí Azure nebo cíl lakehouse přidaný do vašeho eventstreamu.
Přehledy dat
Karta Přehledy dat se zobrazí v dolním podokně hlavního editoru. Karta poskytuje metriky, které můžete použít k monitorování stavu a výkonu streamu událostí, zdrojů a cílů. Různé zdroje a cíle mají různé metriky. Když vyberete uzel na plátně hlavního editoru, metriky pro daný uzel se zobrazí na kartě Přehledy dat.
Přehledy dat v uzlu eventstreamu
Na kartě Přehledy dat se zobrazí následující metriky pro uzel eventstream:
Metrika | Unit | Popis |
---|---|---|
IncomingMessages | Počet | Počet událostí nebo zpráv odesílaných do eventstreamu v zadaném období. |
Odchozí zprávy | Počet | Počet událostí nebo zpráv odtékají z eventstreamu v zadaném období. |
Příchozíbyty | Přijaté | Příchozí bajty pro eventstream v zadaném období. |
Odchozíbyty | Přijaté | Odchozí bajty pro eventstream v zadaném období. |
Zobrazení přehledů dat pro eventstream:
Na plátně hlavního editoru vyberte uzel eventstreamu.
V dolním podokně vyberte kartu Přehledy dat.
Pokud jsou data uvnitř eventstreamu, zobrazí se graf metrik na kartě Přehledy dat.
Na pravé straně karty zaškrtněte políčka vedle metrik, které chcete zobrazit.
Přehledy dat ve zdroji centra událostí Azure, zdroji služby Azure iot Hub, cíli lakehouse a cílových uzlech databáze KQL
Následující metriky jsou k dispozici na kartě Přehledy dat pro zdroje centra událostí Azure, zdroj služby Azure iot Hub, cíl lakehouse a cíl databáze KQL (zpracování událostí před režimem příjmu dat):
Metrika | Unit | Popis |
---|---|---|
Vstupní události | Počet | Počet dat událostí, která modul událostí načítá z eventstreamu (v cíli lakehouse nebo cílové databázi KQL), nebo ze zdroje centra událostí Azure (ve zdroji centra událostí Azure). |
Bajty vstupních událostí | Přijaté | Množství dat událostí, která modul událostí načítá z eventstreamu (v cíli lakehouse nebo cílové databázi KQL), nebo ze zdroje centra událostí Azure (ve zdroji centra událostí Azure). |
Výstupní události | Počet | Počet dat událostí, která modul událostí odesílá do databáze lakehouse nebo KQL (v cíli lakehouse nebo cíli databáze KQL), nebo do streamu událostí (ve zdroji centra událostí Azure). |
Nevyřízených vstupních událostí | Počet | Počet vstupních událostí, které jsou backlogovány v modulu událostí. |
Chyby za běhu | Počet | Celkový počet chyb souvisejících se zpracováním událostí |
Chyby převodu dat | Počet | Počet výstupních událostí, které se nedají převést na očekávané výstupní schéma |
Chyby deserializace | Počet | Počet vstupních událostí, které nebylo možné deserializovat uvnitř modulu eventstream. |
Zpoždění vodoznaku | Second | Maximální zpoždění vodoznaku napříč všemi oddíly všech výstupů pro tento zdroj nebo cíl Vypočítá se jako hodinový čas zdi minus největší vodoznak. |
Zobrazení přehledů dat pro zdroj centra událostí Azure, zdroj služby Azure iot Hub, cíl lakehouse nebo cíl databáze KQL (zpracování událostí před režimem příjmu dat):
Výběr zdrojového uzlu centra událostí Azure, zdroje centra Azure iot, cílového uzlu lakehouse nebo cílového uzlu databáze KQL na plátně hlavního editoru
V dolním podokně vyberte kartu Přehledy dat.
Pokud zdroj centra událostí Azure, cíl lakehouse nebo cíl databáze KQL obsahuje data, zobrazí se graf metrik na kartě Přehledy dat.
Na pravé straně karty zaškrtněte políčka vedle metrik, které chcete zobrazit.
Přehledy dat ve zdrojových uzlech konektoru streamování
Mezi zdrojové uzly konektoru streamování patří následující zdroje:
- Azure SQL Database Change Data Capture (CDC)
- Databáze PostgreSQL – CDC
- CdC databáze MySQL
- Azure Cosmos DB CDC
- SQL Server na databázi virtuálních počítačů (CDC)
- Azure SQL Managed Instance CDC
- Google Cloud Pub/Sub
- Datové proudy Amazon Kinesis
- Confluent Cloud Kafka
- Apache Kafka
- Amazon MSK Kafka
Na kartě Přehledy dat jsou k dispozici následující metriky pro zdrojové uzly konektoru streamování:
Metrika | Unit | Popis |
---|---|---|
Odchozí události zdroje | Počet | Počet záznamů vypsaných z transformací (pokud existuje) a zapsaných do eventstreamu úkolu, který patří do pojmenovaného zdrojového konektoru pracovního procesu (od posledního restartování úkolu). |
Zdrojové příchozí události | Počet | Před použitím transformací se jedná o počet záznamů vytvořených nebo dotazovaných úkolem, který patří do pojmenovaného zdrojového konektoru v pracovním procesu (od posledního restartování úkolu). |
Zaprotokolované chyby konektoru | Počet | Počet chyb, které byly zaprotokolovány pro tyto úlohy konektoru. |
Chyby zpracování konektorů | Počet | Počet chyb zpracování záznamů v těchto úlohách konektoru |
Selhání zpracování konektorů | Počet | Počet selhání zpracování záznamů v těchto úlohách konektoru, včetně selhání opakování. |
Přeskočeny události konektoru | Počet | Počet záznamů se vynechal kvůli chybám v rámci těchto úloh konektoru. |
Zobrazení přehledů dat pro zdroj streamovaného konektoru:
- Vyberte Použít externí zdroj a pak zvolte zdroj konektoru streamování.
- Nakonfigurujte a publikujte zdroj konektoru streamování.
- V dolním podokně v živém zobrazení vyberte kartu Přehledy dat.
- Pokud zdroj streamovaného konektoru obsahuje data, zobrazí se graf metrik na kartě Přehledy dat.
- Na pravé straně karty zaškrtněte políčka vedle metrik, které chcete zobrazit.
Protokoly modulu runtime
Karta Protokoly modulu runtime umožňuje zkontrolovat podrobné protokoly, ke kterým dochází v modulu událostí. Protokoly modulu runtime mají tři úrovně závažnosti: upozornění, chybu a informace.
Pokud chcete zobrazit protokoly modulu runtime pro zdroj centra událostí Azure, zdroj služby Azure iot Hub, cíl lakehouse a cíl databáze KQL (zpracování událostí před režimem příjmu dat):
Na plátně hlavního editoru vyberte zdroj centra událostí Azure, cíl databáze lakehouse nebo cíl databáze KQL.
V dolním podokně vyberte kartu Protokoly modulu runtime.
Pokud zdroj centra událostí Azure, cíl databáze lakehouse nebo cíl databáze KQL obsahuje data, protokoly se zobrazí na kartě Protokoly modulu runtime.
Prohledejte protokoly pomocí možnosti Filtrovat podle klíčových slov nebo seznam vyfiltrujte změnou závažnosti nebo typu.
Pokud chcete zobrazit nejnovější protokoly, vyberte Aktualizovat.