Vizuální monitorování služby Azure Data Factory

PLATÍ PRO: Azure Data Factory Azure Synapse Analytics

Jakmile vytvoříte a publikujete kanál v Azure Data Factory, můžete ho přidružit k triggeru nebo ručně spustit ad hoc spuštění. Všechna spuštění kanálu můžete monitorovat nativně v uživatelském prostředí Azure Data Factory. Pokud chcete otevřít prostředí monitorování, vyberte v okně datové továrny Azure Portal dlaždici Monitorování & spravovat. Pokud už jste v uživatelském prostředí ADF, klikněte na ikonu Monitor na levém bočním panelu.

Ve výchozím nastavení se všechny spuštěné kanály datové továrny zobrazují v místním časovém pásmu prohlížeče. Pokud časové pásmo změníte, přepnou se všechna pole data a času do vybraného časového pásma.

Monitorování spuštění kanálu

Výchozí zobrazení monitorování je seznam aktivovaných spuštění kanálu ve vybraném časovém období. Můžete změnit časový rozsah a filtrovat kanály podle stavu, názvu nebo poznámky. Najeďte myší na konkrétní spuštění kanálu, abyste získali akce specifické pro spuštění, jako je opětovné spuštění a sestava spotřeby.

Snímek obrazovky se zobrazením seznamu pro monitorování spuštění kanálu

Mřížka spuštění kanálu obsahuje následující sloupce:

Název sloupce Popis
Název kanálu Název kanálu
Spustit start Počáteční datum a čas spuštění kanálu (MM/DD/YYYY, HH:MM:SS AM/PM)
Konec spuštění Koncové datum a čas spuštění kanálu (MM/DD/YYYY, HH:MM:SS AM/PM)
Doba trvání Doba spuštění (HH:MM:SS)
Aktivoval Název triggeru, který spustil kanál
Stav Neúspěšné, úspěšné, probíhající, zrušené nebo ve frontě
Poznámky Filtrovatelné značky přidružené k kanálu
Parametry Parametry pro spuštění kanálu (páry název/hodnota)
Chyba Pokud kanál selhal, došlo k chybě spuštění.
Spustit Původní, znovu spustit nebo znovu spustit (nejnovější)
ID spuštění ID spuštění kanálu

Pokud chcete aktualizovat seznam spuštění kanálů a aktivit, musíte ručně vybrat tlačítko Aktualizovat . Automatické obnovení se v současné době nepodporuje.

 Snímek obrazovky s tlačítkem Aktualizovat

Pokud chcete zobrazit výsledky spuštění ladění, vyberte kartu Ladění .

Snímek obrazovky s ikonou zobrazení aktivních spuštění ladění

Monitorování spuštění aktivit

Pokud chcete získat podrobné zobrazení jednotlivých spuštění aktivit konkrétního spuštění kanálu, klikněte na název kanálu.

Snímek obrazovky se zobrazením spuštění aktivit

Zobrazení seznamu zobrazuje spuštění aktivit, které odpovídají jednotlivým spuštěním kanálu. Najeďte myší na konkrétní spuštění aktivity, abyste získali informace specifické pro spuštění, jako je vstup JSON, výstup JSON a podrobné možnosti monitorování pro konkrétní aktivity.

Snímek obrazovky s informacemi o SalesAnalyticsMLPipeline a seznamem spuštění aktivit

Název sloupce Popis
Název aktivity Název aktivity uvnitř kanálu
Typ aktivity Typ aktivity, například Copy, ExecuteDataFlow nebo AzureMLExecutePipeline
Akce Ikony, které umožňují zobrazit vstupní informace JSON, výstupní informace JSON nebo podrobné možnosti monitorování specifické pro konkrétní aktivity
Spustit start Počáteční datum a čas spuštění aktivity (MM/DD/YYYY, HH:MM:SS AM/PM)
Doba trvání Doba spuštění (HH:MM:SS)
Stav Neúspěšné, úspěšné, probíhající nebo zrušené
Integration Runtime Na kterém Integration Runtime se aktivita spustila?
Vlastnosti uživatele Uživatelem definované vlastnosti aktivity
Chyba Pokud aktivita selhala, dojde k chybě spuštění.
ID spuštění ID spuštění aktivity

Pokud aktivita selhala, můžete zobrazit podrobnou chybovou zprávu kliknutím na ikonu ve sloupci chyby.

Snímek obrazovky s oznámením s podrobnostmi o chybě, včetně kódu chyby, typu selhání a podrobností o chybě

Zvýšení uživatelských vlastností kvůli monitorování

Když zvýšíte úroveň vlastnosti aktivity kanálu, aby se z ní stala uživatelská vlastnost, stane se z ní také monitorovaná entita. V kanálu můžete například zvýšit u kopírování úroveň vlastností Zdroj a Cíl, aby se z nich staly uživatelské vlastnosti.

Poznámka

Jako vlastnosti uživatele můžete zvýšit úroveň až pěti vlastností aktivit kanálu.

Snímek obrazovky s vytvořením vlastností uživatele

Po vytvoření vlastností uživatele je můžete monitorovat v zobrazeních seznamu monitorování.

Snímek obrazovky s přidáním sloupců pro vlastnosti uživatele do seznamu spuštění aktivit

Pokud je zdrojem aktivity kopírování název tabulky, můžete pro spuštění aktivit monitorovat název zdrojové tabulky jako sloupec v zobrazení seznamu.

Snímek obrazovky se seznamem spuštění aktivit se sloupci pro vlastnosti uživatele

Opakované spuštění kanálů a aktivit

Chování opětovného spuštění aktivit kontejneru je následující:

  • Wait- Aktivita se bude chovat jako předtím.
  • Set Variable - Aktivita se bude chovat jako předtím.
  • Filter - Aktivita se bude chovat jako předtím.
  • Until – Aktivita vyhodnotí výraz a bude se ve smyčce opakovat, dokud se nesplní podmínky. Vnitřní aktivity se přesto v závislosti na pravidlech opětovného spuštění můžou přeskočit.
  • Foreach – Aktivita bude vždy procházet ve smyčce položky, které obdrží. Vnitřní aktivity se přesto v závislosti na pravidlech opětovného spuštění můžou přeskočit.
  • If and switch - Podmínky budou vždy vyhodnoceny. Vnitřní aktivity se přesto v závislosti na pravidlech opětovného spuštění můžou přeskočit.
  • Execute pipeline activity – Podřízený kanál se aktivuje, ale na základě pravidel opětovného spuštění se stále můžou přeskočit všechny aktivity v podřízeného kanálu.

Pokud chcete znovu spustit kanál, který se dříve spustil od začátku, najeďte myší na konkrétní spuštění kanálu a vyberte Spustit znovu. Pokud vyberete více kanálů, můžete je spustit všechny pomocí tlačítka Spustit znovu .

Snímek obrazovky s opětovným spuštěním kanálu

Pokud chcete spustit znovu od určitého bodu, můžete to udělat v zobrazení spuštění aktivit. Vyberte aktivitu, od které chcete začít, a vyberte Spustit znovu z aktivity.

Snímek obrazovky s opětovným spuštěním aktivity

Kanál můžete také spustit znovu a změnit parametry. Vyberte tlačítko Nové parametry a změňte parametry.

Snímek obrazovky s opětovným spuštěním aktivity s novými parametry

Poznámka

Opětovné spuštění kanálu s novými parametry se bude považovat za nové spuštění kanálu, takže se nezobrazí pod opětovným spuštěním skupin pro spuštění kanálu.

Opětovné spuštění neúspěšné aktivity

Pokud aktivita selže, vyprší časový limit nebo je zrušena, můžete znovu spustit kanál z této neúspěšné aktivity výběrem možnosti Znovu spustit z neúspěšné aktivity.

Snímek obrazovky s neúspěšnou aktivitou opětovného spuštění

Zobrazení historie opětovných spuštění

U všech spuštění kanálu v seznamu si můžete zobrazit historii opětovných spuštění.

Snímek obrazovky s historií zobrazení

Můžete také zobrazit historii opětovného spuštění konkrétního spuštění kanálu.

Snímek obrazovky s historií zobrazení pro spuštění kanálu

Monitorování využití úložiště

Prostředky spotřebované spuštěním kanálu můžete zobrazit kliknutím na ikonu spotřeby vedle spuštění.

Snímek obrazovky, který ukazuje, kde můžete vidět prostředky spotřebované kanálem

Kliknutím na ikonu se otevře sestava využití prostředků používaných spuštěním kanálu.

Snímek obrazovky se spotřebou monitoru

Tyto hodnoty můžete zapojit do cenové kalkulačky Azure a odhadnout náklady na spuštění kanálu. Další informace o cenách Azure Data Factory najdete v tématu Vysvětlení cen.

Poznámka

Tyto hodnoty vrácené cenovou kalkulačkou jsou odhadem. Neodráží přesnou částku, kterou vám bude fakturovat Azure Data Factory

Ganttova zobrazení

V Ganttově diagramu si můžete prohlédnout historii spuštění v určitém časovém rozsahu. Pokud přepnete na Ganttův diagram, zobrazí se všechna spuštění kanálu seskupená podle názvu jako pruhy o relativní délce, která odpovídá době spuštění. Můžete také seskupit podle poznámek a značek, které jste vytvořili ve svém kanálu. Ganttův diagram je také k dispozici na úrovni spuštění aktivit.

Snímek obrazovky s příkladem Ganttova diagramu

Délka pruhu informuje o délce kanálu. Můžete také vybrat pruh a zobrazit další podrobnosti.

Snímek obrazovky s dobou trvání Ganttova diagramu

Výstrahy

U podporovaných metrik služby Data Factory můžete generovat upozornění. Začněte tím, že na stránce Monitorování služby Data Factory vyberete Metriky monitorování>upozornění&.

Snímek obrazovky se stránkou Monitorování datové továrny

Sedmiminutový úvod a ukázku této funkce najdete v následujícím videu:

Vytváření upozornění

  1. Vyberte Nové pravidlo upozornění a vytvořte nové upozornění.

    Snímek obrazovky s tlačítkem Nové pravidlo upozornění

  2. Zadejte název pravidla a vyberte závažnost upozornění.

    Snímek obrazovky s poli pro název a závažnost pravidla

  3. Vyberte kritéria upozornění.

    Snímek obrazovky s polem pro cílová kritéria

    Snímek obrazovky znázorňující, kde vyberete jednu metriku pro nastavení podmínky upozornění

    Snímek obrazovky se seznamem kritérií

    Můžete vytvářet upozornění na různé metriky, včetně metrik pro počet/velikost entit ADF, spuštění aktivit/ kanálů/triggerů, využití procesoru Integration Runtime (IR) / paměť / počet uzlů / frontu, a také pro spouštění balíčků SSIS a operace spuštění/zastavení prostředí SSIS IR.

  4. Nakonfigurujte logiku upozornění. Pro vybranou metriku můžete vytvořit upozornění pro všechny kanály a odpovídající aktivity. Můžete také vybrat konkrétní typ aktivity, název aktivity, název kanálu nebo typ selhání.

    Snímek obrazovky s možnostmi konfigurace logiky upozornění

  5. Nakonfigurujte pro upozornění e-mailová, SMS, nabízená oznámení a hlasová oznámení. Vytvořte skupinu akcí nebo zvolte existující skupinu pro oznámení výstrah.

    Snímek obrazovky s možnostmi konfigurace oznámení

    Snímek obrazovky s možnostmi pro přidání oznámení

  6. Vytvořte pravidlo upozornění.

    Snímek obrazovky s možnostmi pro vytvoření pravidla upozornění

Další kroky

Informace o monitorování a správě kanálů najdete v článku Monitorování a správa kanálů prostřednictvím kódu programu .