Vizuální monitorování služby Azure Data Factory
PLATÍ PRO: Azure Data Factory Azure Synapse Analytics
Jakmile vytvoříte a publikujete kanál v Azure Data Factory, můžete ho přidružit k triggeru nebo ručně spustit ad hoc spuštění. Všechna spuštění kanálu můžete monitorovat nativně v uživatelském prostředí Azure Data Factory. Pokud chcete otevřít prostředí monitorování, vyberte v okně datové továrny Azure Portal dlaždici Monitorování & spravovat. Pokud už jste v uživatelském prostředí ADF, klikněte na ikonu Monitor na levém bočním panelu.
Ve výchozím nastavení se všechny spuštěné kanály datové továrny zobrazují v místním časovém pásmu prohlížeče. Pokud časové pásmo změníte, přepnou se všechna pole data a času do vybraného časového pásma.
Monitorování spuštění kanálu
Výchozí zobrazení monitorování je seznam aktivovaných spuštění kanálu ve vybraném časovém období. Můžete změnit časový rozsah a filtrovat kanály podle stavu, názvu nebo poznámky. Najeďte myší na konkrétní spuštění kanálu, abyste získali akce specifické pro spuštění, jako je opětovné spuštění a sestava spotřeby.
Mřížka spuštění kanálu obsahuje následující sloupce:
Název sloupce | Popis |
---|---|
Název kanálu | Název kanálu |
Spustit start | Počáteční datum a čas spuštění kanálu (MM/DD/YYYY, HH:MM:SS AM/PM) |
Konec spuštění | Koncové datum a čas spuštění kanálu (MM/DD/YYYY, HH:MM:SS AM/PM) |
Doba trvání | Doba spuštění (HH:MM:SS) |
Aktivoval | Název triggeru, který spustil kanál |
Stav | Neúspěšné, úspěšné, probíhající, zrušené nebo ve frontě |
Poznámky | Filtrovatelné značky přidružené k kanálu |
Parametry | Parametry pro spuštění kanálu (páry název/hodnota) |
Chyba | Pokud kanál selhal, došlo k chybě spuštění. |
Spustit | Původní, znovu spustit nebo znovu spustit (nejnovější) |
ID spuštění | ID spuštění kanálu |
Pokud chcete aktualizovat seznam spuštění kanálů a aktivit, musíte ručně vybrat tlačítko Aktualizovat . Automatické obnovení se v současné době nepodporuje.
Pokud chcete zobrazit výsledky spuštění ladění, vyberte kartu Ladění .
Monitorování spuštění aktivit
Pokud chcete získat podrobné zobrazení jednotlivých spuštění aktivit konkrétního spuštění kanálu, klikněte na název kanálu.
Zobrazení seznamu zobrazuje spuštění aktivit, které odpovídají jednotlivým spuštěním kanálu. Najeďte myší na konkrétní spuštění aktivity, abyste získali informace specifické pro spuštění, jako je vstup JSON, výstup JSON a podrobné možnosti monitorování pro konkrétní aktivity.
Název sloupce | Popis |
---|---|
Název aktivity | Název aktivity uvnitř kanálu |
Typ aktivity | Typ aktivity, například Copy, ExecuteDataFlow nebo AzureMLExecutePipeline |
Akce | Ikony, které umožňují zobrazit vstupní informace JSON, výstupní informace JSON nebo podrobné možnosti monitorování specifické pro konkrétní aktivity |
Spustit start | Počáteční datum a čas spuštění aktivity (MM/DD/YYYY, HH:MM:SS AM/PM) |
Doba trvání | Doba spuštění (HH:MM:SS) |
Stav | Neúspěšné, úspěšné, probíhající nebo zrušené |
Integration Runtime | Na kterém Integration Runtime se aktivita spustila? |
Vlastnosti uživatele | Uživatelem definované vlastnosti aktivity |
Chyba | Pokud aktivita selhala, dojde k chybě spuštění. |
ID spuštění | ID spuštění aktivity |
Pokud aktivita selhala, můžete zobrazit podrobnou chybovou zprávu kliknutím na ikonu ve sloupci chyby.
Zvýšení uživatelských vlastností kvůli monitorování
Když zvýšíte úroveň vlastnosti aktivity kanálu, aby se z ní stala uživatelská vlastnost, stane se z ní také monitorovaná entita. V kanálu můžete například zvýšit u kopírování úroveň vlastností Zdroj a Cíl, aby se z nich staly uživatelské vlastnosti.
Poznámka
Jako vlastnosti uživatele můžete zvýšit úroveň až pěti vlastností aktivit kanálu.
Po vytvoření vlastností uživatele je můžete monitorovat v zobrazeních seznamu monitorování.
Pokud je zdrojem aktivity kopírování název tabulky, můžete pro spuštění aktivit monitorovat název zdrojové tabulky jako sloupec v zobrazení seznamu.
Opakované spuštění kanálů a aktivit
Chování opětovného spuštění aktivit kontejneru je následující:
Wait
- Aktivita se bude chovat jako předtím.Set Variable
- Aktivita se bude chovat jako předtím.Filter
- Aktivita se bude chovat jako předtím.Until
– Aktivita vyhodnotí výraz a bude se ve smyčce opakovat, dokud se nesplní podmínky. Vnitřní aktivity se přesto v závislosti na pravidlech opětovného spuštění můžou přeskočit.Foreach
– Aktivita bude vždy procházet ve smyčce položky, které obdrží. Vnitřní aktivity se přesto v závislosti na pravidlech opětovného spuštění můžou přeskočit.If and switch
- Podmínky budou vždy vyhodnoceny. Vnitřní aktivity se přesto v závislosti na pravidlech opětovného spuštění můžou přeskočit.Execute pipeline activity
– Podřízený kanál se aktivuje, ale na základě pravidel opětovného spuštění se stále můžou přeskočit všechny aktivity v podřízeného kanálu.
Pokud chcete znovu spustit kanál, který se dříve spustil od začátku, najeďte myší na konkrétní spuštění kanálu a vyberte Spustit znovu. Pokud vyberete více kanálů, můžete je spustit všechny pomocí tlačítka Spustit znovu .
Pokud chcete spustit znovu od určitého bodu, můžete to udělat v zobrazení spuštění aktivit. Vyberte aktivitu, od které chcete začít, a vyberte Spustit znovu z aktivity.
Kanál můžete také spustit znovu a změnit parametry. Vyberte tlačítko Nové parametry a změňte parametry.
Poznámka
Opětovné spuštění kanálu s novými parametry se bude považovat za nové spuštění kanálu, takže se nezobrazí pod opětovným spuštěním skupin pro spuštění kanálu.
Opětovné spuštění neúspěšné aktivity
Pokud aktivita selže, vyprší časový limit nebo je zrušena, můžete znovu spustit kanál z této neúspěšné aktivity výběrem možnosti Znovu spustit z neúspěšné aktivity.
Zobrazení historie opětovných spuštění
U všech spuštění kanálu v seznamu si můžete zobrazit historii opětovných spuštění.
Můžete také zobrazit historii opětovného spuštění konkrétního spuštění kanálu.
Monitorování využití úložiště
Prostředky spotřebované spuštěním kanálu můžete zobrazit kliknutím na ikonu spotřeby vedle spuštění.
Kliknutím na ikonu se otevře sestava využití prostředků používaných spuštěním kanálu.
Tyto hodnoty můžete zapojit do cenové kalkulačky Azure a odhadnout náklady na spuštění kanálu. Další informace o cenách Azure Data Factory najdete v tématu Vysvětlení cen.
Poznámka
Tyto hodnoty vrácené cenovou kalkulačkou jsou odhadem. Neodráží přesnou částku, kterou vám bude fakturovat Azure Data Factory
Ganttova zobrazení
V Ganttově diagramu si můžete prohlédnout historii spuštění v určitém časovém rozsahu. Pokud přepnete na Ganttův diagram, zobrazí se všechna spuštění kanálu seskupená podle názvu jako pruhy o relativní délce, která odpovídá době spuštění. Můžete také seskupit podle poznámek a značek, které jste vytvořili ve svém kanálu. Ganttův diagram je také k dispozici na úrovni spuštění aktivit.
Délka pruhu informuje o délce kanálu. Můžete také vybrat pruh a zobrazit další podrobnosti.
Výstrahy
U podporovaných metrik služby Data Factory můžete generovat upozornění. Začněte tím, že na stránce Monitorování služby Data Factory vyberete Metriky monitorování>upozornění&.
Sedmiminutový úvod a ukázku této funkce najdete v následujícím videu:
Vytváření upozornění
Vyberte Nové pravidlo upozornění a vytvořte nové upozornění.
Zadejte název pravidla a vyberte závažnost upozornění.
Vyberte kritéria upozornění.
Můžete vytvářet upozornění na různé metriky, včetně metrik pro počet/velikost entit ADF, spuštění aktivit/ kanálů/triggerů, využití procesoru Integration Runtime (IR) / paměť / počet uzlů / frontu, a také pro spouštění balíčků SSIS a operace spuštění/zastavení prostředí SSIS IR.
Nakonfigurujte logiku upozornění. Pro vybranou metriku můžete vytvořit upozornění pro všechny kanály a odpovídající aktivity. Můžete také vybrat konkrétní typ aktivity, název aktivity, název kanálu nebo typ selhání.
Nakonfigurujte pro upozornění e-mailová, SMS, nabízená oznámení a hlasová oznámení. Vytvořte skupinu akcí nebo zvolte existující skupinu pro oznámení výstrah.
Vytvořte pravidlo upozornění.
Další kroky
Informace o monitorování a správě kanálů najdete v článku Monitorování a správa kanálů prostřednictvím kódu programu .