Övervaka och hantera Azure Data Factory pipelines med hjälp av appen Övervakning och hantering
Anteckning
Den här artikeln gäller för version 1 av Data Factory. Om du använder den aktuella versionen av Data Factory-tjänsten kan du läsa övervaka och hantera Data Factory-pipelines i.
Den här artikeln beskriver hur du använder appen Övervakning och hantering för att övervaka, hantera och felsöka dina Data Factory-pipelines. Du kan komma igång med att använda programmet genom att titta på följande video:
Anteckning
Användargränssnittet som visas i videon kanske inte exakt matchar det du ser i portalen. Det är lite äldre, men begreppen förblir desamma.
Starta appen Övervakning och hantering
Om du vill starta appen Övervaka och hantera klickar du på panelen Övervaka & hantering på Data Factory-bladet för datafabriken.
Du bör se att övervaknings- och hanteringsappen är öppen i ett separat fönster.
Anteckning
Om du ser att webbläsaren har fastnat i "Auktorisera..." avmarkerar du kryssrutan Blockera cookies från tredje part och webbplatsdata – eller håller den markerad, skapar ett undantag för login.microsoftonline.com och försöker sedan öppna appen igen.
I listan Aktivitetsfönster i mittenfönstret visas ett aktivitetsfönster för varje körning av en aktivitet. Om du till exempel har aktiviteten schemalagd att köras varje timme i fem timmar visas fem aktivitetsfönster som är associerade med fem datasektorer. Om du inte ser aktivitetsfönster i listan längst ned gör du följande:
- Uppdatera starttids- och sluttidsfiltren längst upp för att matcha start- och sluttiderna för din pipeline och klicka sedan på knappen Använd .
- Listan Aktivitetsfönster uppdateras inte automatiskt. Klicka på knappen Uppdatera i verktygsfältet i listan Aktivitetsfönster .
Om du inte har ett Data Factory-program att testa dessa steg med gör du självstudien: kopiera data från Blob Storage till SQL Database med datafabriken.
Förstå appen Övervakning och hantering
Det finns tre flikar till vänster: Resource Explorer, Övervakningsvyer och Aviseringar. Den första fliken (Resource Explorer) är markerad som standard.
Resursutforskaren
Du ser följande:
- Trädvyn Resursutforskaren i det vänstra fönstret.
- Diagramvyn överst i det mellersta fönstret.
- Listan Aktivitetsfönster längst ned i det mellersta fönstret.
- Flikarna Egenskaper, Aktivitetsfönsterutforskaren och Skript i den högra rutan.
I Resource Explorer visas alla resurser (pipelines, datauppsättningar, länkade tjänster) i datafabriken i en trädvy. När du väljer ett objekt i Resource Explorer:
- Den associerade Data Factory-entiteten är markerad i diagramvyn.
- Associerade aktivitetsfönster är markerade i listan Aktivitetsfönster längst ned.
- Egenskaperna för det markerade objektet visas i Fönstret Egenskaper i den högra rutan.
- JSON-definitionen för det markerade objektet visas, om tillämpligt. Till exempel: en länkad tjänst, en datauppsättning eller en pipeline.
I artikeln Schemaläggning och körning finns detaljerad konceptuell information om aktivitetsfönster.
Diagramvy
Diagramvyn för en datafabrik innehåller ett enda fönster med glas för att övervaka och hantera en datafabrik och dess tillgångar. När du väljer en Data Factory-entitet (datauppsättning/pipeline) i diagramvyn:
- Datafabrikentiteten väljs i trädvyn.
- De associerade aktivitetsfönstren är markerade i listan Aktivitetsfönster.
- Egenskaperna för det markerade objektet visas i Fönstret Egenskaper.
När pipelinen är aktiverad (inte i pausläge) visas den med en grön linje:
Du kan pausa, återuppta eller avsluta en pipeline genom att välja den i diagramvyn och använda knapparna i kommandofältet.
Det finns tre kommandofältsknappar för pipelinen i diagramvyn. Du kan använda den andra knappen för att pausa pipelinen. Pausning avslutar inte de aktiviteter som körs och gör att de kan slutföras. Den tredje knappen pausar pipelinen och avslutar befintliga körningsaktiviteter. Den första knappen återupptar pipelinen. När pipelinen pausas ändras pipelinens färg. En pausad pipeline ser till exempel ut som i följande bild:
Du kan välja två eller flera pipelines med hjälp av Ctrl-tangenten. Du kan använda kommandofältsknapparna för att pausa/återuppta flera pipelines åt gången.
Du kan också högerklicka på en pipeline och välja alternativ för att pausa, återuppta eller avsluta en pipeline.
Klicka på alternativet Öppna pipeline för att se alla aktiviteter i pipelinen.
I den öppnade pipelinevyn ser du alla aktiviteter i pipelinen. I det här exemplet finns det bara en aktivitet: Kopieringsaktivitet.
Om du vill gå tillbaka till föregående vy klickar du på datafabrikens namn på menyn för sökväg längst upp.
När du i pipelinevyn väljer en utdatauppsättning eller när du flyttar musen över utdatauppsättningen visas popup-fönstret Aktivitet i Windows för datauppsättningen.
Du kan klicka på ett aktivitetsfönster för att se information om det i fönstret Egenskaper i den högra rutan.
I den högra rutan växlar du till fliken Aktivitetsfönsterutforskaren för att se mer information.
Du ser även lösta variabler för varje körningsförsök för en aktivitet i avsnittet Försök .
Växla till fliken Skript för att se JSON-skriptdefinitionen för det valda objektet.
Du kan se aktivitetsfönster på tre platser:
- Popup-fönstret Aktivitetsfönster i diagramvyn (mittenfönstret).
- Aktivitetsfönsterutforskaren i det högra fönstret.
- Listan Aktivitetsfönster i det nedre fönstret.
I popup-fönstret Aktivitetsfönster och Aktivitetsfönsterutforskaren kan du bläddra till föregående vecka och nästa vecka med hjälp av vänster- och högerpilarna.
Längst ned i diagramvyn ser du följande knappar: Zooma in, Zooma ut, Zooma till anpassa, Zooma 100 %, Lås layout. Knappen Lås layout hindrar dig från att oavsiktligt flytta tabeller och pipelines i diagramvyn. Den är aktiverad som standard. Du kan stänga av den och flytta entiteter i diagrammet. När du inaktiverar den kan du använda den sista knappen för att automatiskt placera tabeller och pipelines. Du kan också zooma in eller ut med hjälp av mushjulet.
Lista med aktivitetsfönster
Listan Aktivitetsfönster längst ned i det mellersta fönstret visar alla aktivitetsfönster för den datauppsättning som du har valt i Resursutforskaren eller diagramvyn. Som standard är listan i fallande ordning, vilket innebär att du ser det senaste aktivitetsfönstret längst upp.
Den här listan uppdateras inte automatiskt, så använd uppdateringsknappen i verktygsfältet för att uppdatera den manuellt.
Aktivitetsfönster kan ha någon av följande statusar:
| Status | Understatus | Beskrivning |
|---|---|---|
| Väntar | ScheduleTime | Det är inte tid för aktivitetsfönstret att köras. |
| DatasetDependencies | De överordnade beroendena är inte redo. | |
| ComputeResources | Beräkningsresurserna är inte tillgängliga. | |
| ConcurrencyLimit | Alla aktivitetsinstanser är upptagna med att köra andra aktivitetsfönster. | |
| ActivityResume | Aktiviteten pausas och kan inte köra aktivitetsfönstren förrän den har återupptagits. | |
| Försök igen | Aktivitetskörningen görs på nytt. | |
| Validering | Verifieringen har inte startat än. | |
| ValidationRetry | Valideringen väntar på att försökas igen. | |
| InProgress | Validera | Verifiering pågår. | - | Aktivitetsfönstret bearbetas. |
| Misslyckad | Tidsgräns | Aktivitetskörningen tog längre tid än vad som tillåts av aktiviteten. |
| Avbrutna | Aktivitetsfönstret avbröts av användaråtgärden. | |
| Validering | Verifieringen misslyckades. | |
| - | Det gick inte att generera eller verifiera aktivitetsfönstret. | Redo | - | Aktivitetsfönstret är klart för förbrukning. |
| Överhoppad | - | Aktivitetsfönstret har inte bearbetats. |
| Ingen | - | Ett aktivitetsfönster brukade finnas med en annan status, men har återställts. |
När du klickar på ett aktivitetsfönster i listan visas information om det i Utforskaren för aktivitet eller fönstret Egenskaper till höger.
Uppdatera aktivitetsfönster
Informationen uppdateras inte automatiskt, så använd uppdateringsknappen (den andra knappen) i kommandofältet för att uppdatera aktivitetsfönstrets lista manuellt.
Fönstret Egenskaper
Den Fönstret Egenskaper finns längst till höger i appen Övervakning och hantering.
Den visar egenskaper för det objekt som du har valt i resursutforskaren (trädvy), diagramvy eller aktivitetsfönsterlista.
Aktivitetsfönsterutforskaren
Fönstret Aktivitetsfönsterutforskaren finns längst till höger i appen Övervakning och hantering. Den visar information om aktivitetsfönstret som du valde i popup-fönstret Aktivitetsfönster eller i listan Aktivitetsfönster.
Du kan växla till ett annat aktivitetsfönster genom att klicka på det i kalendervyn längst upp. Du kan också använda knapparna vänsterpil/högerpil längst upp för att se aktivitetsfönster från föregående vecka eller nästa vecka.
Du kan använda knapparna i verktygsfältet i det nedre fönstret för att köra aktivitetsfönstret igen eller uppdatera informationen i fönstret.
Skript
Du kan använda fliken Skript för att visa JSON-definitionen för den valda Data Factory-entiteten (länkad tjänst, datauppsättning eller pipeline).
Använda systemvyer
Övervaknings- och hanteringsappen innehåller fördefinierade systemvyer (senaste aktivitetsfönster, misslyckade aktivitetsfönster, pågående aktivitetsfönster) som gör att du kan visa de senaste/misslyckade/pågående aktivitetsfönstren för din datafabrik.
Växla till fliken Övervakningsvyer till vänster genom att klicka på den.
För närvarande finns det tre systemvyer som stöds. Välj ett alternativ för att se de senaste aktivitetsfönstren, misslyckade aktivitetsfönster eller pågående aktivitetsfönster i listan Aktivitetsfönster (längst ned i det mellersta fönstret).
När du väljer alternativet Senaste aktivitetsfönster visas alla senaste aktivitetsfönster i fallande ordning efter det senaste försöket.
Du kan använda windowsvyn Misslyckad aktivitet för att se alla misslyckade aktivitetsfönster i listan. Välj ett aktivitetsfönster som misslyckades i listan om du vill se information om det i fönstret Egenskaper eller Aktivitetsfönsterutforskaren. Du kan också ladda ned alla loggar för ett fönster med misslyckad aktivitet.
Sortera och filtrera aktivitetsfönster
Ändra inställningarna för starttid och sluttid i kommandofältet för att filtrera aktivitetsfönster. När du har ändrat starttid och sluttid klickar du på knappen bredvid sluttiden för att uppdatera listan Aktivitetsfönster.
Anteckning
För närvarande är alla tider i UTC-format i appen Övervakning och hantering.
I listan Aktivitetsfönster klickar du på namnet på en kolumn (till exempel: Status).
Du kan göra följande:
- Sortera i stigande ordning.
- Sortera i fallande ordning.
- Filtrera efter ett eller flera värden (Klar, Väntar och så vidare).
När du anger ett filter för en kolumn visas filterknappen aktiverad för den kolumnen, vilket indikerar att värdena i kolumnen är filtrerade värden.
Du kan använda samma popup-fönster för att rensa filter. Om du vill rensa alla filter för listan Aktivitetsfönster klickar du på knappen Rensa filter i kommandofältet.
Utföra batchåtgärder
Kör om markerade aktivitetsfönster
Välj ett aktivitetsfönster, klicka på nedåtpilen för den första kommandofältet och välj Kör om / med uppströms i pipelinen. När du väljer alternativet Kör igen med uppströms i pipelinen körs även alla överordnade aktivitetsfönster igen.
Du kan också välja flera aktivitetsfönster i listan och köra dem på nytt samtidigt. Du kanske vill filtrera aktivitetsfönster baserat på statusen (till exempel Misslyckades) – och sedan köra aktivitetsfönstren som misslyckats igen när du har korrigerat problemet som gör att aktivitetsfönstren misslyckas. I följande avsnitt finns information om filtrering av aktivitetsfönster i listan.
Pausa/återuppta flera pipelines
Du kan välja två eller flera pipelines med ctrl-tangenten. Du kan använda kommandofältsknapparna (som är markerade i den röda rektangeln i följande bild) för att pausa/återuppta dem.