Zdieľať cez

Prehľad monitorovania Apache Spark

  • Článok

Monitorovanie služby Microsoft Fabric Spark je navrhnuté tak, aby poskytovalo možnosti webového používateľského rozhrania so vstavanými bohatými možnosťami na monitorovanie pokroku a stavu prebiehaných aplikácií Spark, prehľadávanie v minulosti aktivít Spark, analýzu a optimalizáciu výkonu a uľahčenie riešenia problémov s zlyhaniami. Viacero vstupných bodov je k dispozícii na prehľadávanie, monitorovanie a zobrazovanie podrobností aplikácie Spark.

Centrum monitorovania

Centrum monitorovania slúži ako centralizovaný portál na prehľadávanie aktivít Spark v rámci položiek. Na prvý pohľad môžete zobraziť prebiehajúce aplikácie Spark spúšťané z notebookov, definícií úloh spark a kanálov. Aplikácie Spark môžete tiež vyhľadávať a filtrovať na základe rôznych kritérií a detailov, aby ste zobrazili ďalšie podrobnosti o spúšťaní služby Spark v aplikácii Spark.

Naposledy použité spustenia položiek

Pri práci na konkrétnych položkách funkcia nedávneho spustenia položky umožňuje prehľadávať aktuálne a nedávne aktivity položky a získať prehľad o odosielateľovi, stave, trvaní a ďalších informáciách o aktivitách, ktoré ste odoslali vy alebo iní používatelia.

Kontextové monitorovanie poznámkového bloka

Notebook Contextual Monitoring ponúka možnosť na jednom mieste tvoriť, monitorovať a ladiť úlohy v oblasti Spark. Priebeh práce v službe Spark môžete monitorovať, zobrazovať úlohy a vykonávatelia spúšťania služby Spark a pristupovať k denníkom služby Spark v poznámkovom bloku na úrovni notebooku. Poradca pre Spark je tiež zabudovaný v notebooku, ktorý ponúka rady v reálnom čase týkajúce sa spustenia kódu a služby Spark v bunke a na vykonanie analýzy chýb.

Vnorené monitorovanie definície úlohy spark

Funkcia Spark job definition Inline Monitoring (Vnoriť monitorovanie) umožňuje zobraziť odosielanie a stav spustenia definície úlohy služby Spark v reálnom čase, ako aj zobraziť predchádzajúce spustenia a konfigurácie definície úlohy Spark. Môžete prejsť na stránku s podrobnosťami o aplikácii Spark a zobraziť si tak ďalšie podrobnosti.

Vnorené monitorovanie aktivity pipeline Spark

V rámci inline monitoringu aktivity kanála boli priame prepojenia zabudované do činností definície úloh Poznámkový blok a Spark v rámci kanála. Môžete zobraziť podrobnosti o spustení aplikácie Spark, príslušné snímky definície úlohy poznámkového bloku a služby Spark a získať prístup k denníkom služby Spark, kde môžete riešiť problémy. Ak aktivity Spark zlyhajú, v rámci aktivít Pipeline Spark je k dispozícii aj vložené chybové hlásenie.

Súvisiaci obsah