Monitorovanie úloh v službe Spark v notebooku

Notebook služby Microsoft Fabric je webová interaktívna plocha na vývoj úloh v oblasti Apache Spark a vykonávanie experimentov strojového učenia. Tento článok opisuje, ako monitorovať pokrok vašich úloh v službe Spark, získať prístup k denníkom služby Spark, dostávať rady v notebooku a prejsť do zobrazenia podrobností aplikácie Spark alebo používateľského rozhrania služby Spark, kde nájdete komplexnejšie informácie o monitorovaní celého poznámkového bloku.

Monitorovanie priebehu práce v Spark

Indikátor priebehu úlohy spark je k dispozícii s indikátorom priebehu v reálnom čase, ktorý vám pomôže monitorovať stav vykonávania úloh pre každú bunku poznámkového bloku. Stav a priebeh úloh môžete zobraziť v rámci úloh a fáz služby Spark.

Monitorovanie používania zdrojov

Graf používania vykonávateľa vizuálne zobrazuje alokovanie vykonávateľov úloh služby Spark a využitie zdrojov. Táto funkcia sa momentálne zobrazuje iba informácia o režime runtime 3.4 alebo vyššiu. Kliknite na kartu Zdroje a zobrazí sa čiarový graf na použitie zdrojov v bunke kódu.

Zobrazenie odporúčaní služby Spark Advisor

Vstavaný poradca pre spark analyzuje kód poznámkového bloku a spúšťanie v službe Spark v reálnom čase, aby pomohol optimalizovať spustený výkon poznámkového bloku a pomôcť pri ladení zlyhaní. Existujú tri typy vstavaných rád: Informácie, Upozornenie a Chyba. Ikony s číslami označujú príslušný počet rád v jednotlivých kategóriách (Informácie, Upozornenie a Chyba), ktoré vytvoril poradca pre službu Spark pre konkrétnu bunku poznámkového bloku.

Ak chcete zobraziť rady, kliknutím na šípku na začiatku rozbaľte a zobrazte podrobnosti.

Po rozbalení časti poradcu sa zobrazí jedna alebo viacero rád.

Spark Advisor špíz zisťovanie

Skreslenie údajov je bežným problémom, s ktorým sa používatelia často stretávajú. Poradca pre Spark podporuje zisťovanie špízov a ak sa zistí skreslenie, nižšie sa zobrazí príslušná analýza.

Prístup k denníkom Spark v reálnom čase

Denníky spark sú nevyhnutné na vyhľadanie výnimiek a diagnostiku výkonu alebo zlyhaní. Funkcia kontextového monitorovania v notebooku vám prináša denníky priamo pre konkrétnu bunku, ktorú používate. V denníkoch môžete vyhľadávať alebo ich filtrovať podľa chýb a upozornení.

Prejdite na podrobnosti o monitorovaní spark a používateľské rozhranie Spark

Ak chcete získať prístup k ďalším informáciám o spúšťaní spark na úrovni notebooku, môžete prejsť na stránku s podrobnosťami o aplikácii Spark alebo na rozhranie Spark prostredníctvom možností dostupných v kontextovej ponuke.

Súvisiaci obsah

• Ďalšie informácie o nástroji Spark Advisor
• Monitorovanie podrobností aplikácie Apache Spark
• Použitie rozšíreného servera Spark History na ladenie aplikácií