Megosztás a következőn keresztül:


Spark-feladatok monitorozása jegyzetfüzeten belül

A Microsoft Fabric-jegyzetfüzet egy webes interaktív felület Apache Spark-feladatok fejlesztéséhez és gépi tanulási kísérletek elvégzéséhez. Ez a cikk bemutatja, hogyan figyelheti a Spark-feladatok előrehaladását, hogyan férhet hozzá a Spark-naplókhoz, hogyan kaphat tanácsot a jegyzetfüzeten belül, és hogyan navigálhat a Spark-alkalmazás részletes nézetére vagy a Spark felhasználói felületére a teljes jegyzetfüzet átfogóbb monitorozási információihoz.

Spark-feladat állapotának figyelése

A Spark-feladatok előrehaladási mutatója egy valós idejű folyamatjelzővel rendelkezik, amely segít az egyes jegyzetfüzetcellák feladatvégrehajtási állapotának monitorozásában. Megtekintheti az állapotot és a tevékenységek előrehaladását a Spark-feladatokban és -szakaszokban.

Képernyőkép a Jegyzetfüzet celláról és a Spark-feladat előrehaladási listájáról.

Erőforrás-használat figyelése

A végrehajtó használati gráfja vizuálisan megjeleníti a Spark-feladatok végrehajtóinak lefoglalását és az erőforrás-használatot. Jelenleg csak a Spark 3.4 vagy újabb futtatókörnyezeti információi jelenítik meg ezt a funkciót. Kattintson az Erőforrások fülre, és megjelenik a kódcella erőforrás-használatának vonaldiagramja.

A kódcella jegyzetfüzetcelláját és erőforrás-használatát bemutató képernyőkép.

Spark Advisor-javaslatok megtekintése

A beépített Spark-tanácsadó valós időben elemzi a jegyzetfüzet kódját és a Spark-végrehajtásokat, hogy optimalizálja a jegyzetfüzet futási teljesítményét, és segítsen a hibák hibakeresésében. Háromféle beépített tanács létezik: Információ, Figyelmeztetés és Hiba. A számokat tartalmazó ikonok jelzik a Spark-tanácsadó által egy adott jegyzetfüzetcellához létrehozott egyes kategóriákban (információ, figyelmeztetés és hiba) megadott tanácsok számát.

A tanács megtekintéséhez kattintson az elején található nyílra a részletek kibontásához és megjelenítéséhez.

A villanykörtét ábrázoló képernyőkép.

A tanácsadói szakasz kibontása után egy vagy több tanács láthatóvá válik.

Képernyőkép a villanykörtével a doboz kibontásához.

Spark Advisor ferdeség észlelése

Az adateltérés gyakori probléma, amelyet a felhasználók gyakran tapasztalnak. A Spark-tanácsadó támogatja a ferdeség észlelését, és ha eltérést észlel, az alábbiakban egy megfelelő elemzés jelenik meg.

Képernyőkép a Data Skew Analysis részleteiről.

Valós idejű Spark-naplók elérése

A Spark-naplók elengedhetetlenek a kivételek kereséséhez és a teljesítmény vagy a hibák diagnosztizálása érdekében. A jegyzetfüzet környezetfüggő monitorozási funkciója közvetlenül a futtatott cella naplóit jeleníti meg. Kereshet a naplókban, vagy szűrheti őket hibák és figyelmeztetések alapján.

Képernyőkép a valós idejű naplókról a kódcella alatt.

Ha további információkat szeretne elérni a Spark-végrehajtásról a jegyzetfüzet szintjén, a helyi menüben elérhető beállításokon keresztül navigálhat a Spark-alkalmazás részleteinek lapjára vagy a Spark felhasználói felületére.

Képernyőkép a hozzáférési spark felhasználói felületről és a figyelési részletek oldalról.