Jaa


Valvo spark-töitä muistikirjassa

Microsoft Fabric -muistikirja on verkkopohjainen vuorovaikutteinen pinta Apache Spark -työpaikkojen kehittämiseen ja koneoppimiskokeilujen tekemiseen. Tässä artikkelissa kerrotaan, miten voit seurata Spark-töiden edistymistä, käyttää Spark-lokeja, saada neuvoja muistikirjaan ja siirtyä Spark-sovelluksen tietonäkymään tai Spark-käyttöliittymään, jotta saat kattavampia valvontatietoja koko muistikirjasta.

Spark-työn edistymisen seuranta

Spark-työn edistymisen ilmaisin sisältää reaaliaikaisen edistymispalkin, jonka avulla voit seurata kunkin muistikirjasolun työn suorittamisen tilaa. Voit tarkastella tilan ja tehtävien edistymistä Spark-töiden ja -vaiheiden kautta.

Näyttökuva, jossa on Muistikirjan solu ja Spark-työn edistymisluettelo.

Resurssien käytön valvonta

Suoritettavan suoritustiedoston käyttökaavio näyttää visuaalisesti Spark-työn suoritustiedostojen ja resurssien käytön kohdistuksen. Tällä hetkellä vain spark 3.4:n tai uudemmat suorituspalvelutiedot näyttävät tämän ominaisuuden. Napsauta Resurssit-välilehteä. Näet viivakaavion koodisolun resurssien käytöstä.

Näyttökuvassa on Muistikirja-solu ja koodisolun resurssikäyttö.

Näytä Spark Advisor -suositukset

Sisäinen Spark-neuvonantaja analysoi muistikirjakoodisi ja Spark-suoritusten reaaliaikaisesti, mikä auttaa optimoimaan muistikirjasi suoritustehon ja auttamaan virheenkorjausvirheissä. On olemassa kolmenlaisia sisäisiä neuvoja: Tiedot, Varoitus ja Virhe. Numeroita sisältävillä kuvakkeilla ilmaistaan kunkin luokan vastaavien neuvojen määrä (Tiedot, varoitus ja virhe), jotka Spark-neuvonantaja luo tietylle muistikirjan solulle.

Jos haluat tarkastella neuvoja, laajenna ja paljasta tiedot napsauttamalla alussa olevaa nuolta.

Näyttökuvassa näkyy hehkulamppu.

Kun olet laajentanut neuvonantajaosion, yksi tai useampi neuvo tulee näkyviin.

Näyttökuva, jossa näkyy ruutua laajennettava hehkulamppu.

Spark Advisor -vinontunnistuksen tunnistaminen

Tietojen vääristyminen on yleinen ongelma, jota käyttäjät usein kohtaavat. Spark-neuvonantaja tukee vinontunnistelua, ja jos vinoutuma havaitaan, vastaava analyysi näytetään alla.

Näyttökuva, jossa näkyvät tietoskew-analyysin tiedot.

Spark-reaaliaikaisten lokien käyttö

Spark-lokit ovat välttämättömiä poikkeusten paikantamisessa sekä suorituskyvyn tai virheiden diagnosoimisessa. Muistikirjan tilannekohtainen valvontaominaisuus tuo lokit suoraan sinulle sen solun osalta, jota käytät. Voit hakea lokeista tai suodattaa niitä virheiden ja varoitusten perusteella.

Näyttökuva, joka näyttää koodisolun alla olevat reaaliaikaiset lokit.

Jos haluat käyttää spark-suorituksen lisätietoja muistikirjatasolla, voit siirtyä Spark-sovelluksen tietosivulle tai Spark-käyttöliittymään pikavalikon vaihtoehtojen kautta.

Näyttökuva, jossa näkyy käyttöoikeuksien spark-käyttöliittymä ja valvontatiedot-sivu.