Identifikace nákladného čtení v DAG Sparku

Přístup k DAG

Za předpokladu, že se díváte na nákladný úkol, nejprve potřebujeme ID fáze, která zpracovává čtení. Zde vidíme ID fáze 194:

Teď se musíme dostat k DAG SQL. Posuňte se nahoru na začátek stránky úlohy a klikněte na Přidružený dotaz SQL:

Teď byste měli vidět DAG. Pokud ne, posouvejte se trochu a měli byste ho vidět:

V některých případech můžete sledovat DAG a zjistit, odkud data pocházejí. V jiných případech vyhledejte ID etapy, které jste si poznamenali:

Poté je třeba vyhledat uzel „Skenovat“. V tomto případě je docela jednoduché říct, že čteme tabulku s názvem transactions:

Skenování DAG

V některých případech možná budete muset kliknout nebo převést uzel, abyste získali umístění dat, která čtete.