Úkol poznámkového bloku pro úlohy

Pomocí úlohy poznámkového bloku nasaďte poznámkové bloky Databricks.

Requirements

  • Poznámkový sešit musí být v umístění, ke kterému má uživatel, který úlohu konfiguruje, přístup.

Konfigurace úlohy notebooku

Note

Uživatelské rozhraní úloh zobrazuje možnosti dynamicky na základě jiných nakonfigurovaných nastavení.

Pro zahájení procesu konfigurace úlohy Notebook:

  1. V uživatelském rozhraní Úloh přejděte na kartu Úkoly .
  2. Klikněte na ikonu Plus.Přidejte úkol.
  3. Do pole Název úkolu zadejte název.
  4. V rozevírací nabídce Typ vyberte Notebook.

Konfigurace zdroje

V rozevírací nabídce Zdroj vyberte umístění poznámkového bloku pomocí jedné z následujících možností.

Workspace

Pomocí pracovního prostoru můžete nakonfigurovat poznámkový blok uložený v pracovním prostoru provedením následujících kroků:

  1. Klikněte na pole Cesta . Zobrazí se dialogové okno Výběr poznámkového bloku.
  2. Přejděte do poznámkového bloku, kliknutím zvýrazněte soubor a klikněte na Potvrdit.

Note

Tuto možnost můžete použít ke konfiguraci úlohy pro poznámkový blok uložený ve složce Databricks na Git. Databricks doporučuje použít volbu poskytovatele Git a vzdálené úložiště Git pro verzování aktiv naplánovaných úlohami.

Poskytovatel Gitu

Pomocí poskytovatele Gitu nakonfigurujte poznámkový blok ve vzdáleném úložišti Git.

Možnosti zobrazené uživatelským rozhraním závisí na tom, jestli jste už nakonfigurovali jiného poskytovatele Gitu. Pro všechny úlohy v úloze lze použít pouze jedno vzdálené úložiště Git. Viz Používejte Git s úlohami Lakeflow.

Důležité

Poznámkové bloky vytvořené úlohami Lakeflow, které běží ze vzdálených úložišť Git, nejsou trvalé a nelze spoléhat na to, že budou sledovat spuštění MLflow, experimenty nebo modely. Při vytváření poznámkového bloku z úlohy použijte experiment MLflow pracovního prostoru (místo experimentu MLflow poznámkového bloku) a spusťte volání v poznámkovém bloku pracovního prostoru před spuštěním jakéhokoli sledovacího kódu MLflow. Další podrobnosti najdete v tématu Prevence ztráty dat v experimentech MLflow.

Pole Cesta se zobrazí po nakonfigurování odkazu na Git.

Zadejte relativní cestu k vašemu notebooku, například etl/bronze/ingest.py.

Důležité

Když zadáte relativní cestu, nezačínejte ani s / ani s ./. Například pokud je absolutní cesta k poznámkovému bloku, ke kterému chcete získat přístup, /etl/bronze/ingest.py, zadejte etl/bronze/ingest.py do pole Cesta.

Konfigurace výpočetních a závislých knihoven

Note

Jako výpočetní prostředky pro úlohu poznámkového bloku můžete vybrat SQL Warehouse jenom v případě, že je poznámkový blok napsaný zcela v SQL a SQL je nastavený jako výchozí jazyk. Pokud poznámkový blok používá jiný výchozí jazyk nebo kombinuje jazyky, vyberte místo toho cluster nebo jiný podporovaný výpočetní prostředek.

  1. Pomocí Compute vyberte nebo nakonfigurujte cluster, který podporuje logiku ve vašem sešitu.
  2. Pokud používáte výpočetní prostředí Serverless, nainstalujte knihovny přímo v poznámkovém bloku pomocí podokna Prostředí nebo %pip install. Viz Konfigurace bezserverového prostředí.
  3. U všech ostatních konfigurací výpočetních prostředků klikněte na ikonu Plus.Přidejte do závislých knihoven. Dialogové okno Přidat závislou knihovnu se zobrazí.
    • Můžete vybrat existující knihovnu nebo nahrát novou knihovnu.
    • Knihovny můžete používat pouze tehdy, pokud jsou uloženy v umístění podporovaném vašimi konfiguracemi výpočetních prostředků. Viz podpora knihovny Pythonu.
    • Každý zdroj knihovny má jiný proces pro výběr nebo nahrání knihovny. Viz Instalace knihoven.

Dokončení konfigurace úlohy

  1. (Volitelné) Nakonfigurujte parametry jako páry klíč-hodnota, ke kterým lze přistupovat v poznámkovém bloku pomocí dbutils.widgets. Viz Konfigurace parametrů úkolu.
  2. (Volitelné) Pokud chcete nakonfigurovat opakování, prahové hodnoty doby běhu nebo nevyřízených položek streamu či oznámení, viz Pokročilá nastavení úloh.
  3. Klikněte na Uložit úkol.

Pokud chcete tuto úlohu upravit, naklonovat, zakázat nebo odstranit, přečtěte si téma Konfigurace a úprava úkolů v úlohách Lakeflow.

Příprava vizuálních dat

Vizuální příprava dat v rozevíracím seznamu Typ úlohy vytvoří úlohu notebooku pro soubor vizuální přípravy dat. Tyto soubory vytvoříte na vizuálním plátně v Návrháři Lakeflow, které uloží každý z nich jako poznámkový blok s názvem <name>.designer.ipynb. Pokud chcete spustit jednu úlohu jako úlohu, přidejte úlohu poznámkového bloku a jako zdroj vyberte její .designer.ipynb soubor. Viz Návrhář Lakeflow.

Limitations

Celkový výstup buňky poznámkového bloku (kombinovaný výstup všech buněk poznámkového bloku) podléhá limitu velikosti 30 MB. Výstup jednotlivých buněk navíc podléhá limitu velikosti 8 MB. Pokud celkový výstup buňky přesahuje velikost 30 MB nebo pokud je výstup jednotlivé buňky větší než 8 MB, spuštění se zruší a označí jako neúspěšné.

Pokud potřebujete pomoc s hledáním buněk poblíž nebo nad limitem, spusťte poznámkový blok na univerzálním clusteru a použijte tuto techniku automatického ukládání .