Migrace konfigurací Sparku z Azure Synapse Analytics do prostředků infrastruktury
Apache Spark poskytuje řadu konfigurací, které je možné přizpůsobit, aby se prostředí zlepšilo v různých scénářích. V Azure Synapse Sparku a prostředcích infrastruktury Datoví technici máte flexibilitu začlenit tyto konfigurace nebo vlastnosti pro přizpůsobení prostředí. V prostředcích infrastruktury můžete do prostředí přidat konfigurace Sparku a použít vložené vlastnosti Sparku přímo v rámci úloh Sparku. Pokud chcete přesunout konfigurace fondu Azure Synapse Spark do prostředků infrastruktury, použijte prostředí.
Informace o konfiguraci Sparku najdete v rozdílech mezi Azure Synapse Sparkem a prostředky infrastruktury.
Požadavky
- Pokud ho ještě nemáte, vytvořte ve svém tenantovi pracovní prostor Fabric.
- Pokud ho ještě nemáte, vytvořte ve svém pracovním prostoru prostředí .
Možnost 1: Přidání konfigurací Sparku do vlastního prostředí
V rámci prostředí můžete nastavit vlastnosti Sparku a tyto konfigurace se použijí na vybraný fond prostředí.
- Otevřete Synapse Studio: Přihlaste se do Azure. Přejděte do svého pracovního prostoru Azure Synapse a otevřete Synapse Studio.
- Vyhledejte konfigurace Sparku:
- Přejděte do části Spravovat oblast a vyberte ve fondech Apache Sparku.
- Vyhledejte fond Apache Spark, vyberte konfiguraci Apache Sparku a vyhledejte název konfigurace Sparku pro fond.
- Získat konfigurace Sparku: Tyto vlastnosti můžete získat výběrem možnosti Zobrazit konfigurace nebo exportem konfigurace (.txt/.conf/.json formátu) v konfiguracích a knihovnách> Apache Sparku.
- Jakmile budete mít konfigurace Sparku, přidejte do prostředí v prostředcích infrastruktury vlastní vlastnosti Sparku:
- V prostředí přejděte do vlastností Spark Compute>Sparku.
- Přidejte konfigurace Sparku. Každý z nich můžete přidat ručně nebo importovat z .yml.
- Klikněte na Uložit a publikovat změny.
Přečtěte si další informace o přidávání konfigurací Sparku do prostředí.