Megosztás a következőn keresztül:

Spark-kódtárak migrálása az Azure Synapse-ból a Fabricbe

  • Cikk

Az Azure Synapse Spark-készlet különböző hírcsatornákat és egyéni kódtár-beállításokat kínál. A Fabricben minden futtatókörnyezet előre telepített kódtárakkal (beépített kódtárakkal) rendelkezik. A forgatókönyvek és a konkrét igények alapján azonban környezeti kódtárakat és beágyazott kódtárakat használó más kódtárakat is felvehet. Az Azure Synapse Spark-készlettárak Fabricbe való áthelyezéséhez használjon környezeti kódtárakat.

A Spark-kódtárakra vonatkozó megfontolásokért tekintse meg az Azure Synapse Spark és a Fabric közötti különbségeket.

Előfeltételek

1. lehetőség: Spark-kódtárak hozzáadása egyéni környezethez

A Spark-készlettárakat az alábbiak szerint helyezheti át egy környezetbe:

  1. Nyissa meg a Synapse Studiót: Jelentkezzen be az Azure-ba. Lépjen az Azure Synapse-munkaterületre, és nyissa meg a Synapse Studiót.
  2. Spark-kódtárak megkeresése:
    • Lépjen a Kezelés területre, és válassza ki az Apache Spark-készleteket .
    • Keresse meg az Apache Spark-készletet, válassza a Csomagok lehetőséget, és keresse meg a készlet Spark-kódtárait.
  3. Spark-kódtárak lekérése: Keresse meg a készletben telepített requirements.txt, environment.yml vagy munkaterületcsomagokat. Kérje le a készleten lévő telepített kódtárak listáját.
  4. Miután létrehozta a Spark-kódtárakat, adjon hozzá egyéni Spark-kódtárakat egy környezethez a Fabricben. A környezetében lépjen a Kódtárak elemre, és vegyen fel kódtárakat:
    • A nyilvános kódtárakból feltölthet egy .yml fájlt. Kódtárakat a PyPI és a Conda használatával is telepíthet.
    • Az egyéni tárakban .jar/.whl/.tar.gz fájlokkal telepíthet kódtárakat.
  5. Kattintson a Módosítások mentése és közzététele elemre.

Képernyőkép a Spark-kódtárakról.

További információ a Spark-kódtárak környezethez való hozzáadásáról.

Feljegyzés

Vegye figyelembe, hogy a kódtár telepítése eltarthat egy ideig.

Kapcsolódó tartalom