Migrálás az Azure Synapse Sparkból a Fabricbe

A migrálás megkezdése előtt ellenőriznie kell, hogy a Fabric adatmérnök ing a legjobb megoldás a számítási feladathoz. A fabric adatmérnök ing támogatja a lakehouse, a notebook, a környezet, a Spark-feladatdefiníció (SJD) és az adatfolyam-elemek használatát, beleértve a különböző futtatókörnyezeti és Spark-képességek támogatását.

Fő szempontok

A migrálási stratégia kialakításának első lépése az alkalmasság felmérése. Érdemes megjegyezni, hogy a Sparkhoz kapcsolódó bizonyos Fabric-funkciók jelenleg fejlesztés alatt állnak vagy terveznek. További részletekért és frissítésekért látogasson el a Háló ütemtervére.

A Spark esetében tekintse meg az Azure Synapse Spark és a Fabric közötti részletes összehasonlítási különbségeket.

Migrálási forgatókönyvek

Ha úgy ítéli meg, hogy a Fabric adatmérnök ing a megfelelő választás a meglévő Spark-számítási feladatok áttelepítéséhez, az áttelepítési folyamat több forgatókönyvet és fázist is magában foglalhat:

• Elemek: Az elemek áttelepítése magában foglalja egy vagy több elem áthelyezését a meglévő Azure Synapse-munkaterületről a Fabricbe. További információ a Spark-készletek, a Spark-konfigurációk, a Spark-kódtárak, a jegyzetfüzetek és a Spark-feladatok definíciójának migrálásáról.
• Adatok és folyamatok: A OneLake-parancsikonokkal elérhetővé teheti az ADLS Gen2-adatokat (egy Azure Synapse-munkaterülethez csatolva) a Fabric lakehouse-ban. A folyamatmigrálás magában foglalja a meglévő adatfolyamok Fabricbe való áthelyezését, beleértve a jegyzetfüzet- és a Spark-feladatdefiníciós folyamat tevékenységeit. További információ az adatok és folyamatok migrálásáról.
• Metaadatok: A metaadatok áttelepítése magában foglalja a Spark-katalógus metaadatainak (adatbázisok, táblák és partíciók) áthelyezését egy meglévő Hive MetaStore-ból (HMS) az Azure Synapse-ből a Fabric lakehouse-ba. További információ a HMS-metaadatok migrálásáról.
• Munkaterület: A felhasználók áttelepíthetnek egy meglévő Azure Synapse-munkaterületet úgy, hogy létrehoznak egy új munkaterületet a Microsoft Fabricben, beleértve a metaadatokat is. A munkaterület migrálására nem vonatkozik ez az útmutató, feltételezve, hogy a felhasználóknak új munkaterületet kell létrehozniuk, vagy meglévő Háló-munkaterületet kell létrehozniuk. További információ a munkaterületi szerepkörökről a Fabricben.

Az Azure Synapse Sparkról a Fabric Sparkra való áttéréshez alapos ismeretekre van szükség a jelenlegi architektúráról, valamint az Azure Synapse Spark és a Fabric közötti különbségekről. Az első fontos lépés egy értékelés, majd egy részletes migrálási terv létrehozása. Ez a terv testre szabható a rendszer egyedi jellemzőinek, fázisfüggőségeinek és számítási feladat-összetettségeinek megfelelően.

Kapcsolódó tartalom

• Háló és Azure Synapse Spark
• További információ a Spark-készletek, konfigurációk, tárak, jegyzetfüzetek és Spark-feladatok definíciójának áttelepítési lehetőségeiről
• Adatok és folyamatok migrálása
• Hive metaadattár metaadatainak migrálása