Siirtyminen Azure Synapse Sparkistä Fabriciin
Ennen kuin aloitat siirtämisen, varmista, että Fabric Data Engineering on paras ratkaisu kuormitukseesi. Fabric Data Engineering tukee Lakehousea, muistikirjaa, ympäristöä, Spark-työmääritystä (SJD) ja tietoputkikohteita , mukaan lukien erilaisia suorituspalvelu- ja Spark-ominaisuuksia.
Huomioitavaa tärkeistä seikoista
Ensimmäinen askel siirtymisstrategian luomisessa on soveltuvuuden arvioiminen. Kannattaa huomata, että tietyt Sparkiin liittyvät Fabric-ominaisuudet ovat tällä hetkellä kehityksessä tai suunnittelussa. Saat lisätietoja ja päivityksiä Fabric-toteutussuunnitelmasta.
Katso Sparkia varten Yksityiskohtaiset vertailuerot Azure Synapse Sparkin ja Fabricin välillä.
Siirtymisskenaariot
Jos päätät, että Fabric Data Engineering on oikea vaihtoehto olemassa olevien Spark-kuormitusten siirtämiseen, siirtoprosessiin voi sisältyä useita skenaarioita ja vaiheita:
- Kohteet: Kohteiden siirto edellyttää yhden tai eri kohteen siirtämistä olemassa olevasta Azure Synapse -työtilasta Fabriciin. Lue lisätietoja Spark-altaiden siirtämisestä, Spark-kokoonpanoista, Spark-kirjastoista, muistikirjoista ja Spark-työn määrityksestä.
- Tiedot ja putket: OneLake-pikakuvakkeiden avulla voit ottaa ADLS Gen2 -tiedot (linkitettynä Azure Synapse -työtilaan) saataville Fabric lakehousessa. Jakson siirto edellyttää olemassa olevien tietoputkien siirtämistä Fabriciin, mukaan lukien muistikirja- ja Spark-työnmääritysputken toiminnot. Lue lisätietoja tietojen ja jaksojen siirtämisestä.
- Metatiedot: Metatietojen siirtämiseen liittyy Spark-hakemiston metatietojen (tietokannat, taulukot ja osiot) siirtäminen Azure Synapsen aiemmin luodusta Hive MetaStoresta (HMS) Fabric Lakehouseen. Lue lisää HMS-metatietojen siirtämisestä.
- Työtila: Käyttäjät voivat siirtää olemassa olevan Azure Synapse -työtilan luomalla Uuden työtilan Microsoft Fabricissa, mukaan lukien metatiedot. Nämä ohjeet eivät kata työtilaan siirtymistä. Oletuksena on, että käyttäjien on luotava uusi työtila tai heidän on luotava aiemmin luotu Fabric-työtila. Lue lisätietoja Työtilarooleista Fabricissa.
Siirtyminen Azure Synapse Sparkistä Fabric Sparkiin edellyttää, että ymmärrät hyvin nykyisen arkkitehtuurisi sekä Azure Synapse Sparkin ja Fabricin väliset erot. Ensimmäinen tärkeä vaihe on arviointi, jonka jälkeen luodaan yksityiskohtainen siirtosuunnitelma. Tätä palvelupakettia voidaan mukauttaa niin, että se vastaa järjestelmän ainutlaatuisia piirteitä, vaiheriippuvuuksia ja kuormituksen monimutkaisuutta.