Plánování migrace: Azure Synapse Analytics dedikované SQL pooly pro Fabric Data Warehouse

platí pro:✅ Warehouse v Microsoft Fabric

Tento článek popisuje strategie, úvahy a metody migrace z Azure Synapse Analytics specializovaných SQL poolů na Microsoft Fabric Data Warehouse.

Tip

Použijte Fabric Pomocník s migrací for Data Warehouse pro automatizovanou migraci z Azure Synapse Analytics dedikovaných SQL poolů. Tento článek obsahuje důležité strategické a plánovací informace.

Úvod k migraci

Microsoft Fabric je komplexní SaaS analytické řešení pro podniky. Nabízí komplexní sadu služeb, včetně Data Factory, Data Engineering, Data Warehousing, Data Science, Real-Time Intelligence a Power BI.

Tento článek popisuje možnosti schématu (DDL), databázového kódu (DML) a migrace dat a pomáhá vám vybrat možnost pro váš scénář. Používá TPC-DS průmyslový benchmark pro ilustrace a testování výkonu. Vaše výsledky se mohou lišit v závislosti na faktorech, jako jsou typy dat, šířka tabulky a latence zdroje.

Příprava na migraci

Pečlivě si naplánujte migrační projekt ještě před začátkem a ujistěte se, že vaše schéma, kód a data jsou kompatibilní s Fabric Data Warehouse. Zvažte omezení. Kvantifikujte práci potřebnou k refaktorování neslučitelných položek a dalších zdrojů potřebných k realizaci migrace.

Dalším klíčovým cílem plánování je upravit svůj návrh tak, aby vaše řešení plně využilo Fabric Data Warehouse výkonu dotazů. Navrhování datových skladů pro škálování představuje jedinečné vzory návrhu, takže tradiční přístupy nejsou vždy nejlepší. Projděte si pokyny pro výkon. I když po migraci můžete provést určité úpravy designu, dřívější změny šetří čas a úsilí. Migrace z jedné technologie nebo prostředí do druhého je vždy velkým úsilím.

Následující diagram ukazuje životní cyklus migrace a úkoly spojené s jejími pěti pilíři: Hodnocení a vyhodnocování, Plánování a návrh, Migrace, Monitorování a správa aOptimalizace a modernizace.

Diagram životního cyklu migrace, včetně Hodnocení a vyhodnocování, Plánování a návrhu, Migrace, Monitorování a řízení a Optimalizace a modernizace.

Manuál pro migraci

Zvažte následující aktivity jako plánovací runbook pro vaši migraci z vyhrazených SQL fondů Synapse do Fabric Data Warehouse.

  1. Posouzení a hodnocení
    1. Identifikujte cíle a motivaci. Vytvořte jasné požadované výsledky.
    2. Objevte, zhodnoťte a vyhodnoťte stávající architekturu.
    3. Identifikujte klíčové zúčastněné strany a sponzory.
    4. Definujte rozsah toho, co se má migrovat.
      1. Začněte pomalými a jednoduchými a připravte se na několik malých migrací.
      2. Začněte monitorovat a dokumentovat všechny fáze procesu.
      3. Vytvořte inventář dat a procesů pro migraci.
      4. Definujte změny datového modelu, pokud nějaké jsou.
      5. Připravte pracovní prostor Fabric.
    5. Zhodnoťte dovednosti a preference svého týmu.
      1. Automatizovat všude, kde je to možné.
      2. Využijte integrované nástroje a funkce Azure ke snížení úsilí o migraci.
    6. Začněte personál školit na nové platformě brzy.
      1. Identifikujte potřeby a školicí materiály pro zvyšování dovedností, včetně Microsoft Learn.
  2. Plánování a návrh
    1. Definujte požadovanou architekturu.
    2. Vyberte metody a nástroje pro migraci, abyste splnili následující úkoly:
      1. Extrakce dat ze zdroje
      2. Převod schématu (DDL), včetně metadat pro tabulky a pohledy.
      3. Příjem dat, včetně historických dat.
        1. Pokud je to nutné, přepracovat datový model pomocí nového výkonu platformy a škálovatelnosti.
      4. Migrace databázového kódu (DML)
        1. Migrace nebo refaktoring uložených procedur a obchodních procesů
    3. Inventarizace a extrahování funkcí zabezpečení a oprávnění k objektům ze zdroje
    4. Navrhnout a plánovat nahrazení nebo úpravu stávajících ETL/ELT procesů pro inkrementální zátěž.
      1. Vytvořte paralelní procesy ETL/ELT do nového prostředí.
    5. Připravte podrobný plán migrace.
      1. Namapujte aktuální stav na požadovaný stav.
  3. Migrovat
    1. Provádějte migraci schématu, dat a kódu.
      1. Extrakce dat ze zdroje
      2. Převod schématu (DDL).
      3. Příjem dat
      4. Migrace databázového kódu (DML)
    2. V případě potřeby škálujte prostředky vyhrazeného fondu SQL dočasně tak, aby pomohly s rychlostí migrace.
    3. Použijte zabezpečení a oprávnění.
    4. Migrujte existující procesy ETL/ELT pro inkrementální načítání.
      1. Migrujte nebo refaktorujte procesy přírůstkového načítání ETL/ELT.
      2. Testujte a porovnávejte paralelní postupné zátěžové procesy.
    5. Přizpůsobte podrobný migrační plán podle potřeby.
  4. Monitorování a řízení
    1. Spusť paralelně a porovnat s prostředím zdroje.
      1. Testování aplikací, platforem business intelligence a nástrojů pro dotazy
      2. Proveďte srovnávací testy a optimalizujte výkon dotazů.
      3. Monitorování a správa nákladů, zabezpečení a výkonu
    2. Proveďte benchmark a hodnocení správy.
  5. Optimalizace a modernizace
    1. Když je firma připravená, převeďte aplikace a primární platformy pro vytváření sestav na Fabric.
      1. Škálujte zdroje nahoru nebo dolů podle toho, jak se pracovní zátěž přesouvá z Azure Synapse Analytics na Microsoft Fabric.
      2. Vytvořte opakovatelnou šablonu na základě získaných zkušeností pro budoucí migrace. Iterovat.
      3. Identifikujte příležitosti pro optimalizaci nákladů, bezpečnost, škálovatelnost a provozní excelenci.
      4. Identifikujte příležitosti k modernizaci své datové infrastruktury pomocí nejnovějších funkcí Fabric.

Migrovat beze změn, nebo modernizovat?

Obecně platí, že existují dva typy scénářů migrace bez ohledu na účel a rozsah plánované migrace: metodu "lift and shift", jak je, nebo fázovaný přístup, který zahrnuje změny architektury a kódu.

Přenést a posunout

Při migraci typu lift and shift migrujete existující datový model s drobnými změnami na nový Fabric Data Warehouse. Tento přístup minimalizuje riziko a čas migrace snížením nové práce potřebné k realizaci výhod migrace.

Migrace pomocí metody "lift and shift" je vhodná pro následující scénáře:

  • Máte existující prostředí s malým počtem skladů, které se mají migrovat.
  • Máte existující prostředí s daty, která už jsou v dobře navrženém schématu typu hvězdy nebo sněhové vločky.
  • Máte časový a nákladový tlak na přechod do datového skladu Fabric.

Shrnuto, tento přístup dobře funguje pro pracovní zátěže optimalizované pro vaše současné prostředí dedikovaného SQL poolu Azure Synapse a nevyžadují zásadní změny ve Fabric.

Modernizace ve fázovaném přístupu se změnami architektury

Pokud se legacy datový sklad vyvíjel po dlouhou dobu, možná budete muset jej přepracovat tak, aby udržel požadovanou úroveň výkonu.

Možná budete chtít přepracovat architekturu tak, aby využila nové enginy a funkce dostupné v pracovním prostoru Fabric.

Rozdíly v návrhu: Vyhrazené SQL fondy Synapse a Fabric Data Warehouse

Zvažte následující rozdíly mezi datovými sklady Azure Synapse a Microsoft Fabric a porovnáním vyhrazených fondů SQL s datovým skladem Fabric.

Úvahy o tabulkách

Když migrujete tabulky mezi různými prostředími, obvykle se fyzicky migrují jenom nezpracovaná data a metadata. Obvykle nemigrujete jiné databázové prvky ze zdrojového systému, jako jsou indexy, protože by mohly být zbytečné nebo implementovány jinak v novém prostředí.

Optimalizace výkonu ve zdrojovém prostředí, jako jsou indexy, ukazují, kde byste mohli v novém prostředí potřebovat optimalizaci. Fabric tyto optimalizace spravuje automaticky.

Důležité informace o T-SQL

Existuje několik rozdílů v syntaxi Data Manipulation Language (DML), které je třeba zvážit. Projděte povrch T-SQL v Fabric Data Warehouse a proveďte hodnocení kódu, když si vyberete metodu migrace databázového kódu.

V závislosti na rozdílech parity v době migrace možná budete muset přepsat části kódu T-SQL DML.

Rozdíly v mapování datových typů

Fabric Data Warehouse má několik rozdílů v datových typech oproti Azure Synapse Analytics dedikovaným SQL poolům. Další informace najdete v tématu Datové typy v Microsoft Fabric.

Následující tabulka ukazuje mapování podporovaných datových typů z Azure Synapse dedikovaných SQL poolů na Fabric Data Warehouse.

Vyhrazené SQL pooly Synapse Datový sklad Fabrique
money decimal(19,4)
smallmoney decimal(10;4)
smalldatetime datetime2
datetime datetime2
nchar char
nvarchar varchar
tinyint smallint
binary varbinary
Datetimeoffset* datetime2

* Datetime2 neukládá informace o posunu časového pásma, které ukládá datetimeoffset . Protože Fabric Data Warehouse momentálně nepodporuje datový typ datetimeoffset, je potřeba data o časovém offsetu extrahovat do samostatného sloupce.

Tip

Jste připravení na migraci?

Chcete-li začít s automatizovaným procesem migrace, podívejte se na Asistent pro migraci Fabric pro datový sklad.

Další ruční kroky migrace a podrobnosti najdete v tématu Metody migrace vyhrazených fondů SQL služby Azure Synapse Analytics do Fabric Data Warehouse.

Související obsah

  • Poslední aktualizace v