Migrace dat do Azure – přehled

Migrace úloh náročných na data a úložiště do Azure umožňuje přístup ke škálovatelnému a zabezpečenému cloudovému úložišti, což umožňuje rychlé inovace a růst. Tento dokument obsahuje jasné praktické pokyny, které vám pomůžou dosáhnout bezproblémové migrace bloků, souborů a úložiště objektů. Popisuje různé aspekty, poskytuje klíčové metriky, popisuje relevantní služby úložiště Azure a pomáhá s výběrem nástrojů.

Background

Výběrem rozbalíte nebo zvětšíte tuto část.

Různé obchodní a technické požadavky určují celkovou strategii migrace Do Azure. Aby bylo možné zachytávat konkrétní požadavky pro vaše případy použití, aby bylo možné provést vhodná rozhodnutí o návrhu architektury a technického návrhu, obsahuje architektura Dobře navržená architektem Microsoftu (WAF) základní sady pokynů pro všechny migrace úloh a služeb. Při sledování se tento proces zabývá spolehlivostí, zabezpečením, optimalizací nákladů, efektivitou provozu a efektivitou výkonu. Mezi doporučené osvědčené postupy patří kontrola pokynů WAF a následujících informací k vytvoření komplexního přístupu k migraci pro konkrétní aplikace a služby.

Poznámka:

Následující pokyny obsahují informace specifické pro nestrukturovanou migraci dat do služeb Azure Storage. Scénáře zahrnující strukturovaná data, jako je SQL, Oracle nebo Tables, a nejsou popsané v tomto dokumentu.

Tyto pokyny se zaměřují konkrétně na migraci nestrukturovaných dat do služeb Azure Storage. Obsah využívá přístup zaměřený na migraci dat, takže témata, jako je efektivita provozu a optimalizace nákladů, můžou vyžadovat samostatnou podrobnou diskuzi. Scénáře týkající se strukturovaných dat, jako jsou SQL, Oracle nebo Tabulky, přinášejí další aspekty, které se liší v závislosti na aplikaci.

Následující obsah nenahrazuje ani zneplatňuje žádné metodologie, architektury ani doporučení uvedená v jiné oficiální dokumentaci Microsoftu.

Fáze a aktivity migrace

Úplná migrace se skládá z různých fází , včetně posouzení, výběru cíle, plánování, výběru nástrojů, provádění migrace. Po provedení stupňovitého přístupu je možné data migrovat do Azure s nižšími výpadky a riziky. Každý krok zajistí, že jsou pokryty všechny nezbytné parametry a vybere se nejvhodnější přístup pro data disku, souboru a objektu .

Posouzení

Výběrem rozbalíte nebo zvětšíte tuto část.

V této fázi určíte a inventarizujete všechny zdroje, které je potřeba migrovat, jako jsou sdílené složky SMB (Server Message Block), svazky NFS (Network File System) nebo prostory názvů objektů. Celý proces obvykle zahrnuje:

  • Vytvoření katalogu nebo inventáře všech datových prostředků a zdrojů dat
  • Identifikace a pochopení datových typů a vzorů přístupu
  • Principy spolehlivosti, výkonu a obchodních požadavků na data
  • Vyhodnocení replikace, rychlosti změn a odolnosti a odolnosti proti výpadkům
  • Vysvětlení požadavků na zabezpečení a dodržování předpisů

Tuto fázi můžete provést ručně nebo můžete použít automatizované nástroje. Nezávislí výrobci softwaru (ISV) mají k dispozici několik komerčních nástrojů, které můžou pomoct s fází posouzení. Další informace najdete v článku srovnávací matice .

Přečtěte si další informace o aktivitách fáze posouzení.

Výběr cíle

Výběrem rozbalíte nebo zvětšíte tuto část.

Je nezbytné porozumět dostupným možnostem, které můžou splňovat požadavky zjištěné během fáze posouzení. Microsoft Azure nabízí několik služeb úložiště, jako jsou Soubory Azure, Blob Storage, Azure NetApp Files a Spravované disky pro virtuální počítače. Kromě toho existují partneři nezávislých výrobců softwaru, kteří nabízejí softwarově definované verze místních platforem úložiště pro blokové, souborové a objektové úlohy založené na našich základních službách úložiště.

Tato fáze zahrnuje především následující aktivity:

  • Posouzení technických požadavků pro identifikaci nejvhodnější cílové služby úložiště Azure
  • Vytvoření vhodné cílové architektury řešení (na základě vaší aplikace nebo úlohy) s identifikovaným řešením úložiště
  • Vyhodnocení cen a nákladů souvisejících s migrací a cílovým řešením

Přečtěte si další informace o aktivitách cílové fáze výběru.

Plánování strategie migrace

Výběrem rozbalíte nebo zvětšíte tuto část.

Plánování strategie migrace zahrnuje identifikaci vhodné metody pro přesun dat do Azure. Může také zahrnovat další aspekty vhodné pro konkrétní úlohy, povahu dat nebo příslušné aplikace. Následující seznam obsahuje několik příkladů těchto aspektů:

  • Online vs. offline přenos
  • Možnost proveditelnosti migrace metodou „lift and shift“
  • Míra změn dat a vrstvení
  • Hybridní potřeby úložiště a přesun dat
  • Replikace jako strategie
  • Zálohování a obnovení jako strategie migrace

Přečtěte si další informace o strategii plánování migrace.

Výběr nástrojů pro migraci

K dispozici jsou různé nástroje pro migraci, které vám pomůžou provést migraci. Mezi opensourcové nástroje patří například AzCopy, robocopy, xcopy a rsync. Microsoft nabízí spravované nástroje, jako je Azure Storage Mover, Azure Data Box, Synchronizace souborů Azure, Azure Migrate a Data Box Gateway. K dispozici je také mnoho dalších komerčních nástrojů, které nejsou od Microsoftu. Seznam dostupných komerčních nástrojů je k dispozici v našem článku srovnávací matice , který také poskytuje porovnání mezi nimi.

Následující tabulka obsahuje výběr nástrojů pro migraci na základě scénářů pro referenci. I když možné alternativy mohou existovat v konkrétním případě, jsou následující příklady považovány za nejvhodnější.

Scénář Doporučené nástroje
– Potřebujete plně spravovaný, automatizovaný a odolný nástroj s jedním podoknem správy (v Azure);
– Migrace souborů nebo sdílených složek nad rámec malých přenosů, obvykle > 1 TB dat, vertikální navýšení kapacity na miliony souborů nebo objektů
– Migrace metodou "lift and shift" nebo průběžná synchronizace z místního serveru NAS
– Souborové servery s Windows bez nainstalované nebo nakonfigurované Synchronizace souborů Azure
– Migrace do Azure zahrnující:
– SMB (2.x, 3.x) do Azure Blob (Hot/Cold) nebo Azure Data Lake Storage (ADLS) s povoleným HNS (služba hierarchického oboru názvů)
– SMB (2.x, 3.x) k Azure Files (pouze SMB)
– NFS (v3, v4.1) do Azure Blob (Hot/Cold) nebo ADLS s povoleným HNS (pouze NFS v3)
– jednorázově nebo nepřetržitě (včetně prostředí s více cloudy)
– S3 do Azure Blob (horká/studená) nebo ADLS (hierarchický obor názvů)
– Funkce kopírování „pouze metadat“, která umožňuje kopírovat pouze metadata nebo strukturu souborů bez obsahu souboru (například za účelem nastavení oprávnění nebo provádění migrace formou simulace)
Azure Storage Mover
– Offline přenos dat (nízká šířka pásma nebo žádné síťové připojení, vzdálené lokality)
– Zkopírujte z místních sdílených složek SMB/NFS nebo zdrojů NAS přímo do objektů blob Azure, souborů, ADLS na konkrétní vrstvy, včetně přímého importu do jiné oblasti (mimo zdrojovou zemi nebo region).
– Offline přenos ze služeb Azure Files, Premium FileStorage a Blob (Hot/Cold) do místního prostředí
– Offline přenos místního HDFS do Azure Blob (Hot/Cold) nebo Azure Data Lake Storage (s povoleným HNS)
Azure Data Box
- Potřebujete přenášet velké objemy dat za krátkou dobu prostřednictvím offline i online řešení.
– Offline nasazení počátečních objemových dat z důvodu omezení sítě následované delta synchronizací.
Azure Data Box pro počáteční nasazení pomocí azure Storage Mover pro rozdílovou synchronizaci
– fyzické počítače, virtuální počítače a jejich připojené disky; Virtuální počítače spuštěné v Hyper-V, VMware, AWS, GCP. Azure Migrate
– Rychlý, jednorázový nebo přírůstkový přenos dat v malém až středním měřítku (obvykle < 1 TB na úlohu) do nebo z Azure
– Přenosy mezi službami (files-to-files, files-to-blob atd.) přes páteřní síť Azure (uvnitř Azure)
– Požadavek na možnosti skriptování (kritéria filtrování, aktualizace metadat nebo jakákoli transformace) a přesný ovládací prvek pro takové přenosy
- Nezahrnuje miliony souborů ani přenos objektů.
– Místní systém souborů, připojení SMB a NFS do Azure
– S3 do Azure Blob (obvykle < 1 TB)
– AWS EFS nebo AWS FSx pro Windows k Azure Files
– Cloudové úložiště Google (S3, rozhraní GCS API) k Azure Storage (Blob), ADLS (s funkcí HNS)
AzCopy (vždy používá rozhraní HTTPS REST API)
– Zdroj windowsového souborového serveru (SMB 2.x nebo 3.x do Azure Files)
– Hybridní synchronizace dat s zpětnou nebo obousměrnou synchronizací souborů
– Centralizovaná správa souborových serverů s lokální cache a cloud tieringem
– Spolupráce a týmová práce s expanzními nasazeními (přístup k více lokalitám a synchronizace)
– Zálohování na straně cloudu s provozní kontinuitou a zotavením po havárii spolu s přítomností místní mezipaměti
– Jednorázová potřeba migrace sdílených souborů s již nasazenou a nakonfigurovanou službou Azure File Sync.
Synchronizace souborů Azure
– Požadavky na průběžný příjem dat a vrstvení cloudu do úložiště Azure (blob) s místní mezipamětí
– Zdroj je místní (NFS v3, 4.1 nebo SMB 2.x, 3.x) (jednosměrná synchronizace) nebo obousměrná (s ruční synchronizací) do Azure nebo z Azure.
– Není potřeba používat více místních kopií těchto dat uchovávané v synchronizaci (jednosměrně).
Azure Data Box Gateway
– Přenosy malého rozsahu, jednorázové přenosy s vlastními skripty nebo migrace založené na Linuxu nebo Windows CLI AzCopy, rsync, Robocopy
– Složitá správa dat, analýza, vrstvení nebo nepodporované případy použití a cíle (například ANF nebo Lustre) nad rámec možností nativních nástrojů Azure. Nástroje ISV (Komprise, Cirata, Data Dynamics, Atempo)
– Migrace velkých archivů dat z místních pásek do úložiště Azure Projděte si průvodce migrací pásek a prozkoumejte partnerová řešení, jako je Tape Ark.
– Velké místní zálohování nebo archivace pomocí řešení ISV (například Commvault, Veeam nebo RUbrik)
– Offline seeding s rozdílovou synchronizací pomocí zálohovacího nástroje.
Používejte doporučení specifická pro partnery;
Azure Data Box s řešením ISV
- Další scénáře, mezi které patří:
– místní NAS do služby Azure Files (s výjimkou služby kopírování dat Data Boxu)
– místní provoz Linux do Azure Files NFS
– AWS EFS/FSx/S3 na Azure Files
– GCP FileStorage do služby Azure Files
- Nástroje nezávislých výrobců softwaru (Komprise, Cirata, Data Dynamics, Atempo)
NEBO
– Připojení zdroje k klientovi a použití nástroje Azure Storage Mover nebo AzCopy

Přečtěte si další informace o nástrojích a možnostech migrace.

Provádění migrace

Výběrem rozbalíte nebo zvětšíte tuto část.

Fáze migrace je posledním krokem migrace. Tento krok provádí operace migrace a přesunu dat. Fáze migrace se obvykle skládá z počáteční replikace nebo hromadné migrace, po níž následuje několik iterací přírůstkové synchronizace před dokončením přímé migrace. Tento přístup obecně dosahuje plynulejšího a efektivnějšího přepínání.

Doba trvání nestrukturované migrace dat závisí na několika aspektech. Mimo zvolenou metodu jsou nejdůležitějšími faktory celková velikost dat a distribuce velikosti souboru. Čím větší je celková datová sada, tím delší je doba potřebná k migraci. Čím menší je průměrná velikost souboru, tím delší je doba migrace potřebná. Pokud máte velký počet malých souborů, zvažte jejich archivaci v rámci větších souborů (komprimace do .tar nebo .zip souborů), pokud je to možné, abyste zkrátili celkovou dobu migrace.

Přečtěte si další informace o provádění migrace.

Migrace blokových zařízení

Výběrem rozbalíte nebo zvětšíte tuto část.

Migrace blokových zařízení se obvykle provádí jako součást migrace virtuálního počítače nebo fyzického hostitele. Zpoždění rozhodnutí o blokovém úložišti až po dokončení migrace je běžnou chybou. Provádění těchto rozhodnutí předem s důkladným porozuměním požadavkům na úlohy vede k plynulejší migraci do cloudu.

Migraci blokových zařízení je možné provést dvěma způsoby:

  • Migrace úplných virtuálních počítačů společně s podkladovými blokovými zařízeními
  • Pouze migrace blokových zařízení

Nápovědu k migraci virtuálních počítačů se základními blokovými zařízeními najdete v dokumentaci ke službě Azure Migrate . Pro složitější případy použití použijte Cirrus Migrate Cloud.

Pokud chcete prozkoumat úlohy vhodné pro migraci a jejich vhodné přístupy, projděte si stránku produktu Disk Storage a článek o typech disků Azure . Dozvíte se, které disky nejlépe vyhovují vašim požadavkům, a o nejnovějších funkcích, jako je shlukování disků.

Viz také