Sjednoťte data pomocí zkratek OneLake a zrcadlení

OneLake vám poskytuje jeden pohled na data napříč cloudy, doménami a účty. Sjednocení dat v OneLake nevyžaduje ukládání všech těchto dat na jedno místo. Data mohou zůstat u zdroje nebo být replikována do OneLake, kde k nim Fabric pracovní zátěže přistupují prostřednictvím sdíleného jmenného prostoru.

Zkratky a zrcadlení jsou doplňkové funkce OneLake pro vytvoření tohoto jednotného pohledu bez nutnosti budovat a provozovat kanály pro přesun dat. Zkratky přidávají vybraná data do jmenného prostoru OneLake. Zrcadlení přidává externí databázi nebo katalog a určuje, zda lze k jejím datům přistupovat přímo na místě, nebo zda je nutné je replikovat. Tento článek vysvětluje, jak každá schopnost funguje a kdy je použít. Pro širší škálu způsobů, jak data v Fabric importovat, transformovat nebo přesouvat, viz Získat data do Microsoft Fabric nebo Zvolit strategii přesunu dat.

Přehled zkratek a zrcadlení

Zkratky a zrcadle fungují na různých úrovních granularity a podporují různé zdrojové formáty.

Schopnosti Jak funguje Zdrojové formáty Typický scénář
Zkratky Přidejte odkaz na vybrané tabulky, složky nebo soubory v OneLake nebo externím úložišti. Data zůstávají u zdroje. Pouze otevřené formáty Přeneste do lakehouse jednu tabulku, složku nebo schéma nebo povolte vzory architektury data mesh napříč pracovními prostory nebo tenanty.
Zrcadlení Přidejte externí databázi nebo katalog do Fabric. V závislosti na zdroji zrcadlení přistupuje k datům přímo na místě nebo je průběžně replikuje do OneLake. Otevřené a proprietární formáty Přineste celou externí databázi nebo katalog, například Snowflake, Azure Databricks nebo Azure SQL Database.

Pokud váš zdroj ukládá data v proprietárním formátu, zrcadlení je jedinou možností.

Kdy používat klávesové zkratky

Používejte zkratky, když chcete zahrnout konkrétní data do svého sjednoceného OneLake pohledu, aniž byste je kopírovali. Zvolte klávesové zkratky, když:

  • Sdílejte jednu tabulku, složku nebo soubor napříč pracovními prostory nebo tenanty.
  • Spojte data z více jezer nebo cloudových účtů do jednoho jednotného pohledu.
  • Vytvářejte vzory datové sítě, kde každá doména vlastní svá data a jiné domény je objevují přes OneLake.
  • Zpřístupněte data v otevřených formátech, jako je Delta nebo Iceberg, prostřednictvím Azure Data Lake Storage, Amazon S3, Google Cloud Storage nebo Dataverse.

Zkratky fungují na úrovni stolu, složky nebo souboru. Vy rozhodujete, která data zpřístupnit a kde se v OneLake objeví. Další informace najdete v tématu Klávesové zkratky OneLake.

Transformujte data při jejich sjednocování

Transformace pomocí zkratek převádějí data za zkratkou na dotazovatelnou tabulku Delta, která zůstává synchronizovaná se zdrojem, aniž by se musel vytvářet ETL pipeline. Použijte je k tomu, abyste byli připraveni na datovou analytiku:

  • Transformace souborů převádějí strukturované soubory, jako jsou CSV, Parquet, JSON nebo Excel, na tabulky Delta. Pro více informací viz Transformace zkratek (soubor).
  • Transformace využívající AI používají zpracování jazyka na .txt souborech ke shrnutí obsahu, detekci sentimentu, překladu, redakci osobních údajů (PII) nebo extrakci pojmenovaných entit. Pro více informací viz Transformace zkratek (poháněné AI).

Kdy použít zrcadlení

Zrcadlení použijte, když chcete do Fabric zahrnout externí databázi nebo katalog a podkladová data jako jeden celek. Zrcadlení je správná volba, když:

  • Zpřístupněte celou externí databázi nebo katalog ve Fabric, aniž byste navrhovali samostatný proces sběru.
  • Mějte v OneLake připravenou kopii operační databáze (například Azure SQL Database, PostgreSQL nebo Cosmos DB) připravenou na analytiku, která zůstává synchronizovaná se zdrojem.
  • Zpřístupněte externí lakehouse nebo datový sklad (například Databricks Unity Catalog nebo Snowflake) ve Fabric, abyste se na ně mohli dotazovat společně s daty ve Fabric.

Zrcadlení vždy přidává do prostředí Fabric katalogová metadata, jako jsou databáze, schémata a tabulky. Jak Fabric přistupuje k datům, závisí na zdroji, jak popisuje následující sekce.

Jak zrcadlení zpřístupňuje data v OneLake

Zrcadlení využívá dva základní mechanismy pro zahrnutí externích dat do jednotného pohledu OneLake. Správná kombinace závisí na tom, jak zdroj ukládá svá data.

  • Replikace Zrcadlení kopíruje data ze zdroje do OneLake ve formátu Delta připraveném na analýzu. Zrcadlení využívá replikaci, když zdroj ukládá data v proprietárním formátu.
  • Zkratky. Zrcadlení referenčních dat na místě pomocí zkratek OneLake. Zrcadlení používá zkratky, když zdroj ukládá data v otevřeném formátu, který OneLake může číst přímo.

Různé zdroje tyto mechanismy používají odlišně, jak je ukázáno v následující tabulce.

Vzor zdroje Examples Co zrcadlení dělá
Zrcadlení databáze (replikace) Azure Cosmos DB, Azure Database for PostgreSQL, Azure Database for MySQL (preview), Azure SQL Database, SQL Server, Oracle, SAP Zrcadlení kopíruje metadata katalogu a kontinuálně je replikuje do OneLake jako tabulky Delta.
Zrcadlení metadat (zkratky) Azure Databricks, Snowflake, Dremio (preview) Zrcadlení přidává katalogová metadata do Fabric a používá zkratky k přístupu k podkladovým datům.

V každém případě zrcadlení přidává katalogová metadata do Fabric. Zda také kopíruje data, závisí na zdroji.

Používejte zkratky a zrcadlení společně

Zkratky a zrcadlení se navzájem nevylučují. Můžete je použít společně v mnoha situacích. Například použijte zrcadlení k přidání zdrojového systému do Fabric jednou a poté vytvořte zkratky, které zpřístupní vybraná data z tohoto systému napříč pracovními prostory, doménami nebo tenanty. Pokud zrcadlení replikuje zdrojová data do OneLake, zkratky k těmto datům nevytvářejí další kopii ani nepřidávají náklady na úložiště.

Mezi běžné vzory kombinující obě schopnosti patří:

  • Zrcadlíš jednou, spotřebuj všude. Centrální pracovní prostor zrcadlí externí databázi nebo katalog, například Azure SQL Database nebo účet Snowflake. Jiné pracovní prostory ve stejném tenantu mají zkratky k zrcadleným tabulkám místo toho, aby se stejný zdroj opakoval. Jedna zrcadlená položka představuje zdroj a každý konzument čte stejná aktuální data.
  • Doménové zrcadlení s využitím mesh. Doménové týmy replikují své vlastní zdrojové systémy do pracovních prostorů své domény. Jezerní domy a sklady v spotřebitelských pracovních prostorech používají zkratky k přístupu pouze k tabulkám, které potřebují, z zrcadlené databáze. Každá doména vlastní své spojení ke zdroji a spotřebitelé zůstávají odděleni od zdrojového systému.
  • Jeden jezerní domek, více datových míst. Jeden lakehouse může obsahovat zkratky k zrcadleným tabulkám spolu se zkratkami k datům v otevřeném formátu v Azure Data Lake Storage, Amazon S3 nebo jiné lokalitě OneLake. Reporty a poznámkové bloky dotazují lakehouse jako jedno sjednocené úložiště, ať už podkladová data zůstávají ve svém zdroji, nebo jsou replikována do OneLake.
  • Přístup mezi tenanty nebo mezi cloudy. Jeden tenant zrcadlí zdrojová data do vlastního úložiště OneLake. Partner tenant vytvoří zkratku k zrcadleným datům místo přímého přístupu ke zdrojovému systému. Přihlašovací údaje zdrojového systému nikdy neopouštějí produkčního tenanta.

Několik věcí, které je dobré vědět, když je kombinujete:

  • Zkratky k zrcadleným tabulkám dědí bezpečnostní model zrcadleného předmětu. Oprávnění k zrcadlené databázi, schématu nebo tabulce se vztahují i na kohokoli, kdo k nim přistupuje prostřednictvím zkratky. Další informace najdete v tématu Zabezpečení zástupce OneLake.
  • Zkratky k zrcadleným tabulkám jsou pouze pro čtení. Pro změnu dat změňte zdrojový systém a nechte zrcadlení, aby aktualizaci propagovalo.
  • Pokud je zrcadlený zdroj pozastaven, smazán nebo narazí na chybu replikace, každá zkratka na něj ukazuje stejný stav. Naplánujte tomu odpovídajícím způsobem vlastnictví a monitorování zrcadlené položky.

Kdy místo toho použít pohyb dat

Zkratky a zrcadlení sjednocují data tím, že je zpřístupňují prostřednictvím OneLake, a transformace zkratek mohou tato data převést do tabulek Delta připravených pro analýzy. Nejsou náhradou za kompletní sadu nástrojů pro příjmování a přesun dat od Fabric. Vyberte pipeline, dataflow, copy job nebo eventstream, když potřebujete:

  • Aplikujte složitou nebo vícezdrojovou transformační logiku (například spojování zdrojů, aplikaci obchodních pravidel nebo přetváření schémat), která přesahuje to, co zkratkové transformace dělají.
  • Naplánuj si, orchestruj nebo spusťuj pohyb podle vlastní kadence.
  • Přesuňte data do destinace mimo OneLake.
  • Streamujte události do Fabric pro zpracování v reálném čase.

Tyto scénáře vyžadují nástroje Fabric pro přesun a integraci dat, nikoli pouze sjednocení OneLake.

Související obsah

  • Last updated on