Zrcadlení katalogu Azure Databricks Unity

Mnoho organizací dnes zaregistruje svá data v Katalogu Unity v Azure Databricks. Zrcadlený katalog Unity Catalog ve Fabric umožňuje zákazníkům číst data spravovaná katalogem Unity z úloh Fabric. Azure Databricks a Fabric fungují lépe společně.

Kurz věnovaný konfiguraci pracovního prostoru Azure Databricks pro zrcadlení katalogu Unity do Microsoft Fabric najdete v tématu Kurz: Konfigurace zrcadlených databází Microsoft Fabric z Azure Databricks.

Zrcadlené databáze ve Fabric umožňují uživatelům využívat vysoce integrovaný, komplexní a snadno použitelný produkt, který je navržen tak, aby usnadnil vaše analytické úlohy. Můžete využívat snadno použitelný produkt navržený tak, aby zjednodušil vaše analytické požadavky, s důrazem na otevřenost a spolupráci mezi Microsoft Fabric a Azure Databricks.

Když k načítání dat zaregistrovaných v katalogu Unity Catalog použijete Fabric, nedochází k přesunu ani replikaci dat. Do Fabric se zrcadlí pouze struktura katalogu Azure Databricks a k podkladovým datům katalogu se přistupuje prostřednictvím zástupců. Změny podkladových dat se nemusí v systému Fabric zobrazit okamžitě. Šíření může trvat několik sekund až několik minut, jak je popsáno v dokumentaci k výkonu koncového bodu analýzy SQL.

Jaká analytická prostředí jsou integrovaná

Zrcadlené katalogy jsou položkou ve službě Fabric Data Warehousing, která je odlišná od Warehouse a koncového bodu analýz SQL.

Když zrcadlíte Azure Databricks Unity Catalog, Fabric vytvoří tyto položky:

K zrcadleným datům Azure Databricks můžete přistupovat několika způsoby:

  • Každá zrcadlená položka Azure Databricks má automaticky vygenerovaný koncový bod analýzy SQL, který poskytuje bohaté analytické prostředí vytvořené procesem zrcadlení. Příkazy T-SQL slouží k definování a dotazování datových objektů z koncového bodu analýzy SQL jen pro čtení.
  • Pomocí Power BI s režimem Direct Lake můžete vytvářet sestavy s položkou Azure Databricks.

Synchronizace metadat

Při vytváření nové zrcadlené databáze z Azure Databricks ve Fabric je ve výchozím nastavení povolená možnost Automaticky synchronizovat budoucí změny katalogu pro vybrané schéma. Pokud je povolena automatická synchronizace, následující změny metadat se promítnou z vašeho pracovního prostoru Azure Databricks do Fabric:

  • Přidání schémat do katalogu
  • Odstranění schémat z katalogu
  • Přidání tabulek do schématu
  • Odstranění tabulek ze schématu

Výběr schématu nebo tabulky:

  • Ve výchozím nastavení je vybrán celý katalog, když uživatel přidá katalog.
  • Uživatel může vyloučit určité tabulky v rámci schématu.
  • Zrušení výběru schématu zruší výběr všech tabulek v rámci schématu.
  • Pokud se uživatel vrátí a vybere schéma, budou znovu vybrány všechny tabulky v rámci schématu.
  • Stejné chování výběru platí pro schémata v katalogu.

Na katalogy, schémata a tabulky se použijí další podmínky filtrace:

  • Materializovaná zobrazení a streamované tabulky se nezobrazí.
  • Externí tabulky, které nepodporují formát Delta, se nezobrazí.

Související obsah

  • Last updated on