鏡像 Azure Databricks Unity 目錄

如今,許多組織都會在 Azure Databricks 內的 Unity 目錄中註冊其資料。 Fabric 中的鏡像 Unity 目錄可讓客戶從 Fabric 工作負載讀取 Unity 目錄所管理的數據。 Azure Databricks 和 Fabric 搭配在一起會更好。

如需設定 Azure Databricks 工作區以將 Unity 目錄鏡像至 Fabric 的教學課程,請參閱 教學課程:從 Azure Databricks 設定 Microsoft Fabric 鏡像資料庫。

透過使用 Fabric 中的鏡像複寫,您可以享受一個高度整合、端對端且易於使用的產品,簡化您的分析需求,並專為 Microsoft Fabric 與 Azure Databricks 之間的開放與協作而打造。

當您使用 Fabric 讀取在 Unity 目錄中註冊的資料時,不會進行資料移動或資料複寫。 只有 Azure Databricks 目錄結構會鏡像至 Fabric,而且會透過捷徑存取基礎目錄資料。 基礎資料的變更可能不會立即出現在 Fabric 中。 傳播過程可能從幾秒鐘到數分鐘不等,詳見 SQL 分析端點效能文件。

內建了哪些分析功能?

鏡映型錄是 Fabric Data Warehousing 中的項目,與「倉儲」和「SQL 分析」端點不同。

當您鏡像 Azure Databricks Unity Catalog 時,Fabric 會建立下列項目:

您可以透過多種方式存取您鏡像的 Azure Databricks Unity Catalog 資料:

  • 每個鏡像的 Azure Databricks 專案都有自動產生的 SQL 分析端點,可提供鏡像程式所建立的豐富分析體驗。 使用 T-SQL 命令從唯讀 SQL 分析端點定義和查詢資料物件。
  • 搭配 Direct Lake 模式使用 Power BI,針對 Azure Databricks 專案建立報表。

中繼資料同步

當你在 Fabric 中從 Azure Databricks 建立新鏡像時,預設會啟用「自動同步所選結構描述未來的目錄變更」選項。 如果您啟用自動同步,以下的元資料變更會從您的 Azure Databricks 工作區反映到 Fabric:

  • 將結構描述新增至目錄。
  • 從目錄中刪除結構描述。
  • 將資料表新增至結構描述。
  • 從結構描述中刪除資料表。

模式/表格選擇:

  • 依預設,當使用者新增目錄時,會選取整個目錄。
  • 使用者可以排除結構描述內的特定資料表。
  • 取消選取結構描述會取消選取結構描述內的所有資料表。
  • 如果使用者返回並選取綱目,則會再次選取綱目內的所有資料表。
  • 相同的選取行為適用於目錄內的結構描述。

還有其他篩選條件會套用至目錄/結構描述/表格:

  • 不會顯示具體化檢視和串流資料表。
  • 不支援 Delta 格式的外部資料表將不會顯示。