鏡像的 Dremio 目錄

Fabric 中的鏡像 Dremio 目錄會整合你由 Dremio 管理的資料與 Fabric 中的其他資料。 你可以持續地將你的 Dremio 目錄直接複製到 Fabric 的 OneLake。

關於如何設定 Dremio 環境以將 Dremio 目錄鏡像到 Fabric,請參見 Tutorial: Configure mirrored Dremio catalog。

這很重要

這項功能目前處於預覽階段。

當你鏡像 Dremio 目錄時,沒有資料移動或資料複製。 只有 Dremio 目錄結構被鏡像至 Fabric,底層目錄資料則透過快速通道存取。 基礎資料的變更可能不會立即出現在 Fabric 中。 傳播過程可能從幾秒鐘到數分鐘不等,詳見 SQL 分析端點效能文件。

內建哪些分析體驗

鏡像目錄是 Fabric 中與其他項目(如 Lakehouses 和 SQL 分析端點)不同的項目。

當你鏡像 Dremio 目錄時,Fabric 會產生以下項目:

您可以透過多種方式存取 Dremio 鏡像目錄資料:

  • 使用 T-SQL 命令從唯讀 SQL 分析端點定義和查詢資料物件。 每個鏡像的 Dremio 目錄項目都擁有自動生成的 SQL 分析端點,提供由鏡像過程所創造的豐富分析體驗。
  • 使用 Power BI 搭配 Direct Lake 模式,針對鏡像的 Dremio 目錄項目建立報告。
  • 使用其他 Fabric 工作負載來查詢 Dremio 鏡像目錄項目內的表格。

鏡像資料表可在選擇後數秒內查詢,端對端的元資料傳播通常在數秒至幾分鐘內完成。

連結並驗證

鏡像處理會連線至 Dremio Iceberg REST 目錄端點。 支援下列驗證方法:

  • 憑證販賣 ——Dremio 提供短暫的憑證,用於存取底層的 Iceberg 表格資料。
  • 個人存取令牌(PAT) – 使用 Dremio 發行的個人存取令牌進行認證。

關於連線與認證的詳細設定步驟,請參閱 教學:設定鏡像 Dremio 目錄。

中繼資料同步

當你在 Fabric 建立新的鏡像 Dremio 目錄時,預設會啟用 Automatic sync future tables 選項。 若啟用自動同步,以下中繼資料變更會從您的 Dremio 環境反映至 Fabric:

  • 目錄中新增命名空間
  • 從目錄中刪除名稱空間
  • 將資料表加入命名空間
  • 從命名空間刪除資料表
  • 當啟用 Automatically Sync future tables 時,選定命名空間中新建立的 Iceberg 資料表會自動納入 Fabric,無需手動重新整理。
  • 對現有資料表的結構與資料變更遵循正常的傳播間隔。

模式/表格選擇:

  • 使用者可以選擇哪些命名空間要被納入結構,也可以排除某些資料表。
  • 取消選取命名空間即取消選取該命名空間內的所有資料表。
  • 如果使用者回去選擇命名空間,該命名空間內的所有資料表都會被重新選取。