2022 年 8 月

這些功能和 Azure Databricks 平臺改進已在 2022 年 8 月發行。

注意

發行會暫存。 在初始發行日期之後的一周以上,您的 Azure Databricks 帳戶可能不會更新。

Databricks ODBC 驅動程式 2.6.26

2022 年 8 月 29 日

我們已發行 Databricks ODBC 驅動程式 2.6.26 版, (下載) 。 此版本會更新查詢支援。 您現在可以在 API 要求時,以非同步方式取消 HTTP 連線上的查詢。

此版本也會解決下列問題:

  • 在 Spotfire 中使用自訂查詢時,連接器會變成沒有回應。

Databricks JDBC 驅動程式 2.6.29

2022 年 8 月 29 日

我們已發行 Databricks JDBC 驅動程式 2.6.29 版, (下載) 。 此版本可解決下列問題:

  • 使用已啟用 Cloud Fetch 的 HTTP Proxy 時,連接器不會傳回大型資料集結果。
  • Databricks 授權文字中的次要文字問題。 檔連結遺失。
  • JAR 檔案名不正確。 它應該已是 DatabricksJDBC41.jar,而不是 SparkJDBC41.jar。 它應該是 DatabricksJDBC42.jar,而不是 SparkJDBC42.jar。

Databricks Feature Store 用戶端現在可在 PyPI 上使用

2022 年 8 月 26 日

Feature Store 用戶端現在可在 PyPI 上使用。 用戶端需要 Databricks Runtime 9.1 LTS 或更新版本,而且可以使用下列專案來安裝:

%pip install databricks-feature-store

用戶端已使用適用于 Machine Learning 9.1 LTS 和更新版本之 Databricks Runtime 進行封裝。

用戶端無法在 Databricks 外部執行;不過,您可以在本機安裝它,以協助進行單元測試,以及提供其他 IDE 支援 (,例如自動完成) 。 如需詳細資訊,請參閱 Databricks 功能存放區 Python 用戶端

Unity 目錄為 GA

2022 年 8 月 25 日

Unity 目錄已正式推出。 如需詳細的功能公告和限制,請參閱 Unity 目錄正式運作

差異共用為 GA

2022 年 8 月 25 日

差異共用現已正式推出,從 Databricks Runtime 11.1 開始。 如需詳細資訊,請參閱 使用差異共用共用資料

  • Databricks 對 Databricks Delta 共用完全受控,不需要交換權杖。
  • 使用簡單的 UI 建立和管理提供者、收件者和共用。
  • 使用完整的 CLI 和 Terraform 支援,建立和管理與 SQL 和 REST API 的提供者、收件者和共用。
  • 查詢資料的變更,或使用變更資料摘要共用累加版本。
  • 限制收件者存取權以下載認證檔案,或使用 IP 存取清單和區域限制來查詢資料。
  • 預設會啟用使用差異共用來共用相同 Azure Databricks 帳戶內的資料。
  • 將差異共用的管理委派給非系統管理員,以強制執行職責區分。

Databricks Runtime 11.2 (Beta)

2022 年 8 月 23 日

Databricks Runtime 11.2、11.2 Photon 和 11.2 ML 現在可做為 Beta 版本使用。

請參閱 Databricks Runtime 11.2Databricks Runtime 11.2 for Machine Learning的完整版本資訊。

減少連續管線的差異即時資料表 UI 中的訊息量

2022 年 8 月 22-29 日:版本 3.79

在此版本中,只有在資料表進入執行中狀態之前,才會在 UI 中顯示 Delta Live Tables 連續管線中即時資料表的狀態轉換。 與成功重新計算資料表相關的任何轉換都不會顯示在 UI 中,但可在 METRICS 層級的 Delta Live Tables 事件記錄檔中使用。 任何轉換成失敗狀態的轉換仍會顯示在 UI 中。 先前,所有狀態轉換都會顯示在即時資料表的 UI 中。 這項變更可減少 UI 中顯示的管線事件數量,並讓您更輕鬆地尋找管線的重要訊息。 若要深入瞭解如何在 Delta Live Tables UI 中檢視管線事件,請參閱 建立、執行和管理 Delta Live Tables 管線。 若要深入瞭解查詢事件記錄檔,請參閱 使用 Delta Live Tables 事件記錄檔監視管線

簡化 Delta Live Tables 管線的叢集設定

2022 年 8 月 22-29 日:版本 3.79

您現在可以在建立管線時,直接在 Delta Live Tables UI 中選取自動調整或固定大小的叢集模式。 先前,設定自動調整叢集需要變更管線的 JSON 設定。 如需建立管線和新的 叢集模式 設定的詳細資訊,請參閱 建立管線

在 Databricks 工作流程中協調 dbt 工作, (公開預覽)

2022 年 8 月 22-29 日:版本 3.79

您可以使用新的 dbt 工作,在 Azure Databricks 作業中以工作的形式執行 dbt 核心專案,讓您在資料處理工作流程中包含 dbt 轉換。 例如,您的工作流程可以使用自動載入器擷取資料、使用 dbt 轉換資料,以及使用筆記本工作分析資料。 如需 dbt 工作的詳細資訊,包括範例,請參閱 在 Azure Databricks 作業中使用 dbt。 如需建立、執行及排程包含 dbt 工作的工作流程的詳細資訊,請參閱 建立、執行和管理 Azure Databricks 作業

身分識別同盟是 GA

2022 年 8 月 25 日

身分識別同盟可讓您將帳戶層級使用者、服務主體和群組指派給身分識別同盟工作區,藉此簡化 Azure Databricks 管理。 您現在可以在帳戶主控台中設定和管理所有使用者、服務主體和群組一次,而不是在每個工作區中個別重複設定。 若要深入瞭解身分識別同盟,請參閱 系統管理員如何將使用者指派給工作區?。 若要開始使用,請參閱 系統管理員如何在工作區上啟用身分識別同盟?

Partner Connect 支援連線到 Stardog

2022 年 8 月 24 日

您現在可以使用 Partner Connect,輕鬆地建立 Stardog 與 Azure Databricks 工作區之間的連線。 Stardog 提供知識圖表平臺,以回應跨資料接收器的複雜查詢。

Databricks 功能存放區與無伺服器Real-Time推斷整合

2022 年 8 月 22-29 日:版本 3.79

Databricks 功能存放區現在支援 無伺服器Real-Time推斷的自動功能查閱。 如需詳細資訊,請參閱 自動功能查閱

Databricks 功能存放區自動功能查閱的其他資料類型支援

2022 年 8 月 22-29 日:版本 3.79

Databricks 功能存放區現在支援 BooleanType 自動功能查閱。 請參閱 自動功能查閱

攜帶您自己的金鑰:加密 Git 認證

2022 年 8 月 23-29 日

您可以針對 Databricks Repos 的 Git 認證使用加密金鑰。

請參閱 自備金鑰:加密 Git 認證

叢集 UI 預覽和存取模式會取代安全性模式

2022 年 8 月 19 日

新的 建立叢集 UI 處於預覽狀態。 請參閱 Databricks 叢集 UI 變更

Unity 目錄限制 (公開預覽版)

2022 年 8 月 16 日

  • 只有使用單一使用者存取模式的叢集才支援使用 Machine Learning Runtime 的 Scala、R 和工作負載。 這些語言中的工作負載不支援針對資料列層級或資料行層級安全性使用動態檢視。
  • 使用 Unity 目錄作為複製的來源或目標時,不支援淺層複製。
  • Unity 目錄資料表不支援貯體。 嘗試在 Unity 目錄中建立貯體資料表的命令將會擲回例外狀況。
  • 只有 Delta 資料表才支援 DataFrame 寫入作業寫入 Unity 目錄的覆寫模式,不適用於其他檔案格式。 使用者必須具有 CREATE 父架構的許可權,而且必須是現有物件的擁有者。
  • 串流目前有下列限制:
    • 使用共用存取模式的叢集不支援它。 對於串流工作負載,您必須使用單一使用者存取模式。
    • 尚不支援非同步檢查點檢查。
    • 在所有 puporse 或作業叢集上持續超過 30 天的串流查詢將會擲回例外狀況。 針對長時間執行的串流查詢,請設定自動作業重試。
  • 目前不支援從 Delta Live Tables 管線參考 Unity 目錄資料表。
  • 先前在工作區中建立的群組無法在 Unity 目錄 GRANT 語句中使用。 這是為了確保跨工作區可跨越群組的一致檢視。 若要在 GRANT 語句中使用群組,請在帳戶主控台中建立您的群組,並更新主體或群組管理的任何自動化 (,例如 SCIM、Okta 和 AAD 連接器,以及 Terraform) 來參考帳戶端點,而不是工作區端點。

Unity 目錄可在下欄區域中使用:

  • canadacentral
  • centralus
  • francecentral
  • germanywestcentral
  • japaneast
  • norwayeast
  • southafricanorth
  • swedencentral
  • switzerlandnorth
  • switzerlandwest
  • uaenorth
  • westcentralus
  • westus3
  • australiaeast
  • brazilsouth
  • centralindia
  • eastus
  • eastus2
  • koreacentral
  • northcentralus
  • northeurope
  • southeastasia
  • ukwest
  • westeurope
  • westus

若要在另一個區域中使用 Unity 目錄,請連絡您的帳戶代表。

公開預覽中的無伺服器Real-Time推斷

2022 年 8 月 16 日

無伺服器Real-Time推斷會使用 MLflow 處理您的機器學習模型,並將其公開為 REST API 端點。 此功能會使用 無伺服器計算,這表示端點和相關聯的計算資源是在 Azure Databricks 雲端帳戶中管理和執行。 目前產生的使用量和儲存體成本是免費的,但 Azure Databricks 會在收費開始時提供通知。

工作區系統管理員必須在工作區中 啟用無伺服器Real-Time推斷 ,才能使用此功能。

如需詳細資訊,請參閱 使用無伺服器Real-Time推斷的模型服務。 若要參與無伺服器Real-Time推斷公開預覽,請連絡您的 Databricks 代表。

改善的工作區搜尋現已正式推出

2022 年 8 月 9 日

您現在可以依名稱搜尋筆記本、程式庫、資料夾、檔案和存放庫。 您也可以搜尋筆記本內的內容,並查看相符內容的預覽。 搜尋結果可以依類型進行篩選。 請參閱 搜尋物件的工作區

當您建立 Delta Live Tables 資料集時,請使用產生的資料行

2022 年 8 月 8-15 日:版本 3.78

當您在 Delta Live Tables 管線中定義資料表時,現在可以使用 產生的 資料行。 Delta Live Tables PythonSQL 介面支援產生的資料行。

已使用以 (實驗性編輯器 () 改善筆記本的編輯

2022 年 8 月 8-15 日

Python 筆記本有新的以系統為基礎的程式碼編輯器。 若要啟用它,請在 [使用者設定] 頁面的 [筆記本設定] 索引標籤上,核取 [開啟新的以格子為基礎的新程式碼編輯器]。

新的編輯器包含參數類型提示、暫留時的物件檢查、程式碼折迭、多重游標支援、資料行 (方塊) 選取,以及筆記本修訂歷程記錄中的並存差異。

Databricks Runtime 10.3 系列支援結束

2022 年 8 月 2 日

Machine Learning 的 Databricks Runtime 10.3 和 Databricks Runtime 10.3 支援已于 8 月 2 日結束。 請參閱 Databricks 執行時間支援生命週期

2022 年 8 月 2 日

Azure Databricks 現在支援為使用者與其 Azure Databricks 工作區之間的私人連線啟用Azure Private Link連線,以及在 Databricks 工作區基礎結構內控制平面上的叢集與核心服務之間啟用。 Azure Private Link直接連線到服務,而不會將流量公開至公用網路。 這項功能可作為 公開預覽。 請參閱啟用Azure Private Link

為工作區啟用無伺服器 SQL 倉儲, (公開預覽)

2022 年 8 月 2 日

無伺服器 SQL 倉儲現在可供 Azure Databricks 上的帳戶和工作區作為公開預覽。 此功能需要進階定價層。 建立無伺服器倉儲之前,系統管理員必須先 為工作區啟用它

差異即時資料表現在僅支援重新整理管線更新中選取的資料表

2022 年 8 月 2-24 日

您現在可以只針對 Delta Live Tables 管線中選取的資料表啟動更新。 此功能可讓您啟動僅重新整理所選資料表的管線更新,以加速管線測試及解決錯誤。 若要瞭解如何只啟動所選資料表的更新,請參閱 啟動所選資料表的管線更新。 若要深入瞭解 Delta Live Tables 更新,請參閱 管線更新

作業執行現在會等候叢集程式庫完成安裝

2022 年 8 月 1 日

當叢集啟動時,Databricks 作業現在會等待叢集程式庫在執行之前完成安裝。 之前,只有在作業指定為作業的相依程式庫時,作業執行才會等候程式庫安裝在所有用途叢集上。 如需設定作業相依程式庫的詳細資訊,請參閱 相依程式庫