2022 年 8 月
這些功能和 Azure Databricks 平臺改良功能於 2022 年 8 月發行。
注意
發行會暫存。 您的 Azure Databricks 帳戶在初始發行日期之後的一周或更多時間之後,可能不會更新。
帳戶使用者可以存取帳戶控制台
2022 年 8 月 1 日至 31 日
帳戶使用者可以存取 Azure Databricks 帳戶控制台 ,以檢視其工作區清單。 帳戶使用者只能檢視他們已獲授與存取權的工作區。 請參閱 管理您的 Azure Databricks 帳戶。
工作區中的用戶會自動以帳戶使用者身分同步至您的帳戶。 請參閱 系統管理員如何將使用者指派給帳戶?。
Databricks ODBC 驅動程式 2.6.26
2022 年 8 月 29 日
我們已發行 Databricks ODBC 驅動程式 2.6.26 版(下載)。 此版本會更新查詢支援。 您現在可以在 API 要求時,以異步方式取消 HTTP 連線的查詢。
此版本也會解決下列問題:
- 在Spotfire中使用自訂查詢時,連接器會變得沒有回應。
Databricks JDBC 驅動程式 2.6.29
2022 年 8 月 29 日
我們已發行 Databricks JDBC 驅動程式 2.6.29 版(下載)。 此版本可解決下列問題:
- 使用已啟用 Cloud Fetch 的 HTTP Proxy 時,連接器不會傳回大型數據集結果。
- Databricks 授權文字中的次要文字問題。 缺少文件連結。
- JAR 檔名不正確。 它應該DatabricksJDBC41.jar,而不是SparkJDBC41.jar。 它應該DatabricksJDBC42.jar,而不是SparkJDBC42.jar。
Databricks Feature Store 用戶端現已可在 PyPI 上使用
2022 年 8 月 26 日
Feature Store 用戶端現在可在 PyPI 上使用。 用戶端需要 Databricks Runtime 9.1 LTS 或更新版本,而且可以使用下列方式安裝:
%pip install databricks-feature-store
用戶端已與 Databricks Runtime 封裝,適用於 機器學習 9.1 LTS 和更新版本。
客戶端無法在 Databricks 外部執行;不過,您可以在本機安裝它,以協助進行單元測試和額外的 IDE 支援(例如自動完成)。 如需詳細資訊,請參閱 Databricks Feature Store Python 用戶端
Unity 目錄是 GA
2022 年 8 月 25 日
Unity 目錄已正式推出。 如需詳細的功能公告和限制,請參閱 Unity 目錄 GA 版本資訊。
差異共用為 GA
2022 年 8 月 25 日
差異共享現已正式推出,從 Databricks Runtime 11.1 開始。 如需詳細資訊,請參閱 使用差異共用安全地共享數據和 AI 資產。
- Databricks 對 Databricks Delta 共用完全受控,不需要交換令牌。
- 使用簡單的UI建立和管理提供者、收件者和共用。
- 使用完整的 CLI 和 Terraform 支援,建立和管理與 SQL 和 REST API 的提供者、收件者及共用。
- 查詢數據的變更,或使用變更數據摘要共用累加版本。
- 使用IP存取清單和區域限制,限制收件者下載認證檔案或查詢數據。
- 默認會啟用使用 Delta Sharing 在相同的 Azure Databricks 帳戶內共享數據。
- 將差異共用的管理委派給非系統管理員,以強制執行職責分離。
Databricks Runtime 11.2 (Beta)
2022 年 8 月 23 日
Databricks Runtime 11.2、11.2 Photon 和 11.2 ML 現在可作為 Beta 版本使用。
請參閱 Databricks Runtime 11.2(不支援)和 Databricks Runtime 11.2 中的完整版本資訊,以取得 機器學習(不支援)。
減少連續管線之差異實時數據表 UI 中的訊息量
2022 年 8 月 22 日至 29 日:版本 3.79
在此版本中,差異實時數據表連續管線中實時數據表的狀態轉換只會顯示在UI中,直到數據表進入執行中狀態為止。 與成功重新計算數據表相關的任何轉換都不會顯示在UI中,但可在METRICS層級的 Delta Live Tables 事件記錄檔中取得。 任何轉換成失敗狀態的轉換仍會顯示在UI中。 先前,所有狀態轉換都會顯示在實時數據表的UI中。 這項變更可減少 UI 中顯示的管線事件數量,並讓您更輕鬆地尋找管線的重要訊息。 若要深入了解查詢事件記錄檔,請參閱 什麼是 Delta Live Tables 事件記錄檔?。
簡化 Delta Live Tables 管線的叢集設定
2022 年 8 月 22 日至 29 日:版本 3.79
您現在可以在建立管線時,直接在 Delta Live Tables UI 中選取自動調整或固定大小的叢集模式。 先前,設定自動調整叢集需要變更管線的 JSON 設定。 如需建立管線和新 叢集模式 設定的詳細資訊,請參閱 在 Delta Live Tables 管線上執行更新。
協調 Databricks 工作流程中的 dbt 工作 (公開預覽)
2022 年 8 月 22 日至 29 日:版本 3.79
您可以使用新的 dbt 工作,在 Azure Databricks 作業中以工作的形式執行 dbt 核心專案,讓您在數據處理工作流程中包含 dbt 轉換。 例如,您的工作流程可以使用自動載入器擷取數據、使用 dbt 轉換數據,以及使用筆記本工作分析數據。 如需 dbt 工作的詳細資訊,包括範例,請參閱 在 Azure Databricks 作業中使用 dbt 轉換。 如需建立、執行及排程包含 dbt 工作的工作流程的詳細資訊,請參閱 建立和執行 Azure Databricks 作業。
身分識別同盟是 GA
2022 年 8 月 25 日
身分識別同盟可讓您將帳戶層級用戶、服務主體和群組指派給身分識別同盟工作區,藉此簡化 Azure Databricks 管理。 您現在可以在帳戶控制台中設定和管理所有用戶、服務主體和群組一次,而不是在每個工作區中個別重複設定。 若要深入瞭解身分識別同盟,請參閱 系統管理員如何將使用者指派給工作區?。 若要開始使用,請參閱 系統管理員如何在工作區上啟用身分識別同盟?。
合作夥伴 連線 支援連線到 Stardog
2022 年 8 月 24 日
您現在可以使用合作夥伴 連線,輕鬆地建立 Stardog 與 Azure Databricks 工作區之間的連線。 Stardog 提供知識圖表平臺,以回應跨數據尋址接收器的複雜查詢。
Databricks 功能存放區與無伺服器即時推斷整合
2022 年 8 月 22 日至 29 日:版本 3.79
Databricks 功能存放區現在支援無伺服器即時推斷的自動功能查閱。 如需詳細資訊,請參閱 Databricks 上的 MLflow 模型自動功能查閱。
Databricks 功能存放區自動功能查閱的其他數據類型支援
2022 年 8 月 22 日至 29 日:版本 3.79
Databricks 功能存放區現在支持 BooleanType
自動功能查閱。 請參閱 Databricks 上的 MLflow 模型自動功能查閱。
攜帶您自己的金鑰:加密 Git 認證
2022 年 8 月 23 日至 29 日
您可以針對 Databricks Repos 的 Git 認證使用加密金鑰。
請參閱 自備金鑰:加密 Git 認證。
叢集UI預覽和存取模式取代安全性模式
2022 年 8 月 19 日
新的 建立叢集 UI處於預覽狀態。 請參閱 計算組態參考。
Unity 目錄限制 (公開預覽)
2022 年 8 月 16 日
- 使用 機器學習 Runtime 的 Scala、R 和工作負載僅支援使用單一使用者存取模式的叢集。 這些語言中的工作負載不支援針對數據列層級或數據行層級安全性使用動態檢視。
- 使用 Unity 目錄做為複製的來源或目標時,不支援淺層複製。
- Unity 目錄數據表不支援貯體。 嘗試在 Unity 目錄中建立貯體數據表的命令將會擲回例外狀況。
- 只有 Delta 資料表才支援 DataFrame 寫入作業至 Unity 目錄的覆寫模式,不適用於其他檔案格式。 用戶必須具有
CREATE
父架構的許可權,而且必須是現有對象的擁有者。 - 串流目前有下列限制:
- 使用共用存取模式的叢集不支援它。 針對串流工作負載,您必須使用單一使用者存取模式。
- 尚不支援異步檢查點。
- 所有 puporse 或作業叢集上持續超過 30 天的串流查詢將會擲回例外狀況。 針對長時間執行的串流查詢,請設定自動作業重試。
- 目前不支援從 Delta Live Tables 管線參考 Unity 目錄數據表。
- 先前在工作區中建立的群組無法在 Unity 目錄 GRANT 語句中使用。 這是為了確保跨工作區的群組檢視一致。 若要在 GRANT 語句中使用群組,請在帳戶控制台中建立您的群組,並更新主體或群組管理的任何自動化(例如 SCIM、Okta 和 Microsoft Entra ID 連接器和 Terraform),以參考帳戶端點,而不是工作區端點。
Unity 目錄可在下列區域中使用:
canadacentral
centralus
francecentral
germanywestcentral
japaneast
norwayeast
southafricanorth
swedencentral
switzerlandnorth
switzerlandwest
uaenorth
westcentralus
westus3
australiaeast
brazilsouth
centralindia
eastus
eastus2
koreacentral
northcentralus
northeurope
southeastasia
ukwest
westeurope
westus
若要在另一個區域中使用 Unity 目錄,請連絡您的帳戶小組。
公開預覽版中的無伺服器即時推斷
2022 年 8 月 16 日
無伺服器即時推斷會使用 MLflow 處理機器學習模型,並將其公開為 REST API 端點。 此功能會使用 無伺服器計算,這表示端點和相關聯的計算資源是在 Azure Databricks 雲端帳戶中管理和執行。 目前產生的使用量和記憶體成本是免費的,但 Azure Databricks 會在收費開始時提供通知。
工作區系統管理員必須在 工作區中啟用無伺服器即時推斷 ,才能使用這項功能。
如需詳細資訊,請參閱 使用無伺服器即時推斷的模型服務。 若要參與無伺服器即時推斷公開預覽,請連絡您的 Azure Databricks 帳戶小組。
改善的工作區搜尋現已正式推出
2022 年 8 月 9 日
您現在可以依名稱搜尋筆記本、連結庫、資料夾、檔案和存放庫。 您也可以在筆記本內搜尋內容,並查看相符內容的預覽。 搜尋結果可以依類型進行篩選。 請參閱 搜尋工作區物件。
當您建立 Delta Live Tables 數據集時,請使用產生的數據行
2022 年 8 月 8 日至 15 日:版本 3.78
您現在可以在 Delta Live Tables 管線中定義數據表時,使用 產生的 數據行。 Delta Live Tables Python 和 SQL 介面支援產生的數據行。
使用摩納哥編輯器改善筆記本的編輯 (實驗性)
2022 年 8 月 8 日至 15 日
新的摩納哥程式代碼編輯器適用於 Python 筆記本。 若要啟用它,請在 [使用者 設定] 頁面上的 [編輯器設定] 索引卷標上,核取 [開啟新的筆記本編輯器] 選項。
新的編輯器包含參數類型提示、暫留時的物件檢查、程式代碼摺疊、多游標支援、數據行(方塊)選取,以及筆記本版本歷程記錄中的並存差異。
Databricks Runtime 10.3 系列支持結束
2022 年 8 月 2 日
支援 Databricks Runtime 10.3 和 Databricks Runtime 10.3 for 機器學習 於 8 月 2 日結束。 請參閱 Databricks 運行時間支援生命週期。
使用 Azure Private Link 啟用私人連線 (公開預覽)
2022 年 8 月 2 日
Azure Databricks 現在支持啟用 Azure Private Link 連線,以便在使用者與其 Azure Databricks 工作區之間的私人連線,以及在計算平面上的叢集與 Databricks 工作區基礎結構內控制平面的核心服務之間啟用。 Azure Private Link 能直接連線到服務,而不會使流量公開倒公用網路。 這項功能可作為公開預覽版。 請參閱 啟用 Azure Private Link 後端和前端連線。
為您的工作區啟用無伺服器 SQL 倉儲 (公開預覽)
2022 年 8 月 2 日
無伺服器 SQL 倉儲現在可供 Azure Databricks 上的帳戶和工作區作為 公開預覽。 此功能需要 進階版 定價層。 在建立無伺服器 SQL 倉儲之前,系統管理員必須 針對工作區啟用它。
Delta Live Tables 現在僅支援重新整理管線更新中選取的數據表
2022 年 8 月 2 日至 24 日
您現在可以針對 Delta Live Tables 管線中僅選取的數據表啟動更新。 這項功能可讓您啟動只重新整理所選數據表的管線更新,以加速管線測試及解決錯誤。 若要瞭解如何只啟動所選數據表的更新,請參閱 在 Delta Live Tables 管線上執行更新。
作業執行現在會等候叢集連結庫完成安裝
2022 年 8 月 1 日
叢集啟動時,您的 Databricks 作業現在會等候叢集連結庫在執行之前完成安裝。 先前,只有在將連結庫指定為作業的相依連結庫時,作業執行才會等候連結庫安裝在所有用途叢集上。 如需為作業設定相依連結庫的詳細資訊,請參閱 設定相依連結庫。