這些功能和 Azure Databricks 平台改善功能於 2022 年 3 月發行。
備註
發行是分階段進行的。 您的 Azure Databricks 帳戶可能要到初始發行日期後一週或以上才會更新。
使用 Databricks 增強的自動調整,提升 DLT 管線的效能並降低成本。
2022 年 3 月 31 日
Databricks 增強了自動調整功能,通過新增串流工作負載優化及改善對批次工作負載的支援功能,提升現有叢集自動調整的效能。 增強的自動調整改善可提供更有效率的叢集使用率、降低資源使用量,以及降低成本。 請參閱 使用自動調整功能來優化 Lakeflow 宣告式管線的叢集使用率。
在新工作區預設啟用存放庫中的檔案
2022 年 3 月 30 日
現在,新建立的工作區中預設啟用存放庫中的檔案功能。
Databricks 功能存儲庫已正式推出
2022 年 3 月 22 日
Databricks Feature Store 已正式發行。 Databricks Feature Store 可在整個組織中啟用特徵共用和探索,也可確保模型訓練和推斷的特徵計算程式碼保持一致。
從實驗頁面分享實驗
2022 年 3 月 21-28 日:3.68 版
MLflow 實驗頁面上的 [權限] 按鈕已重命名為 [共用]。 對話方塊現在包含實驗的可共用連結。 請參閱 變更實驗的許可權。
RStudio Workbench 錯誤修復
2022 年 3 月 21-28 日:3.68 版
使用授權檔案時,最新的 RStudio Workbench 取決於 Cookie。 這些 Cookie 未加入 Proxy 允許清單。 已修正此問題。
新增工作區語言選項
2022 年 3 月 21 日
工作區現在提供下列語言版本:
- 西班牙人
- 葡萄牙語(巴西)
Databricks Runtime 10.4 LTS 和 10.4 LTS ML 已正式發行;10.4 Photon 為公開預覽
2022 年 3 月 18 日
Databricks Runtime 10.4 LTS 和 Databricks Runtime 10.4 LTS ML 現已正式發行。 Databricks Runtime 10.4 Photon 處於公開預覽狀態。
備註
LTS 表示此版本受到長期支援。 請參閱 Databricks Runtime LTS 版本生命週期 (英文)。
請參閱 Databricks Runtime 10.4 LTS (EoS) 和 Databricks Runtime 10.4 LTS for Machine Learning (EoS) 。
Unity Catalog 在公開預覽中可用
2022 年 3 月 10 日
Unity Catalog 預覽版是 Databricks 湖倉上資料和 AI 的精細治理解決方案。
Unity 目錄可透過下列重要功能,協助簡化數據的安全性和治理:
- 定義一次,隨處安全:Unity Catalog 提供一個單一平台來管理適用於所有工作區和身份的資料存取原則。
- 符合標準的安全性模型:Unity 目錄的安全性模型是以標準 ANSI SQL 為基礎,並允許系統管理員使用熟悉的語法,授與目錄層級、資料庫(也稱為架構)、數據表和檢視的許可權。
- 內建稽核:Unity 目錄會自動擷取記錄數據存取權的用戶層級稽核記錄。
您可以使用與存取工作區本機數據相同的方式存取 Unity 目錄中的數據:從數據科學 & 工程或 Databricks 馬賽克 AI 叢集、SQL 倉儲、Databricks SQL 編輯器,或使用 Unity 目錄 REST API 或 Unity 目錄命令行介面 (CLI)。
如需詳細資訊,請參閱 什麼是 Unity 目錄?。 若要參與 Unity 目錄公開預覽,請連絡您的 Azure Databricks 帳戶小組。
Delta Sharing 提供公開預覽
2022 年 3 月 10 日
Delta Sharing (預覽版)是由 Databricks 開發的開放通訊協定,可供與其他組織安全地共用資料,不論他們使用什麼計算平台。 稱為「數據提供者」的 Databricks 使用者可以使用 Delta Sharing,與組織外部的人員或群組共用 Unity 目錄中繼存放區中的數據,稱為「數據收件者」。 數據收件者可以立即開始使用最新版本的共享數據。 如需連接器的完整清單,以及如何使用連接器的詳細資訊,請參閱 Delta Sharing 項目檔。 在 Unity 目錄中繼存放區上啟用 Delta 共用時,Unity 目錄會執行 Delta Sharing 伺服器。
如需詳細資訊,請參閱什麼是 Delta Sharing?。 若要參與 Delta Sharing 公開預覽,請連絡 Azure Databricks 帳戶團隊。
旋轉受控服務的客戶自控金鑰
2022 年 3 月 10 日
您可以為受控服務新增客戶自控金鑰 (CMK)。 Azure Databricks 使用您的金鑰來保護和控制對用於在筆記本來源、機密和 Databricks SQL 查詢歷史記錄的控制平面中加密資料的金鑰的存取權。 這項功能處於公開預覽狀態。
您現在可以 輪替並更新金鑰。
DLT 管線的增強存取控制
2022 年 3 月 9 日
您現在可以更充分掌控 DLT 管線的存取權,包括管線擁有者、可檢視或管理管線的人員,以及可以執行管線的人員。 請參閱 Lakeflow 聲明式管線 ACL。
使用新的 channel
設定測試 DLT 預覽功能 (公開預覽)
2022 年 3 月 7 日至 3 月 14 日:3.67 版
您可以使用新的 channel
設定,在 DLT 管線中測試即將推出的功能。 要測試新功能的管線,請將 channel
設定為 preview
。 若要切換回目前的版本,請將 channel
設定為 current
。
已改善 DLT Python 函式的錯誤處理 (公開預覽)
2022 年 3 月 7 日至 3 月 14 日:3.67 版
此版本會新增類型檢查,以驗證 DLT Python 函式在設定 string
的名稱和值時,使用 數據類型。 先前,使用非字串值設定數據表屬性可能會導致管線失敗,而不會顯示指出根本原因的錯誤訊息。
對 Databricks Repos 的改善
2022 年 3 月 7 日至 14 日:3.67 版
對 Databricks Repos 進行了下列改善。
- 文字搜尋和取代存放庫中的檔案。 檔案編輯器現在有 [檔案] 和 [編輯] 功能表,提供搜尋、取代和全部取代等功能。
- 以前,Databricks 建議存放庫中筆記本和檔案的總數不超過 2000。 該限制已增加到 5000。
叢集原則變更的診斷記錄
2022 年 3 月 7 日至 14 日:3.67 版
啟用稽核記錄時,當您建立、更新或刪除叢集原則,或更新叢集原則的用戶許可權時,現在會記錄稽核事件。 如需詳細資訊,請參閱診斷記錄參考。
Databricks Runtime 10.4 (搶鮮版 (Beta))
2022 年 3 月 4 日
Databricks Runtime 10.4、10.4 Photon 和 10.4 ML 現在可作為搶鮮版 (Beta) 版本使用。
請參閱 Databricks Runtime 10.4 LTS (EoS) 和 Databricks Runtime 10.4 LTS for Machine Learning (EoS) 的完整版本資訊。