這些功能和 Azure Databricks 平臺改良功能於 2025 年 3 月發行。
注意
發行是分階段進行的。 您的 Azure Databricks 帳戶可能要等到初始發行日期一周以上才會更新。
Databricks Runtime 16.3 正式推出
2025年3月31日
Databricks 執行環境 16.3 和 Databricks 執行環境 16.3 ML 現已普遍可用。
請參閱Databricks Runtime 16.3和Databricks Runtime 16.3 for Machine Learning。
停用您的舊版 Hive metastore(公眾預覽版)
2025年3月31日
您現在可以從您的工作區中禁用對Hive元存儲的直接訪問,確保所有訪問和管理由Unity Catalog提供。 請參閱 停用您的 Azure Databricks 工作區使用的 Hive Metastore 存取。
Databricks 工作現在允許 1,000 個任務
2025年3月31日
在您的工作流程中,一個單一的作業現在最多可以包含1,000個任務。 請參閱 Lakeflow 職位。
Mosaic AI代理框架和Mosaic AI代理評估已正式推出(GA)
2025年3月31日
使用 Mosaic AI Agent Framework 和 Mosaic AI Agent Evaluation 建立並評估 AI 代理。 代理框架簡化了高品質生成式AI應用程式的創建和部署。 智能代理評估工具提供用來評估 AI 應用程序的質量、成本和延遲的工具,幫助您開發準確、安全和受控的輸出。 請參閱在 Databricks 上建置 Gen AI 應用程式 和馬賽克 AI 代理程式評估 (MLflow 2)。
管理的 SaaS 連接器 支援列級選擇(僅限 API)
2025年3月28日
企業應用程式(例如 Salesforce、Workday 和 ServiceNow)的管理連接器現在支持欄位級的選擇和取消選擇。 您還可以指定是否在未來當資料來源新增欄位時,自動匯入這些欄位。 請參見Lakeflow Connect中的受控連接器。
Meta Llama 3.3 70B 用於基礎模型微調的指導支持
2025年3月28日
基礎模型微調現在支持Meta Llama 3.3 70B Instruct。 請參閱支援的模型。
Databricks 應用程式:根據使用者權限控制對資源的存取,並透過代表使用者授權進行(公開預覽)
2025年3月26日
Databricks Apps 現在可以使用使用者授權,確保應用程式使用指派給應用程式使用者的許可權與資源互動。 存取資源時,您可以使用用戶授權,例如 UC 管理的數據表或模型服務端點,應該受限於指派給使用者的許可權。 請參閱 在 Databricks 應用程式中設定授權。
舊系統結構已被棄用
2025年3月26日
以下的舊系統結構描述已經被棄用,並將從system
目錄中刪除。 如需查看當前系統架構和資料表的列表,請參閱使用系統資料表監控帳戶活動。
operational_data
lineage
access_preview
billing_preview
Claude Sonnet 3.7 現已支援 Mosaic AI Model Serving
2025年3月26日
Anthropic 的 Claude Sonnet 3.7 現在受 Mosaic AI 模型服務支持。 Claude Sonnet 3.7 可供使用。
- 基礎模型 API 以每個代幣計費
- 通用型人工智慧功能:
ai_query
- 函式呼叫
Databricks 應用程式事件的其他審計記錄 (公開預覽)
2025年3月25日
來自 Databricks 應用程式的審計記錄現在包括以下事件的記錄:createApp
、installTemplateApp
、updateApp
、startApp
、stopApp
、deployApp
和 deleteApp
。 查看應用程式事件的審計日誌。
群組叢集已普遍可用 (GA)
2025年3月25日
全面豎用和作業計算資源分配功能,現在可使用專用存取模式來分配給一個群組。 請參閱 將計算資源指派給群組。
代理程式磚:資訊擷取在Beta中
2025年3月25日
代理程式磚 提供簡單的無程式代碼方法,可建置及優化特定領域、高品質的 AI 代理程式系統,以用於常見的 AI 使用案例。 在 Beta 中,Agent Bricks 支援資訊擷取,並簡化將大量未標記文字文件轉換成結構化數據表的程式,其中包含每個檔的擷取資訊。
請參閱 使用代理程式磚:資訊擷取。
新的「CAN VIEW」權限適用於 SQL 倉庫(公開預覽)
2025年3月25日
"CAN VIEW 權限允許使用者監控 SQL 倉庫,包括相關的查詢歷史和查詢配置文件。" 這些使用者必須獲得額外的許可才能在SQL倉庫上執行查詢。 請參閱 SQL 資料庫 ACLs。
新欄位瀏覽器
2025年3月24日
您現在可以在處理表格筆記本輸出時使用列瀏覽器。 欄位瀏覽器允許您搜索、顯示或隱藏、固定及重新排列欄位。 請參見探索欄。
AI Gateway 現在支持按次代幣計費的端點
2025年3月24日
Mosaic AI Gateway 現在支援基礎模型 API 按代幣計費端點。
現在,您可以在按代幣支付的端點上啟用以下治理和監控功能:
- 許可權和流量限制 以控制誰有存取權以及存取的範圍。
- 載荷記錄,以透過推理表監控和審查傳送至模型 API 的數據。
- 使用使用狀況追蹤,使用系統數據表監控端點上的操作情況和相關成本。
- AI 防護措施 用於防止請求和回應中出現不需要和不安全的數據。
Databricks 連接器 for Google Sheets(公開預覽)
2025 年 3 月 20 日
Databricks Connector for Google Sheets 讓您可以從 Google Sheets 連接到您的 Databricks 工作區。 請參閱 從 Google Sheets 連接到 Azure Databricks。
Web 終端機活動現在被視為計算活動
2025 年 3 月 20 日
如果在連接到這些計算資源的 Databricks 網路終端機中偵測到活動,包括在筆記本中,設定為在閒置一段時間後自動終止的計算資源將會繼續運行。 請參閱自動終止。
預算原則被重新命名為無伺服器預算原則
2025 年 3 月 19 日
無伺服器預算政策(公開預覽階段)已從預算政策重新命名。 請參閱 屬性使用量與無伺服器預算原則。
Delta Sharing 支援重新命名數據表
2025 年 3 月 19 日
Delta Sharing 現在支援重新命名共享數據表。 如果提供者重新命名共享數據表,收件者端的數據表會自動協調而不會發生錯誤。 查閱 更新分享。
OIDC 聯盟用於 Databricks 到 Open Delta Sharing(公開預覽)
2025年3月17日
Azure Databricks 中的數據提供者現在可以讓收件者使用自己的識別提供者 (IdP) 來建立對 Azure Databricks 中建立之 Delta Sharing 共用的存取權。 此驗證流程會使用 Open ID Connect (OIDC) 令牌同盟來交換收件者 IdP 所產生的 JSON Web 令牌(JWT),以取得 Azure Databricks 所產生的短期 OAuth 令牌。 此 Databricks 到開放共享 驗證流程適用於未能存取啟用了 Unity Catalog 功能的 Databricks 工作區的收件者。
OIDC 同盟是一種將非 Databricks 使用者連線至提供者的替代方案,相較於使用由 Azure Databricks 發行且長期有效的持有人令牌。 它可啟用更細緻的訪問控制、支援 MFA,並藉由消除收件者管理和保護共用認證的需求,來降低安全性風險。
Databricks-to-open 與 OIDC 聯盟的共用支援 Power BI 和 Tableau 上收件者的使用者對機器(U2M)驗證,以及從在收件者 IdP 中註冊的 Python 用戶端應用程式進行機器對機器(M2M)OAuth 授權認證驗證。
這項功能目前處於 公開預覽版。 請連絡 Azure Databricks 代表以要求存取權。
請參閱 使用 Open ID Connect(OIDC)聯盟來啟用 Delta Sharing 共享(開放共享)的驗證。
自動機器學習(AutoML)支持分配給群組的專用存取模式中的叢集。
2025年3月17日
現在,AutoML 可以在專屬存取模式下,當分配到群組時,使用於叢集。 以前,AutoML 只能在專用的單用戶模式存取叢集中使用。 請參閱 需求。
預設會啟用計算系統數據表
2025年3月17日
system.compute
架構現在預設會在所有 Unity 目錄工作區中啟用。 請參閱 計算系統資料表參考。
Hive 中繼資料儲存區聯邦現在已經正式推出
2025 年 3 月 14 日
Hive 中繼存放區同盟可讓您使用 Unity 目錄來存取和管理 Hive 中繼存放區中註冊的數據。 這包括外部管理的 Hive 中繼資料庫和內部 Databricks Hive 舊版中繼資料庫。
GA 增加了對以下項目的支援:
- Hive 中繼存放區 3.1(除了公開預覽版中支援的 0.13 和 2.3 版以外)。
- Postgres 和 SQL Server (除了公開預覽版中支援的 MySQL 以外)。
- 存取 記憶體防火牆後方的 DBFS 根備份資料表,。
- 將數據行篩選和列層級遮罩套用至透過Hive中繼存儲聯邦存取的Hive數據表。
此外,此版本包含下列專案的預覽支援:
- 讀取在 Hive 中繼資料存放區中定義的 Delta 淺層克隆(公眾預覽)。
- 讀取跨工作區的 DBFS 掛載支援的資料表(私密預覽版本:請聯絡您的 Azure Databricks 帳戶代表以進行註冊)。
請參閱 Hive 中繼存放區同盟:讓 Unity 目錄控管 Hive 中繼存放區中註冊的數據表。
計算記錄現在可以傳遞至磁碟區 (公開預覽)
2025年3月13日
現在,您可以將計算資源的驅動程序、工作程序和事件日誌傳送到 Unity Catalog 卷。 請參閱 計算日誌交付。
現在支援下載為 Excel 的筆記本可以連線到無伺服器運算。
2025年3月13日
針對連線到無伺服器計算的筆記本,您現在可以將表格式儲存格結果下載為 Excel 檔案。 連接至 SQL 倉庫的筆記本也支援匯出為 Excel。 請參閱 下載結果。
將記憶體認證、服務認證和外部位置系結至特定工作區 (GA)
2025 年 3 月 12 日
現在已正式推出將記憶體認證、服務認證和外部位置系結至特定工作區的能力。 工作區系結可防止從其他工作區存取這些物件。 如果您使用工作區來隔離用戶數據存取,則這項功能特別有用,例如,如果您有個別的生產與開發工作區或專用工作區來處理敏感數據。
如需詳細資訊,請參閱 (選擇性) 將外部位置指派給特定工作區、(選擇性) 將記憶體認證指派給特定工作區 和 (選擇性) 將服務認證指派給特定工作區。
Databricks Runtime 16.3 (Beta)
2025 年 3 月 12 日
Databricks Runtime 16.3 和 Databricks Runtime 16.3 ML 現在可作為 Beta 版本使用。
請參閱Databricks Runtime 16.3和Databricks Runtime 16.3 for Machine Learning。
Databricks JDBC 驅動程式 (OSS) 已經正式發布
2025 年 3 月 11 日
Databricks JDBC Driver (OSS) 現已正式推出,很快就會開放原始碼。 從 Maven 存放庫下載 Databricks JDBC 驅動程式 (OSS),。
在您的帳戶中監視和撤銷個人存取憑證(公開測試版)
2025 年 3 月 11 日
代幣報告現在處於公開預覽狀態。 令牌報告可讓帳戶管理員監視和撤銷帳戶控制台中的個人存取令牌(PAT)。 Databricks 建議您使用 OAuth 存取令牌,而不是使用 PAT 來獲得更高的安全性和便利性。 請參閱 監視和撤銷帳戶中的個人存取令牌。
Genie 對話 API 現在處於公開預覽狀態
2025 年 3 月 11 日
Genie Conversations API 現在已 公開預覽版。 您現在可以詢問問題、擷取產生的SQL和查詢結果,或使用 Databricks REST API 取得與 Genie 空間相關聯的詳細數據。 若要瞭解如何使用 API,請參閱 Genie REST API 參考。
若要瞭解如何使用馬賽克 AI 代理程式架構建立多代理程式系統,請參閱 在多代理程式系統中使用 Genie。
使用 AI 函式執行批次推斷 (公開預覽)
2025 年 3 月 10 日
馬賽克 AI 現在支援使用 AI Functions 進行批次推斷。 這項功能處於公開預覽狀態。 如需詳細資訊,請參閱下列指南:
ServiceNow 連接器 (公開預覽)
2025 年 3 月 10 日
您現在可以使用 Databricks Lakeflow Connect 從 ServiceNow 導入資料。 請參閱配置 ServiceNow 供 Databricks 取用。 若要參與預覽,請聯絡您的 Databricks 帳戶團隊。
現在,外部模型已支援與 OpenAI 相容的 LLM。
2025 年 3 月 10 日
馬賽克 AI 模型服務中的外部模型現在支援自定義提供者選項。 您可以使用此選項來指定未明確列為模型提供者的替代提供者,或位於與 OpenAI API 兼容的自訂代理伺服器背後的模型。 請參閱 模型提供者。
Agent Framework 監控功能目前處於 Beta 版
2025 年 3 月 10 日
Agent Framework 監視處於 Beta中。 您現在可以在使用 馬賽克 AI 代理架構部署的代理程式上設定監視。
請參閱 監視使用 Agent Framework 部署的應用程式 (MLflow 2) 。
馬賽克 AI 代理架構現在已正式推出
2025 年 3 月 7 日
馬賽克 AI 代理程式架構 現已正式推出。 使用 Agent Framework 來建置及部署高品質的生產等級代理程式。
Delta Sharing 支援查詢優化器統計數據的功能已經進入一般供應階段
2025 年 3 月 4 日
存取透過 Delta Sharing 共享之 Delta 表的資料接收者現在可以利用優化器統計資料來改善查詢效能。 數據提供者必須啟用預測優化,或手動在共用 Delta 數據表上執行 ANALYZE
命令。
效能改善包括下列各項:
相同區域的 Databricks 對 Databricks 的查詢速度提高了 11%。
跨區域的 Databricks 到 Databricks 查詢速度提升了 28%。
請參閱 Unity Catalog 管理資料表的 預測優化 和 ANALYZE TABLE。
AI 閘道現在支援外部模型的後備方案
2025 年 3 月 4 日
您現在可以使用 AI Gateway 在模型服務端點上啟用備援機制。 如果您向 外部模型 發出的請求失敗,您可以指定將請求重新導向至在該端點上運行的其他外部模型。 請參閱使用UI設定AI閘道。
使用新的停靠功能控制 Databricks Assistant 的位置
2025 年 3 月 4 日
您現在可以更好地控制 Databricks 小幫手窗格的位置,並使用新的停駐功能來將其最小化。
請參閱 控制 Databricks Assistant的位置。
新的 Azure Databricks 工作區現在預設安全叢集連線能力 (沒有公用 IP)
2025 年 3 月 3 日
從2025年3月3日起,新的Azure Databricks工作區將預設使用安全叢集連接(無公共IP),透過取消叢集節點上的公共IP位址來增強安全性。 此變更不會影響現有的工作區,但建議遷移以提高安全性。 確保防火牆在配置後允許對控制平面的出站流量。