次の機能と Azure Databricks プラットフォームの機能強化が 2025 年 2 月にリリースされました。
注
リリースは段階的に行われます。 Azure Databricks アカウントの更新は、最初のリリース日から 1 週間以上行われないことがあります。
Databricks ODBC ドライバー 2.9.1
2025 年 2 月 28 日
Databricks ODBC ドライバー バージョン 2.9.1 は、ODBC ドライバーのダウンロード ページからダウンロードできるようになりました。
このリリースには、次の機能強化と新機能が含まれています。
- トークンパススルー OAuth フローのトークン更新サポートを追加しました。
- アイドル状態のSQLステートメントに対するドライバー側のタイムアウトオプションを追加しました。 タイムアウトは、アプリケーションがクエリ実行の途中で結果のフェッチやハングを中断しないように構成できます。
このリリースでは、次の問題が解決されます。
- 初期カタログが設定されていない場合、ドライバーは既定で
hive_metastoreカタログを使用するようになります。 - ドライバーは、HTTP User-Agent を
thrift/0.9.0からthrift/0.17.0に更新します。
このリリースには、いくつかのサード パーティ製ライブラリへのアップグレードが含まれています。
- OpenSSL 3.0.15 (以前の 3.0.13)
- libcURL 8.10.1 (以前の 8.7.1)
- ICU 74.2 (以前の 71.1)
- OSX および Linux 用の Arrow 15.0.0 (以前の 9.0.0) (Windows は 15.0.0 上)
- lz4 1.10.0 (以前は 1.9.4)
- Expat 2.6.3 (以前は 2.6.2)
- Kerberos 1.21.3 (以前の 1.21.2)
完全な構成情報については、ドライバー ダウンロード パッケージと共にインストールされている Databricks ODBC ドライバー ガイド を参照してください。
パイプライン イベント ログを Unity カタログ テーブルとして発行する
2025 年 2 月 28 日
これで、DLT パイプラインのイベント ログを Unity カタログのテーブルとして発行できるようになりました。 イベント ログのクエリを参照してください。
モザイク AI モデル サービスが Azure 東日本、英国南部、米国中南部で利用できるようになりました
2025 年 2 月 28 日
Mosaic AI Model Serving は、次のリージョンでサポートされるようになりました。
japaneastuksouthsouthcentralus
「利用可能なリージョンに制限がある機能」を参照してください。
Databricks Assistant は、テーブルの分析情報と系列を提供します
2025 年 2 月 27 日
Unity カタログ対応の Azure Databricks ワークスペースでは、単純なプロンプトを使用するときに、Databricks Assistant でテーブルの系列と分析情報を提供できます。
Databricks Assistant を使用したテーブル系列の取得を参照してください。
[インポートプロバイダー] ダイアログを使用して、利用可能な Delta Sharing の共有を Azure Databricks に直接インポートする
2025 年 2 月 26 日
Unity カタログ対応の Azure Databricks ワークスペースには、Databricks 以外の Delta Sharing サーバーから Open-to-Databricks (O2D) 共有を使用して Unity カタログに共有をインポートするための インポートプロバイダー ダイアログが含まれています。 この機能は 2024 年 7 月にリリースされましたが、当時は発表されませんでした。 プロバイダーをインポートする場合、ユーザーは Databricks から Databricks への共有と基本的に同じ受信者エクスペリエンスを持ちます。[ カタログの作成 ] をクリックして共有カタログを作成し、Unity カタログのアクセス制御を使用して共有テーブルへのアクセスを許可し、標準の Unity カタログ構文を使用して共有テーブルに対してクエリを実行します。資格情報ファイルを格納したり、共有データを照会するときに指定したりする必要はありません。 「Azure Databricks: オープン共有コネクタを使用して共有データを読み取るを参照してください。
オープン共有プロバイダーから Azure Databricks への Delta Sharing を OAuth を使用して行う
2025 年 2 月 26 日
Azure Databricks では、Open-to-Databricks (O2D) 共有の OAuth クライアント資格情報がサポートされるようになりました。つまり、Databricks 以外の差分共有サーバーから、Unity カタログに対して有効になっている Azure Databricks ワークスペースまでです。 これにより、OAuth クライアント資格情報を使用する Oracle Delta Share のような Delta Sharing プロバイダーネットワークからの共有インポートが簡単になります。 このサポートにより、O2D モデルの受信者として Unity カタログを使用する利点が既に大きなものになります。これには、共有をインポートするためのインポート プロバイダー UI や、共有を照会するために標準の Unity カタログ構文を使用する機能が含まれており、共有データのクエリを実行するときに資格情報ファイルを格納したり、指定したりする必要はありません。 「Azure Databricks: オープン共有コネクタを使用して共有データを読み取るを参照してください。
Unity カタログ ビューでの読み取りのストリーミングは一般提供（GA）となりました
2025 年 2 月 25 日
Delta テーブルに対して登録された Unity カタログ ビューからのストリーミング読み取りが一般公開されました。 「 Unity カタログ ビューをストリームとして読み取る」を参照してください。
初期スナップショット ストリーム処理のイベント時間の順序付けは GA です
2025 年 2 月 25 日
デルタ テーブル ソースから構造化ストリーミング クエリを処理するための withEventTimeOrder オプションが一般公開されました。
「データを削除せずに初期スナップショットを処理する」を参照してください。
非同期の進行状況の追跡は GA です
2025 年 2 月 25 日
構造化ストリーミングの非同期進行状況の追跡が一般公開されました。 非同期進行状況の追跡とはを参照してください。
課金対象の使用状況システム テーブルで、プライベート エンドポイントのネットワーク コストが属性化されるようになりました
2025 年 2 月 25 日
課金対象の使用状況システム テーブルには、プライベート エンドポイントを使用してサーバーレス コンピューティングをリソースに接続した場合に発生するコストを監視するのに役立つフィールドが含まれるようになりました。 「課金対象の使用状況システム テーブル リファレンス」を参照してください。
MLflow トレースは GA です
2025 年 2 月 25 日
MLflow トレースが一般公開されました。 トレースを使用すると、モデルまたはエージェント要求の各ステップに関連付けられている入力、出力、およびその他のメタデータを追跡できます。
トレースを使用すると、バグや予期しない動作の原因を特定し、モデルまたはエージェント間でパフォーマンスを比較し、新しいデータセットを構築して品質を向上させることができます。 MLflow トレース - 生成 AI の可観測性に関する説明を参照してください。
Databricks Marketplace の新しいフィルター パネル
2025 年 2 月 25 日
Databricks Marketplace に、検索と閲覧を効率化するように設計されたフィルター パネルが強化されました。 この更新プログラムは、検出可能性を高め、製品、プロバイダー、価格などを簡単に検索できるようにします。 Databricks Marketplace の一覧を参照するを参照してください。
OAuth シークレットの有効期間が構成可能になりました
2025 年 2 月 24 日
サービス プリンシパルの OAuth シークレットの有効期間が構成できるようになりました。 新しく作成された OAuth シークレットの既定の有効期間は 2 年です。以前は有効期限が切れませんでした。 OAuth を使用したサービス プリンシパルによる Azure Databricks リソースへの無人アクセスの承認に関するページを参照してください。
ボリューム内のファイルをプレビューする
2025 年 2 月 18 日
イメージ、テキスト ファイル、JSON、yaml、CSV など、カタログ エクスプローラーで一般的なファイル形式のプレビューがボリュームに表示されるようになりました。 ボリューム内のファイルのプレビューを参照してください。
課金レコードを処理するモデルが 5 分間隔でログに記録されるようになりました
2025 年 2 月 18 日
コストの監視性を向上させるために、課金レコードは、モデルの提供とプロビジョニングされたスループット使用量の 5 分ごとにログに記録されるようになりました。 以前は、レコードは 1 時間間隔でログに記録されていました。 「課金対象の使用状況システム テーブル リファレンス」を参照してください。 Foundation Model Api Pay-Per-Token の使用状況は、引き続き時間単位で集計されることに注意してください。
自動液体クラスタリング (パブリック プレビュー)
2025 年 2 月 18 日
Unity カタログのマネージド テーブルで自動液体クラスタリングを有効にできるようになりました。 自動液体クラスタリングでは、クラスタリング キーをインテリジェントに選択して、クエリのデータ レイアウトを最適化します。 自動液体クラスタリングを参照してください。
Azure カナダ東部リージョンの専用コントロール プレーン
2025 年 2 月 14 日
Databricks では、以前はカナダ中部コントロール プレーンによって管理されていた Azure Canada East リージョン用の専用コントロール プレーンが提供されるようになりました。 「Azure Databricks サービスと資産の IP アドレスとドメイン」を参照してください。
Databricks Runtime 14.1 シリーズのサポート終了
2025 年 2 月 12 日
Machine Learning の Databricks Runtime 14.1 と Databricks Runtime 14.1 のサポートは、11 月 5 日に終了しました。 Databricks のサポート ライフサイクルを参照してください。
サーバーレス SQL ウェアハウスを追加のリージョンで使用できるようになりました
2025 年 2 月 12 日
サーバーレス SQL ウェアハウス は、東アジア、韓国中部、スイス北部、米国中西部、米国西部 3 の Azure リージョンで利用できるようになりました。 「Azure Databricks のリージョン」を参照してください。
Databricks Runtime 16.2 は GA です
2025 年 2 月 10 日
Databricks Runtime 16.2 と Databricks Runtime 16.2 ML が一般公開されました。
Databricks Runtime 16.2 と Machine Learning 用の Databricks Runtime 16.2を参照してください。
標準アクセス モード コンピューティング (以前の共有アクセス モード) での Scala ストリーミング foreach、 foreachBatch、および flatMapGroupsWithState のサポート
2025 年 2 月 7 日
標準アクセス モード コンピューティングで、Databricks Runtime 16.1 以降の Scala ストリーミング関数 DataStreamWriter.foreach がサポートされるようになりました。 Databricks Runtime 16.2 以降では、関数の DataStreamWriter.foreachBatch と KeyValueGroupedDataset.flatMapGroupsWithState がサポートされています。
サービス資格情報を使用した外部クラウド サービスへの Unity カタログ管理アクセスが GA になりました
2025 年 2 月 7 日
サービス資格情報を使用すると、Azure Databricks からクラウド テナントのサービスを使用して、シンプルで安全な認証を行うことができます。 サービス資格情報が一般公開され、パブリック プレビューでサポートされている Python SDK に加えて Scala SDK がサポートされるようになりました。 完全 GA 機能には、Databricks Runtime 16.2 以降のコンピューティングが必要です。 「サービス資格情報の作成」を参照してください。
SQL ウェアハウスに接続されているノートブックで、Excel形式でのダウンロードがサポートされるようになりました
2025 年 2 月 6 日
SQL ウェアハウスに接続されているノートブックの場合、表形式のデータを含むセルの結果を Excel ファイルとしてダウンロードできるようになりました。 「結果のダウンロード」を参照してください。
DLT シンクを使用してパイプラインから外部サービスにデータを書き込む (パブリック プレビュー)
2025 年 2 月 5 日
DLT sink API はパブリック プレビュー段階です。 DLT シンクを使用すると、パイプラインによって変換されたデータを、Apache Kafka や Azure Event Hubs などのイベント ストリーミング サービスや、Unity カタログまたは Hive メタストアによって管理される外部テーブルなどのターゲットに書き込むことができます。
「シンクを使用して、Lakeflow 宣言パイプラインを使用して外部サービスにレコードをストリーミングする」を参照してください。
自動 ID 管理 (パブリック プレビュー)
2025 年 2 月 5 日
自動 ID 管理を使用して Microsoft Entra ID でアプリケーションを構成しなくても、Microsoft Entra ID のユーザー、サービス プリンシパル、およびグループを Azure Databricks に追加できるようになりました。 自動 ID 管理が有効になっている場合、Microsoft Entra ID のユーザー、サービス プリンシパル、およびグループを ID フェデレーション ワークスペースで直接検索し、それらをワークスペースに追加できます。 Databricks はレコードのソースとして Microsoft Entra ID を使用するため、グループ メンバーシップに対する変更はすべて Azure Databricks で適用されます。 自動 ID 管理では、入れ子になったグループもサポートされます。
Microsoft Entra ID からユーザーとグループを自動的に同期するを参照してください。
新しいリージョン: メキシコ中部
2025 年 2 月 4 日
Azure Databricks は、メキシコ中部で利用可能になりました。 「Azure Databricks のリージョン」を参照してください。