Databricks Runtime 18.0 for Machine Learning (Beta) は、Databricks Runtime 18.0 (Beta) に基づく機械学習とデータサイエンス用のすぐに使える環境を提供します。 Databricks Runtime ML には、TensorFlow、PyTorch、XGBoost など、多くの一般的な機械学習ライブラリが含まれています。 Databricks Runtime ML では、TorchDistributor、DeepSpeed、Ray を使用した分散型ディープ ラーニング トレーニングもサポートされています。
Important
Databricks Runtime 18.0 for Machine Learning は ベータ版です。 サポートされている環境の内容は、ベータ期間中に変更される可能性があります。 変更には、パッケージの一覧やインストールされているパッケージのバージョンを含めることができます。
新機能と機能強化
Databricks Runtime 18.0 ML は、Databricks Runtime 18.0 の上に構築されています。 Apache Spark MLlib や SparkR など、Databricks Runtime 18.0 の新機能については、 Databricks Runtime 18.0 (ベータ) リリース ノートを参照してください。
ライブラリの更新プログラムには、次のようなものがあります。
- CUDA の 12.9 への更新
- flash_attn 2.8.3
- keras 3.12.0
- langchain 1.0.3
- mlflow-skinny 3.5.1
- openai 2.7.0
- torch 2.9.0+cu129
- torchvision 0.24.0+cu129
- トランスフォーマー 4.57.1
- triton 3.5.0
- xgboost 3.1.1
その他の変更
Databricks Runtime 18.0 ML 以降では、次の追加の変更が行われました。
- AutoML が削除されました。
- TensorFlow は、最上位レベルのサポートではなくなりました。
システム環境
Databricks Runtime 18.0 ML のシステム環境は、次のように Databricks Runtime 18.0 と異なります。
- GPU クラスターの場合、Databricks Runtime ML には次の NVIDIA GPU ライブラリが含まれています。
- CUDA 12.9
- cublas 12.9.1.4-1
- cusolver 11.7.5.82
- cupti 12.9.79
- cusparse 12.5.10.65
- cuDNN 9.15.1.9-1
- NCCL 2.27.5
Libraries
次のセクションでは、Databricks Runtime 18.0 ML に含まれる、Databricks Runtime 18.0 に含まれるライブラリとは異なるライブラリを示します。
最上位層ライブラリ
Databricks Runtime 18.0 ML には、次の最上位層 ライブラリが含まれています。
Python ライブラリ
Databricks Runtime 18.0 ML は Python パッケージ管理に virtualenv を使用し、多くの一般的な ML パッケージが含まれています。
ローカルの Python 仮想環境で Databricks Runtime ML Python 環境を再現するには、CPU クラスターの requirements-cpu-18.0.txt または GPU クラスター のrequirements-gpu-18.0.txt をダウンロードします。 次に、pip install -r requirements-<cpu|gpu>-18.0.txt を実行します。 このコマンドは、Databricks Runtime ML が使用するすべてのオープン ソース ライブラリをインストールしますが、Databricks によって開発されたライブラリはインストールしません。
CPU クラスター上の Python ライブラリ
| 図書館 | バージョン | 図書館 | バージョン | 図書館 | バージョン |
|---|---|---|---|---|---|
| absl-py | 2.3.1 | 早める | 1.11.0 | aiohappyeyeballs | 2.4.4 |
| aiohttp | 3.11.10 | aiohttp-cors | 0.8.1 | アイオシグナル | 1.2.0 |
| alembic | 1.17.1 | 注釈付き文書 | 0.0.4 | 注釈付き型 | 0.7.0 |
| anyio | 4.7.0 | argon2-cffi | 21.3.0 | argon2-cffi-bindings | 21.2.0 |
| arro3-core | 0.6.5 | 矢印 | 1.3.0 | アストトークン | 3.0.0 |
| astunparse | 1.6.3 | async-lru | 2.0.4 | 属性 | 24.3.0 |
| audioread | 3.1.0 | 自動コマンド | 2.2.2 | azure-common | 1.1.28 |
| azure-core (アジュール コア) | 1.36.0 | azure-cosmos | 4.3.1 | azure-identity (アズール・アイデンティティ) | 1.20.0 |
| azure-mgmt-core | 1.6.0 | azure-mgmt-web | 8.0.0 | アジュール・ストレージ・ブロブ | 12.27.1 |
| azure-storage-file-datalake（アジュールストレージファイルデータレイク） | 12.22.0 | バベル | 2.16.0 | backports.tarfile | 1.2.0 |
| bcrypt | 4.3.0 | beautifulsoup4 | 4.12.3 | 黒い | 24.10.0 |
| 漂白剤 | 6.2.0 | ウインカー | 1.7.0 | ブリス | 0.7.11 |
| boto3 | 1.40.45 | botocore | 1.40.45 | brotli | 1.2.0 |
| キャッシュツールズ (cachetools) | 5.5.1 | カタログ | 2.0.10 | サーティフィ | 2025.4.26 |
| cffi | 1.17.1 | チャーデット | 4.0.0 | charset-normalizer (文字コード正規化ツール) | 3.3.2 |
| circuitbreaker | 2.1.3 | click | 8.1.8 | cloudpathlib | 0.23.0 |
| クラウドピックル | 3.0.0 | cmdstanpy | 1.3.0 | カラフル | 0.5.8 |
| colorlog | 6.10.1 | comm | 0.2.1 | お菓子 | 0.1.5 |
| コンツアーピー | 1.3.1 | cramjam | 2.11.0 | 暗号 | 44.0.1 |
| サイクリスト | 0.11.0 | サイメム | 2.0.12 | Cython | 3.1.5 |
| ダサイト | 1.9.2 | Databricksエージェント | 1.4.0 | databricks-connect (データブリックス・コネクト) | 17.3.1 |
| データブリックスフィーチャーエンジニアリング | 0.13.0.1 | databricks-sdk（データブリックスSDK） | 0.67.0 | dataclasses-json | 0.6.7 |
| データセット | 4.3.0 | dbl-tempo | 0.1.26 | dbus-python | 1.3.2 |
| debugpy | 1.8.11 | デコレータ | 5.1.1 | ディープスピード | 0.18.1 |
| デフューズドXML (defusedxml) | 0.7.1 | deltalake | 1.1.4 | Deprecated | 1.2.18 |
| ディル | 0.3.8 | distlib | 0.3.9 | dmツリー | 0.1.9 |
| ドックストリングをMarkdownに変換 | 0.11 | einops | 0.8.1 | 評価する | 0.4.6 |
| 実行中 | 1.2.0 | facets-overview | 1.1.1 | Farama-Notifications | 0.0.4 |
| fastapi | 0.121.2 | fastjsonschema | 2.21.1 | ファイルロック | 3.17.0 |
| filetype | 1.2.0 | Flask | 2.2.5 | フラットバッファーズ | 25.9.23 |
| fonttools（フォントツールズ） | 4.55.3 | FQDN | 1.5.1 | フローズンリスト | 1.5.0 |
| fsspec | 2023.5.0 | ガスト | 0.6.0 | ギットディービー | 4.0.11 |
| GitPython | 3.1.43 | google-api-core | 2.28.1 | google-auth（Google認証） | 2.43.0 |
| グーグルクラウドコア | 2.5.0 | Googleクラウドストレージ | 3.2.0 | google-crc32c（GoogleのCRC32Cライブラリ） | 1.7.1 |
| グーグルパスタ | 0.2.0 | google-resumable-media（Googleの継続可能なメディアライブラリ） | 2.7.2 | Google API 共通プロトコル (googleapis-common-protos) | 1.65.0 |
| graphql-core | 3.2.4 | グリーンレット | 3.1.1 | grpcio | 1.67.0 |
| grpcio-status | 1.67.0 | 体育館 | 0.28.1 | h11 | 0.16.0 |
| h5py | 3.12.1 | hf-xet | 1.2.0 | hjson | 3.1.0 |
| holidays | 0.54 | httpcore | 1.0.9 | httplib2 | 0.20.4 |
| httpx | 0.28.1 | huggingface-hub（ハギングフェイスのハブ） | 0.36.0 | idna | 3.7 |
| イメージハッシュ (ImageHash) | 4.3.1 | imageio | 2.37.0 | imbalanced-learn（不均衡データに対応するための機械学習ライブラリ） | 0.13.0 |
| importlib-metadata | 6.6.0 | importlib_resources（インポートライブラリリソース) | 6.5.2 | inflect | 7.3.1 |
| iniconfig | 1.1.1 | ipyflow-core | 0.0.209 | ipykernel | 6.29.5 |
| ipython | 8.30.0 | ipython-genutils (IPython用のユーティリティ) | 0.2.0 | ipywidgets | 7.8.1 |
| アイソデート | 0.7.2 | イソデュレーション | 20.11.0 | itsdangerous（イッツデンジャラス） | 2.2.0 |
| jaraco.collections | 5.1.0 | jaraco.context | 5.3.0 | jaraco.functools | 4.0.1 |
| jaraco.text | 3.12.1 | jax-jumpy | 1.0.0 | ジェダイ | 0.19.2 |
| ジンジャ2 | 3.1.6 | jiter | 0.12.0 | jmespath | 1.0.1 |
| 「joblib」 | 1.4.2 | ジョブリブスパーク | 0.6.0 | json5 | 0.9.25 |
| jsonpatch | 1.33 | jsonpointer | 3.0.0 | JSONスキーマ | 4.23.0 |
| jsonschema-specifications (JSONスキーマ仕様) | 2023年7月1日 | jupyter | 1.1.1 | jupyter-console | 6.6.3 |
| Jupyterイベント | 0.12.0 | jupyter-lsp | 2.2.5 | jupyter_client | 8.6.3 |
| jupyter_core（ジュピター・コア） | 5.7.2 | ジュピターサーバー | 2.15.0 | jupyter_server_terminals (ジュピター サーバー ターミナルズ) | 0.5.3 |
| jupyterlab | 4.3.4 | jupyterlab_pygments | 0.3.0 | ジュピターラボサーバー | 2.27.3 |
| jupyterlab_widgets | 1.1.11 | keras | 3.12.0 | キウィソルバー | 1.4.8 |
| langchain | 1.0.3 | langchain-core | 1.0.4 | langchain-openai | 1.0.2 |
| 言語コード | 3.5.0 | langgraph | 1.0.3 | langgraph-checkpoint | 3.0.1 |
| langgraph-prebuilt | 1.0.4 | langgraph-sdk | 0.2.9 | langsmith | 0.4.41 |
| 言語データ | 1.3.0 | launchpadlib | 1.11.0 | lazr.restfulclient | 0.14.6 |
| lazr.uri | 1.0.6 | レイジーローダー | 0.4 | libclang | 15.0.6.1 |
| librosa | 0.11.0 | LightGBM | 4.6.0 | linkify-it-py | 2.0.0 |
| llvmlite | 0.44.0 | lz4 | 4.3.2 | Mako | 1.3.10 |
| marisa-trie | 1.2.0 | Markdown | 3.8 | markdown-it-py | 2.2.0 |
| MarkupSafe | 3.0.2 | マシュマロ | 3.26.1 | matplotlib | 3.10.0 |
| matplotlib-インライン | 0.1.7 | マッケイブ | 0.7.0 | mdit-py-plugins | 0.3.0 |
| mdurl | 0.1.0 | メムレイ | 1.19.1 | minify_html | 0.18.1 |
| mistune | 3.1.2 | ml_dtypes | 0.5.3 | mlflow-skinny | 3.5.1 |
| mmh3 | 5.2.0 | more-iterators | 10.3.0 | mosaicml-streaming | 0.13.0 |
| mpmath | 1.3.0 | msal | 1.34.0 | msal-extensions | 1.3.1 |
| msgpack (メッセージパック) | 1.1.2 | マルチディクト | 6.1.0 | マルチメソッド | 1.12 |
| マルチプロセス | 0.70.16 | マーマーハッシュ (murmurhash) | 1.0.14 | mypy-extensions (マイパイ拡張機能) | 1.0.0 |
| namex | 0.1.0 | nbclient（エヌビー・クライアント） | 0.10.2 | NBコンバート | 7.16.6 |
| nbフォーマット | 5.10.4 | nest-asyncio（ネスト・アサインキオ） | 1.6.0 | networkx | 3.4.2 |
| 忍者 | 1.13.0 | nltk | 3.9.1 | nodeenv | 1.9.1 |
| ノートブック | 7.3.2 | notebook_shim | 0.2.4 | numba | 0.61.0 |
| NumPy (数値計算ライブラリ) | 2.1.3 | nvidia-nccl-cu12 | 2.28.7 | oauthlib | 3.2.0 |
| oci | 2.163.1 | オープンAI | 2.7.0 | opencensus | 0.11.4 |
| opencensus-context (オープンセンサス・コンテキスト) | 0.1.3 | opentelemetry-api | 1.38.0 | opentelemetry-proto | 1.38.0 |
| opentelemetry-sdk (OpenTelemetry ソフトウェア開発キット) | 1.38.0 | OpenTelemetryセマンティック規約 | 0.59b0 | opt_einsum | 3.4.0 |
| オプツリー | 0.17.0 | オプチュナ | 3.6.1 | optuna-integration | 3.6.0 |
| orjson | 3.11.4 | ormsgpack | 1.12.0 | によって がオーバーライドされます | 7.4.0 |
| 包装 | 24.2 | パンダ | 2.2.3 | パンドックフィルターズ | 1.5.0 |
| paramiko | 3.5.1 | パルソ | 0.8.4 | pathspec | 0.10.3 |
| パッツィ | 1.0.1 | ペキスペクト | 4.8.0 | フィック | 0.12.5 |
| pillow | 11.1.0 | pip | 25.0.1 | プラットフォームディレクトリ | 4.3.7 |
| plotly | 5.24.1 | pluggy | 1.5.0 | ワンちゃん | 1.8.2 |
| プレシェッド | 3.0.11 | prometheus_client | 0.21.1 | prompt-toolkit（プロンプトツールキット） | 3.0.43 |
| propcache | 0.3.1 | 預言者 | 1.2.1 | proto-plus | 1.26.1 |
| プロトバフ | 5.29.4 | psutil | 5.9.0 | psycopg2 | 2.9.11 |
| ptyprocess | 0.7.0 | pure-eval (ピュア・イヴァル) | 0.2.2 | puremagic | 1.30 |
| py-cpuinfo | 9.0.0 | py-spy | 0.4.1 | py4j | 0.10.9.9 |
| pyarrow (パイアロー) | 21.0.0 | pyasn1 | 0.4.8 | pyasn1-modules | 0.2.8 |
| ピッコロ | 0.0.71 | pycparser（パイシーパーサー） | 2.21 | Pythonのデータバリデーションライブラリ「pydantic」 | 2.10.6 |
| pydantic_core | 2.27.2 | パイフレークス | 3.2.0 | パイグメンツ | 2.19.1 |
| PyGObject | 3.48.2 | pyiceberg | 0.10.0 | PyJWT | 2.10.1 |
| PyNaCl | 1.5.0 | pyodbc | 5.2.0 | pyOpenSSL（PythonのSSL/TLSライブラリ） | 25.0.0 |
| パイパーシング (Pyparsing) | 3.2.0 | pyright | 1.1.394 | パイロアリング | 1.0.3 |
| pytesseract | 0.3.10 | pytest | 8.3.5 | python-dateutil (Python用の日付処理ライブラリ) | 2.9.0.post0 |
| python-dotenv | 1.2.1 | パイソンエディター | 1.0.4 | python-json-logger | 3.2.1 |
| python-lsp-jsonrpc | 1.1.2 | Python LSP サーバー | 1.12.2 | python-snappy | 0.7.3 |
| Pytoolconfig | 1.2.6 | pytz | 2024.1 | PyWavelets | 1.8.0 |
| PyYAML | 6.0.2 | pyzmq | 26.2.0 | ray | 2.37.0 |
| 参照 | 0.30.2 | RegEx | 2024.11.6 | リクエスト | 2.32.3 |
| requests-toolbelt | 1.0.0 | rfc3339-validator | 0.1.4 | RFC3986-バリデーター | 0.1.1 |
| リッチ | 13.9.4 | ロープ | 1.13.0 | rpds-py | 0.22.3 |
| RSA（アールエスエー） | 4.9.1 | s3transfer | 0.14.0 | safetensors | 0.6.2 |
| scikit-image | 0.25.0 | scikit-learn（サイキット・ラーン） | 1.6.1 | scipy | 1.15.3 |
| seaborn（シーボーン） | 0.13.2 | Send2Trash(センド2トラッシュ) | 1.8.2 | sentence-transformers | 5.1.2 |
| sentencepiece | 0.2.1 | setuptools（セットアップツール） | 78.1.1 | シャープ | 0.49.1 |
| シェリンガム | 1.5.4 | 6 | 1.17.0 | sklearn-compat | 0.1.3 |
| スライサー | 0.0.8 | スマートオープン | 7.5.0 | smmap | 5.0.0 |
| スニフィオ | 1.3.0 | sortedcontainers | 2.4.0 | サウンドファイル | 0.13.1 |
| soupsieve | 2.5 | soxr | 1.0.0 | spacy | 3.7.5 |
| spacy-legacy | 3.0.12 | スペーシー・ロガーズ | 1.0.5 | SQLAlchemy | 2.0.39 |
| sqlparse | 0.5.3 | srsly | 2.5.1 | ssh-import-id | 5.11 |
| スタックデータ | 0.6.3 | スタニオ | 0.5.1 | スターレット | 0.49.3 |
| statsmodels（スタッツモデルズ） | 0.14.4 | strictyaml | 1.7.3 | sympy (ライブラリ) | 1.13.3 |
| 粘り強さ | 9.0.0 | TensorBoard | 2.20.0 | テンソルボード・データサーバー | 0.7.2 |
| tensorboardX | 2.6.4 | tensorflow | 2.20.0 | termcolor | 3.2.0 |
| 終了しました | 0.17.1 | textual | 4.0.0 | tf_keras | 2.20.1 |
| thinc | 8.2.4 | Threadpoolctl | 3.5.0 | tifffile (ティフファイル) | 2025年2月18日 |
| tiktoken | 0.9.0 | tinycss2 | 1.4.0 | tokenize-rt | 6.1.0 |
| トークナイザー | 0.22.1 | tomli | 2.0.1 | 電灯 | 2.9.0 以降の cpu |
| torcheval | 0.0.7 | torchvision 라이브러리 | 0.24.0+cpu | 竜巻 | 6.5.1 |
| tqdm | 4.67.1 | traitlets（トレイトレット） | 5.14.3 | トランスフォーマー | 4.57.1 |
| typeguard | 4.4.2 | typer | 0.20.0 | typer-slim | 0.20.0 |
| types-python-dateutil | 2.9.0.20251108 | タイピング検査 | 0.9.0 | タイピングエクステンションズ (typing_extensions) | 4.12.2 |
| tzdata | 2024.1 | uc-micro-py | 1.0.1 | ujson | 5.10.0 |
| unattended-upgrades | 0.1 | uri-template | 1.3.0 | urllib3 | 2.3.0 |
| uvicorn | 0.38.0 | virtualenv | 20.29.3 | ビジョン | 0.8.1 |
| wadllib | 1.3.6 | わさび | 1.1.3 | wcwidth（文字の幅を測定するプログラム関数） | 0.2.5 |
| weasel | 0.4.3 | webcolors | 25.10.0 | ウェブエンコーディングス | 0.5.1 |
| websocket-client (ウェブソケット・クライアント) | 1.8.0 | Werkzeug | 3.1.3 | whatthepatch（ホワットザパッチ） | 1.0.2 |
| ホイール | 0.45.1 | いつでも | 0.7.3 | ウィジェットNBエクステンション | 3.6.6 |
| ワードクラウド | 1.9.4 | wrapt | 1.17.0 | xgboost | 3.1.1 |
| xgboost-ray | 0.1.19 | xxhash | 3.5.0 | yapf (ヤップフ) | 0.40.2 |
| yarl | 1.18.0 | ydata-profiling | 4.17.0 | ジップ | 3.21.0 |
| zstandard | 0.23.0 | zstd | 1.5.5.1 |
GPU クラスター上の Python ライブラリ
注
PyTorch は、CUDA PyPI 依存関係を使用して、Databricks Runtime 18.0 ML に組み込まれている CUDA ライブラリ バージョンの代わりに CUDA のサポートを提供します。
| 図書館 | バージョン | 図書館 | バージョン | 図書館 | バージョン |
|---|---|---|---|---|---|
| absl-py | 2.3.1 | 早める | 1.11.0 | aiohappyeyeballs | 2.4.4 |
| aiohttp | 3.11.10 | aiohttp-cors | 0.8.1 | アイオシグナル | 1.2.0 |
| 注釈付き文書 | 0.0.4 | 注釈付き型 | 0.7.0 | anyio | 4.7.0 |
| argon2-cffi | 21.3.0 | argon2-cffi-bindings | 21.2.0 | arro3-core | 0.6.5 |
| 矢印 | 1.3.0 | アストトークン | 3.0.0 | astunparse | 1.6.3 |
| async-lru | 2.0.4 | 属性 | 24.3.0 | audioread | 3.1.0 |
| 自動コマンド | 2.2.2 | azure-common | 1.1.28 | azure-core (アジュール コア) | 1.36.0 |
| azure-cosmos | 4.3.1 | azure-identity (アズール・アイデンティティ) | 1.20.0 | azure-mgmt-core | 1.6.0 |
| azure-mgmt-web | 8.0.0 | アジュール・ストレージ・ブロブ | 12.27.1 | azure-storage-file-datalake（アジュールストレージファイルデータレイク） | 12.22.0 |
| バベル | 2.16.0 | backports.tarfile | 1.2.0 | bcrypt | 4.3.0 |
| beautifulsoup4 | 4.12.3 | 黒い | 24.10.0 | 漂白剤 | 6.2.0 |
| ウインカー | 1.7.0 | ブリス | 0.7.11 | boto3 | 1.40.45 |
| botocore | 1.40.45 | brotli | 1.2.0 | キャッシュツールズ (cachetools) | 5.5.1 |
| カタログ | 2.0.10 | サーティフィ | 2025.4.26 | cffi | 1.17.1 |
| チャーデット | 4.0.0 | charset-normalizer (文字コード正規化ツール) | 3.3.2 | circuitbreaker | 2.1.3 |
| click | 8.1.8 | cloudpathlib | 0.23.0 | クラウドピックル | 3.0.0 |
| cmdstanpy | 1.3.0 | カラフル | 0.5.8 | colorlog | 6.10.1 |
| comm | 0.2.1 | お菓子 | 0.1.5 | コンツアーピー | 1.3.1 |
| cramjam | 2.11.0 | 暗号 | 44.0.1 | サイクリスト | 0.11.0 |
| サイメム | 2.0.12 | Cython | 3.1.5 | ダサイト | 1.9.2 |
| Databricksエージェント | 1.4.0 | databricks-connect (データブリックス・コネクト) | 17.3.1 | データブリックスフィーチャーエンジニアリング | 0.13.0.1 |
| databricks-sdk（データブリックスSDK） | 0.67.0 | dataclasses-json | 0.6.7 | データセット | 4.3.0 |
| dbl-tempo | 0.1.26 | dbus-python | 1.3.2 | debugpy | 1.8.11 |
| デコレータ | 5.1.1 | ディープスピード | 0.18.1 | デフューズドXML (defusedxml) | 0.7.1 |
| deltalake | 1.1.4 | Deprecated | 1.2.18 | ディル | 0.3.8 |
| distlib | 0.3.9 | dmツリー | 0.1.9 | ドックストリングをMarkdownに変換 | 0.11 |
| einops | 0.8.1 | 評価する | 0.4.6 | 実行中 | 1.2.0 |
| facets-overview | 1.1.1 | Farama-Notifications | 0.0.4 | fastapi | 0.121.2 |
| fastjsonschema | 2.21.1 | ファイルロック | 3.17.0 | filetype | 1.2.0 |
| flash_attn | 2.8.3 | Flask | 2.2.5 | フラットバッファーズ | 25.9.23 |
| fonttools（フォントツールズ） | 4.55.3 | FQDN | 1.5.1 | フローズンリスト | 1.5.0 |
| fsspec | 2023.5.0 | ガスト | 0.6.0 | ギットディービー | 4.0.11 |
| GitPython | 3.1.43 | google-api-core | 2.28.1 | google-auth（Google認証） | 2.43.0 |
| グーグルクラウドコア | 2.5.0 | Googleクラウドストレージ | 3.2.0 | google-crc32c（GoogleのCRC32Cライブラリ） | 1.7.1 |
| グーグルパスタ | 0.2.0 | google-resumable-media（Googleの継続可能なメディアライブラリ） | 2.7.2 | Google API 共通プロトコル (googleapis-common-protos) | 1.65.0 |
| graphql-core | 3.2.4 | グリーンレット | 3.1.1 | grpcio | 1.67.0 |
| grpcio-status | 1.67.0 | 体育館 | 0.28.1 | h11 | 0.16.0 |
| h5py | 3.12.1 | hf-xet | 1.2.0 | hjson | 3.1.0 |
| holidays | 0.54 | httpcore | 1.0.9 | httplib2 | 0.20.4 |
| httpx | 0.28.1 | huggingface-hub（ハギングフェイスのハブ） | 0.36.0 | idna | 3.7 |
| イメージハッシュ (ImageHash) | 4.3.1 | imageio | 2.37.0 | imbalanced-learn（不均衡データに対応するための機械学習ライブラリ） | 0.13.0 |
| importlib-metadata | 6.6.0 | importlib_resources（インポートライブラリリソース) | 6.5.2 | inflect | 7.3.1 |
| iniconfig | 1.1.1 | ipyflow-core | 0.0.209 | ipykernel | 6.29.5 |
| ipython | 8.30.0 | ipython-genutils (IPython用のユーティリティ) | 0.2.0 | ipywidgets | 7.8.1 |
| アイソデート | 0.7.2 | イソデュレーション | 20.11.0 | itsdangerous（イッツデンジャラス） | 2.2.0 |
| jaraco.collections | 5.1.0 | jaraco.context | 5.3.0 | jaraco.functools | 4.0.1 |
| jaraco.text | 3.12.1 | jax-jumpy | 1.0.0 | ジェダイ | 0.19.2 |
| ジンジャ2 | 3.1.6 | jiter | 0.12.0 | jmespath | 1.0.1 |
| 「joblib」 | 1.4.2 | ジョブリブスパーク | 0.6.0 | json5 | 0.9.25 |
| jsonpatch | 1.33 | jsonpointer | 3.0.0 | JSONスキーマ | 4.23.0 |
| jsonschema-specifications (JSONスキーマ仕様) | 2023年7月1日 | jupyter | 1.1.1 | jupyter-console | 6.6.3 |
| Jupyterイベント | 0.12.0 | jupyter-lsp | 2.2.5 | jupyter_client | 8.6.3 |
| jupyter_core（ジュピター・コア） | 5.7.2 | ジュピターサーバー | 2.15.0 | jupyter_server_terminals (ジュピター サーバー ターミナルズ) | 0.5.3 |
| jupyterlab | 4.3.4 | jupyterlab_pygments | 0.3.0 | ジュピターラボサーバー | 2.27.3 |
| jupyterlab_widgets | 1.1.11 | keras | 3.12.0 | キウィソルバー | 1.4.8 |
| langchain | 1.0.3 | langchain-core | 1.0.4 | langchain-openai | 1.0.2 |
| 言語コード | 3.5.0 | langgraph | 1.0.3 | langgraph-checkpoint | 3.0.1 |
| langgraph-prebuilt | 1.0.4 | langgraph-sdk | 0.2.9 | langsmith | 0.4.41 |
| 言語データ | 1.3.0 | launchpadlib | 1.11.0 | lazr.restfulclient | 0.14.6 |
| lazr.uri | 1.0.6 | レイジーローダー | 0.4 | libclang | 15.0.6.1 |
| librosa | 0.11.0 | LightGBM | 4.6.0 | linkify-it-py | 2.0.0 |
| llvmlite | 0.44.0 | lz4 | 4.3.2 | Mako | 1.3.10 |
| marisa-trie | 1.2.0 | Markdown | 3.8 | markdown-it-py | 2.2.0 |
| MarkupSafe | 3.0.2 | マシュマロ | 3.26.1 | matplotlib | 3.10.0 |
| matplotlib-インライン | 0.1.7 | マッケイブ | 0.7.0 | mdit-py-plugins | 0.3.0 |
| mdurl | 0.1.0 | メムレイ | 1.19.1 | HTMLを縮小する (minify_html) | 0.18.1 |
| mistune | 3.1.2 | ml_dtypes | 0.5.3 | mlflow-skinny | 3.5.1 |
| mmh3 | 5.2.0 | より多くのイテレータ | 10.3.0 | mosaicml-streaming | 0.13.0 |
| mpmath | 1.3.0 | msal | 1.34.0 | msal-extensions | 1.3.1 |
| msgpack (メッセージパック) | 1.1.2 | マルチディクト | 6.1.0 | マルチメソッド | 1.12 |
| マルチプロセス | 0.70.16 | マーマーハッシュ (murmurhash) | 1.0.14 | mypy-extensions (マイパイ拡張機能) | 1.0.0 |
| namex | 0.1.0 | nbclient（エヌビー・クライアント） | 0.10.2 | NBコンバート | 7.16.6 |
| nbフォーマット | 5.10.4 | nest-asyncio（ネスト・アサインキオ） | 1.6.0 | networkx | 3.4.2 |
| 忍者 | 1.13.0 | nltk | 3.9.1 | nodeenv | 1.9.1 |
| ノートブック | 7.3.2 | notebook_shim | 0.2.4 | numba | 0.61.0 |
| NumPy (数値計算ライブラリ) | 2.1.3 | nvidia-cublas-cu12 | 12.9.1.4 | nvidia-cuda-cupti-cu12 | 12.9.79 |
| nvidia-cuda-nvrtc-cu12 | 12.9.86 | nvidia-cuda-runtime-cu12 | 12.9.79 | nvidia-cudnn-cu12 | 9.10.2.21 |
| nvidia-cufft-cu12 | 11.4.1.4 | nvidia-cufile-cu12 | 1.14.1.1 | nvidia-curand-cu12 | 10.3.10.19 |
| nvidia-cusolver-cu12 | 11.7.5.82 | nvidia-cusparse-cu12 | 12.5.10.65 | nvidia-cusparselt-cu12 | 0.7.1 |
| nvidia-ml-py | 13.580.82 | nvidia-nccl-cu12 | 2.27.5 | nvidia-nvjitlink-cu12 | 12.9.86 |
| nvidia-nvshmem-cu12 | 3.3.20 | nvidia-nvtx-cu12 | 12.9.79 | oauthlib | 3.2.0 |
| oci | 2.163.1 | オープンAI | 2.7.0 | opencensus | 0.11.4 |
| opencensus-context (オープンセンサス・コンテキスト) | 0.1.3 | opentelemetry-api | 1.38.0 | opentelemetry-proto | 1.38.0 |
| opentelemetry-sdk (OpenTelemetry ソフトウェア開発キット) | 1.38.0 | OpenTelemetryセマンティック規約 | 0.59b0 | opt_einsum | 3.4.0 |
| オプツリー | 0.17.0 | オプチュナ | 3.6.1 | optuna-integration | 3.6.0 |
| orjson | 3.11.4 | ormsgpack | 1.12.0 | によって がオーバーライドされます | 7.4.0 |
| 包装 | 24.2 | パンダ | 2.2.3 | パンドックフィルターズ | 1.5.0 |
| paramiko | 3.5.1 | パルソ | 0.8.4 | pathspec | 0.10.3 |
| パッツィ | 1.0.1 | ペキスペクト | 4.8.0 | フィック | 0.12.5 |
| pillow | 11.1.0 | pip | 25.0.1 | プラットフォームディレクトリ | 4.3.7 |
| plotly | 5.24.1 | pluggy | 1.5.0 | ワンちゃん | 1.8.2 |
| プレシェッド | 3.0.11 | prometheus_client | 0.21.1 | prompt-toolkit（プロンプトツールキット） | 3.0.43 |
| propcache | 0.3.1 | 預言者 | 1.2.1 | proto-plus | 1.26.1 |
| プロトバフ | 5.29.4 | psutil | 5.9.0 | psycopg2 | 2.9.11 |
| ptyprocess | 0.7.0 | pure-eval (ピュア・イヴァル) | 0.2.2 | puremagic | 1.30 |
| py-cpuinfo | 9.0.0 | py-spy | 0.4.1 | py4j | 0.10.9.9 |
| pyarrow (パイアロー) | 21.0.0 | pyasn1 | 0.4.8 | pyasn1-modules | 0.2.8 |
| ピッコロ | 0.0.71 | pycparser（パイシーパーサー） | 2.21 | Pythonのデータバリデーションライブラリ「pydantic」 | 2.10.6 |
| pydantic_core | 2.27.2 | パイフレークス | 3.2.0 | パイグメンツ | 2.19.1 |
| PyGObject | 3.48.2 | pyiceberg | 0.10.0 | PyJWT | 2.10.1 |
| PyNaCl | 1.5.0 | pyodbc | 5.2.0 | pyOpenSSL（PythonのSSL/TLSライブラリ） | 25.0.0 |
| パイパーシング (Pyparsing) | 3.2.0 | pyright | 1.1.394 | パイロリング | 1.0.3 |
| pytesseract | 0.3.10 | pytest | 8.3.5 | python-dateutil (Python用の日付処理ライブラリ) | 2.9.0.post0 |
| python-dotenv | 1.2.1 | パイソンエディター | 1.0.4 | python-json-logger | 3.2.1 |
| python-lsp-jsonrpc | 1.1.2 | Python LSP サーバー | 1.12.2 | python-snappy | 0.7.3 |
| Pytoolconfig | 1.2.6 | pytz | 2024.1 | PyWavelets | 1.8.0 |
| PyYAML | 6.0.2 | pyzmq | 26.2.0 | ray | 2.37.0 |
| 参照 | 0.30.2 | RegEx | 2024.11.6 | リクエスト | 2.32.3 |
| requests-toolbelt | 1.0.0 | rfc3339-validator | 0.1.4 | RFC3986-バリデーター | 0.1.1 |
| リッチ | 13.9.4 | ロープ | 1.13.0 | rpds-py | 0.22.3 |
| RSA（アールエスエー） | 4.9.1 | s3transfer | 0.14.0 | safetensors | 0.6.2 |
| scikit-image | 0.25.0 | scikit-learn（サイキット・ラーン） | 1.6.1 | scipy | 1.15.3 |
| seaborn（シーボーン） | 0.13.2 | Send2Trash(センド2トラッシュ) | 1.8.2 | sentence-transformers | 5.1.2 |
| sentencepiece | 0.2.1 | setuptools（セットアップツール） | 78.1.1 | シャープ | 0.49.1 |
| シェリンガム | 1.5.4 | 6 | 1.17.0 | sklearn-compat | 0.1.3 |
| スライサー | 0.0.8 | スマートオープン | 7.5.0 | smmap | 5.0.0 |
| スニフィオ | 1.3.0 | sortedcontainers | 2.4.0 | サウンドファイル | 0.13.1 |
| soupsieve | 2.5 | soxr | 1.0.0 | spacy | 3.7.5 |
| spacy-legacy | 3.0.12 | スペーシー・ロガーズ | 1.0.5 | SQLAlchemy | 2.0.39 |
| sqlparse | 0.5.3 | srsly | 2.5.1 | ssh-import-id | 5.11 |
| スタックデータ | 0.6.3 | スタニオ | 0.5.1 | スターレット | 0.49.3 |
| statsmodels（スタッツモデルズ） | 0.14.4 | strictyaml | 1.7.3 | sympy (ライブラリ) | 1.13.3 |
| 粘り強さ | 9.0.0 | TensorBoard | 2.20.0 | テンソルボード・データサーバー | 0.7.2 |
| tensorboardX | 2.6.4 | tensorflow | 2.20.0 | termcolor | 3.2.0 |
| 終了しました | 0.17.1 | textual | 4.0.0 | tf_keras | 2.20.1 |
| thinc | 8.2.4 | Threadpoolctl | 3.5.0 | tifffile (ティフファイル) | 2025年2月18日 |
| tiktoken | 0.9.0 | tinycss2 | 1.4.0 | tokenize-rt | 6.1.0 |
| トークナイザー | 0.22.1 | tomli | 2.0.1 | 電灯 | 2.9.0+cu129 |
| torcheval | 0.0.7 | torchvision 라이브러리 | 0.24.0+cu129 | 竜巻 | 6.5.1 |
| tqdm | 4.67.1 | traitlets（トレイトレット） | 5.14.3 | トランスフォーマー | 4.57.1 |
| トライトン | 3.5.0 | typeguard | 4.4.2 | typer | 0.20.0 |
| typer-slim | 0.20.0 | types-python-dateutil | 2.9.0.20251108 | タイピング検査 | 0.9.0 |
| タイピングエクステンションズ (typing_extensions) | 4.12.2 | tzdata | 2024.1 | uc-micro-py | 1.0.1 |
| ujson | 5.10.0 | unattended-upgrades | 0.1 | uri-template | 1.3.0 |
| urllib3 | 2.3.0 | uvicorn | 0.38.0 | virtualenv | 20.29.3 |
| ビジョン | 0.8.1 | wadllib | 1.3.6 | わさび | 1.1.3 |
| wcwidth（文字の幅を測定するプログラム関数） | 0.2.5 | weasel | 0.4.3 | webcolors | 25.10.0 |
| ウェブエンコーディングス | 0.5.1 | websocket-client (ウェブソケット・クライアント) | 1.8.0 | Werkzeug | 3.1.3 |
| whatthepatch（ホワットザパッチ） | 1.0.2 | ホイール | 0.45.1 | いつでも | 0.7.3 |
| ウィジェットNBエクステンション | 3.6.6 | ワードクラウド | 1.9.4 | wrapt | 1.17.0 |
| xgboost | 3.1.1 | xgboost-ray | 0.1.19 | xxhash | 3.5.0 |
| yapf (ヤップフ) | 0.40.2 | yarl | 1.18.0 | ydata-profiling | 4.17.0 |
| ジップ | 3.21.0 | zstandard | 0.23.0 | zstd | 1.5.5.1 |
R ライブラリ
R ライブラリは、Databricks Runtime 18.0 の R ライブラリ と同じです。
Java および Scala ライブラリ (Scala 2.13 クラスター)
Databricks Runtime 18.0 の Java および Scala ライブラリに加えて、Databricks Runtime 18.0 ML には次の JAR が含まれています。
CPU クラスター
| グループ識別子 | アーティファクト ID | バージョン |
|---|---|---|
| ml.dmlc | xgboost4j-spark_2.13 | 2.1.3 |
| ml.dmlc | xgboost4j_2.13 | 2.1.3 |
| org.graphframes | graphframes_2.13 | 0.8.4-db1-spark3.5 |
| org.mlflow | mlflow-client | 2.15.1 |
| org.scala-lang.modules | scala-collection-compat_2.13 | 2.12.0 |
| org.tensorflow | spark-tensorflow-connector_2.13 | 1.15.0 |
GPU クラスター
| グループ識別子 | アーティファクト ID | バージョン |
|---|---|---|
| ml.dmlc | xgboost4j-spark_2.13 | 2.1.3 |
| ml.dmlc | xgboost4j_2.13 | 2.1.3 |
| org.graphframes | graphframes_2.13 | 0.8.4-db1-spark3.5 |
| org.mlflow | mlflow-client | 2.15.1 |
| org.scala-lang.modules | scala-collection-compat_2.13 | 2.12.0 |
| org.tensorflow | spark-tensorflow-connector_2.13 | 1.15.0 |
サポートされていないリリース
ヒント
サポート終了 (EoS) を迎えた Databricks Runtime のバージョンのリリース ノートについては、「サポート終了 Databricks Runtime のリリース ノート」を参照してください。 EoS Databricks Runtime のバージョンは廃止されており、更新されない可能性があります。