Databricks Runtime 18.0 for Machine Learning (Beta) 提供基於 Databricks Runtime 18.0 (Beta) 的機器學習與資料科學即用環境。 Databricks Runtime ML 含有許多熱門的機器學習程式庫,包括 TensorFlow、PyTorch 以及 XGBoost。 Databricks Runtime ML 也支援使用 TorchDistributor、DeepSpeed 和 Ray 的分散式深度學習訓練。
這很重要
Databricks Runtime 18.0 用於機器學習目前仍處於 測試階段。 支援環境的內容可能會在 Beta 期間變更。 變更可以包括套件清單或已安裝套件的版本。
新功能和改善
Databricks Runtime 18.0 ML 是建立在 Databricks Runtime 18.0 之上。 關於 Databricks Runtime 18.0 的新內容,包括 Apache Spark MLlib 和 SparkR,請參閱 Databricks Runtime 18.0(測試版) 發布說明。
部分圖書館更新包括:
- CUDA 更新至 12.9
- flash_attn 2.8.3
- Keras 3.12.0
- langchain 1.0.3
- mlflow-skinny 3.5.1
- OpenAI 2.7.0
- 火炬 2.9.0+Cu129
- torchvision 0.24.0+cu129
- transformers 4.57.1
- 崔頓 3.5.0
- XGBOOST 3.1.1
其他變更
以下新增變更自 Databricks Runtime 18.0 ML 起陸續進行:
- AutoML 已被移除。
- TensorFlow 已不再是頂級支援。
系統環境
Databricks Runtime 18.0 ML 的系統環境與 Databricks Runtime 18.0 有以下不同。
- 針對 GPU 叢集,Databricks Runtime ML 包括下列 NVIDIA GPU 程式庫:
- CUDA 12.9
- Cublas 12.9.1.4-1
- cusolver 11.7.5.82
- cupti 12.9.79
- cusparse 12.5.10.65
- cuDNN 9.15.1.9-1
- NCCL 2.27.5
圖書館
以下章節將列出 Databricks Runtime 18.0 ML 中與 Databricks Runtime 18.0 不同的函式庫。
頂級圖書館
Databricks Runtime 18.0 ML 包含以下頂尖 函式庫:
Python 程式庫
Databricks Runtime 18.0 ML 用於 virtualenv Python 套件管理,並包含許多熱門的機器學習套件。
若要在本地 Python 虛擬環境中重現 Databricks Runtime ML Python 環境,請下載 CPU 叢集的 requirements-cpu-18.0.txt 或 GPU 叢集的 requirements-gpu-18.0.txt 。 接著,執行 pip install -r requirements-<cpu|gpu>-18.0.txt。 此指令安裝 Databricks Runtime ML 所使用的所有開源函式庫,但不安裝 Databricks 開發的函式庫。
CPU 叢集上的 Python 函式庫
| 圖書館 | 版本 | 圖書館 | 版本 | 圖書館 | 版本 |
|---|---|---|---|---|---|
| absl-py | 2.3.1 | 加速 | 1.11.0 | aiohappyeyeballs | 2.4.4 |
| aiohttp | 3.11.10 | aiohttp-cors | 0.8.1 | aiosignal | 1.2.0 |
| alembic | 1.17.1 | 註解文檔 | 0.0.4 | 標註類型 | 0.7.0 |
| anyio | 4.7.0 | argon2-cffi | 21.3.0 | argon2-cffi-bindings | 21.2.0 |
| arro3-core | 0.6.5 | 箭頭 | 1.3.0 | asttokens(Python 資源分析與處理庫) | 3.0.0 |
| astunparse | 1.6.3 | async-lru | 2.0.4 | 屬性 (attrs) | 24.3.0 |
| 音訊閱讀 (audioread) | 3.1.0 | 自動指令 | 2.2.2 | azure-common | 1.1.28 |
| Azure 核心功能 (azure-core) | 1.36.0 | azure-cosmos | 4.3.1 | azure-identity(Azure 身份驗證服務) | 1.20.0 |
| azure-mgmt-core | 1.6.0 | azure-mgmt-web (Azure 管理網站) | 8.0.0 | azure-storage-blob (Azure 儲存服務 Blob) | 12.27.1 |
| 微軟 Azure 儲存檔案資料湖 (Azure Storage File Data Lake) | 12.22.0 | 巴別塔 | 2.16.0 | backports.tarfile | 1.2.0 |
| bcrypt(密碼加密算法) | 4.3.0 | beautifulsoup4 | 4.12.3 | 黑色 | 24.10.0 |
| 漂白劑 | 6.2.0 | 閃爍器 | 1.7.0 | 極樂 | 0.7.11 |
| boto3 | 1.40.45 | botocore(AWS的Python程式庫) | 1.40.45 | brotli | 1.2.0 |
| cachetools(緩存工具) | 5.5.1 | 目錄 | 2.0.10 | certifi | 2025.4.26 |
| cffi | 1.17.1 | chardet | 4.0.0 | charset-normalizer(字符集正規化器) | 3.3.2 |
| 斷路器 | 2.1.3 | 點選 | 8.1.8 | cloudpathlib | 0.23.0 |
| cloudpickle(Python 程式庫) | 3.0.0 | cmdstanpy | 1.3.0 | 色彩繽紛 | 0.5.8 |
| colorlog | 6.10.1 | 通訊 | 0.2.1 | 糖果 | 0.1.5 |
| 「contourpy」 | 1.3.1 | cramjam | 2.11.0 | 加密 | 44.0.1 |
| 騎車者 | 0.11.0 | cymem | 2.0.12 | Cython | 3.1.5 |
| 粗面岩 | 1.9.2 | Databricks-代理程式 | 1.4.0 | databricks-connect | 17.3.1 |
| databricks-特徵工程 | 0.13.0.1 | Databricks 開發人員工具集 (SDK) | 0.67.0 | dataclasses-json | 0.6.7 |
| 數據集 | 4.3.0 | dbl-tempo | 0.1.26 | dbus-python | 1.3.2 |
| debugpy | 1.8.11 | 裝飾項目 | 5.1.1 | deepspeed | 0.18.1 |
| defusedxml(安全解析XML的Python函式庫) | 0.7.1 | Delta Lake | 1.1.4 | Deprecated | 1.2.18 |
| 蒔蘿 | 0.3.8 | distlib | 0.3.9 | dm-tree | 0.1.9 |
| 將Docstring轉換為Markdown | 0.11 | einops | 0.8.1 | 評估 | 0.4.6 |
| 執行中 | 1.2.0 | facets概覽 | 1.1.1 | Farama-通知 | 0.0.4 |
| fastapi | 0.121.2 | fastjsonschema | 2.21.1 | 文件鎖 | 3.17.0 |
| 檔案類型 | 1.2.0 | Flask | 2.2.5 | FlatBuffers | 25.9.23 |
| fonttools (字體工具庫) | 4.55.3 | fqdn | 1.5.1 | 凍結清單 | 1.5.0 |
| fsspec | 2023.5.0 | gast | 0.6.0 | gitdb (Git分散式版本控制資料庫) | 4.0.11 |
| GitPython | 3.1.43 | google-api-core (Google API 核心庫) | 2.28.1 | google-auth(谷歌身份驗證) | 2.43.0 |
| google-cloud-core | 2.5.0 | Google雲端儲存(Google Cloud Storage) | 3.2.0 | google-crc32c | 1.7.1 |
| google-pasta | 0.2.0 | Google可續媒體 | 2.7.2 | googleapis-common-protos | 1.65.0 |
| graphql-core | 3.2.4 | greenlet (綠線程) | 3.1.1 | grpcio | 1.67.0 |
| grpcio-status | 1.67.0 | 體育館 | 0.28.1 | h11 | 0.16.0 |
| h5py | 3.12.1 | HF-XET | 1.2.0 | hjson | 3.1.0 |
| 假期 | 0.54 | httpcore | 1.0.9 | httplib2 | 0.20.4 |
| httpx | 0.28.1 | HuggingFace-Hub 平台 | 0.36.0 | IDNA | 3.7 |
| 圖像哈希 (ImageHash) | 4.3.1 | imageio | 2.37.0 | 不平衡學習(imbalanced-learn) | 0.13.0 |
| importlib-metadata (匯入庫-元資料) | 6.6.0 | importlib_resources(Python 資源庫) | 6.5.2 | 變調 | 7.3.1 |
| iniconfig | 1.1.1 | ipyflow核心组件 | 0.0.209 | ipykernel | 6.29.5 |
| ipython | 8.30.0 | ipython-genutils(IPython 工具程式庫) | 0.2.0 | ipywidgets | 7.8.1 |
| isodate | 0.7.2 | isoduration | 20.11.0 | 這很危險 | 2.2.0 |
| jaraco.collections | 5.1.0 | jaraco.context | 5.3.0 | jaraco.functools | 4.0.1 |
| jaraco.text(文字處理工具) | 3.12.1 | jax-jumpy | 1.0.0 | jedi | 0.19.2 |
| Jinja2 | 3.1.6 | 抖動 | 0.12.0 | jmespath | 1.0.1 |
| joblib | 1.4.2 | joblibspark | 0.6.0 | json5 | 0.9.25 |
| jsonpatch | 1.33 | jsonpointer | 3.0.0 | jsonschema | 4.23.0 |
| JSON Schema 規範 | 2023年7月1日 | 朱比特 | 1.1.1 | Jupyter-控制台 | 6.6.3 |
| Jupyter 事件 | 0.12.0 | jupyter-lsp | 2.2.5 | jupyter 客戶端 | 8.6.3 |
| Jupyter核心 | 5.7.2 | jupyter伺服器 | 2.15.0 | Jupyter服務器終端 | 0.5.3 |
| jupyterlab | 4.3.4 | jupyterlab_pygments | 0.3.0 | jupyterlab伺服器 | 2.27.3 |
| jupyterlab_widgets | 1.1.11 | keras(深度學習框架) | 3.12.0 | kiwisolver(開源程式庫) | 1.4.8 |
| langchain | 1.0.3 | langchain-core | 1.0.4 | 朗鏈-OpenAI | 1.0.2 |
| 語言代碼 | 3.5.0 | langgraph | 1.0.3 | langgraph-checkpoint | 3.0.1 |
| Langgraph 預先建構 | 1.0.4 | langgraph-sdk | 0.2.9 | langsmith | 0.4.41 |
| 語言數據 | 1.3.0 | launchpadlib | 1.11.0 | lazr.restfulclient | 0.14.6 |
| lazr.uri | 1.0.6 | lazy_loader | 0.4 | libclang | 15.0.6.1 |
| librosa | 0.11.0 | lightgbm | 4.6.0 | linkify-it-py | 2.0.0 |
| llvmlite | 0.44.0 | lz4 | 4.3.2 | Mako | 1.3.10 |
| marisa-trie | 1.2.0 | Markdown | 3.8 | markdown-it-py | 2.2.0 |
| MarkupSafe | 3.0.2 | 棉花糖 | 3.26.1 | matplotlib | 3.10.0 |
| matplotlib-inline | 0.1.7 | 麥卡貝 | 0.7.0 | mdit-py-plugins | 0.3.0 |
| mdurl | 0.1.0 | memray | 1.19.1 | 精簡HTML | 0.18.1 |
| 米斯圖恩 | 3.1.2 | ml_dtypes | 0.5.3 | mlflow-skinny | 3.5.1 |
| mmh3 | 5.2.0 | 更多迭代器 | 10.3.0 | mosaicml串流 | 0.13.0 |
| mpmath(Python數學計算庫) | 1.3.0 | MSAL(Microsoft身份驗證庫) | 1.34.0 | msal-extensions | 1.3.1 |
| msgpack | 1.1.2 | multidict | 6.1.0 | 多元方法 | 1.12 |
| 多流程 | 0.70.16 | MurmurHash(穆默爾哈希) | 1.0.14 | mypy-extensions(MyPy 擴充套件) | 1.0.0 |
| namex | 0.1.0 | 「nbclient」 | 0.10.2 | nbconvert(文件轉換工具) | 7.16.6 |
| nbformat | 5.10.4 | nest-asyncio | 1.6.0 | networkx(網路結構處理工具庫) | 3.4.2 |
| 忍者 | 1.13.0 | 自然語言工具包 (NLTK) | 3.9.1 | nodeenv | 1.9.1 |
| 筆記本 | 7.3.2 | 筆記本支架 | 0.2.4 | Numba(Python效能提升函式庫) | 0.61.0 |
| numpy(數值計算套件) | 2.1.3 | nvidia-nccl-cu12 | 2.28.7 | oauthlib (OAuth程式庫) | 3.2.0 |
| oci | 2.163.1 | OpenAI公司 | 2.7.0 | opencensus | 0.11.4 |
| opencensus-context | 0.1.3 | opentelemetry-api | 1.38.0 | opentelemetry-proto | 1.38.0 |
| opentelemetry-sdk(OpenTelemetry 軟體開發工具包) | 1.38.0 | OpenTelemetry語意規範 | 0.59b0 | opt_einsum | 3.4.0 |
| optree | 0.17.0 | optuna | 3.6.1 | Optuna 整合工具 | 3.6.0 |
| orjson | 3.11.4 | ormsgpack | 1.12.0 | 覆蓋 | 7.4.0 |
| 包裝 | 24.2 | 熊貓 | 2.2.3 | pandocfilters (潘多克過濾器) | 1.5.0 |
| paramiko | 3.5.1 | 帕爾索 | 0.8.4 | 路徑規格 (pathspec) | 0.10.3 |
| 替罪羊 | 1.0.1 | pexpect (一個用於程序自動化和測試的軟體庫) | 4.8.0 | 菲克 | 0.12.5 |
| 枕頭 | 11.1.0 | pip(Python 軟體包管理工具) | 25.0.1 | platformdirs | 4.3.7 |
| plotly(數據可視化工具) | 5.24.1 | Pluggy(外掛管理工具) | 1.5.0 | 狗狗 | 1.8.2 |
| 預處理 | 3.0.11 | prometheus_client | 0.21.1 | prompt-toolkit(提示工具組) | 3.0.43 |
| propcache | 0.3.1 | 先知 | 1.2.1 | proto-plus | 1.26.1 |
| 協議緩衝區 (Protocol Buffers) | 5.29.4 | psutil | 5.9.0 | psycopg2 | 2.9.11 |
| ptyprocess | 0.7.0 | pure-eval | 0.2.2 | puremagic | 1.30 |
| py-cpuinfo | 9.0.0 | py-spy(Python 程式碼分析工具) | 0.4.1 | py4j | 0.10.9.9 |
| pyarrow | 21.0.0 | pyasn1 | 0.4.8 | pyasn1-modules | 0.2.8 |
| 派克羅 | 0.0.71 | pycparser(Python 的 C 語法分析器) | 2.21 | pydantic(Python 數據驗證工具) | 2.10.6 |
| pydantic_core | 2.27.2 | pyflakes (Python 代碼分析工具) | 3.2.0 | Pygments | 2.19.1 |
| PyGObject | 3.48.2 | pyiceberg | 0.10.0 | PyJWT | 2.10.1 |
| PyNaCl | 1.5.0 | pyodbc | 5.2.0 | pyOpenSSL | 25.0.0 |
| pyparsing(Python 字符串解析库) | 3.2.0 | pyright | 1.1.394 | 火燒 | 1.0.3 |
| pytesseract | 0.3.10 | pytest(Python程式語言的測試工具) | 8.3.5 | python-dateutil | 2.9.0.post0 |
| python-dotenv | 1.2.1 | Python 編輯器 (python-editor) | 1.0.4 | python-json-logger (Python JSON 日誌記錄器) | 3.2.1 |
| python-lsp-jsonrpc | 1.1.2 | python-lsp-server | 1.12.2 | python-snappy(Python 的 Snappy 算法壓縮庫) | 0.7.3 |
| pytoolconfig | 1.2.6 | pytz(Python 的時區計算函式庫) | 2024.1 | PyWavelets | 1.8.0 |
| PyYAML | 6.0.2 | pyzmq | 26.2.0 | 射線 | 2.37.0 |
| 參考 | 0.30.2 | Regex | 2024.11.6 | 要求 | 2.32.3 |
| requests-toolbelt | 1.0.0 | rfc3339-validator(RFC 3339 格式驗證器) | 0.1.4 | RFC 3986 驗證器 | 0.1.1 |
| 富有 | 13.9.4 | 繩子 | 1.13.0 | rpds-py | 0.22.3 |
| RSA加密算法 | 4.9.1 | s3transfer | 0.14.0 | safetensors | 0.6.2 |
| scikit-image(影像處理套件) | 0.25.0 | scikit-learn(機器學習套件) | 1.6.1 | scipy科學計算庫 | 1.15.3 |
| 海上出生 | 0.13.2 | Send2Trash | 1.8.2 | 句子轉換器 | 5.1.2 |
| 句子片段 | 0.2.1 | setuptools | 78.1.1 | 沙普 | 0.49.1 |
| 社靈漢 (Shellingham) | 1.5.4 | 六 | 1.17.0 | sklearn-compat | 0.1.3 |
| 交叉分析篩選器 | 0.0.8 | 智能開啟 | 7.5.0 | smmap | 5.0.0 |
| sniffio | 1.3.0 | sortedcontainers(排序容器) | 2.4.0 | 音效檔 | 0.13.1 |
| 湯篩 | 2.5 | soxr | 1.0.0 | 寬敞 | 3.7.5 |
| spacy-legacy | 3.0.12 | spacy-loggers | 1.0.5 | SQLAlchemy | 2.0.39 |
| sqlparse(資料庫語法解析器) | 0.5.3 | 認真? | 2.5.1 | ssh-import-id(匯入 SSH ID) | 5.11 |
| 堆疊數據 | 0.6.3 | 斯坦尼奧 | 0.5.1 | starlette | 0.49.3 |
| statsmodels (統計模型庫) | 0.14.4 | strictyaml | 1.7.3 | sympy | 1.13.3 |
| 堅韌性 | 9.0.0 | TensorBoard(張量計算板) | 2.20.0 | TensorBoard資料伺服器 | 0.7.2 |
| tensorboardX | 2.6.4 | TensorFlow | 2.20.0 | termcolor | 3.2.0 |
| 結束了 | 0.17.1 | 文字的 | 4.0.0 | tf_keras | 2.20.1 |
| 倪識 | 8.2.4 | threadpoolctl | 3.5.0 | tifffile | 2025年2月18日 |
| tiktoken | 0.9.0 | tinycss2 | 1.4.0 | tokenize_rt | 6.1.0 |
| 分詞器 (tokenizers) | 0.22.1 | tomli | 2.0.1 | 手電筒 | 2.9.0+CPU |
| torcheval | 0.0.7 | torchvision 視覺工具庫 | 0.24.0+cpu | 龍捲風 | 6.5.1 |
| tqdm | 4.67.1 | Traitlets | 5.14.3 | 變壓器 | 4.57.1 |
| typeguard (類型保護) | 4.4.2 | 打字員 | 0.20.0 | Typer-Slim | 0.20.0 |
| types-python-dateutil | 2.9.0.20251108 | 打字檢查 | 0.9.0 | typing_extensions(打字擴充套件) | 4.12.2 |
| tzdata | 2024.1 | uc-micro-py | 1.0.1 | ujson(超快速 JSON 解析庫) | 5.10.0 |
| 無人看管自動升級 | 0.1 | URI 樣板 | 1.3.0 | urllib3 | 2.3.0 |
| uvicorn | 0.38.0 | virtualenv | 20.29.3 | 願景 | 0.8.1 |
| wadllib | 1.3.6 | 山葵 | 1.1.3 | wcwidth(字符寬度函數) | 0.2.5 |
| 黃鼠狼 | 0.4.3 | 網頁顏色 | 25.10.0 | 網路編碼 | 0.5.1 |
| WebSocket 客戶端 | 1.8.0 | Werkzeug | 3.1.3 | 何謂補丁 | 1.0.2 |
| Wheel | 0.45.1 | 不論何時 | 0.7.3 | widgetsnbextension | 3.6.6 |
| 文字雲 | 1.9.4 | 包裹著 | 1.17.0 | xgboost | 3.1.1 |
| xgboost-ray | 0.1.19 | xxhash | 3.5.0 | yapf (Python 程式碼格式化工具) | 0.40.2 |
| 雅爾 | 1.18.0 | ydata 概況分析 | 4.17.0 | 拉鏈 | 3.21.0 |
| zstandard | 0.23.0 | zstd | 1.5.5.1 |
GPU 叢集上的 Python 程式庫
備註
PyTorch 使用 CUDA 的 PyPI 相依性來提供 CUDA 支援,取代內建於 Databricks Runtime 18.0 ML 中的 CUDA 函式庫版本。
| 圖書館 | 版本 | 圖書館 | 版本 | 圖書館 | 版本 |
|---|---|---|---|---|---|
| absl-py | 2.3.1 | 加速 | 1.11.0 | aiohappyeyeballs | 2.4.4 |
| aiohttp | 3.11.10 | aiohttp-cors | 0.8.1 | aiosignal | 1.2.0 |
| 註解文檔 | 0.0.4 | 標註類型 | 0.7.0 | anyio | 4.7.0 |
| argon2-cffi | 21.3.0 | argon2-cffi-bindings | 21.2.0 | arro3-core | 0.6.5 |
| 箭頭 | 1.3.0 | asttokens(Python 資源分析與處理庫) | 3.0.0 | astunparse | 1.6.3 |
| async-lru | 2.0.4 | 屬性 (attrs) | 24.3.0 | 音訊閱讀 (audioread) | 3.1.0 |
| 自動指令 | 2.2.2 | azure-common | 1.1.28 | Azure 核心功能 (azure-core) | 1.36.0 |
| azure-cosmos | 4.3.1 | azure-identity(Azure 身份驗證服務) | 1.20.0 | azure-mgmt-core | 1.6.0 |
| azure-mgmt-web (Azure 管理網站) | 8.0.0 | azure-storage-blob (Azure 儲存服務 Blob) | 12.27.1 | 微軟 Azure 儲存檔案資料湖 (Azure Storage File Data Lake) | 12.22.0 |
| 巴別塔 | 2.16.0 | backports.tarfile | 1.2.0 | bcrypt(密碼加密算法) | 4.3.0 |
| beautifulsoup4 | 4.12.3 | 黑色 | 24.10.0 | 漂白劑 | 6.2.0 |
| 閃爍器 | 1.7.0 | 極樂 | 0.7.11 | boto3 | 1.40.45 |
| botocore(AWS的Python程式庫) | 1.40.45 | brotli | 1.2.0 | cachetools(緩存工具) | 5.5.1 |
| 目錄 | 2.0.10 | certifi | 2025.4.26 | cffi | 1.17.1 |
| chardet | 4.0.0 | charset-normalizer(字符集正規化器) | 3.3.2 | 斷路器 | 2.1.3 |
| 點選 | 8.1.8 | cloudpathlib | 0.23.0 | cloudpickle(Python 程式庫) | 3.0.0 |
| cmdstanpy | 1.3.0 | 色彩繽紛 | 0.5.8 | colorlog | 6.10.1 |
| 通訊 | 0.2.1 | 糖果 | 0.1.5 | 「contourpy」 | 1.3.1 |
| cramjam | 2.11.0 | 加密 | 44.0.1 | 騎車者 | 0.11.0 |
| cymem | 2.0.12 | Cython | 3.1.5 | 粗面岩 | 1.9.2 |
| Databricks-代理程式 | 1.4.0 | databricks-connect | 17.3.1 | databricks-特徵工程 | 0.13.0.1 |
| Databricks 開發人員工具集 (SDK) | 0.67.0 | dataclasses-json | 0.6.7 | 數據集 | 4.3.0 |
| dbl-tempo | 0.1.26 | dbus-python | 1.3.2 | debugpy | 1.8.11 |
| 裝飾項目 | 5.1.1 | deepspeed | 0.18.1 | defusedxml(安全解析XML的Python函式庫) | 0.7.1 |
| Delta Lake | 1.1.4 | Deprecated | 1.2.18 | 蒔蘿 | 0.3.8 |
| distlib | 0.3.9 | dm-tree | 0.1.9 | 將Docstring轉換為Markdown | 0.11 |
| einops | 0.8.1 | 評估 | 0.4.6 | 執行中 | 1.2.0 |
| facets概覽 | 1.1.1 | Farama-通知 | 0.0.4 | fastapi | 0.121.2 |
| fastjsonschema | 2.21.1 | 文件鎖 | 3.17.0 | 檔案類型 | 1.2.0 |
| flash_attn | 2.8.3 | Flask | 2.2.5 | FlatBuffers | 25.9.23 |
| fonttools (字體工具庫) | 4.55.3 | fqdn | 1.5.1 | 凍結清單 | 1.5.0 |
| fsspec | 2023.5.0 | gast | 0.6.0 | gitdb (Git分散式版本控制資料庫) | 4.0.11 |
| GitPython | 3.1.43 | google-api-core (Google API 核心庫) | 2.28.1 | google-auth(谷歌身份驗證) | 2.43.0 |
| google-cloud-core | 2.5.0 | Google雲端儲存(Google Cloud Storage) | 3.2.0 | google-crc32c | 1.7.1 |
| google-pasta | 0.2.0 | Google可續媒體 | 2.7.2 | googleapis-common-protos | 1.65.0 |
| graphql-core | 3.2.4 | greenlet (綠線程) | 3.1.1 | grpcio | 1.67.0 |
| grpcio-status | 1.67.0 | 體育館 | 0.28.1 | h11 | 0.16.0 |
| h5py | 3.12.1 | HF-XET | 1.2.0 | hjson | 3.1.0 |
| 假期 | 0.54 | httpcore | 1.0.9 | httplib2 | 0.20.4 |
| httpx | 0.28.1 | HuggingFace-Hub 平台 | 0.36.0 | IDNA | 3.7 |
| 圖像哈希 (ImageHash) | 4.3.1 | imageio | 2.37.0 | 不平衡學習(imbalanced-learn) | 0.13.0 |
| importlib-metadata (匯入庫-元資料) | 6.6.0 | importlib_resources(Python 資源庫) | 6.5.2 | 變調 | 7.3.1 |
| iniconfig | 1.1.1 | ipyflow核心组件 | 0.0.209 | ipykernel | 6.29.5 |
| ipython | 8.30.0 | ipython-genutils(IPython 工具程式庫) | 0.2.0 | ipywidgets | 7.8.1 |
| isodate | 0.7.2 | isoduration | 20.11.0 | 這很危險 | 2.2.0 |
| jaraco.collections | 5.1.0 | jaraco.context | 5.3.0 | jaraco.functools | 4.0.1 |
| jaraco.text(文字處理工具) | 3.12.1 | jax-jumpy | 1.0.0 | jedi | 0.19.2 |
| Jinja2 | 3.1.6 | 抖動 | 0.12.0 | jmespath | 1.0.1 |
| joblib | 1.4.2 | joblibspark | 0.6.0 | json5 | 0.9.25 |
| jsonpatch | 1.33 | jsonpointer | 3.0.0 | jsonschema | 4.23.0 |
| JSON Schema 規範 | 2023年7月1日 | 朱比特 | 1.1.1 | Jupyter-控制台 | 6.6.3 |
| Jupyter 事件 | 0.12.0 | jupyter-lsp | 2.2.5 | jupyter 客戶端 | 8.6.3 |
| Jupyter核心 | 5.7.2 | jupyter伺服器 | 2.15.0 | Jupyter服務器終端 | 0.5.3 |
| jupyterlab | 4.3.4 | jupyterlab_pygments | 0.3.0 | jupyterlab伺服器 | 2.27.3 |
| jupyterlab_widgets | 1.1.11 | keras(深度學習框架) | 3.12.0 | kiwisolver(開源程式庫) | 1.4.8 |
| langchain | 1.0.3 | langchain-core | 1.0.4 | 朗鏈-OpenAI | 1.0.2 |
| 語言代碼 | 3.5.0 | langgraph | 1.0.3 | langgraph-checkpoint | 3.0.1 |
| Langgraph 預先建構 | 1.0.4 | langgraph-sdk | 0.2.9 | langsmith | 0.4.41 |
| 語言數據 | 1.3.0 | launchpadlib | 1.11.0 | lazr.restfulclient | 0.14.6 |
| lazr.uri | 1.0.6 | lazy_loader | 0.4 | libclang | 15.0.6.1 |
| librosa | 0.11.0 | lightgbm | 4.6.0 | linkify-it-py | 2.0.0 |
| llvmlite | 0.44.0 | lz4 | 4.3.2 | Mako | 1.3.10 |
| marisa-trie | 1.2.0 | Markdown | 3.8 | markdown-it-py | 2.2.0 |
| MarkupSafe | 3.0.2 | 棉花糖 | 3.26.1 | matplotlib | 3.10.0 |
| matplotlib-inline | 0.1.7 | 麥卡貝 | 0.7.0 | mdit-py-plugins | 0.3.0 |
| mdurl | 0.1.0 | memray | 1.19.1 | 精簡HTML | 0.18.1 |
| 米斯圖恩 | 3.1.2 | ml_dtypes | 0.5.3 | mlflow-skinny | 3.5.1 |
| mmh3 | 5.2.0 | 更多迭代器 | 10.3.0 | mosaicml串流 | 0.13.0 |
| mpmath(Python數學計算庫) | 1.3.0 | MSAL(Microsoft身份驗證庫) | 1.34.0 | msal-extensions | 1.3.1 |
| msgpack | 1.1.2 | multidict | 6.1.0 | 多元方法 | 1.12 |
| 多流程 | 0.70.16 | MurmurHash(穆默爾哈希) | 1.0.14 | mypy-extensions(MyPy 擴充套件) | 1.0.0 |
| namex | 0.1.0 | 「nbclient」 | 0.10.2 | nbconvert(文件轉換工具) | 7.16.6 |
| nbformat | 5.10.4 | nest-asyncio | 1.6.0 | networkx(網路結構處理工具庫) | 3.4.2 |
| 忍者 | 1.13.0 | 自然語言工具包 (NLTK) | 3.9.1 | nodeenv | 1.9.1 |
| 筆記本 | 7.3.2 | 筆記本支架 | 0.2.4 | Numba(Python效能提升函式庫) | 0.61.0 |
| numpy(數值計算套件) | 2.1.3 | nvidia-cublas-cu12 | 12.9.1.4 | nvidia-cuda-cupti-cu12(NVIDIA CUDA 工具包的 CUPTI 庫,版本 cu12) | 12.9.79 |
| nvidia-cuda-nvrtc-cu12 | 12.9.86 | nvidia-cuda-runtime-cu12 | 12.9.79 | nvidia-cudnn-cu12 | 9.10.2.21 |
| nvidia-cufft-cu12 | 11.4.1.4 | nvidia-cufile-cu12 | 1.14.1.1 | nvidia-curand-cu12 | 10.3.10.19 |
| nvidia-cusolver-cu12 | 11.7.5.82 | nvidia-cusparse-cu12 | 12.5.10.65 | nvidia-cusparselt-cu12 | 0.7.1 |
| nvidia-ml-py | 13.580.82 | nvidia-nccl-cu12 | 2.27.5 | nvidia-nvjitlink-cu12 | 12.9.86 |
| NVIDIA-NVSHMEM-CU12 | 3.3.20 | nvidia-nvtx-cu12 | 12.9.79 | oauthlib (OAuth程式庫) | 3.2.0 |
| oci | 2.163.1 | OpenAI公司 | 2.7.0 | opencensus | 0.11.4 |
| opencensus-context | 0.1.3 | opentelemetry-api | 1.38.0 | opentelemetry-proto | 1.38.0 |
| opentelemetry-sdk(OpenTelemetry 軟體開發工具包) | 1.38.0 | OpenTelemetry語意規範 | 0.59b0 | opt_einsum | 3.4.0 |
| optree | 0.17.0 | optuna | 3.6.1 | Optuna 整合工具 | 3.6.0 |
| orjson | 3.11.4 | ormsgpack | 1.12.0 | 覆蓋 | 7.4.0 |
| 包裝 | 24.2 | 熊貓 | 2.2.3 | pandocfilters (潘多克過濾器) | 1.5.0 |
| paramiko | 3.5.1 | 帕爾索 | 0.8.4 | 路徑規格 (pathspec) | 0.10.3 |
| 替罪羊 | 1.0.1 | pexpect (一個用於程序自動化和測試的軟體庫) | 4.8.0 | 菲克 | 0.12.5 |
| 枕頭 | 11.1.0 | pip(Python 軟體包管理工具) | 25.0.1 | platformdirs | 4.3.7 |
| plotly(數據可視化工具) | 5.24.1 | Pluggy(外掛管理工具) | 1.5.0 | 狗狗 | 1.8.2 |
| 預處理 | 3.0.11 | prometheus_client | 0.21.1 | prompt-toolkit(提示工具組) | 3.0.43 |
| propcache | 0.3.1 | 先知 | 1.2.1 | proto-plus | 1.26.1 |
| 協議緩衝區 (Protocol Buffers) | 5.29.4 | psutil | 5.9.0 | psycopg2 | 2.9.11 |
| ptyprocess | 0.7.0 | pure-eval | 0.2.2 | puremagic | 1.30 |
| py-cpuinfo | 9.0.0 | py-spy(Python 程式碼分析工具) | 0.4.1 | py4j | 0.10.9.9 |
| pyarrow | 21.0.0 | pyasn1 | 0.4.8 | pyasn1-modules | 0.2.8 |
| 派克羅 | 0.0.71 | pycparser(Python 的 C 語法分析器) | 2.21 | pydantic(Python 數據驗證工具) | 2.10.6 |
| pydantic_core | 2.27.2 | pyflakes (Python 代碼分析工具) | 3.2.0 | Pygments | 2.19.1 |
| PyGObject | 3.48.2 | pyiceberg | 0.10.0 | PyJWT | 2.10.1 |
| PyNaCl | 1.5.0 | pyodbc | 5.2.0 | pyOpenSSL | 25.0.0 |
| pyparsing(Python 字符串解析库) | 3.2.0 | pyright | 1.1.394 | 火燒 | 1.0.3 |
| pytesseract | 0.3.10 | pytest(Python程式語言的測試工具) | 8.3.5 | python-dateutil | 2.9.0.post0 |
| python-dotenv | 1.2.1 | Python 編輯器 (python-editor) | 1.0.4 | python-json-logger (Python JSON 日誌記錄器) | 3.2.1 |
| python-lsp-jsonrpc | 1.1.2 | python-lsp-server | 1.12.2 | python-snappy(Python 的 Snappy 算法壓縮庫) | 0.7.3 |
| pytoolconfig | 1.2.6 | pytz(Python 的時區計算函式庫) | 2024.1 | PyWavelets | 1.8.0 |
| PyYAML | 6.0.2 | pyzmq | 26.2.0 | 射線 | 2.37.0 |
| 參考 | 0.30.2 | Regex | 2024.11.6 | 要求 | 2.32.3 |
| requests-toolbelt | 1.0.0 | rfc3339-validator(RFC 3339 格式驗證器) | 0.1.4 | RFC 3986 驗證器 | 0.1.1 |
| 富有 | 13.9.4 | 繩子 | 1.13.0 | rpds-py | 0.22.3 |
| RSA加密算法 | 4.9.1 | s3transfer | 0.14.0 | safetensors | 0.6.2 |
| scikit-image(影像處理套件) | 0.25.0 | scikit-learn(機器學習套件) | 1.6.1 | scipy科學計算庫 | 1.15.3 |
| 海上出生 | 0.13.2 | Send2Trash | 1.8.2 | 句子轉換器 | 5.1.2 |
| 句子片段 | 0.2.1 | setuptools | 78.1.1 | 沙普 | 0.49.1 |
| 社靈漢 (Shellingham) | 1.5.4 | 六 | 1.17.0 | sklearn-compat | 0.1.3 |
| 交叉分析篩選器 | 0.0.8 | 智能開啟 | 7.5.0 | smmap | 5.0.0 |
| sniffio | 1.3.0 | sortedcontainers(排序容器) | 2.4.0 | 音效檔 | 0.13.1 |
| 湯篩 | 2.5 | soxr | 1.0.0 | 寬敞 | 3.7.5 |
| spacy-legacy | 3.0.12 | spacy-loggers | 1.0.5 | SQLAlchemy | 2.0.39 |
| sqlparse(資料庫語法解析器) | 0.5.3 | 認真? | 2.5.1 | ssh-import-id(匯入 SSH ID) | 5.11 |
| 堆疊數據 | 0.6.3 | 斯坦尼奧 | 0.5.1 | starlette | 0.49.3 |
| statsmodels (統計模型庫) | 0.14.4 | strictyaml | 1.7.3 | sympy | 1.13.3 |
| 堅韌性 | 9.0.0 | TensorBoard(張量計算板) | 2.20.0 | TensorBoard資料伺服器 | 0.7.2 |
| tensorboardX | 2.6.4 | TensorFlow | 2.20.0 | termcolor | 3.2.0 |
| 結束了 | 0.17.1 | 文字的 | 4.0.0 | tf_keras | 2.20.1 |
| 倪識 | 8.2.4 | threadpoolctl | 3.5.0 | tifffile | 2025年2月18日 |
| tiktoken | 0.9.0 | tinycss2 | 1.4.0 | tokenize_rt | 6.1.0 |
| 分詞器 (tokenizers) | 0.22.1 | tomli | 2.0.1 | 手電筒 | 2.9.0+cu129 |
| torcheval | 0.0.7 | torchvision 視覺工具庫 | 0.24.0+cu129 | 龍捲風 | 6.5.1 |
| tqdm | 4.67.1 | Traitlets | 5.14.3 | 變壓器 | 4.57.1 |
| 氚子 | 3.5.0 | typeguard (類型保護) | 4.4.2 | 打字員 | 0.20.0 |
| Typer-Slim | 0.20.0 | types-python-dateutil | 2.9.0.20251108 | 打字檢查 | 0.9.0 |
| typing_extensions(打字擴充套件) | 4.12.2 | tzdata | 2024.1 | uc-micro-py | 1.0.1 |
| ujson(超快速 JSON 解析庫) | 5.10.0 | 無人看管自動升級 | 0.1 | URI 樣板 | 1.3.0 |
| urllib3 | 2.3.0 | uvicorn | 0.38.0 | virtualenv | 20.29.3 |
| 願景 | 0.8.1 | wadllib | 1.3.6 | 山葵 | 1.1.3 |
| wcwidth(字符寬度函數) | 0.2.5 | 黃鼠狼 | 0.4.3 | 網頁顏色 | 25.10.0 |
| 網路編碼 | 0.5.1 | WebSocket 客戶端 | 1.8.0 | Werkzeug | 3.1.3 |
| 何謂補丁 | 1.0.2 | Wheel | 0.45.1 | 不論何時 | 0.7.3 |
| widgetsnbextension | 3.6.6 | 文字雲 | 1.9.4 | 包裹著 | 1.17.0 |
| xgboost | 3.1.1 | xgboost-ray | 0.1.19 | xxhash | 3.5.0 |
| yapf (Python 程式碼格式化工具) | 0.40.2 | 雅爾 | 1.18.0 | ydata 概況分析 | 4.17.0 |
| 拉鏈 | 3.21.0 | zstandard | 0.23.0 | zstd | 1.5.5.1 |
R 程式庫
R 函式庫與 Databricks Runtime 18.0 中的 R 函式庫 相同。
Java 與 Scala 函式庫(Scala 2.13 叢集)
除了 Databricks Runtime 18.0 中的 Java 與 Scala 函式庫外,Databricks Runtime 18.0 ML 還包含以下 JAR:
CPU 叢集
| 群組識別碼 | 文物識別碼 | 版本 |
|---|---|---|
| ml.dmlc | xgboost4j-spark_2.13 | 2.1.3 |
| ml.dmlc | xgboost4j_2.13 | 2.1.3 |
| org.graphframes | graphframes_2.13 | 0.8.4-db1-spark3.5 |
| org.mlflow | mlflow-client | 2.15.1 |
| org.scala-lang.modules | scala-collection-compat_2.13 | 2.12.0 |
| org.tensorflow | 火花張量流-connector_2.13 | 1.15.0 |
圖形處理器集群
| 群組識別碼 | 文物識別碼 | 版本 |
|---|---|---|
| ml.dmlc | xgboost4j-spark_2.13 | 2.1.3 |
| ml.dmlc | xgboost4j_2.13 | 2.1.3 |
| org.graphframes | graphframes_2.13 | 0.8.4-db1-spark3.5 |
| org.mlflow | mlflow-client | 2.15.1 |
| org.scala-lang.modules | scala-collection-compat_2.13 | 2.12.0 |
| org.tensorflow | 火花張量流-connector_2.13 | 1.15.0 |
不支援的版本
小提示
若要查看已達到終止支援 (EoS) 之 Databricks Runtime 版本的版本資訊,請參閱終止支援 Databricks Runtime 版本資訊。 EoS Databricks Runtime 版本已淘汰,且可能未更新。