Поделиться через


Databricks Runtime 18.1 для машинного обучения

В следующих заметках о выпуске содержатся сведения о Databricks Runtime 18.1 ML.

Azure Databricks выпустила эту версию в феврале 2026 года.

Databricks Runtime 18.1 ML построен на основе Databricks Runtime 18.1. Сведения о новых возможностях Databricks Runtime 18.1, включая Apache Spark MLlib и SparkR, см. в заметках о выпуске Databricks Runtime 18.1 .

Новые функции и улучшения

Ниже перечислены некоторые обновления библиотеки:

  • Обновление CUDA до версии 12.9
  • flash_attn 2.8.3
  • keras 3.12.0
  • langchain 1.0.3
  • mlflow-skinny 3.8.1
  • openai 2.7.0
  • факел 2.9.0
  • torchvision 0.24.0
  • преобразователи 4.57.1
  • triton 3.5.0
  • xgboost 3.1.1

Системная среда

Системная среда в Databricks Runtime 18.1 ML отличается от Databricks Runtime 18.1, как показано ниже.

  • Для кластеров GPU в Databricks Runtime ML входят следующие библиотеки GPU NVIDIA:
    • CUDA 12.9
    • cublas 12.9.1.4-1
    • cusolver 11.7.5.82
    • cupti 12.9.79
    • cusparse 12.5.10.65
    • cuDNN 9.15.1.9-1
    • NCCL 2.27.5

Libraries

В следующих разделах перечислены библиотеки, включенные в Databricks Runtime 18.1 ML, которые отличаются от библиотек, включенных в Databricks Runtime 18.1.

Библиотеки верхнего уровня

Databricks Runtime 18.1 ML включает следующие библиотеки верхнего уровня:

Библиотеки Python

Databricks Runtime 18.1 ML используется virtualenv для управления пакетами Python и включает множество популярных пакетов машинного обучения.

Чтобы воспроизвести среду выполнения Python Databricks Runtime в локальной виртуальной среде, скачайте requirements-cpu-18.1.txt для кластеров ЦП или requirements-gpu-18.1.txt для кластеров GPU. Затем выполните pip install -r requirements-<cpu|gpu>-18.1.txt. Эта команда устанавливает все библиотеки с открытым кодом, которые использует Databricks Runtime ML, но не устанавливает библиотеки, разработанные Databricks.

Библиотеки Python в кластерах ЦП

Библиотека Версия Библиотека Версия Библиотека Версия
absl-py 2.3.1 ускорить 1.11.0 aiohappyeyeballs 2.4.4
aiohttp 3.11.10 aiohttp-cors 0.8.1 aiosignal 1.2.0
алембик 1.17.1 аннотированный документ 0.0.4 аннотированные типы 0.7.0
anyio 4.7.0 argon2-cffi 21.3.0 argon2-cffi-связки 21.2.0
arro3-core 0.6.5 стрела 1.3.0 асттокенс 3.0.0
астунпарс 1.6.3 async-lru 2.0.4 атрибуты 24.3.0
аудиочтение 3.1.0 автоматическая команда 2.2.2 azure-common 1.1.28
azure-core 1.36.0 azure-cosmos 4.3.1 azure-identity 1.20.0
Платформа управления Azure (azure-mgmt-core) 1.6.0 azure-mgmt-web 8.0.0 azure-storage-blob (облако сохранения Azure) 12.27.1
хранилище файлов данных Azure Data Lake 12.22.0 Вавилон 2.16.0 backports.tarfile 1.2.0
bcrypt (алгоритм хеширования паролей) 4.3.0 beautifulsoup4 4.12.3 черный 24.10.0
отбеливатель 6.2.0 указатель поворота 1.7.0 блаженство 0.7.11
boto3 1.40.45 botocore 1.40.45 brotli 1.2.0
инструменты для кэша 5.5.1 каталог 2.0.10 сертификат 2025.4.26
cffi 1.17.1 chardet 4.0.0 нормализатор кодировки 3.3.2
автоматический выключатель 2.1.3 щелчок 8.1.8 cloudpathlib 0.23.0
Клаудпикл 3.0.0 cmdstanpy 1.3.0 колоритный 0.5.8
colorlog 6.10.1 коммуникация 0.2.1 конфеты 0.1.5
Contourpy 1.3.1 cramjam 2.11.0 криптография 44.0.1
велосипедист 0.11.0 цимем 2.0.12 Cython 3.1.5
дацит 1.9.2 databricks-агенты 1.9.1 фичерная инженерия Databricks 0.13.0.1
databricks-sdk 0.67.0 dataclasses-json 0.6.7 Наборы данных 4.3.0
dbl-tempo 0.1.26 dbus-python 1.3.2 debugpy 1.8.11
декоратор 5.1.1 DeepSpeed 0.18.1 defusedxml 0.7.1
deltalake 1.1.4 Deprecated 1.2.18 укроп 0.3.8
Дистлиб 0.3.9 dm-tree 0.1.9 Конвертация docstring в markdown 0.11
einops 0.8.1 оценивать 0.4.6 исполнение 1.2.0
Обзор аспектов 1.1.1 Farama-Уведомления 0.0.4 fastapi 0.121.2
fastjsonschema 2.21.1 файловая блокировка 3.17.0 тип файла 1.2.0
Фляжка 2.2.5 FlatBuffers 25.9.23 шрифтовые инструменты 4.55.3
Полное доменное имя (FQDN) 1.5.1 замороженный список 1.5.0 fsspec 2023.5.0
гаст 0.6.0 gitdb 4.0.11 GitPython 3.1.43
google-api-core 2.28.1 google-auth (аутентификация от Google) 2.43.0 google-cloud-core (основной модуль Google Cloud) 2.5.0
облачное хранилище Google 3.2.0 google-crc32c 1.7.1 гугл-паста 0.2.0
гугл-возобновляемые-медиа 2.7.2 googleapis-common-protos (общие протоколы googleapis) 1.65.0 graphql-core 3.2.4
гринлет 3.1.1 grpcio 1.67.0 grpcio-status 1.67.0
спортзал 0.28.1 h11 0.16.0 h5py 3.12.1
hf-xet 1.2.0 hjson 3.1.0 каникулы 0.54
httpcore 1.0.9 httplib2 0.20.4 httpx 0.28.1
платформа huggingface-hub 0.36.0 IDNA 3,7 ImageHash (Хэш изображений) 4.3.1
imageio 2.37.0 imbalanced-learn (библиотека Python для работы с несбалансированными данными) 0.13.0 importlib_metadata 8.5.0
importlib_resources 6.5.2 склонять 7.3.1 iniconfig 1.1.1
ipyflow-core 0.0.209 ipykernel 6.29.5 ipython 8.30.0
ipython-genutils (утилиты для iPython) 0.2.0 ipywidgets 7.8.1 isodate (стандартная дата ISO) 0.7.2
изодурация 20.11.0 это опасно 2.2.0 jaraco.collections 5.1.0
jaraco.context 5.3.0 jaraco.functools 4.0.1 jaraco.text 3.12.1
Джакс-Джампи 1.0.0 джедаи 0.19.2 Джинджа2 3.1.6
джиттер 0.12.0 jmespath 1.0.1 joblib 1.4.2
joblibspark 0.6.0 json5 0.9.25 jsonpatch 1.33
Джсонпоинтер (jsonpointer) 3.0.0 jsonschema (JSON-схема) 4.23.0 jsonschema-спецификации 2023.7.1
jupyter 1.1.1 "Jupyter-консоль" 6.6.3 Jupyter-события 0.12.0
jupyter-lsp 2.2.5 клиент Jupyter 8.6.3 jupyter_core (ядро Jupyter) 5.7.2
Джупитер_сервер 2.15.0 терминалы_сервера_jupyter 0.5.3 jupyterlab 4.3.4
jupyterlab_pygments 0.3.0 jupyterlab_server (сервер для JupyterLab) 2.27.3 jupyterlab_widgets 1.1.11
Керас 3.12.0 Кивисолвер 1.4.8 Лангчейн 1.0.3
langchain-core 1.0.4 langchain-openai 1.0.2 языковые коды 3.5.0
langgraph 1.0.3 langgraph-контрольная точка 3.0.1 langgraph-prebuilt 1.0.4
langgraph-sdk 0.2.9 langsmith 0.4.41 языковые данные 1.3.0
launchpadlib 1.11.0 lazr.restfulclient 0.14.6 lazr.uri 1.0.6
ленивый загрузчик 0,4 libclang 15.0.6.1 librosa 0.11.0
LightGBM (фреймворк для машинного обучения) 4.6.0 linkify-it-py 2.0.0 litellm 1.75.9
llvmlite 0.44.0 lz4 4.3.2 Мако 1.3.10
мариса-три 1.2.0 Markdown (язык разметки) 3.8 markdown-it-py 2.2.0
MarkupSafe 3.0.2 зефир 3.26.1 matplotlib 3.10.0
матплотлиб-инлайн 0.1.7 МакКейб 0.7.0 mdit-py-plugins 0.3.0
mdurl 0.1.0 Мемрей 1.19.1 Минификация HTML 0.18.1
Мистун 3.1.2 ml_dtypes 0.5.3 mlflow-skinny (упрощённая версия пакета mlflow) 3.8.1
mmh3 5.2.0 more-itertools 10.3.0 mosaicml-streaming 0.13.0
mpmath 1.3.0 msal 1.34.0 msal-extensions 1.3.1
msgpack 1.1.2 мультидикт 6.1.0 мультиметод 1.12
многопроцессорный 0.70.16 murmurhash (алгоритм хеширования MurmurHash) 1.0.14 mypy-extensions (расширения для mypy) 1.0.0
namex 0.1.0 nbclient 0.10.2 Перекодировщик nbconvert 7.16.6
nbformat 5.10.4 nest-asyncio 1.6.0 networkx 3.4.2
ниндзя 1.13.0 nltk (Natural Language Toolkit) 3.9.1 nodeenv 1.9.1
notebook 7.3.2 ноутбук_шим 0.2.4 намба 0.61.0
numpy (библиотека для работы с массивами и матрицами в Python) 2.1.3 nvidia-nccl-cu12 2.28.7 OAuthlib 3.2.0
oci 2.163.1 openai 2.7.0 opencensus 0.11.4
opencensus-context 0.1.3 opentelemetry-api 1.38.0 opentelemetry-proto 1.38.0
opentelemetry-sdk 1.38.0 cемантические соглашения opentelemetry 0.59b0 opt_einsum 3.4.0
optree 0.17.0 optuna 3.6.1 интеграция optuna 3.6.0
orjson 3.11.4 ormsgpack 1.12.0 Переопределения 7.4.0
упаковка 24,2 Панды 2.2.3 пандокфильтры 1.5.0
paramiko 3.5.1 Парсо 0.8.4 спецификация пути 0.10.3
простак 1.0.1 pexpect (библиотека Python для автоматизации взаимодействия с приложениями) 4.8.0 фик 0.12.5
подушка 11.1.0 пит 25.0.1 Platformdirs 4.3.7
библиотека Plotly для визуализации данных 5.24.1 менеджер плагинов Pluggy 1.5.0 пёс 1.8.2
придавленный 3.0.11 prometheus_client 0.21.1 prompt-toolkit (инструментарий подсказок) 3.0.43
кэш свойств 0.3.1 пророк 1.2.1 proto-plus 1.26.1
protobuf (протобуф) 5.29.4 psutil (пакет Python для работы с процессами и системами) 5.9.0 psycopg2 2.9.11
ptyprocess 0.7.0 пьюр-эвэл 0.2.2 puremagic 1.30
py-cpuinfo 9.0.0 py-spy 0.4.1 pyarrow 21.0.0
pyasn1 0.4.8 pyasn1-modules 0.2.8 Пикколо 0.0.71
pycparser 2.21 pydantic (библиотека Python для валидации данных) 2.10.6 pydantic_core 2.27.2
pyflakes (аналитический инструмент для Python) 3.2.0 Пигменты 2.19.1 PyGObject 3.48.2
pyiceberg 0.10.0 PyJWT 2.10.1 PyNaCl 1.5.0
pyodbc 5.2.0 pyOpenSSL 25.0.0 pyparsing (библиотека для синтаксического анализа в Python) 3.2.0
pyright 1.1.394 пироаринг 1.0.3 pytesseract 0.3.10
pytest 8.3.5 python-dateutil (библиотека для работы с датами и временем в Python) Версия 2.9.0.post0 python-dotenv 1.2.1
редактор Python 1.0.4 python-json-logger (пакет для логирования JSON в Python) 3.2.1 python-lsp-jsonrpc 1.1.2
python-lsp-server (сервер Python LSP) 1.12.2 Python-Snappy 0.7.3 Pytoolconfig 1.2.6
pytz (библиотека Python для работы с часовыми поясами) 2024.1 PyWavelets 1.8.0 PyYAML 6.0.2
pyzmq 26.2.0 луч 2.37.0 Ссылки 0.30.2
regex 2024.11.6 Запросы 2.32.3 requests-toolbelt 1.0.0
rfc3339-валидатор 0.1.4 rfc3986-validator 0.1.1 богатый 13.9.4
верёвка 1.13.0 rpds-py 0.22.3 rsa 4.9.1
s3transfer 0.14.0 safetensors 0.6.2 scikit-image 0.25.0
scikit-learn (библиотека машинного обучения) 1.6.1 scipy (библиотека Python) 1.15.3 мореборн 0.13.2
Send2Trash 1.8.2 преобразователи предложений (sentence-transformers) 5.1.2 предложение 0.2.1
setuptools (пакет для установки и управления Python-пакетами) 78.1.1 шап 0.49.1 шеллингем 1.5.4
шесть 1.17.0 sklearn-compat 0.1.3 Нарезчик 0.0.8
smart_open 7.5.0 сммап 5.0.0 сниффио 1.3.0
отсортированные контейнеры 2.4.0 аудиофайл 0.13.1 ситечко для супа 2.5
soxr 1.0.0 просторный 3.7.5 spacy-legacy 3.0.12
спейси-логгеры 1.0.5 SQLAlchemy 2.0.39 sqlparse 0.5.3
серьёзно? 2.5.1 ssh-import-id (импортировать идентификатор SSH) 5.11 стековые данные 0.6.3
стэнио 0.5.1 старлетка 0.49.3 statsmodels (библиотека Python для статистического моделирования) 0.14.4
strictyaml 1.7.3 SymPy 1.13.3 упорство 9.0.0
ТензорБорд 2.20.0 tensorboard-data-server (сервер данных TensorBoard) 0.7.2 tensorboardX 2.6.4
Tensorflow 2.20.0 термколор 3.2.0 закончено 0.17.1
текстуальный 4.0.0 tf_keras 2.20.1 тонкий 8.2.4
Threadpoolctl 3.5.0 tifffile (файл формата TIFF) 2025.2.18 тиктокен 0.9.0
tinycss2 1.4.0 tokenize_rt 6.1.0 токенизаторы 0.22.1
томли 2.0.1 факел 2.9.0+цп факел 0.0.7
torchvision (библиотека PyTorch для компьютерного зрения) 0.24.0+cpu торнадо 6.5.1 tqdm 4.67.1
Трейтлеты 5.14.3 Трансформаторы 4.57.1 типгард 4.4.2
машинистка / печатник / типировщик 0.20.0 typer-slim 0.20.0 types-python-dateutil 2.9.0.20251108
ввод текста и проверка 0.9.0 typing_extensions (расширения для ввода текста) 4.12.2 tzdata 2024.1
uc-micro-py 1.0.1 ujson 5.10.0 автоматические обновления без участия пользователя 0,1
URI-шаблон 1.3.0 urllib3 2.3.0 uvicorn 0.38.0
virtualenv 20.29.3 Видения 0.8.1 wadllib 1.3.6
васаби 1.1.3 wcwidth (ширина символа в Unicode) 0.2.5 ласка 0.4.3
webcolors 25.10.0 веб-энкодинги 0.5.1 websocket-клиент 1.8.0
Инструмент 3.1.3 чтоэто за патч 1.0.2 колесо 0.45.1
когда бы ни 0.7.3 widgetsnbextension 3.6.6 облако слов 1.9.4
завёрнут 1.17.0 xgboost 3.1.1 xgboost-ray 0.1.19
xxhash 3.5.0 yapf (форматировщик Python кода) 0.40.2 ярл 1.18.0
ydata-profiling 4.17.0 ZIPP 3.21.0 zstandard 0.23.0
zstd 1.5.5.1

Библиотеки Python в кластерах GPU

Замечание

PyTorch использует зависимости CUDA PyPI для предоставления поддержки CUDA вместо версий библиотеки CUDA, встроенных в Databricks Runtime 18.1 ML.

Библиотека Версия Библиотека Версия Библиотека Версия
absl-py 2.3.1 ускорить 1.11.0 aiohappyeyeballs 2.4.4
aiohttp 3.11.10 aiohttp-cors 0.8.1 aiosignal 1.2.0
аннотированный документ 0.0.4 аннотированные типы 0.7.0 anyio 4.7.0
argon2-cffi 21.3.0 argon2-cffi-связки 21.2.0 arro3-core 0.6.5
стрела 1.3.0 асттокенс 3.0.0 астунпарс 1.6.3
async-lru 2.0.4 атрибуты 24.3.0 аудиочтение 3.1.0
автоматическая команда 2.2.2 azure-common 1.1.28 azure-core 1.36.0
azure-cosmos 4.3.1 azure-identity 1.20.0 Платформа управления Azure (azure-mgmt-core) 1.6.0
azure-mgmt-web 8.0.0 azure-storage-blob (облако сохранения Azure) 12.27.1 хранилище файлов данных Azure Data Lake 12.22.0
Вавилон 2.16.0 backports.tarfile 1.2.0 bcrypt (алгоритм хеширования паролей) 4.3.0
beautifulsoup4 4.12.3 черный 24.10.0 отбеливатель 6.2.0
указатель поворота 1.7.0 блаженство 0.7.11 boto3 1.40.45
botocore 1.40.45 brotli 1.2.0 инструменты для кэша 5.5.1
каталог 2.0.10 сертификат 2025.4.26 cffi 1.17.1
chardet 4.0.0 нормализатор кодировки 3.3.2 автоматический выключатель 2.1.3
щелчок 8.1.8 cloudpathlib 0.23.0 Клаудпикл 3.0.0
cmdstanpy 1.3.0 колоритный 0.5.8 colorlog 6.10.1
коммуникация 0.2.1 конфеты 0.1.5 Contourpy 1.3.1
cramjam 2.11.0 криптография 44.0.1 велосипедист 0.11.0
цимем 2.0.12 Cython 3.1.5 дацит 1.9.2
databricks-агенты 1.9.1 фичерная инженерия Databricks 0.13.0.1 databricks-sdk 0.67.0
dataclasses-json 0.6.7 Наборы данных 4.3.0 dbl-tempo 0.1.26
dbus-python 1.3.2 debugpy 1.8.11 декоратор 5.1.1
DeepSpeed 0.18.1 defusedxml 0.7.1 deltalake 1.1.4
Deprecated 1.2.18 укроп 0.3.8 Дистлиб 0.3.9
dm-tree 0.1.9 Конвертация docstring в markdown 0.11 einops 0.8.1
оценивать 0.4.6 исполнение 1.2.0 Обзор аспектов 1.1.1
Farama-Уведомления 0.0.4 fastapi 0.121.2 fastjsonschema 2.21.1
файловая блокировка 3.17.0 тип файла 1.2.0 flash_attn 2.8.3
Фляжка 2.2.5 FlatBuffers 25.9.23 шрифтовые инструменты 4.55.3
Полное доменное имя (FQDN) 1.5.1 замороженный список 1.5.0 fsspec 2023.5.0
гаст 0.6.0 gitdb 4.0.11 GitPython 3.1.43
google-api-core 2.28.1 google-auth (аутентификация от Google) 2.43.0 google-cloud-core (основной модуль Google Cloud) 2.5.0
облачное хранилище Google 3.2.0 google-crc32c 1.7.1 гугл-паста 0.2.0
гугл-возобновляемые-медиа 2.7.2 googleapis-common-protos (общие протоколы googleapis) 1.65.0 graphql-core 3.2.4
гринлет 3.1.1 grpcio 1.67.0 grpcio-status 1.67.0
спортзал 0.28.1 h11 0.16.0 h5py 3.12.1
hf-xet 1.2.0 hjson 3.1.0 каникулы 0.54
httpcore 1.0.9 httplib2 0.20.4 httpx 0.28.1
платформа huggingface-hub 0.36.0 IDNA 3,7 ImageHash (Хэш изображений) 4.3.1
imageio 2.37.0 imbalanced-learn (библиотека Python для работы с несбалансированными данными) 0.13.0 importlib_metadata 8.5.0
importlib_resources 6.5.2 склонять 7.3.1 iniconfig 1.1.1
ipyflow-core 0.0.209 ipykernel 6.29.5 ipython 8.30.0
ipython-genutils (утилиты для iPython) 0.2.0 ipywidgets 7.8.1 isodate (стандартная дата ISO) 0.7.2
изодурация 20.11.0 это опасно 2.2.0 jaraco.collections 5.1.0
jaraco.context 5.3.0 jaraco.functools 4.0.1 jaraco.text 3.12.1
Джакс-Джампи 1.0.0 джедаи 0.19.2 Джинджа2 3.1.6
джиттер 0.12.0 jmespath 1.0.1 joblib 1.4.2
joblibspark 0.6.0 json5 0.9.25 jsonpatch 1.33
Джсонпоинтер (jsonpointer) 3.0.0 jsonschema (JSON-схема) 4.23.0 jsonschema-спецификации 2023.7.1
jupyter 1.1.1 "Jupyter-консоль" 6.6.3 Jupyter-события 0.12.0
jupyter-lsp 2.2.5 клиент Jupyter 8.6.3 jupyter_core (ядро Jupyter) 5.7.2
Джупитер_сервер 2.15.0 терминалы_сервера_jupyter 0.5.3 jupyterlab 4.3.4
jupyterlab_pygments 0.3.0 jupyterlab_server (сервер для JupyterLab) 2.27.3 jupyterlab_widgets 1.1.11
Керас 3.12.0 Кивисолвер 1.4.8 Лангчейн 1.0.3
langchain-core 1.0.4 langchain-openai 1.0.2 языковые коды 3.5.0
langgraph 1.0.3 langgraph-контрольная точка 3.0.1 langgraph-prebuilt 1.0.4
langgraph-sdk 0.2.9 langsmith 0.4.41 языковые данные 1.3.0
launchpadlib 1.11.0 lazr.restfulclient 0.14.6 lazr.uri 1.0.6
ленивый загрузчик 0,4 libclang 15.0.6.1 librosa 0.11.0
LightGBM (фреймворк для машинного обучения) 4.6.0 linkify-it-py 2.0.0 litellm 1.75.9
llvmlite 0.44.0 lz4 4.3.2 Мако 1.3.10
мариса-три 1.2.0 Markdown (язык разметки) 3.8 markdown-it-py 2.2.0
MarkupSafe 3.0.2 зефир 3.26.1 matplotlib 3.10.0
матплотлиб-инлайн 0.1.7 МакКейб 0.7.0 mdit-py-plugins 0.3.0
mdurl 0.1.0 Мемрей 1.19.1 Минификация HTML 0.18.1
Мистун 3.1.2 ml_dtypes 0.5.3 mlflow-skinny (упрощённая версия пакета mlflow) 3.8.1
mmh3 5.2.0 more-itertools 10.3.0 mosaicml-streaming 0.13.0
mpmath 1.3.0 msal 1.34.0 msal-extensions 1.3.1
msgpack 1.1.2 мультидикт 6.1.0 мультиметод 1.12
многопроцессорный 0.70.16 murmurhash (алгоритм хеширования MurmurHash) 1.0.14 mypy-extensions (расширения для mypy) 1.0.0
namex 0.1.0 nbclient 0.10.2 Перекодировщик nbconvert 7.16.6
nbformat 5.10.4 nest-asyncio 1.6.0 networkx 3.4.2
ниндзя 1.13.0 nltk (Natural Language Toolkit) 3.9.1 nodeenv 1.9.1
notebook 7.3.2 ноутбук_шим 0.2.4 намба 0.61.0
numpy (библиотека для работы с массивами и матрицами в Python) 2.1.3 nvidia-cublas-cu12 12.9.1.4 nvidia-cuda-cupti-cu12 12.9.79
nvidia-cuda-nvrtc-cu12 12.9.86 nvidia-cuda-runtime-cu12 12.9.79 nvidia-cudnn-cu12 9.10.2.21
nvidia-cufft-cu12 11.4.1.4 nvidia-cufile-cu12 1.14.1.1 nvidia-curand-cu12 10.3.10.19
nvidia-cusolver-cu12 11.7.5.82 nvidia-cusparse-cu12 12.5.10.65 nvidia-cusparselt-cu12 0.7.1
nvidia-ml-py 13.580.82 nvidia-nccl-cu12 2.27.5 nvidia-nvjitlink-cu12 12.9.86
nvidia-nvshmem-cu12 3.3.20 nvidia-nvtx-cu12 12.9.79 OAuthlib 3.2.0
oci 2.163.1 openai 2.7.0 opencensus 0.11.4
opencensus-context 0.1.3 opentelemetry-api 1.38.0 opentelemetry-proto 1.38.0
opentelemetry-sdk 1.38.0 cемантические соглашения opentelemetry 0.59b0 opt_einsum 3.4.0
optree 0.17.0 optuna 3.6.1 интеграция optuna 3.6.0
orjson 3.11.4 ormsgpack 1.12.0 Переопределения 7.4.0
упаковка 24,2 Панды 2.2.3 пандокфильтры 1.5.0
paramiko 3.5.1 Парсо 0.8.4 спецификация пути 0.10.3
простак 1.0.1 pexpect (библиотека Python для автоматизации взаимодействия с приложениями) 4.8.0 фик 0.12.5
подушка 11.1.0 пит 25.0.1 Platformdirs 4.3.7
библиотека Plotly для визуализации данных 5.24.1 менеджер плагинов Pluggy 1.5.0 пёс 1.8.2
придавленный 3.0.11 prometheus_client 0.21.1 prompt-toolkit (инструментарий подсказок) 3.0.43
кэш свойств 0.3.1 пророк 1.2.1 proto-plus 1.26.1
protobuf (протобуф) 5.29.4 psutil (пакет Python для работы с процессами и системами) 5.9.0 psycopg2 2.9.11
ptyprocess 0.7.0 пьюр-эвэл 0.2.2 puremagic 1.30
py-cpuinfo 9.0.0 py-spy 0.4.1 pyarrow 21.0.0
pyasn1 0.4.8 pyasn1-modules 0.2.8 Пикколо 0.0.71
pycparser 2.21 pydantic (библиотека Python для валидации данных) 2.10.6 pydantic_core 2.27.2
pyflakes (аналитический инструмент для Python) 3.2.0 Пигменты 2.19.1 PyGObject 3.48.2
pyiceberg 0.10.0 PyJWT 2.10.1 PyNaCl 1.5.0
pyodbc 5.2.0 pyOpenSSL 25.0.0 pyparsing (библиотека для синтаксического анализа в Python) 3.2.0
pyright 1.1.394 пироаринг 1.0.3 pytesseract 0.3.10
pytest 8.3.5 python-dateutil (библиотека для работы с датами и временем в Python) Версия 2.9.0.post0 python-dotenv 1.2.1
редактор Python 1.0.4 python-json-logger (пакет для логирования JSON в Python) 3.2.1 python-lsp-jsonrpc 1.1.2
python-lsp-server (сервер Python LSP) 1.12.2 Python-Snappy 0.7.3 Pytoolconfig 1.2.6
pytz (библиотека Python для работы с часовыми поясами) 2024.1 PyWavelets 1.8.0 PyYAML 6.0.2
pyzmq 26.2.0 луч 2.37.0 Ссылки 0.30.2
regex 2024.11.6 Запросы 2.32.3 requests-toolbelt 1.0.0
rfc3339-валидатор 0.1.4 rfc3986-validator 0.1.1 богатый 13.9.4
верёвка 1.13.0 rpds-py 0.22.3 rsa 4.9.1
s3transfer 0.14.0 safetensors 0.6.2 scikit-image 0.25.0
scikit-learn (библиотека машинного обучения) 1.6.1 scipy (библиотека Python) 1.15.3 мореборн 0.13.2
Send2Trash 1.8.2 преобразователи предложений (sentence-transformers) 5.1.2 предложение 0.2.1
setuptools (пакет для установки и управления Python-пакетами) 78.1.1 шап 0.49.1 шеллингем 1.5.4
шесть 1.17.0 sklearn-compat 0.1.3 Нарезчик 0.0.8
smart_open 7.5.0 сммап 5.0.0 сниффио 1.3.0
отсортированные контейнеры 2.4.0 аудиофайл 0.13.1 ситечко для супа 2.5
soxr 1.0.0 просторный 3.7.5 spacy-legacy 3.0.12
спейси-логгеры 1.0.5 SQLAlchemy 2.0.39 sqlparse 0.5.3
серьёзно? 2.5.1 ssh-import-id (импортировать идентификатор SSH) 5.11 стековые данные 0.6.3
стэнио 0.5.1 старлетка 0.49.3 statsmodels (библиотека Python для статистического моделирования) 0.14.4
strictyaml 1.7.3 SymPy 1.13.3 упорство 9.0.0
ТензорБорд 2.20.0 tensorboard-data-server (сервер данных TensorBoard) 0.7.2 tensorboardX 2.6.4
Tensorflow 2.20.0 термколор 3.2.0 закончено 0.17.1
текстуальный 4.0.0 tf_keras 2.20.1 тонкий 8.2.4
Threadpoolctl 3.5.0 tifffile (файл формата TIFF) 2025.2.18 тиктокен 0.9.0
tinycss2 1.4.0 tokenize_rt 6.1.0 токенизаторы 0.22.1
томли 2.0.1 факел 2.9.0+cu129 факел 0.0.7
torchvision (библиотека PyTorch для компьютерного зрения) 0.24.0+cu129 торнадо 6.5.1 tqdm 4.67.1
Трейтлеты 5.14.3 Трансформаторы 4.57.1 тритон 3.5.0
типгард 4.4.2 машинистка / печатник / типировщик 0.20.0 typer-slim 0.20.0
types-python-dateutil 2.9.0.20251108 ввод текста и проверка 0.9.0 typing_extensions (расширения для ввода текста) 4.12.2
tzdata 2024.1 uc-micro-py 1.0.1 ujson 5.10.0
автоматические обновления без участия пользователя 0,1 URI-шаблон 1.3.0 urllib3 2.3.0
uvicorn 0.38.0 virtualenv 20.29.3 Видения 0.8.1
wadllib 1.3.6 васаби 1.1.3 wcwidth (ширина символа в Unicode) 0.2.5
ласка 0.4.3 webcolors 25.10.0 веб-энкодинги 0.5.1
websocket-клиент 1.8.0 Инструмент 3.1.3 чтоэто за патч 1.0.2
колесо 0.45.1 когда бы ни 0.7.3 widgetsnbextension 3.6.6
облако слов 1.9.4 завёрнут 1.17.0 xgboost 3.1.1
xgboost-ray 0.1.19 xxhash 3.5.0 yapf (форматировщик Python кода) 0.40.2
ярл 1.18.0 ydata-profiling 4.17.0 ZIPP 3.21.0
zstandard 0.23.0 zstd 1.5.5.1

Библиотеки R

Библиотеки R идентичны библиотекам R в Databricks Runtime 18.1.

Библиотеки Java и Scala (кластер Scala 2.13)

Помимо библиотек Java и Scala в Databricks Runtime 18.1, Databricks Runtime 18.1 ML содержит следующие JAR:

Кластеры ЦП

Идентификатор группы Идентификатор артефакта Версия
ml.dmlc xgboost4j-spark_2.13 2.1.3
ml.dmlc xgboost4j_2.13 2.1.3
org.graphframes graphframes_2.13 0.8.4-db1-spark3.5
org.mlflow mlflow-client 2.15.1
org.scala-lang.modules scala-collection-compat_2.13 2.12.0
org.tensorflow spark-tensorflow-connector_2.13 1.15.0

Кластеры GPU

Идентификатор группы Идентификатор артефакта Версия
ml.dmlc xgboost4j-spark_2.13 2.1.3
ml.dmlc xgboost4j_2.13 2.1.3
org.graphframes graphframes_2.13 0.8.4-db1-spark3.5
org.mlflow mlflow-client 2.15.1
org.scala-lang.modules scala-collection-compat_2.13 2.12.0
org.tensorflow spark-tensorflow-connector_2.13 1.15.0

Неподдерживаемые выпуски

Подсказка

Чтобы ознакомиться с примечаниями к версиям Databricks Runtime, которые достигли окончания поддержки (EoS), см. Примечания к версиям Databricks Runtime с окончанием поддержки. Версии среды выполнения EoS Databricks устарели и могут не обновляться.