Databricks Runtime 18.2 для Machine Learning (бета-версия)

В следующих заметках о выпуске содержатся сведения о Databricks Runtime 18.2 ML.

Эта версия Azure Databricks была выпущена в апреле 2026 года.

Это важно

Databricks Runtime 18.2 находится в бета-версии. Содержимое поддерживаемых сред может измениться во время бета-версии. Изменения могут включать список пакетов или версий установленных пакетов.

Databricks Runtime 18.2 ML построен на основе Databricks Runtime 18.2. Сведения о новых возможностях Databricks Runtime 18.2, включая Apache Spark MLlib и SparkR, см. в заметках о выпуске Databricks Runtime 18.2 (бета-версия).

Новые функции и улучшения

Ниже перечислены некоторые обновления библиотеки:

  • Обновление CUDA до версии 12.9
  • flash_attn 2.8.3
  • keras 3.12.0
  • langchain 1.0.3
  • mlflow-skinny 3.8.1
  • openai 2.7.0
  • факел 2.9.0
  • torchvision 0.24.0
  • преобразователи 4.57.1
  • triton 3.5.0
  • xgboost 3.1.1

Системная среда

Системная среда в Databricks Runtime 18.2 ML отличается от Databricks Runtime 18.2, как показано ниже.

  • Для кластеров GPU в Databricks Runtime ML входят следующие библиотеки GPU NVIDIA:
    • CUDA 12.9
    • cublas 12.9.1.4-1
    • cusolver 11.7.5.82
    • cupti 12.9.79
    • cusparse 12.5.10.65
    • cuDNN 9.10.2.21
    • NCCL 2.27.5

Libraries

В следующих разделах перечислены библиотеки, включенные в Databricks Runtime 18.2 ML, которые отличаются от библиотек, включенных в Databricks Runtime 18.2.

Библиотеки верхнего уровня

Databricks Runtime 18.2 ML включает следующие библиотеки верхнего уровня:

библиотеки Python

Databricks Runtime 18.2 ML использует virtualenv для управления пакетами Python и включает множество популярных пакетов машинного обучения.

Чтобы воспроизвести среду Python в среде выполнения Databricks в локальной виртуальной среде Python, загрузите requirements-cpu-18.2.txt для кластеров CPU или requirements-gpu-18.2.txt для кластеров GPU. Затем запустите pip install -r requirements-<cpu|gpu>-18.2.txt. Эта команда устанавливает все библиотеки open source, которые использует Databricks Runtime ML, но не устанавливает библиотеки, разработанные Databricks.

библиотеки Python в кластерах ЦП

Библиотека Версия Библиотека Версия Библиотека Версия
absl-py 2.3.1 ускорить 1.11.0 aiohappyeyeballs 2.4.4
aiohttp 3.11.10 aiohttp-cors 0.8.1 aiosignal 1.2.0
алембик 1.17.1 аннотированный документ 0.0.4 annotated-types 0.7.0
anyio 4.7.0 argon2-cffi 21.3.0 argon2-cffi-bindings 21.2.0
arro3-core 0.6.5 стрела 1.3.0 asttokens 3.0.0
astunparse 1.6.3 async-lru 2.0.4 атрибуты 24.3.0
аудиочтение 3.1.0 azure-common 1.1.28 azure-core 1.36.0
azure-cosmos 4.3.1 azure-identity 1.20.0 Платформа управления Azure (azure-mgmt-core) 1.6.0
azure-mgmt-web 8.0.0 azure-storage-blob 12.27.1 хранилище файлов данных Azure Data Lake 12.22.0
Бабель 2.16.0 bcrypt (алгоритм хеширования паролей) 4.3.0 beautifulsoup4 4.12.3
черный 24.10.0 отбеливатель 6.2.0 блинкер 1.7.0
блаженство 0.7.11 boto3 1.40.45 botocore 1.40.45
brotli 1.2.0 инструменты для кэша 5.5.1 каталог 2.0.10
сертификат 2025.4.26 cffi 1.17.1 chardet 4.0.0
нормализатор кодировки 3.3.2 автоматический выключатель 2.1.3 щелчок 8.1.8
cloudpathlib 0.23.0 Клаудпикл 3.0.0 cmdstanpy 1.3.0
колоритный 0.5.8 colorlog 6.10.1 коммуникация 0.2.1
конфеты 0.1.5 Contourpy 1.3.1 cramjam 2.11.0
криптография 44.0.1 велосипедист 0.11.0 цимем 2.0.12
Cython 3.1.5 дацит 1.9.2 databricks-агенты 1.9.1
фичерная инженерия Databricks 0.13.0.1 databricks-sdk 0.67.0 dataclasses-json 0.6.7
Наборы данных 4.3.0 dbl-tempo 0.1.26 dbus-python 1.3.2
debugpy 1.8.11 декоратор 5.1.1 DeepSpeed 0.18.1
defusedxml 0.7.1 deltalake 1.1.4 Deprecated 1.2.18
укроп 0.3.8 Дистлиб 0.3.9 дистрибутив 1.9.0
информация о дистрибутиве 1.7+build1 dm-tree 0.1.9 docstring-to-markdown 0.11
einops 0.8.1 оценивать 0.4.6 исполнение 1.2.0
Обзор аспектов 1.1.1 Farama-Уведомления 0.0.4 fastapi 0.121.2
fastjsonschema 2.21.1 файловая блокировка 3.17.0 тип файла 1.2.0
Flask 2.2.5 FlatBuffers 25.9.23 шрифтовые инструменты 4.55.3
Полное доменное имя (FQDN) 1.5.1 замороженный список 1.5.0 fsspec 2023.5.0
гаст 0.6.0 gitdb 4.0.11 GitPython 3.1.43
google-api-core 2.28.1 google-auth (аутентификация от Google) 2.43.0 google-cloud-core (основной модуль Google Cloud) 2.5.0
облачное хранилище Google 3.2.0 google-crc32c 1.7.1 гугл-паста 0.2.0
google-resumable-media 2.7.2 googleapis-common-protos (общие протоколы googleapis) 1.65.0 graphql-core 3.2.4
гринлет 3.1.1 grpcio 1.67.0 grpcio-status 1.67.0
спортзал 0.28.1 h11 0.16.0 h5py 3.12.1
hf-xet 1.2.0 hjson 3.1.0 каникулы 0.54
httpcore 1.0.9 httplib2 0.20.4 httpx 0.28.1
платформа huggingface-hub 0.36.0 IDNA 3,7 ImageHash (Хэш изображений) 4.3.1
imageio 2.37.0 imbalanced-learn (библиотека Python для работы с несбалансированными данными) 0.13.0 importlib_metadata 8.5.0
importlib_resources 6.5.2 iniconfig 1.1.1 ipyflow-core 0.0.209
ipykernel 6.29.5 ipython 8.30.0 ipython-genutils 0.2.0
ipywidgets 7.8.1 isodate 0.7.2 изодурация 20.11.0
это опасно 2.2.0 Джакс-Джампи 1.0.0 jedi 0.19.2
Джинджа2 3.1.6 джиттер 0.12.0 jmespath 1.0.1
joblib 1.4.2 joblibspark 0.6.0 json5 0.9.25
jsonpatch 1.33 Джсонпоинтер (jsonpointer) 3.0.0 jsonschema (JSON-схема) 4.23.0
jsonschema-спецификации 2023.7.1 jupyter 1.1.1 "Jupyter-консоль" 6.6.3
Jupyter-события 0.12.0 jupyter-lsp 2.2.5 клиент Jupyter 8.6.3
jupyter_core (ядро Jupyter) 5.7.2 Джупитер_сервер 2.15.0 терминалы_сервера_jupyter 0.5.3
jupyterlab 4.3.4 jupyterlab_pygments 0.3.0 jupyterlab_server (сервер для JupyterLab) 2.27.3
jupyterlab_widgets 1.1.11 Керас 3.12.0 Кивисолвер 1.4.8
Лангчейн 1.0.3 langchain-core 1.0.4 langchain-openai 1.0.2
языковые коды 3.5.0 langgraph 1.0.3 langgraph-контрольная точка 3.0.1
langgraph-prebuilt 1.0.4 langgraph-sdk 0.2.9 langsmith 0.4.41
языковые данные 1.3.0 launchpadlib 1.11.0 lazr.restfulclient 0.14.6
lazr.uri 1.0.6 ленивый загрузчик 0,4 libclang 15.0.6.1
librosa 0.11.0 LightGBM (фреймворк для машинного обучения) 4.6.0 linkify-it-py 2.0.0
litellm 1.75.9 llvmlite 0.44.0 lz4 4.3.2
Мако 1.3.10 мариса-три 1.2.0 Markdown (язык разметки) 3,8
markdown-it-py 2.2.0 MarkupSafe 3.0.2 зефир 3.26.1
matplotlib 3.10.0 матплотлиб-инлайн 0.1.7 МакКейб 0.7.0
mdit-py-plugins 0.3.0 mdurl 0.1.0 Мемрей 1.19.1
Минификация HTML 0.18.1 Мистун 3.1.2 ml_dtypes 0.5.3
mlflow-skinny 3.8.1 mmh3 5.2.0 mosaicml-streaming 0.13.0
mpmath 1.3.0 msal 1.34.0 msal-extensions 1.3.1
msgpack 1.1.2 мультидикт 6.1.0 мультиметод 1.12
многопроцессорный 0.70.16 murmurhash (алгоритм хеширования MurmurHash) 1.0.14 mypy-extensions (расширения для mypy) 1.0.0
namex 0.1.0 nbclient 0.10.2 Перекодировщик nbconvert 7.16.6
nbformat 5.10.4 nest-asyncio 1.6.0 networkx 3.4.2
ниндзя 1.13.0 nltk (Natural Language Toolkit) 3.9.1 nodeenv 1.9.1
notebook 7.3.2 ноутбук_шим 0.2.4 намба 0.61.0
numpy (библиотека для работы с массивами и матрицами в Python) 2.1.3 nvidia-nccl-cu12 2.28.7 oauthlib 3.2.0
oci 2.163.1 openai 2.7.0 opencensus 0.11.4
opencensus-context 0.1.3 opentelemetry-api 1.38.0 opentelemetry-proto 1.38.0
opentelemetry-sdk 1.38.0 семантические соглашения opentelemetry 0.59b0 opt_einsum 3.4.0
optree 0.17.0 optuna 3.6.1 интеграция optuna 3.6.0
orjson 3.11.4 ormsgpack 1.12.0 Переопределения 7.4.0
упаковка 24,2 Панды 2.2.3 пандокфильтры 1.5.0
paramiko 3.5.1 Парсо 0.8.4 спецификация пути 0.10.3
простак 1.0.1 pexpect (библиотека Python для автоматизации взаимодействия с приложениями) 4.8.0 фик 0.12.5
подушка 11.1.0 platformdirs 4.3.7 библиотека Plotly для визуализации данных 5.24.1
менеджер плагинов Pluggy 1.5.0 пёс 1.8.2 придавленный 3.0.11
prometheus_client 0.21.1 prompt-toolkit (инструментарий подсказок) 3.0.43 кэш свойств 0.3.1
пророк 1.2.1 proto-plus 1.26.1 protobuf (протобуф) 5.29.4
psutil 5.9.0 psycopg2 2.9.11 ptyprocess 0.7.0
pure-eval 0.2.2 puremagic 1,30 py-cpuinfo 9.0.0
py-spy 0.4.1 pyarrow 21.0.0 pyasn1 0.4.8
pyasn1-modules 0.2.8 Пикколо 0.0.71 pycparser 2.21
pydantic 2.10.6 pydantic_core 2.27.2 pyflakes 3.2.0
Пигменты 2.19.1 PyGObject 3.48.2 pyiceberg 0.10.0
PyJWT 2.10.1 PyNaCl 1.5.0 pyodbc 5.2.0
pyOpenSSL 25.0.0 pyparsing (библиотека для синтаксического анализа в Python) 3.2.0 pyright 1.1.394
пироаринг 1.0.3 pytesseract 0.3.10 pytest 8.3.5
python-apt 2.7.7+ubuntu5.2 python-dateutil (библиотека для работы с датами и временем в Python) 2.9.0.post0 python-dotenv 1.2.1
редактор Python 1.0.4 python-json-logger (пакет для логирования JSON в Python) 3.2.1 python-lsp-jsonrpc 1.1.2
python-lsp-server (сервер Python LSP) 1.12.2 Python-Snappy 0.7.3 Pytoolconfig 1.2.6
pytz (библиотека Python для работы с часовыми поясами) 2024.1 PyWavelets 1.8.0 PyYAML 6.0.2
pyzmq 26.2.0 луч 2.37.0 Ссылки 0.30.2
regex 2024.11.6 Запросы 2.32.3 requests-toolbelt 1.0.0
rfc3339-валидатор 0.1.4 rfc3986-validator 0.1.1 богатый 13.9.4
верёвка 1.13.0 rpds-py 0.22.3 rsa 4.9.1
s3transfer 0.14.0 safetensors 0.6.2 scikit-image 0.25.0
scikit-learn (библиотека машинного обучения) 1.6.1 scipy (библиотека Python) 1.15.3 мореборн 0.13.2
Send2Trash 1.8.2 преобразователи предложений (sentence-transformers) 5.1.2 предложение 0.2.1
setuptools (пакет для установки и управления Python-пакетами) 78.1.1 шап 0.49.1 шеллингем 1.5.4
шесть 1.17.0 sklearn-compat 0.1.3 Нарезчик 0.0.8
smart_open 7.5.0 сммап 5.0.0 sniffio 1.3.0
отсортированные контейнеры 2.4.0 аудиофайл 0.13.1 ситечко для супа 2.5
soxr 1.0.0 просторный 3.7.5 spacy-legacy 3.0.12
спейси-логгеры 1.0.5 SQLAlchemy 2.0.39 sqlparse 0.5.3
серьёзно? 2.5.1 ssh-import-id 5.11 стековые данные 0.6.3
стэнио 0.5.1 старлетка 0.49.3 statsmodels (библиотека Python для статистического моделирования) 0.14.4
strictyaml 1.7.3 SymPy 1.13.3 упорство 9.0.0
ТензорБорд 2.20.0 tensorboard-data-server (сервер данных TensorBoard) 0.7.2 tensorboardX 2.6.4
Tensorflow 2.20.0 термколор 3.2.0 закончено 0.17.1
текстуальный 4.0.0 tf_keras 2.20.1 тонкий 8.2.4
Threadpoolctl 3.5.0 tifffile (файл формата TIFF) 2025.2.18 тиктокен 0.9.0
tinycss2 1.4.0 tokenize_rt 6.1.0 токенизаторы 0.22.1
томли 2.0.1 факел 2.9.0+цп факел 0.0.7
torchvision (библиотека PyTorch для компьютерного зрения) 0.24.0+cpu торнадо 6.5.1 tqdm 4.67.1
Трейтлеты 5.14.3 Трансформаторы 4.57.1 typeguard 4.4.2
машинистка / печатник / типировщик 0.20.0 typer-slim 0.20.0 types-python-dateutil 2.9.0.20251108
ввод текста и проверка 0.9.0 typing_extensions (расширения для ввода текста) 4.12.2 tzdata 2024.1
uc-micro-py 1.0.1 ujson 5.10.0 обновления без вмешательства пользователя 0,1
URI-шаблон 1.3.0 urllib3 2.3.0 uvicorn 0.38.0
virtualenv 20.29.3 Видения 0.8.1 wadllib 1.3.6
васаби 1.1.3 wcwidth (ширина символа в Unicode) 0.2.5 ласка 0.4.3
webcolors 25.10.0 веб-энкодинги 0.5.1 websocket-клиент 1.8.0
Инструмент 3.1.3 whatthepatch 1.0.2 колесо 0.45.1
когда бы ни 0.7.3 widgetsnbextension 3.6.6 облако слов 1.9.4
завёрнут 1.17.0 xgboost 3.1.1 xgboost-ray 0.1.19
xxhash 3.5.0 yapf 0.40.2 ярл 1.18.0
ydata-profiling 4.17.0 ZIPP 3.21.0 zstandard 0.23.0
zstd 1.5.5.1

библиотеки Python в кластерах GPU

Замечание

PyTorch использует зависимости PyPI CUDA для предоставления поддержки CUDA вместо версий библиотеки CUDA, встроенных в Databricks Runtime 18.2 ML.

Библиотека Версия Библиотека Версия Библиотека Версия
absl-py 2.3.1 ускорить 1.11.0 aiohappyeyeballs 2.4.4
aiohttp 3.11.10 aiohttp-cors 0.8.1 aiosignal 1.2.0
аннотированный документ 0.0.4 annotated-types 0.7.0 anyio 4.7.0
argon2-cffi 21.3.0 argon2-cffi-bindings 21.2.0 arro3-core 0.6.5
стрела 1.3.0 asttokens 3.0.0 astunparse 1.6.3
async-lru 2.0.4 атрибуты 24.3.0 аудиочтение 3.1.0
azure-common 1.1.28 azure-core 1.36.0 azure-cosmos 4.3.1
azure-identity 1.20.0 Платформа управления Azure (azure-mgmt-core) 1.6.0 azure-mgmt-web 8.0.0
azure-storage-blob 12.27.1 хранилище файлов данных Azure Data Lake 12.22.0 Бабель 2.16.0
bcrypt (алгоритм хеширования паролей) 4.3.0 beautifulsoup4 4.12.3 черный 24.10.0
отбеливатель 6.2.0 блинкер 1.7.0 блаженство 0.7.11
boto3 1.40.45 botocore 1.40.45 brotli 1.2.0
инструменты для кэша 5.5.1 каталог 2.0.10 сертификат 2025.4.26
cffi 1.17.1 chardet 4.0.0 нормализатор кодировки 3.3.2
автоматический выключатель 2.1.3 щелчок 8.1.8 cloudpathlib 0.23.0
Клаудпикл 3.0.0 cmdstanpy 1.3.0 колоритный 0.5.8
colorlog 6.10.1 коммуникация 0.2.1 конфеты 0.1.5
Contourpy 1.3.1 cramjam 2.11.0 криптография 44.0.1
велосипедист 0.11.0 цимем 2.0.12 Cython 3.1.5
дацит 1.9.2 databricks-агенты 1.9.1 фичерная инженерия Databricks 0.13.0.1
databricks-sdk 0.67.0 dataclasses-json 0.6.7 Наборы данных 4.3.0
dbl-tempo 0.1.26 dbus-python 1.3.2 debugpy 1.8.11
декоратор 5.1.1 DeepSpeed 0.18.1 defusedxml 0.7.1
deltalake 1.1.4 Deprecated 1.2.18 укроп 0.3.8
Дистлиб 0.3.9 дистрибутив 1.9.0 информация о дистрибутиве 1.7+build1
dm-tree 0.1.9 docstring-to-markdown 0.11 einops 0.8.1
оценивать 0.4.6 исполнение 1.2.0 Обзор аспектов 1.1.1
Farama-Уведомления 0.0.4 fastapi 0.121.2 fastjsonschema 2.21.1
файловая блокировка 3.17.0 тип файла 1.2.0 flash_attn 2.8.3
Flask 2.2.5 FlatBuffers 25.9.23 шрифтовые инструменты 4.55.3
Полное доменное имя (FQDN) 1.5.1 замороженный список 1.5.0 fsspec 2023.5.0
гаст 0.6.0 gitdb 4.0.11 GitPython 3.1.43
google-api-core 2.28.1 google-auth (аутентификация от Google) 2.43.0 google-cloud-core (основной модуль Google Cloud) 2.5.0
облачное хранилище Google 3.2.0 google-crc32c 1.7.1 гугл-паста 0.2.0
google-resumable-media 2.7.2 googleapis-common-protos (общие протоколы googleapis) 1.65.0 graphql-core 3.2.4
гринлет 3.1.1 grpcio 1.67.0 grpcio-status 1.67.0
спортзал 0.28.1 h11 0.16.0 h5py 3.12.1
hf-xet 1.2.0 hjson 3.1.0 каникулы 0.54
httpcore 1.0.9 httplib2 0.20.4 httpx 0.28.1
платформа huggingface-hub 0.36.0 IDNA 3,7 ImageHash (Хэш изображений) 4.3.1
imageio 2.37.0 imbalanced-learn (библиотека Python для работы с несбалансированными данными) 0.13.0 importlib_metadata 8.5.0
importlib_resources 6.5.2 iniconfig 1.1.1 ipyflow-core 0.0.209
ipykernel 6.29.5 ipython 8.30.0 ipython-genutils 0.2.0
ipywidgets 7.8.1 isodate 0.7.2 изодурация 20.11.0
это опасно 2.2.0 Джакс-Джампи 1.0.0 jedi 0.19.2
Джинджа2 3.1.6 джиттер 0.12.0 jmespath 1.0.1
joblib 1.4.2 joblibspark 0.6.0 json5 0.9.25
jsonpatch 1.33 Джсонпоинтер (jsonpointer) 3.0.0 jsonschema (JSON-схема) 4.23.0
jsonschema-спецификации 2023.7.1 jupyter 1.1.1 "Jupyter-консоль" 6.6.3
Jupyter-события 0.12.0 jupyter-lsp 2.2.5 клиент Jupyter 8.6.3
jupyter_core (ядро Jupyter) 5.7.2 Джупитер_сервер 2.15.0 терминалы_сервера_jupyter 0.5.3
jupyterlab 4.3.4 jupyterlab_pygments 0.3.0 jupyterlab_server (сервер для JupyterLab) 2.27.3
jupyterlab_widgets 1.1.11 Керас 3.12.0 Кивисолвер 1.4.8
Лангчейн 1.0.3 langchain-core 1.0.4 langchain-openai 1.0.2
языковые коды 3.5.0 langgraph 1.0.3 langgraph-контрольная точка 3.0.1
langgraph-prebuilt 1.0.4 langgraph-sdk 0.2.9 langsmith 0.4.41
языковые данные 1.3.0 launchpadlib 1.11.0 lazr.restfulclient 0.14.6
lazr.uri 1.0.6 ленивый загрузчик 0,4 libclang 15.0.6.1
librosa 0.11.0 LightGBM (фреймворк для машинного обучения) 4.6.0 linkify-it-py 2.0.0
litellm 1.75.9 llvmlite 0.44.0 lz4 4.3.2
Мако 1.3.10 мариса-три 1.2.0 Markdown (язык разметки) 3,8
markdown-it-py 2.2.0 MarkupSafe 3.0.2 зефир 3.26.1
matplotlib 3.10.0 матплотлиб-инлайн 0.1.7 МакКейб 0.7.0
mdit-py-plugins 0.3.0 mdurl 0.1.0 Мемрей 1.19.1
Минификация HTML 0.18.1 Мистун 3.1.2 ml_dtypes 0.5.3
mlflow-skinny 3.8.1 mmh3 5.2.0 mosaicml-streaming 0.13.0
mpmath 1.3.0 msal 1.34.0 msal-extensions 1.3.1
msgpack 1.1.2 мультидикт 6.1.0 мультиметод 1.12
многопроцессорный 0.70.16 murmurhash (алгоритм хеширования MurmurHash) 1.0.14 mypy-extensions (расширения для mypy) 1.0.0
namex 0.1.0 nbclient 0.10.2 Перекодировщик nbconvert 7.16.6
nbformat 5.10.4 nest-asyncio 1.6.0 networkx 3.4.2
ниндзя 1.13.0 nltk (Natural Language Toolkit) 3.9.1 nodeenv 1.9.1
notebook 7.3.2 ноутбук_шим 0.2.4 намба 0.61.0
numpy (библиотека для работы с массивами и матрицами в Python) 2.1.3 nvidia-cublas-cu12 12.9.1.4 nvidia-cuda-cupti-cu12 12.9.79
nvidia-cuda-nvrtc-cu12 12.9.86 nvidia-cuda-runtime-cu12 12.9.79 nvidia-cudnn-cu12 9.10.2.21
nvidia-cufft-cu12 11.4.1.4 nvidia-cufile-cu12 1.14.1.1 nvidia-curand-cu12 10.3.10.19
nvidia-cusolver-cu12 11.7.5.82 nvidia-cusparse-cu12 12.5.10.65 nvidia-cusparselt-cu12 0.7.1
nvidia-ml-py 13.580.82 nvidia-nccl-cu12 2.27.5 nvidia-nvjitlink-cu12 12.9.86
nvidia-nvshmem-cu12 3.3.20 nvidia-nvtx-cu12 12.9.79 oauthlib 3.2.0
oci 2.163.1 openai 2.7.0 opencensus 0.11.4
opencensus-context 0.1.3 opentelemetry-api 1.38.0 opentelemetry-proto 1.38.0
opentelemetry-sdk 1.38.0 семантические соглашения opentelemetry 0.59b0 opt_einsum 3.4.0
optree 0.17.0 optuna 3.6.1 интеграция optuna 3.6.0
orjson 3.11.4 ormsgpack 1.12.0 Переопределения 7.4.0
упаковка 24,2 Панды 2.2.3 пандокфильтры 1.5.0
paramiko 3.5.1 Парсо 0.8.4 спецификация пути 0.10.3
простак 1.0.1 pexpect (библиотека Python для автоматизации взаимодействия с приложениями) 4.8.0 фик 0.12.5
подушка 11.1.0 platformdirs 4.3.7 библиотека Plotly для визуализации данных 5.24.1
менеджер плагинов Pluggy 1.5.0 пёс 1.8.2 придавленный 3.0.11
prometheus_client 0.21.1 prompt-toolkit (инструментарий подсказок) 3.0.43 кэш свойств 0.3.1
пророк 1.2.1 proto-plus 1.26.1 protobuf (протобуф) 5.29.4
psutil 5.9.0 psycopg2 2.9.11 ptyprocess 0.7.0
pure-eval 0.2.2 puremagic 1,30 py-cpuinfo 9.0.0
py-spy 0.4.1 pyarrow 21.0.0 pyasn1 0.4.8
pyasn1-modules 0.2.8 Пикколо 0.0.71 pycparser 2.21
pydantic 2.10.6 pydantic_core 2.27.2 pyflakes 3.2.0
Пигменты 2.19.1 PyGObject 3.48.2 pyiceberg 0.10.0
PyJWT 2.10.1 PyNaCl 1.5.0 pyodbc 5.2.0
pyOpenSSL 25.0.0 pyparsing (библиотека для синтаксического анализа в Python) 3.2.0 pyright 1.1.394
пироаринг 1.0.3 pytesseract 0.3.10 pytest 8.3.5
python-apt 2.7.7+ubuntu5.2 python-dateutil (библиотека для работы с датами и временем в Python) 2.9.0.post0 python-dotenv 1.2.1
редактор Python 1.0.4 python-json-logger (пакет для логирования JSON в Python) 3.2.1 python-lsp-jsonrpc 1.1.2
python-lsp-server (сервер Python LSP) 1.12.2 Python-Snappy 0.7.3 Pytoolconfig 1.2.6
pytz (библиотека Python для работы с часовыми поясами) 2024.1 PyWavelets 1.8.0 PyYAML 6.0.2
pyzmq 26.2.0 луч 2.37.0 Ссылки 0.30.2
regex 2024.11.6 Запросы 2.32.3 requests-toolbelt 1.0.0
rfc3339-валидатор 0.1.4 rfc3986-validator 0.1.1 богатый 13.9.4
верёвка 1.13.0 rpds-py 0.22.3 rsa 4.9.1
s3transfer 0.14.0 safetensors 0.6.2 scikit-image 0.25.0
scikit-learn (библиотека машинного обучения) 1.6.1 scipy (библиотека Python) 1.15.3 мореборн 0.13.2
Send2Trash 1.8.2 преобразователи предложений (sentence-transformers) 5.1.2 предложение 0.2.1
setuptools (пакет для установки и управления Python-пакетами) 78.1.1 шап 0.49.1 шеллингем 1.5.4
шесть 1.17.0 sklearn-compat 0.1.3 Нарезчик 0.0.8
smart_open 7.5.0 сммап 5.0.0 sniffio 1.3.0
отсортированные контейнеры 2.4.0 аудиофайл 0.13.1 ситечко для супа 2.5
soxr 1.0.0 просторный 3.7.5 spacy-legacy 3.0.12
спейси-логгеры 1.0.5 SQLAlchemy 2.0.39 sqlparse 0.5.3
серьёзно? 2.5.1 ssh-import-id 5.11 стековые данные 0.6.3
стэнио 0.5.1 старлетка 0.49.3 statsmodels (библиотека Python для статистического моделирования) 0.14.4
strictyaml 1.7.3 SymPy 1.13.3 упорство 9.0.0
ТензорБорд 2.20.0 tensorboard-data-server (сервер данных TensorBoard) 0.7.2 tensorboardX 2.6.4
Tensorflow 2.20.0 термколор 3.2.0 закончено 0.17.1
текстуальный 4.0.0 tf_keras 2.20.1 тонкий 8.2.4
Threadpoolctl 3.5.0 tifffile (файл формата TIFF) 2025.2.18 тиктокен 0.9.0
tinycss2 1.4.0 tokenize_rt 6.1.0 токенизаторы 0.22.1
томли 2.0.1 факел 2.9.0+cu129 факел 0.0.7
torchvision (библиотека PyTorch для компьютерного зрения) 0.24.0+cu129 торнадо 6.5.1 tqdm 4.67.1
Трейтлеты 5.14.3 Трансформаторы 4.57.1 тритон 3.5.0
typeguard 4.4.2 машинистка / печатник / типировщик 0.20.0 typer-slim 0.20.0
types-python-dateutil 2.9.0.20251108 ввод текста и проверка 0.9.0 typing_extensions (расширения для ввода текста) 4.12.2
tzdata 2024.1 uc-micro-py 1.0.1 ujson 5.10.0
обновления без вмешательства пользователя 0,1 URI-шаблон 1.3.0 urllib3 2.3.0
uvicorn 0.38.0 virtualenv 20.29.3 Видения 0.8.1
wadllib 1.3.6 васаби 1.1.3 wcwidth (ширина символа в Unicode) 0.2.5
ласка 0.4.3 webcolors 25.10.0 веб-энкодинги 0.5.1
websocket-клиент 1.8.0 Инструмент 3.1.3 whatthepatch 1.0.2
колесо 0.45.1 когда бы ни 0.7.3 widgetsnbextension 3.6.6
облако слов 1.9.4 завёрнут 1.17.0 xgboost 3.1.1
xgboost-ray 0.1.19 xxhash 3.5.0 yapf 0.40.2
ярл 1.18.0 ydata-profiling 4.17.0 ZIPP 3.21.0
zstandard 0.23.0 zstd 1.5.5.1

Библиотеки R

Библиотеки R идентичны библиотекам R в Databricks Runtime 18.2.

Java и библиотеки Scala (кластер Scala 2.13)

Помимо библиотек Java и Scala в Databricks Runtime 18.2, Databricks Runtime 18.2 ML содержит следующие JAR:

Кластеры ЦП

Идентификатор группы Идентификатор артефакта Версия
ml.dmlc xgboost4j-spark_2.13 2.1.3
ml.dmlc xgboost4j_2.13 2.1.3
org.graphframes graphframes_2.13 0.8.4-db1-spark3.5
org.mlflow mlflow-client 2.15.1
org.scala-lang.modules scala-collection-compat_2.13 2.12.0
org.tensorflow spark-tensorflow-connector_2.13 1.15.0

Кластеры GPU

Идентификатор группы Идентификатор артефакта Версия
ml.dmlc xgboost4j-spark-gpu_2.13 2.1.3
ml.dmlc xgboost4j-gpu_2.13 2.1.3
org.graphframes graphframes_2.13 0.8.4-db1-spark3.5
org.mlflow mlflow-client 2.15.1
org.scala-lang.modules scala-collection-compat_2.13 2.12.0
org.tensorflow spark-tensorflow-connector_2.13 1.15.0

Неподдерживаемые выпуски

Подсказка

Чтобы ознакомиться с примечаниями к версиям Databricks Runtime, которые достигли окончания поддержки (EoS), см. Примечания к версиям Databricks Runtime с окончанием поддержки. Версии среды выполнения EoS Databricks устарели и могут не обновляться.