Databricks Runtime 16.1 per Machine Learning (EoS)

Nota

Il supporto per questa versione di Databricks Runtime è terminato. Per la data di fine del supporto, vedere Fine del supporto e cronologia di fine vita. Per tutte le versioni supportate di Databricks Runtime, vedere note di rilascio di Databricks Runtime: versioni e compatibilità.

Databricks Runtime 16.1 per Machine Learning offre un ambiente pronto all'uso per il machine learning e la data science basato su Databricks Runtime 16.1 (EoS). Databricks Runtime ML contiene molte librerie di Machine Learning più diffuse, tra cui TensorFlow, PyTorch e XGBoost. Databricks Runtime ML include AutoML, uno strumento per eseguire automaticamente il training delle pipeline di Machine Learning. Databricks Runtime ML supporta anche il training di Deep Learning distribuito usando TorchDistributor, DeepSpeed e Ray.

Nuove funzionalità e miglioramenti

Databricks Runtime 16.1 ML è basato su Databricks Runtime 16.1. Per informazioni sulle novità di Databricks Runtime 16.1, tra cui Apache Spark MLlib e SparkR, vedere le note sulla versione di Databricks Runtime 16.1 (EoS).

Ambiente di sistema

L'ambiente di sistema in Databricks Runtime 16.1 ML differisce da Databricks Runtime 16.1 come indicato di seguito.

  • Per i cluster GPU, Databricks Runtime ML include le librerie GPU NVIDIA seguenti:
    • CUDA 12.6
    • cublas 12.6.0.22-1
    • cusolver 11.6.4.38-1
    • cupti 12.6.37-1
    • cusparse 12.5.2.23-1
    • cuDNN 9.3.0.75-1
    • NCCL 2.22.3
    • TensorRT 10.2.0.19-1

Biblioteche

Le sezioni seguenti elencano le librerie incluse in Databricks Runtime 16.1 ML che differiscono da quelle incluse in Databricks Runtime 16.1.

In questa sezione:

Librerie di livello superiore

Databricks Runtime 16.1 ML include le seguenti librerie di livello superiore :

librerie Python

Databricks Runtime 16.1 ML usa virtualenv per la gestione dei pacchetti Python e include molti pacchetti di Machine Learning più diffusi.

Oltre ai pacchetti specificati nelle sezioni seguenti, Databricks Runtime 16.1 ML include anche i pacchetti seguenti:

  • hyperopt 0.2.9+db5
  • automl 1.29.0

Per riprodurre l'ambiente Python ml di Databricks Runtime nell'ambiente virtuale Python locale, scaricare il file requirements-16.1.txt ed eseguire pip install -r requirements-16.1.txt. Questo comando installa tutte le librerie di open source usate da Databricks Runtime ML, ma non installa librerie sviluppate da Databricks, ad esempio databricks-automl, databricks-feature-engineering o il fork databricks di hyperopt.

librerie Python sui cluster di CPU

Biblioteca Versione Biblioteca Versione Biblioteca Versione
absl-py 1.0.0 accelerare 1.1.1 aiohttp 3.9.5
aiohttp-cors 0.7.0 aiosignal 1.2.0 Alambicco 1.13.3
tipi annotati 0.7.0 anyio 4.2.0 argcomplete 3.5.0
argon2-cffi 21.3.0 argon2-cffi-bindings 21.2.0 freccia 1.2.3
Astor 0.8.1 asttoken 2.0.5 astunparse 1.6.3
async-lru 2.0.4 att. 23.1.0 lettura audio 3.0.1
comando automatico 2.2.2 azure-core 1.31.0 azure-cosmos 4.3.1
azure-identity (servizio di identità Azure) 1.18.0 Azure Storage Blob 12.23.1 file di archiviazione Azure Data Lake 12.17.0
Babele 2.11.0 ritiro 2.2.1 backports.tarfile 1.2.0
bcrypt 3.2.0 beautifulsoup4 4.12.3 nero 24.4.2
candeggiare 4.1.0 freccia 1.7.0 blis 0.7.11
boto3 1.34.69 botocore 1.34.69 Brotli 1.0.9
cachetools (strumento per la gestione della cache) 5.3.3 catalogo 2.0.10 codificatori di categoria 2.6.3
certificato 2024.6.2 cffi 1.16.0 chardet 4.0.0
normalizzatore di set di caratteri 2.0.4 interruttore 2.0.0 clic 8.1.7
cloudpathlib 0.19.0 cloudpickle (libreria Python per la serializzazione degli oggetti) 2.2.1 cmdstanpy 1.2.4
colorato 0.5.6 registro dei colori 6.8.2 Comunicazione 0.2.1
compositore 0.27.0 confezione 0.1.5 configparser (analizzatore di configurazione) 5.2.0
contourpy 1.2.0 coolname 2.2.0 crittografia 42.0.5
ciclista 0.11.0 cymem 2.0.10 Cython, un linguaggio di programmazione 3.0.11
roccia dacite 1.8.1 databricks-automl-runtime 0.2.21 ingegneria delle caratteristiche in Databricks 0.7.0
Databricks SDK 0.30.0 Insiemi di dati 3.1.0 dbl-tempo 0.1.26
dbus-python 1.3.2 debugpy 1.6.7 decoratore 5.1.1
deepspeed 0.16.0 defusedxml (una libreria per migliorare la sicurezza nell'elaborazione di XML) 0.7.1 Deprecato 1.2.14
aneto 0.3.8 distlib 0.3.8 dm-tree 0.1.8
Conversione da docstring a markdown 0.11 punti di ingresso 0.4 valutare 0.4.3
esecuzione 0.8.3 facet-overview 1.1.1 Notifiche di Farama 0.0.4
fastjsonschema (Una libreria per la convalida veloce dei dati JSON) 2.21.1 fasttext-wheel 0.9.2 blocco dei file 3.13.1
Fiaschetta 2.2.5 FlatBuffers 24.3.25 fonttools (strumenti per caratteri) 4.51.0
Fqdn 1.5.1 frozenlist 1.4.0 fsspec 2023.5.0
futuro 0.18.3 Gast 0.4.0 gitdb 4.0.11
GitPython 3.1.37 google-api-core 2.20.0 google-auth (autenticazione Google) 2.21.0
google-auth-oauthlib 1.0.0 google-cloud-core 2.4.1 Google Cloud Storage 2.10.0
google-crc32c 1.6.0 Google-Pasta 0.2.0 google-resumable-media (media riprendibile di Google) 2.7.2
googleapis-common-protos 1.65.0 gql 3.5.0 graphql-core 3.2.4
greenlet 3.0.1 grpcio 1.60.0 grpcio-status 1.60.0
gunicorn 20.1.0 gviz-api 1.10.0 palestra 0.28.1
h11 0.14.0 h5py 3.11.0 hjson 3.1.0
vacanze 0,54 htmlmin (strumento per la minimizzazione del codice HTML) 0.1.12 httpcore 1.0.5
httplib2 0.20.4 httpx 0.28.0 huggingface-hub 0.24.5
IDNA 3.7 ImageHash 4.3.1 imageio 2.33.1
imbalanced-learn (una libreria di apprendimento automatico per la gestione dei set di dati sbilanciati) 0.12.3 importlib-metadata 6.0.0 importlib_resources (libreria per la gestione delle risorse in Python) 6.4.5
flettere 7.3.1 ipyflow-core 0.0.201 ipykernel 6.28.0
ipython 8.25.0 ipython-genutils 0.2.0 ipywidgets (una libreria Python per widget interattivi) 7.7.2
isodate 0.6.1 isodurazione 20.11.0 it’s dangerous 2.2.0
jaraco.context 5.3.0 jaraco.functools 4.0.1 jaraco.text 3.12.1
jax jumpy 1.0.0 jedi 0.19.1 Jinja2 3.1.4
jiter 0.8.0 jmespath 1.0.1 joblib 1.4.2
joblibspark 0.5.1 json5 0.9.6 jsonpatch 1,33
jsonpointer 3.0.0 jsonschema 4.19.2 jsonschema-specifications 2023.7.1
eventi-jupyter 0.10.0 jupyter-lsp 2.2.0 jupyter_client 8.6.0
jupyter_core 5.7.2 jupyter_server 2.14.1 jupyter_server_terminals 0.4.4
jupyterlab 4.0.11 jupyterlab-pygments 0.1.2 jupyterlab_server 2.25.1
Keras 3.6.0 kiwisolver 1.4.4 langchain 0.3.8
langchain-core 0.2.41 separatori di testo langchain 0.2.4 codici linguistici 3.4.1
langsmith 0.1.129 dati_linguistici 1.2.0 launchpadlib 1.11.0
lazr.restfulclient 0.14.6 lazr.uri 1.0.6 lazy_loader 0.4
libclang 15.0.6.1 librosa 0.10.2 lightgbm 4.5.0
fulmine-utilità 0.11.9 collegare-it-py 2.0.0 llvmlite 0.42.0
lz4 4.3.2 Mako 1.2.0 marisa-trie 1.2.0
Markdown 3.4.1 markdown-it-py 2.2.0 MarkupSafe 2.1.3
matplotlib 3.8.4 matplotlib-inline 0.1.6 Mccabe 0.7.0
mdit-py-plugins 0.3.0 mdurl 0.1.0 memray 1.14.0
Mistune 2.0.4 ml-dtypes 0.4.1 mlflow versione leggera 2.15.1
more-itertools 10.3.0 mosaicml-cli 0.6.41 MosaicML-Streaming 0.8.0
mpmath 1.3.0 msal 1.31.1 msal-extensions 1.2.0
msgpack 1.1.0 multidict 6.0.4 multimetodo 1.12
multiprocesso 0.70.16 mormurhash 1.0.11 mypy 1.10.0
mypy-extensions 1.0.0 namex 0.0.8 nbclient 0.8.0
nbconvert 7.10.0 nbformat 5.9.2 nest-asyncio 1.6.0
networkx 3.2.1 ninja 1.11.1.1 nltk (Natural Language Toolkit) 3.8.1
nodeenv 1.9.1 taccuino 7.0.8 notebook_shim 0.2.3
numba 0.59.1 numpy 1.26.4 nvidia-ml-py 12.560.30
oauthlib 3.2.0 Oci 2.139.0 OpenAI 1.55.1
opencensus 0.11.4 opencensus-context 0.1.3 opentelemetry-api 1.28.2
opentelemetry-sdk 1.28.2 Convenzioni Semanticche di OpenTelemetry 0.49b2 opt_einsum 3.4.0
optree 0.12.1 optuna 3.6.1 integrazione-optuna 3.6.0
orjson 3.10.12 Esegue l' override 7.4.0 imballaggio 24.1
Panda 1.5.3 pandocfilters 1.5.0 paramiko 3.4.0
parso 0.8.3 pathspec 0.10.3 vittima designata 0.5.6
pexpect 4.8.0 phik 0.12.4 guanciale 10.3.0
seme 24,2 platformdirs 3.10.0 plotly (software di visualizzazione dati) 5.22.0
Pluggy 1.0.0 pmdarima 2.0.4 cagnolino 1.8.2
portalocker 2.10.1 (Note: Without context, a definitive improved translation cannot be accurately proposed). 3.0.9 prometheus-client 0.14.1
prompt-toolkit 3.0.43 profeta 1.1.5 proto-plus 1.24.0
protobuf 4.24.1 psutil 5.9.0 psycopg2 2.9.3
ptyprocess 0.7.0 pure-eval 0.2.2 py-cpuinfo 9.0.0
py-spy 0.3.14 pyarrow 15.0.2 pyarrow-hotfix 0,6
pyasn1 0.4.8 pyasn1-modules 0.2.8 pybind11 2.13.6
pyccolo 0.0.65 pycparser (un parser scritto in Python) 2.21 pydantic 2.8.2
pydantic_core 2.20.1 pyflakes 3.2.0 Pygments 2.15.1
PyGObject 3.48.2 PyJWT 2.7.0 PyNaCl 1.5.0
pyodbc 5.0.1 pyOpenSSL 24.0.0 pyparsing 3.0.9
pyright 1.1.294 pytesseract 0.3.10 python-dateutil (libreria Python per la gestione delle date) 2.9.0.post0
editor di Python 1.0.4 python-json-logger (registratore JSON per Python) 2.0.7 python-lsp-jsonrpc 1.1.2
python-lsp-server 1.10.0 python-snappy 0.6.1 pytoolconfig 1.2.6
pytorch-ranger 0.1.1 pytz 2024.1 PyWavelets 1.5.0
PyYAML 6.0.1 pyzmq 25.1.2 interrogatorio 1.10.0
raggio 2.35.0 Riferimento 0.30.2 regex 3 ottobre 2023
Richieste 2.32.2 requests-oauthlib 1.3.1 rfc3339-validator 0.1.4
rfc3986-validator 0.1.1 ricco 13.3.5 corda 1.12.0
rpds-py 0.10.6 RSA 4.9 ruamel.yaml 0.18.6
ruamel.yaml.clib 0.2.8 s3transfer 0.10.2 safetensors 0.4.4
scikit-image 0.23.2 scikit-learn 1.4.2 scipy 1.13.1
Seaborn 0.13.2 Send2Trash 1.8.2 trasformatori di frase 3.3.1
frase 0.2.0 setuptools (pacchetto Python per gestire la configurazione e la distribuzione) 74.0.0 Forma 0.46.0
"Shellingham" 1.5.4 simplejson 3.17.6 Sei 1.16.0
affettatrice 0.0.8 smart-open 5.2.1 smmap 5.0.0
sniffio 1.3.0 soundfile 0.12.1 colino per la zuppa 2,5
soxr 0.5.0.post1 Spazioso 3.7.5 spacy-legacy 3.0.12
spacy-loggers 1.0.5 SQLAlchemy 2.0.30 sqlparse 0.4.2
davvero? 2.4.8 ssh-import-id (comando per l'importazione di chiavi SSH) 5.11 dati dello stack 0.2.0
stanio 0.5.1 statsmodels 0.14.2 la libreria sympy 1.13.1
disporre in tabella 0.9.0 aggrovigliato-up-in-unicode 0.2.0 tenacia 8.2.2
TensorBoard 2.18.0 server di dati di TensorBoard 0.7.2 plugin di profilazione per tensorboard 2.18.0
tensorboardX 2.6.2.2 TensorFlow 2.18.0 Stima di tensore tensorflow 2.15.0
termcolor 2.4.0 finito 0.17.1 testuale 0.87.1
tf_keras 2.18.0 thinc 8.2.5 threadpoolctl 2.2.0
tifffile 2023.4.12 tiktoken 0.7.0 tinycss2 1.2.1
tokenize-rt 4.2.1 tokenizzatori 0.20.0 tomli 2.0.1
torcia 2.5.0+CPU torch-optimizer (ottimizzatore di torch) 0.3.0 torcheval 0.0.7
torchmetrics 1.4.0.post0 visione della torcia 0.20.0+cpu tornado 6.4.1
tqdm 4.66.4 traitlets (una libreria per la configurazione dei parametri nei programmi Python) 5.14.3 Trasformatori 4.46.3
typeguard 4.3.0 Typer 0.12.5 tipi-protobuf 3.20.3
types-psutil 5.9.0 types-pytz 2023.3.1.1 types-PyYAML 6.0.0
richieste di tipi 2.31.0.0 types-setuptools 68.0.0.0 sei tipi 1.16.0
tipi-urllib3 1.26.25.14 typing_extensions 4.11.0 uc-micro-py 1.0.1
ujson (una libreria per la gestione di JSON in Python) 5.10.0 aggiornamenti senza supervisione 0,1 Modello URI 1.3.0
urllib3 1.26.16 validatori 0.34.0 virtualenv 20.26.2
Visioni 0.7.5 wadllib 1.3.6 wasabi 1.1.3
wcwidth (funzione per determinare la larghezza dei caratteri) 0.2.5 Donnola 0.4.1 webcolors 24.8.0
Codifiche Web 0.5.1 cliente WebSocket 1.8.0 websocket 11.0.3
attrezzo 3.0.3 Che cosa è la patch 1.0.2 ruota 0.43.0
wordcloud 1.9.3 avvolto 1.14.1 xgboost 2.0.3
xgboost-ray 0.1.19 xxhash 3.4.1 yapf 0.33.0
yarl 1.9.3 Profilatura dei dati y 4.9.0 Zipp 3.17.0
zstd 1.5.5.1

librerie Python nei cluster GPU

Nota

PyTorch usa le dipendenze PyPI CUDA per fornire il supporto CUDA anziché le versioni della libreria CUDA integrate in Databricks Runtime 16.1 ML.

Biblioteca Versione Biblioteca Versione Biblioteca Versione
absl-py 1.0.0 accelerare 1.1.1 aiohttp 3.9.5
aiohttp-cors 0.7.0 aiosignal 1.2.0 tipi annotati 0.7.0
anyio 4.2.0 argcomplete 3.5.0 argon2-cffi 21.3.0
argon2-cffi-bindings 21.2.0 freccia 1.2.3 Astor 0.8.1
asttoken 2.0.5 astunparse 1.6.3 async-lru 2.0.4
att. 23.1.0 lettura audio 3.0.1 comando automatico 2.2.2
azure-core 1.31.0 azure-cosmos 4.3.1 azure-identity (servizio di identità Azure) 1.18.0
Azure Storage Blob 12.23.1 file di archiviazione Azure Data Lake 12.17.0 Babele 2.11.0
ritiro 2.2.1 backports.tarfile 1.2.0 bcrypt 3.2.0
beautifulsoup4 4.12.3 nero 24.4.2 candeggiare 4.1.0
freccia 1.7.0 blis 0.7.11 boto3 1.34.69
botocore 1.34.69 Brotli 1.0.9 cachetools (strumento per la gestione della cache) 5.3.3
catalogo 2.0.10 codificatori di categoria 2.6.3 certificato 2024.6.2
cffi 1.16.0 chardet 4.0.0 normalizzatore di set di caratteri 2.0.4
interruttore 2.0.0 clic 8.1.7 cloudpathlib 0.19.0
cloudpickle (libreria Python per la serializzazione degli oggetti) 2.2.1 cmdstanpy 1.2.4 colorato 0.5.6
registro dei colori 6.8.2 Comunicazione 0.2.1 compositore 0.27.0
confezione 0.1.5 configparser (analizzatore di configurazione) 5.2.0 contourpy 1.2.0
coolname 2.2.0 crittografia 42.0.5 ciclista 0.11.0
cymem 2.0.10 Cython, un linguaggio di programmazione 3.0.11 roccia dacite 1.8.1
databricks-automl-runtime 0.2.21 ingegneria delle caratteristiche in Databricks 0.7.0 Databricks SDK 0.30.0
Insiemi di dati 3.1.0 dbl-tempo 0.1.26 dbus-python 1.3.2
debugpy 1.6.7 decoratore 5.1.1 deepspeed 0.16.0
defusedxml (una libreria per migliorare la sicurezza nell'elaborazione di XML) 0.7.1 Deprecato 1.2.14 aneto 0.3.8
distlib 0.3.8 dm-tree 0.1.8 Conversione da docstring a markdown 0.11
einops 0.8.0 punti di ingresso 0.4 valutare 0.4.3
esecuzione 0.8.3 facet-overview 1.1.1 Notifiche di Farama 0.0.4
fastjsonschema (Una libreria per la convalida veloce dei dati JSON) 2.21.1 fasttext-wheel 0.9.2 blocco dei file 3.13.1
flash_attn 2.7.0 Fiaschetta 2.2.5 FlatBuffers 24.3.25
fonttools (strumenti per caratteri) 4.51.0 Fqdn 1.5.1 frozenlist 1.4.0
fsspec 2023.5.0 futuro 0.18.3 Gast 0.4.0
gitdb 4.0.11 GitPython 3.1.37 google-api-core 2.20.0
google-auth (autenticazione Google) 2.21.0 google-auth-oauthlib 1.0.0 google-cloud-core 2.4.1
Google Cloud Storage 2.10.0 google-crc32c 1.6.0 Google-Pasta 0.2.0
google-resumable-media (media riprendibile di Google) 2.7.2 googleapis-common-protos 1.65.0 gql 3.5.0
graphql-core 3.2.4 greenlet 3.0.1 grpcio 1.60.0
grpcio-status 1.60.0 gunicorn 20.1.0 gviz-api 1.10.0
palestra 0.28.1 h11 0.14.0 h5py 3.11.0
hjson 3.1.0 vacanze 0,54 htmlmin (strumento per la minimizzazione del codice HTML) 0.1.12
httpcore 1.0.5 httplib2 0.20.4 httpx 0.27.2
huggingface-hub 0.24.5 IDNA 3.7 ImageHash 4.3.1
imageio 2.33.1 imbalanced-learn (una libreria di apprendimento automatico per la gestione dei set di dati sbilanciati) 0.12.3 importlib-metadata 6.0.0
importlib_resources (libreria per la gestione delle risorse in Python) 6.4.5 flettere 7.3.1 ipyflow-core 0.0.201
ipykernel 6.28.0 ipython 8.25.0 ipython-genutils 0.2.0
ipywidgets (una libreria Python per widget interattivi) 7.7.2 isodate 0.6.1 isodurazione 20.11.0
it’s dangerous 2.2.0 jaraco.context 5.3.0 jaraco.functools 4.0.1
jaraco.text 3.12.1 jax jumpy 1.0.0 jedi 0.19.1
Jinja2 3.1.4 jiter 0.8.0 jmespath 1.0.1
joblib 1.4.2 joblibspark 0.5.1 json5 0.9.6
jsonpatch 1,33 jsonpointer 3.0.0 jsonschema 4.19.2
jsonschema-specifications 2023.7.1 eventi-jupyter 0.10.0 jupyter-lsp 2.2.0
jupyter_client 8.6.0 jupyter_core 5.7.2 jupyter_server 2.14.1
jupyter_server_terminals 0.4.4 jupyterlab 4.0.11 jupyterlab-pygments 0.1.2
jupyterlab_server 2.25.1 Keras 3.6.0 kiwisolver 1.4.4
langchain 0.3.8 langchain-core 0.2.41 separatori di testo langchain 0.2.4
codici linguistici 3.4.1 langsmith 0.1.129 dati_linguistici 1.2.0
launchpadlib 1.11.0 lazr.restfulclient 0.14.6 lazr.uri 1.0.6
lazy_loader 0.4 libclang 15.0.6.1 librosa 0.10.2
lightgbm 4.5.0 fulmine-utilità 0.11.9 collegare-it-py 2.0.0
llvmlite 0.42.0 lz4 4.3.2 Mako 1.2.0
marisa-trie 1.2.0 Markdown 3.4.1 markdown-it-py 2.2.0
MarkupSafe 2.1.3 matplotlib 3.8.4 matplotlib-inline 0.1.6
Mccabe 0.7.0 mdit-py-plugins 0.3.0 mdurl 0.1.0
memray 1.14.0 Mistune 2.0.4 ml-dtypes 0.4.1
mlflow versione leggera 2.15.1 more-itertools 10.3.0 mosaicml-cli 0.6.41
MosaicML-Streaming 0.8.0 mpmath 1.3.0 msal 1.31.1
msal-extensions 1.2.0 msgpack 1.1.0 multidict 6.0.4
multimetodo 1.12 multiprocesso 0.70.16 mormurhash 1.0.11
mypy 1.10.0 mypy-extensions 1.0.0 namex 0.0.8
nbclient 0.8.0 nbconvert 7.10.0 nbformat 5.9.2
nest-asyncio 1.6.0 networkx 3.2.1 ninja 1.11.1.1
nltk (Natural Language Toolkit) 3.8.1 nodeenv 1.9.1 taccuino 7.0.8
notebook_shim 0.2.3 numba 0.59.1 numpy 1.26.4
nvidia-cublas-cu12 12.4.5.8 nvidia-cuda-cupti-cu12 12.4.127 nvidia-cuda-nvrtc-cu12 12.4.127
nvidia-cuda-runtime-cu12 12.4.127 nvidia-cudnn-cu12 9.1.0.70 nvidia-cufft-cu12 11.2.1.3
nvidia-curand-cu12 10.3.5.147 nvidia-cusolver-cu12 11.6.1.9 nvidia-cusparse-cu12 12.3.1.170
nvidia-ml-py 12.560.30 nvidia-nccl-cu12 2.21.5 nvidia-nvjitlink-cu12 12.4.127
nvidia-nvtx-cu12 12.4.127 oauthlib 3.2.0 Oci 2.139.0
OpenAI 1.55.1 opencensus 0.11.4 opencensus-context 0.1.3
opentelemetry-api 1.28.2 opentelemetry-sdk 1.28.2 Convenzioni Semanticche di OpenTelemetry 0.49b2
opt_einsum 3.4.0 optree 0.12.1 optuna 3.6.1
integrazione-optuna 3.6.0 orjson 3.10.12 Esegue l' override 7.4.0
imballaggio 24.1 Panda 1.5.3 pandocfilters 1.5.0
paramiko 3.4.0 parso 0.8.3 pathspec 0.10.3
vittima designata 0.5.6 pexpect 4.8.0 phik 0.12.4
guanciale 10.3.0 seme 24,2 platformdirs 3.10.0
plotly (software di visualizzazione dati) 5.22.0 Pluggy 1.0.0 pmdarima 2.0.4
cagnolino 1.8.2 portalocker 2.10.1 (Note: Without context, a definitive improved translation cannot be accurately proposed). 3.0.9
prometheus-client 0.14.1 prompt-toolkit 3.0.43 profeta 1.1.5
proto-plus 1.24.0 protobuf 4.24.1 psutil 5.9.0
psycopg2 2.9.3 ptyprocess 0.7.0 pure-eval 0.2.2
py-cpuinfo 9.0.0 py-spy 0.3.14 pyarrow 15.0.2
pyarrow-hotfix 0,6 pyasn1 0.4.8 pyasn1-modules 0.2.8
pybind11 2.13.6 pyccolo 0.0.65 pycparser (un parser scritto in Python) 2.21
pydantic 2.8.2 pydantic_core 2.20.1 pyflakes 3.2.0
Pygments 2.15.1 PyGObject 3.48.2 PyJWT 2.7.0
PyNaCl 1.5.0 pyodbc 5.0.1 pyOpenSSL 24.0.0
pyparsing 3.0.9 pyright 1.1.294 pytesseract 0.3.10
python-dateutil (libreria Python per la gestione delle date) 2.9.0.post0 editor di Python 1.0.4 python-json-logger (registratore JSON per Python) 2.0.7
python-lsp-jsonrpc 1.1.2 python-lsp-server 1.10.0 python-snappy 0.6.1
pytoolconfig 1.2.6 pytorch-ranger 0.1.1 pytz 2024.1
PyWavelets 1.5.0 PyYAML 6.0.1 pyzmq 25.1.2
interrogatorio 1.10.0 raggio 2.35.0 Riferimento 0.30.2
regex 3 ottobre 2023 Richieste 2.32.2 requests-oauthlib 1.3.1
rfc3339-validator 0.1.4 rfc3986-validator 0.1.1 ricco 13.3.5
corda 1.12.0 rpds-py 0.10.6 RSA 4.9
ruamel.yaml 0.18.6 ruamel.yaml.clib 0.2.8 s3transfer 0.10.2
safetensors 0.4.4 scikit-image 0.23.2 scikit-learn 1.4.2
scipy 1.13.1 Seaborn 0.13.2 Send2Trash 1.8.2
trasformatori di frase 3.3.1 frase 0.2.0 setuptools (pacchetto Python per gestire la configurazione e la distribuzione) 74.0.0
Forma 0.46.0 "Shellingham" 1.5.4 simplejson 3.17.6
Sei 1.16.0 affettatrice 0.0.8 smart-open 5.2.1
smmap 5.0.0 sniffio 1.3.0 soundfile 0.12.1
colino per la zuppa 2,5 soxr 0.5.0.post1 Spazioso 3.7.5
spacy-legacy 3.0.12 spacy-loggers 1.0.5 SQLAlchemy 2.0.30
sqlparse 0.4.2 davvero? 2.4.8 ssh-import-id (comando per l'importazione di chiavi SSH) 5.11
dati dello stack 0.2.0 stanio 0.5.1 statsmodels 0.14.2
la libreria sympy 1.13.1 disporre in tabella 0.9.0 aggrovigliato-up-in-unicode 0.2.0
tenacia 8.2.2 TensorBoard 2.17.0 server di dati di TensorBoard 0.7.2
plugin di profilazione per tensorboard 2.18.0 tensorboardX 2.6.2.2 TensorFlow 2.18.0
Stima di tensore tensorflow 2.15.0 termcolor 2.4.0 finito 0.17.1
testuale 0.87.1 tf_keras 2.17.0 thinc 8.2.5
threadpoolctl 2.2.0 tifffile 2023.4.12 tiktoken 0.7.0
tinycss2 1.2.1 tokenize-rt 4.2.1 tokenizzatori 0.20.0
tomli 2.0.1 torcia 2.5.0+cu124 torch-optimizer (ottimizzatore di torch) 0.3.0
torcheval 0.0.7 torchmetrics 1.4.0.post0 visione della torcia 0.20.0+cu124
tornado 6.4.1 tqdm 4.66.4 traitlets (una libreria per la configurazione dei parametri nei programmi Python) 5.14.3
Trasformatori 4.46.3 tritone 3.1.0 typeguard 4.3.0
Typer 0.14.0 tipi-protobuf 3.20.3 types-psutil 5.9.0
types-pytz 2023.3.1.1 types-PyYAML 6.0.0 richieste di tipi 2.31.0.0
types-setuptools 68.0.0.0 sei tipi 1.16.0 tipi-urllib3 1.26.25.14
typing_extensions 4.11.0 uc-micro-py 1.0.1 ujson (una libreria per la gestione di JSON in Python) 5.10.0
aggiornamenti senza supervisione 0,1 Modello URI 1.3.0 urllib3 1.26.16
validatori 0.34.0 virtualenv 20.26.2 Visioni 0.7.5
wadllib 1.3.6 wasabi 1.1.3 wcwidth (funzione per determinare la larghezza dei caratteri) 0.2.5
Donnola 0.4.1 webcolors 24.8.0 Codifiche Web 0.5.1
cliente WebSocket 1.8.0 websocket 11.0.3 attrezzo 3.0.3
Che cosa è la patch 1.0.2 ruota 0.43.0 wordcloud 1.9.3
avvolto 1.14.1 xgboost 2.0.3 xgboost-ray 0.1.19
xxhash 3.4.1 yapf 0.33.0 yarl 1.9.3
Profilatura dei dati y 4.9.0 Zipp 3.17.0 zstd 1.5.5.1

Librerie R

Le librerie R sono identiche alle librerie R in Databricks Runtime 16.1.

librerie Java e Scala (cluster Scala 2.12)

Oltre a Java e librerie Scala in Databricks Runtime 16.1, Databricks Runtime 16.1 ML contiene i file JAR seguenti:

Cluster di CPU

ID gruppo ID dell'artefatto Versione
com.typesafe.akka akka-actor_2.12 2.5.23
ml.dmlc xgboost4j-spark_2.12 1.7.3
ml.dmlc xgboost4j_2.12 1.7.3
org.graphframes graphframes_2.12 0.8.4-db1-spark3.5
org.mlflow mlflow-client 2.15.1
org.tensorflow spark-tensorflow-connector_2.12 1.15.0

Cluster GPU

ID gruppo ID dell'artefatto Versione
com.typesafe.akka akka-actor_2.12 2.5.23
ml.dmlc xgboost4j-gpu_2.12 1.7.3
ml.dmlc xgboost4j-spark-gpu_2.12 1.7.3
org.graphframes graphframes_2.12 0.8.4-db1-spark3.5
org.mlflow mlflow-client 2.15.1
org.tensorflow spark-tensorflow-connector_2.12 1.15.0
  • Last updated on