Nota
L'accesso a questa pagina richiede l'autorizzazione. È possibile provare ad accedere o modificare le directory.
L'accesso a questa pagina richiede l'autorizzazione. È possibile provare a modificare le directory.
Databricks Runtime 17.0 per Machine Learning offre un ambiente dito-go pronto per l'apprendimento automatico e l'analisi scientifica dei dati basata su Databricks Runtime 17.0. Databricks Runtime ML contiene molte librerie di Machine Learning più diffuse, tra cui TensorFlow, PyTorch e XGBoost. Databricks Runtime ML include AutoML, uno strumento per eseguire automaticamente il training delle pipeline di Machine Learning. Databricks Runtime ML supporta anche il training di Deep Learning distribuito usando TorchDistributor, DeepSpeed e Ray.
Suggerimento
Per visualizzare le note sulle versioni di Databricks Runtime che hanno raggiunto l'EoS (fine del supporto), vedere Note sulle versioni di Databricks Runtime che hanno raggiunto l'EoS. Le versioni di EoS Databricks Runtime sono state ritirate e potrebbero non essere aggiornate.
Nuove funzionalità e miglioramenti
Databricks Runtime 17.0 ML è basato su Databricks Runtime 17.0. Per informazioni sulle novità di Databricks Runtime 17.0, tra cui Apache Spark MLlib e SparkR, vedere le note sulla versione di Databricks Runtime 17.0 .
SparkML è ora supportato nei cluster standard
Databricks Runtime 17.0 ML supporta SparkML in cluster standard (noti in precedenza come condivisi). Per informazioni sui cluster standard, vedere Modalità di accesso.
Quando si esegue SparkML nei cluster standard, si applicano le limitazioni seguenti:
- La dimensione massima del modello è 1 GB.
- La dimensione massima della cache del modello per sessione è 10 GB.
- L'addestramento del modello ad albero si arresta anticipatamente se le dimensioni del modello stanno per superare 1 GB.
- I modelli SparkML seguenti non sono supportati:
- Modello LDA Distribuito
- FPGrowthModel
Altre modifiche
XGBoost4J-Spark rimosso
XGBoost4J-Spark, incluso nelle versioni precedenti di Databricks Runtime ML, non è incluso in Databricks Runtime 17.0 ML. Databricks consiglia di usare l'API Python per xgboost.spark. Consulta l'addestramento distribuito dei modelli XGBoost usando xgboost.spark.
Il fornitore di negozi online di Cosmos DB non è più supportato
Il provider dello store online di Cosmos DB non è compatibile con Databricks Runtime 17.0 ML o versioni successive.
Ambiente di sistema
L'ambiente di sistema in Databricks Runtime 17.0 ML differisce da Databricks Runtime 17.0 come indicato di seguito.
- Per i cluster GPU, Databricks Runtime ML include le librerie GPU NVIDIA seguenti:
- CUDA 12.6
- cublas 12.6.4.1-1
- cusolver 11.7.1.2-1
- cupti 12.6.80-1
- cusparse 12.5.4.2-1
- cuDNN 9.5.1.17-1
- NCCL 2.26.2
- TensorRT 10.2.0.19-1
Librerie
Le sezioni seguenti elencano le librerie incluse in Databricks Runtime 17.0 ML che differiscono da quelle incluse in Databricks Runtime 17.0.
In questa sezione:
Librerie di livello superiore
Databricks Runtime 17.0 ML include le librerie di livello superiore seguenti:
- Set di dati
- GraphFrames
- MLflow
- PyTorch
- spark-tensorflow-connector (connettore per Spark e TensorFlow)
- Scikit-learn
- streaming
- TensorFlow
- TensorBoard
- Trasformatori
Librerie Python
Databricks Runtime 17.0 ML usa virtualenv per la gestione dei pacchetti Python e include molti pacchetti di Machine Learning più diffusi.
Oltre ai pacchetti specificati nelle sezioni seguenti, Databricks Runtime 17.0 ML include anche i pacchetti seguenti:
- automl 1.30.0
Per riprodurre l'ambiente Python di Databricks Runtime ML nell'ambiente virtuale Python locale, scaricare il file requirements-17.0.txt ed eseguire pip install -r requirements-17.0.txt. Questo comando installa tutte le librerie open source usate da Databricks Runtime ML, ma non installa le librerie sviluppate da Databricks, ad esempio databricks-automl o il fork di Databricks di hyperopt.
Librerie Python sui cluster CPU
| Libreria | Versione | Libreria | Versione | Libreria | Versione |
|---|---|---|---|---|---|
| absl-py | 1.0.0 | accelerare | 1.5.2 | aiohappyeyeballs | 2.4.4 |
| aiohttp | 3.11.10 | aiohttp-cors | 0.8.1 | aiosignal | 1.2.0 |
| Alambicco | 1.15.2 | tipi annotati | 0.7.0 | anyio | 4.6.2 |
| argcomplete | 3.6.2 | argon2-cffi | 21.3.0 | argon2-cffi-bindings | 21.2.0 |
| freccia | 1.3.0 | Astor | 0.8.1 | asttoken | 2.0.5 |
| astunparse | 1.6.3 | async-lru | 2.0.4 | att. | 24.3.0 |
| lettura audio | 3.0.1 | comando automatico | 2.2.2 | azure-comune | 1.1.28 |
| azure-core | 1.33.0 | azure-cosmos | 4.3.1 | azure-identity (servizio di identità Azure) | 1.20.0 |
| azure-mgmt-core | 1.5.0 | azure-mgmt-web | 8.0.0 | Azure Storage Blob | 12.23.0 |
| file di archiviazione Azure Data Lake | 12.17.0 | Babele | 2.16.0 | ritiro | 2.2.1 |
| backports.tarfile | 1.2.0 | bcrypt | 3.2.0 | beautifulsoup4 | 4.12.3 |
| nero | 24.10.0 | candeggiare | 6.2.0 | indicatore di direzione | 1.7.0 |
| blis | 0.7.11 | boto3 | 1.36.2 | botocore | 1.36.3 |
| Brotli | 1.1.0 | cachetools (strumento per la gestione della cache) | 5.5.1 | catalogo | 2.0.10 |
| codificatori di categorie | 2.6.3 | certificato | 2025.1.31 | cffi | 1.17.1 |
| chardet | 4.0.0 | normalizzatore di set di caratteri | 3.3.2 | interruttore | 2.1.3 |
| fai clic | 8.1.7 | cloudpathlib | 0.21.0 | cloudpickle (libreria Python per la serializzazione degli oggetti) | 3.0.0 |
| cmdstanpy | 1.2.5 | colorato | 0.5.6 | registro dei colori | 6.9.0 |
| comunicazione | 0.2.1 | compositore | 0.29.0 | confezione | 0.1.5 |
| configparser (analizzatore di configurazione) | 5.2.0 | contourpy | 1.3.1 | coolname | 2.2.0 |
| cramjam | 2.10.0 | criptografia | 43.0.3 | ciclista | 0.11.0 |
| cymem | 2.0.11 | Cython, un linguaggio di programmazione | 3.0.12 | roccia dacite | 1.9.2 |
| databricks-automl-runtime | 0.2.21 | Databricks SDK | 0.49.0 | Insiemi di dati | 2.20.0 |
| dbl-tempo | 0.1.26 | dbus-python | 1.3.2 | debugpy | 1.8.11 |
| Decoratore | 5.1.1 | deepspeed | 0.14.4 | defusedxml (una libreria per migliorare la sicurezza nell'elaborazione di XML) | 0.7.1 |
| Deprecato | 1.2.13 | aneto | 0.3.8 | distlib | 0.3.9 |
| dm-tree | 0.1.9 | Conversione da docstring a markdown | 0.11 | punti di ingresso | 0.4 |
| valutare | 0.4.2 | esecuzione | 0.8.3 | panoramica delle facette | 1.1.1 |
| Notifiche di Farama | 0.0.4 | fastapi | 0.115.12 | fastjsonschema (Una libreria per la convalida veloce dei dati JSON) | 2.21.1 |
| fasttext-wheel | 0.9.2 | blocco dei file | 3.13.1 | Fiaschetta | 2.2.5 |
| FlatBuffers | 25.2.10 | fonttools (strumenti per caratteri) | 4.55.3 | fqdn (nome di dominio completo) | 1.5.1 |
| frozenlist | 1.5.0 | fsspec | 2023.5.0 | futuro | 0.18.3 |
| Gast | 0.4.0 | gitdb | 4.0.11 | GitPython | 3.1.43 |
| google-api-core | 2.20.0 | google-auth (autenticazione Google) | 2.38.0 | google-auth-oauthlib | 1.0.0 |
| google-cloud-core | 2.4.3 | archiviazione su Google Cloud | 2.10.0 | google-crc32c | 1.7.1 |
| Google-Pasta | 0.2.0 | google-resumable-media (media riprendibile di Google) | 2.7.2 | googleapis-common-protos | 1.65.0 |
| gql | 3.5.2 | graphql-core | 3.2.4 | greenlet | 3.1.1 |
| grpcio | 1.67.0 | grpcio-status | 1.67.0 | gunicorn | 20.1.0 |
| ginnasio | 0.28.1 | h11 | 0.14.0 | h5py | 3.12.1 |
| hjson | 3.1.0 | vacanze | 0,54 | htmlmin (strumento per la minimizzazione del codice HTML) | 0.1.12 |
| httpcore | 1.0.2 | httplib2 | 0.20.4 | httpx | 0.27.0 |
| huggingface-hub | 0.30.2 | IDNA | 3.7 | ImageHash | 4.3.1 |
| imageio | 2.37.0 | imbalanced-learn (una libreria di apprendimento automatico per la gestione dei set di dati sbilanciati) | 0.13.0 | importlib-metadata | 6.0.0 |
| importlib_resources (libreria per la gestione delle risorse in Python) | 6.5.2 | inflettere | 7.3.1 | iniconfig | 1.1.1 |
| ipyflow-core | 0.0.209 | ipykernel | 6.29.5 | ipython | 8.30.0 |
| ipython-genutils | 0.2.0 | ipywidgets (una libreria Python per widget interattivi) | 7.8.1 | isodate | 0.6.1 |
| isodurazione | 20.11.0 | it’s dangerous | 2.2.0 | jaraco.context | 5.3.0 |
| jaraco.functools | 4.0.1 | jaraco.text | 3.12.1 | jax-jumpy | 1.0.0 |
| jedi | 0.19.2 | Jinja2 | 3.1.5 | jiter | 0.9.0 |
| jmespath | 1.0.1 | joblib | 1.4.2 | joblibspark | 0.5.1 |
| json5 | 0.9.25 | jsonpatch | 1,33 | jsonpointer | 3.0.0 |
| jsonschema | 4.23.0 | jsonschema-specifications | 2023.7.1 | eventi-jupyter | 0.10.0 |
| jupyter-lsp | 2.2.0 | jupyter_client | 8.6.3 | jupyter_core | 5.7.2 |
| jupyter_server | 2.14.1 | terminali_del_server_Jupyter | 0.4.4 | jupyterlab | 4.3.4 |
| jupyterlab-pygments | 0.1.2 | jupyterlab-widgets | 1.0.0 | jupyterlab_server | 2.27.3 |
| Keras | 3.5.0 | kiwisolver | 1.4.8 | langchain | 0.3.21 |
| langchain-core | 0.3.55 | separatori di testo langchain | 0.3.8 | codici linguistici | 3.5.0 |
| langsmith | 0.1.133 | dati linguistici | 1.3.0 | launchpadlib | 1.11.0 |
| lazr.restfulclient | 0.14.6 | lazr.uri | 1.0.6 | lazy_loader | 0.4 |
| libclang | 15.0.6.1 | librosa | 0.10.2 | lightgbm | 4.5.0 |
| fulmine-utilità | 0.14.3 | linkify-it-py | 2.0.0 | llvmlite | 0.44.0 |
| lz4 | 4.3.2 | Mako | 1.2.0 | marisa-trie | 1.2.0 |
| Markdown | 3.4.1 | markdown-it-py | 2.2.0 | MarkupSafe | 3.0.2 |
| matplotlib | 3.10.0 | matplotlib-inline | 0.1.7 | Mccabe | 0.7.0 |
| mdit-py-plugins | 0.3.0 | mdurl | 0.1.0 | memray | 1.17.1 |
| Mistune | 2.0.4 | ml_dtypes | 0.5.1 | mlflow versione leggera | 2.21.3 |
| mmh3 | 5.1.0 | more-itertools | 10.3.0 | mosaicml-cli | 0.6.41 |
| MosaicML-Streaming | 0.8.0 | mpmath | 1.3.0 | msal | 1.32.0 |
| msal-extensions | 1.3.1 | msgpack | 1.1.0 | multidict | 6.1.0 |
| multimetodo | 1.12 | multiprocesso | 0.70.16 | algoritmo di hashing murmurhash | 1.0.12 |
| mypy-extensions | 1.0.0 | namex | 0.0.8 | nbclient | 0.8.0 |
| nbconvert | 7.16.4 | nbformat | 5.10.4 | nest-asyncio | 1.6.0 |
| networkx | 3.4.2 | ninja | 1.11.1.1 | nltk (Natural Language Toolkit) | 3.9.1 |
| nodeenv | 1.9.1 | taccuino | 7.3.2 | notebook_shim | 0.2.3 |
| nmbalo | 0.61.0 | numpy | 2.1.3 | nvidia-ml-py | 12.570.86 |
| oauthlib | 3.2.0 | Oci | 2.150.2 | openai | 1.40.2 |
| opencensus | 0.11.4 | opencensus-context | 0.1.3 | opentelemetry-api | 1.32.1 |
| opentelemetry-sdk | 1.32.1 | Convenzioni Semanticche di OpenTelemetry | 0.53b1 | opt_einsum | 3.4.0 |
| optree | 0.15.0 | optuna | 3.6.1 | integrazione-optuna | 3.6.0 |
| orjson | 3.10.16 | sostituisce | 7.4.0 | imballaggio | 24.1 |
| Panda | 2.2.3 | pandocfilters | 1.5.0 | paramiko | 3.4.0 |
| parso | 0.8.4 | pathspec | 0.10.3 | vittima | 1.0.1 |
| pexpect | 4.8.0 | phik | 0.12.4 | guanciale | 11.1.0 |
| seme | 25.0 | platformdirs | 3.10.0 | plotly (software di visualizzazione dati) | 5.24.1 |
| connettivita | 1.5.0 | pmdarima | 2.0.4 | cagnolino | 1.8.2 |
| (Note: Without context, a definitive improved translation cannot be accurately proposed). | 3.0.9 | prometheus_client | 0.21.0 | prompt-toolkit | 3.0.43 |
| propcache | 0.2.0 | profeta | 1.1.6 | proto-plus | 1.26.1 |
| protobuf | 5.29.4 | psutil | 5.9.0 | psycopg2 | 2.9.3 |
| ptyprocess | 0.7.0 | pure-eval | 0.2.2 | puremagic | 1.28 |
| py-cpuinfo | 9.0.0 | py-spy | 0.4.0 | pyarrow | 19.0.1 |
| pyarrow-hotfix | 0,6 | pyasn1 | 0.4.8 | pyasn1-modules | 0.2.8 |
| pybind11 | 2.13.6 | pyccolo | 0.0.71 | pycparser (un parser scritto in Python) | 2.21 |
| pydantic | 2.10.6 | pydantic_core | 2.27.2 | pyflakes | 3.2.0 |
| Pygments | 2.15.1 | PyGObject | 3.48.2 | pyiceberg | 0.9.0 |
| PyJWT | 2.10.1 | PyNaCl | 1.5.0 | pyodbc | 5.2.0 |
| pyOpenSSL | 24.2.1 | pyparsing | 3.2.0 | pyright | 1.1.394 |
| pytesseract | 0.3.10 | pytest | 8.3.5 | python-dateutil (libreria Python per la gestione delle date) | 2.9.0.post0 |
| Editor di Python | 1.0.4 | python-json-logger (registratore JSON per Python) | 3.2.1 | python-lsp-jsonrpc | 1.1.2 |
| python-lsp-server | 1.12.0 | python-snappy | 0.7.3 | pytoolconfig | 1.2.6 |
| pytorch-ranger | 0.1.1 | pytz | 2024.1 | PyWavelets | 1.8.0 |
| PyYAML | 6.0.2 | pyzmq | 26.2.0 | interrogatorio | 2.1.0 |
| raggio | 2.37.0 | Riferimento | 0.30.2 | regex | 2024.11.6 |
| richieste | 2.32.3 | requests-oauthlib | 1.3.1 | requests-toolbelt | 1.0.0 |
| rfc3339-validator | 0.1.4 | rfc3986-validator | 0.1.1 | ricco | 13.9.4 |
| corda | 1.12.0 | rpds-py | 0.22.3 | RSA | 4.9.1 |
| ruamel.yaml | 0.18.10 | ruamel.yaml.clib | 0.2.12 | s3transfer | 0.11.3 |
| safetensors | 0.5.3 | scikit-image | 0.25.0 | scikit-learn | 1.6.1 |
| scipy | 1.15.1 | Seaborn | 0.13.2 | Send2Trash | 1.8.2 |
| trasformatori di frase | 3.0.1 | segmentazione delle frasi | 0.2.0 | setuptools (pacchetto Python per gestire la configurazione e la distribuzione) | 74.0.0 |
| forma | 0.46.0 | "Shellingham" | 1.5.4 | simplejson | 3.17.6 |
| sei | 1.16.0 | sklearn-compat | 0.1.3 | strumento di taglio | 0.0.8 |
| smart-open | 7.1.0 | smmap | 5.0.0 | sniffio | 1.3.0 |
| contenitori ordinati | 2.4.0 | soundfile | 0.12.1 | colino per la zuppa | 2,5 |
| soxr | 0.5.0.post1 | spazioso | 3.7.5 | spacy-legacy | 3.0.12 |
| spacy-loggers | 1.0.5 | SQLAlchemy | 2.0.37 | sqlparse | 0.4.2 |
| seriamente? | 2.5.1 | ssh-import-id (comando per l'importazione di chiavi SSH) | 5.11 | dati accatastati | 0.2.0 |
| stanio | 0.5.1 | starlette | 0.46.2 | statsmodels | 0.14.4 |
| strictyaml | 1.7.3 | la libreria sympy | 1.13.3 | tabellare | 0.9.0 |
| tenacità | 9.0.0 | TensorBoard | 2.19.0 | server di dati di TensorBoard | 0.7.2 |
| tensorboardX | 2.6.2.2 | TensorFlow | 2.19.0 | Stima di tensore tensorflow | 2.15.0 |
| termcolor | 3.0.1 | finito | 0.17.1 | testuale | 3.1.1 |
| tf_keras | 2.19.0 | thinc | 8.2.4 | threadpoolctl | 3.5.0 |
| tifffile | 2024.12.12 | tiktoken | 0.7.0 | tinycss2 | 1.4.0 |
| tokenize_rt | 6.1.0 | tokenizzatori | 0.21.1 | tomli | 2.0.1 |
| torcia | 2.4.0+CPU | torch-optimizer (ottimizzatore di torch) | 0.3.0 | torcheval | 0.0.7 |
| torchmetrics | 1.4.0.post0 | visione della torcia | 0.19.0+CPU | tornado | 6.4.2 |
| tqdm | 4.67.1 | traitlets (una libreria per la configurazione dei parametri nei programmi Python) | 5.14.3 | trasformatori | 4.49.0 |
| typeguard | 4.4.2 | Typer | 0.15.2 | types-python-dateutil | 2.9.0.20241206 |
| typing_extensions | 4.12.2 | tzdata | 2024.1 | uc-micro-py | 1.0.1 |
| ujson (una libreria per la gestione di JSON in Python) | 5.10.0 | aggiornamenti non supervisionati | 0,1 | Modello URI | 1.3.0 |
| urllib3 | 2.3.0 | uvicorn | 0.34.2 | validatori | 0.34.0 |
| virtualenv | 20.29.3 | Visioni | 0.8.1 | wadllib | 1.3.6 |
| wasabi | 1.1.3 | wcwidth (funzione per determinare la larghezza dei caratteri) | 0.2.5 | Donnola | 0.4.1 |
| webcolors | 24.11.1 | codifiche web | 0.5.1 | cliente WebSocket | 1.8.0 |
| websocket | 11.0.3 | Attrezzo | 3.1.3 | Che cosa è la patch | 1.0.2 |
| ruota | 0.45.1 | widgetsnbextension | 3.6.6 | wordcloud | 1.9.4 |
| rapito | 1.17.0 | xgboost | 2.0.3 | xgboost-ray | 0.1.19 |
| xxhash | 3.5.0 | yapf | 0.33.0 | yarl | 1.18.0 |
| ydata-profiling Profilatura dei dati | 4.16.1 | Zipp | 3.21.0 | zstd | 1.5.5.1 |
Librerie Python sui cluster GPU
Annotazioni
PyTorch usa le dipendenze PyPI CUDA per fornire il supporto CUDA anziché le versioni della libreria CUDA integrate in Databricks Runtime 17.0 ML.
| Libreria | Versione | Libreria | Versione | Libreria | Versione |
|---|---|---|---|---|---|
| absl-py | 1.0.0 | accelerare | 1.5.2 | aiohappyeyeballs | 2.4.4 |
| aiohttp | 3.11.10 | aiohttp-cors | 0.8.1 | aiosignal | 1.2.0 |
| Alambicco | 1.15.2 | tipi annotati | 0.7.0 | anyio | 4.6.2 |
| argcomplete | 3.6.2 | argon2-cffi | 21.3.0 | argon2-cffi-bindings | 21.2.0 |
| freccia | 1.3.0 | Astor | 0.8.1 | asttoken | 2.0.5 |
| astunparse | 1.6.3 | async-lru | 2.0.4 | att. | 24.3.0 |
| lettura audio | 3.0.1 | comando automatico | 2.2.2 | azure-comune | 1.1.28 |
| azure-core | 1.33.0 | azure-cosmos | 4.3.1 | azure-identity (servizio di identità Azure) | 1.20.0 |
| azure-mgmt-core | 1.5.0 | azure-mgmt-web | 8.0.0 | Azure Storage Blob | 12.23.0 |
| file di archiviazione Azure Data Lake | 12.17.0 | Babele | 2.16.0 | ritiro | 2.2.1 |
| backports.tarfile | 1.2.0 | bcrypt | 3.2.0 | beautifulsoup4 | 4.12.3 |
| nero | 24.10.0 | candeggiare | 6.2.0 | indicatore di direzione | 1.7.0 |
| blis | 0.7.11 | boto3 | 1.36.2 | botocore | 1.36.3 |
| Brotli | 1.1.0 | cachetools (strumento per la gestione della cache) | 5.5.1 | catalogo | 2.0.10 |
| codificatori di categorie | 2.6.3 | certificato | 2025.1.31 | cffi | 1.17.1 |
| chardet | 4.0.0 | normalizzatore di set di caratteri | 3.3.2 | interruttore | 2.1.3 |
| fai clic | 8.1.7 | cloudpathlib | 0.21.0 | cloudpickle (libreria Python per la serializzazione degli oggetti) | 3.0.0 |
| cmdstanpy | 1.2.5 | colorato | 0.5.6 | registro dei colori | 6.9.0 |
| comunicazione | 0.2.1 | compositore | 0.29.0 | confezione | 0.1.5 |
| configparser (analizzatore di configurazione) | 5.2.0 | contourpy | 1.3.1 | coolname | 2.2.0 |
| cramjam | 2.10.0 | criptografia | 43.0.3 | ciclista | 0.11.0 |
| cymem | 2.0.11 | Cython, un linguaggio di programmazione | 3.0.12 | roccia dacite | 1.9.2 |
| databricks-automl-runtime | 0.2.21 | Databricks SDK | 0.49.0 | Insiemi di dati | 2.20.0 |
| dbl-tempo | 0.1.26 | dbus-python | 1.3.2 | debugpy | 1.8.11 |
| Decoratore | 5.1.1 | deepspeed | 0.14.4 | defusedxml (una libreria per migliorare la sicurezza nell'elaborazione di XML) | 0.7.1 |
| Deprecato | 1.2.13 | aneto | 0.3.8 | distlib | 0.3.9 |
| dm-tree | 0.1.9 | Conversione da docstring a markdown | 0.11 | punti di ingresso | 0.4 |
| valutare | 0.4.2 | esecuzione | 0.8.3 | panoramica delle facette | 1.1.1 |
| Notifiche di Farama | 0.0.4 | fastapi | 0.115.12 | fastjsonschema (Una libreria per la convalida veloce dei dati JSON) | 2.21.1 |
| fasttext-wheel | 0.9.2 | blocco dei file | 3.13.1 | Fiaschetta | 2.2.5 |
| FlatBuffers | 25.2.10 | fonttools (strumenti per caratteri) | 4.55.3 | fqdn (nome di dominio completo) | 1.5.1 |
| frozenlist | 1.5.0 | fsspec | 2023.5.0 | futuro | 0.18.3 |
| Gast | 0.4.0 | gitdb | 4.0.11 | GitPython | 3.1.43 |
| google-api-core | 2.20.0 | google-auth (autenticazione Google) | 2.38.0 | google-auth-oauthlib | 1.0.0 |
| google-cloud-core | 2.4.3 | archiviazione su Google Cloud | 2.10.0 | google-crc32c | 1.7.1 |
| Google-Pasta | 0.2.0 | google-resumable-media (media riprendibile di Google) | 2.7.2 | googleapis-common-protos | 1.65.0 |
| gql | 3.5.2 | graphql-core | 3.2.4 | greenlet | 3.1.1 |
| grpcio | 1.67.0 | grpcio-status | 1.67.0 | gunicorn | 20.1.0 |
| ginnasio | 0.28.1 | h11 | 0.14.0 | h5py | 3.12.1 |
| hjson | 3.1.0 | vacanze | 0,54 | htmlmin (strumento per la minimizzazione del codice HTML) | 0.1.12 |
| httpcore | 1.0.2 | httplib2 | 0.20.4 | httpx | 0.27.0 |
| huggingface-hub | 0.30.2 | IDNA | 3.7 | ImageHash | 4.3.1 |
| imageio | 2.37.0 | imbalanced-learn (una libreria di apprendimento automatico per la gestione dei set di dati sbilanciati) | 0.13.0 | importlib-metadata | 6.0.0 |
| importlib_resources (libreria per la gestione delle risorse in Python) | 6.5.2 | inflettere | 7.3.1 | iniconfig | 1.1.1 |
| ipyflow-core | 0.0.209 | ipykernel | 6.29.5 | ipython | 8.30.0 |
| ipython-genutils | 0.2.0 | ipywidgets (una libreria Python per widget interattivi) | 7.8.1 | isodate | 0.6.1 |
| isodurazione | 20.11.0 | it’s dangerous | 2.2.0 | jaraco.context | 5.3.0 |
| jaraco.functools | 4.0.1 | jaraco.text | 3.12.1 | jax-jumpy | 1.0.0 |
| jedi | 0.19.2 | Jinja2 | 3.1.5 | jiter | 0.9.0 |
| jmespath | 1.0.1 | joblib | 1.4.2 | joblibspark | 0.5.1 |
| json5 | 0.9.25 | jsonpatch | 1,33 | jsonpointer | 3.0.0 |
| jsonschema | 4.23.0 | jsonschema-specifications | 2023.7.1 | eventi-jupyter | 0.10.0 |
| jupyter-lsp | 2.2.0 | jupyter_client | 8.6.3 | jupyter_core | 5.7.2 |
| jupyter_server | 2.14.1 | terminali_del_server_Jupyter | 0.4.4 | jupyterlab | 4.3.4 |
| jupyterlab-pygments | 0.1.2 | jupyterlab-widgets | 1.0.0 | jupyterlab_server | 2.27.3 |
| Keras | 3.5.0 | kiwisolver | 1.4.8 | langchain | 0.3.21 |
| langchain-core | 0.3.55 | separatori di testo langchain | 0.3.8 | codici linguistici | 3.5.0 |
| langsmith | 0.1.133 | dati linguistici | 1.3.0 | launchpadlib | 1.11.0 |
| lazr.restfulclient | 0.14.6 | lazr.uri | 1.0.6 | lazy_loader | 0.4 |
| libclang | 15.0.6.1 | librosa | 0.10.2 | lightgbm | 4.5.0 |
| fulmine-utilità | 0.14.3 | linkify-it-py | 2.0.0 | llvmlite | 0.44.0 |
| lz4 | 4.3.2 | Mako | 1.2.0 | marisa-trie | 1.2.0 |
| Markdown | 3.4.1 | markdown-it-py | 2.2.0 | MarkupSafe | 3.0.2 |
| matplotlib | 3.10.0 | matplotlib-inline | 0.1.7 | Mccabe | 0.7.0 |
| mdit-py-plugins | 0.3.0 | mdurl | 0.1.0 | memray | 1.17.1 |
| Mistune | 2.0.4 | ml_dtypes | 0.5.1 | mlflow versione leggera | 2.21.3 |
| mmh3 | 5.1.0 | more-itertools | 10.3.0 | mosaicml-cli | 0.6.41 |
| MosaicML-Streaming | 0.8.0 | mpmath | 1.3.0 | msal | 1.32.0 |
| msal-extensions | 1.3.1 | msgpack | 1.1.0 | multidict | 6.1.0 |
| multimetodo | 1.12 | multiprocesso | 0.70.16 | algoritmo di hashing murmurhash | 1.0.12 |
| mypy-extensions | 1.0.0 | namex | 0.0.8 | nbclient | 0.8.0 |
| nbconvert | 7.16.4 | nbformat | 5.10.4 | nest-asyncio | 1.6.0 |
| networkx | 3.4.2 | ninja | 1.11.1.1 | nltk (Natural Language Toolkit) | 3.9.1 |
| nodeenv | 1.9.1 | taccuino | 7.3.2 | notebook_shim | 0.2.3 |
| nmbalo | 0.61.0 | numpy | 2.1.3 | nvidia-ml-py | 12.570.86 |
| oauthlib | 3.2.0 | Oci | 2.150.2 | openai | 1.40.2 |
| opencensus | 0.11.4 | opencensus-context | 0.1.3 | opentelemetry-api | 1.32.1 |
| opentelemetry-sdk | 1.32.1 | Convenzioni Semanticche di OpenTelemetry | 0.53b1 | opt_einsum | 3.4.0 |
| optree | 0.15.0 | optuna | 3.6.1 | integrazione-optuna | 3.6.0 |
| orjson | 3.10.16 | sostituisce | 7.4.0 | imballaggio | 24.1 |
| Panda | 2.2.3 | pandocfilters | 1.5.0 | paramiko | 3.4.0 |
| parso | 0.8.4 | pathspec | 0.10.3 | vittima | 1.0.1 |
| pexpect | 4.8.0 | phik | 0.12.4 | guanciale | 11.1.0 |
| seme | 25.0 | platformdirs | 3.10.0 | plotly (software di visualizzazione dati) | 5.24.1 |
| connettivita | 1.5.0 | pmdarima | 2.0.4 | cagnolino | 1.8.2 |
| (Note: Without context, a definitive improved translation cannot be accurately proposed). | 3.0.9 | prometheus_client | 0.21.0 | prompt-toolkit | 3.0.43 |
| propcache | 0.2.0 | profeta | 1.1.6 | proto-plus | 1.26.1 |
| protobuf | 5.29.4 | psutil | 5.9.0 | psycopg2 | 2.9.3 |
| ptyprocess | 0.7.0 | pure-eval | 0.2.2 | puremagic | 1.28 |
| py-cpuinfo | 9.0.0 | py-spy | 0.4.0 | pyarrow | 19.0.1 |
| pyarrow-hotfix | 0,6 | pyasn1 | 0.4.8 | pyasn1-modules | 0.2.8 |
| pybind11 | 2.13.6 | pyccolo | 0.0.71 | pycparser (un parser scritto in Python) | 2.21 |
| pydantic | 2.10.6 | pydantic_core | 2.27.2 | pyflakes | 3.2.0 |
| Pygments | 2.15.1 | PyGObject | 3.48.2 | pyiceberg | 0.9.0 |
| PyJWT | 2.10.1 | PyNaCl | 1.5.0 | pyodbc | 5.2.0 |
| pyOpenSSL | 24.2.1 | pyparsing | 3.2.0 | pyright | 1.1.394 |
| pytesseract | 0.3.10 | pytest | 8.3.5 | python-dateutil (libreria Python per la gestione delle date) | 2.9.0.post0 |
| Editor di Python | 1.0.4 | python-json-logger (registratore JSON per Python) | 3.2.1 | python-lsp-jsonrpc | 1.1.2 |
| python-lsp-server | 1.12.0 | python-snappy | 0.7.3 | pytoolconfig | 1.2.6 |
| pytorch-ranger | 0.1.1 | pytz | 2024.1 | PyWavelets | 1.8.0 |
| PyYAML | 6.0.2 | pyzmq | 26.2.0 | interrogatorio | 2.1.0 |
| raggio | 2.37.0 | Riferimento | 0.30.2 | regex | 2024.11.6 |
| richieste | 2.32.3 | requests-oauthlib | 1.3.1 | requests-toolbelt | 1.0.0 |
| rfc3339-validator | 0.1.4 | rfc3986-validator | 0.1.1 | ricco | 13.9.4 |
| corda | 1.12.0 | rpds-py | 0.22.3 | RSA | 4.9.1 |
| ruamel.yaml | 0.18.10 | ruamel.yaml.clib | 0.2.12 | s3transfer | 0.11.3 |
| safetensors | 0.5.3 | scikit-image | 0.25.0 | scikit-learn | 1.6.1 |
| scipy | 1.15.1 | Seaborn | 0.13.2 | Send2Trash | 1.8.2 |
| trasformatori di frase | 3.0.1 | segmentazione delle frasi | 0.2.0 | setuptools (pacchetto Python per gestire la configurazione e la distribuzione) | 74.0.0 |
| forma | 0.46.0 | "Shellingham" | 1.5.4 | simplejson | 3.17.6 |
| sei | 1.16.0 | sklearn-compat | 0.1.3 | strumento di taglio | 0.0.8 |
| smart-open | 7.1.0 | smmap | 5.0.0 | sniffio | 1.3.0 |
| contenitori ordinati | 2.4.0 | soundfile | 0.12.1 | colino per la zuppa | 2,5 |
| soxr | 0.5.0.post1 | spazioso | 3.7.5 | spacy-legacy | 3.0.12 |
| spacy-loggers | 1.0.5 | SQLAlchemy | 2.0.37 | sqlparse | 0.4.2 |
| seriamente? | 2.5.1 | ssh-import-id (comando per l'importazione di chiavi SSH) | 5.11 | dati accatastati | 0.2.0 |
| stanio | 0.5.1 | starlette | 0.46.2 | statsmodels | 0.14.4 |
| strictyaml | 1.7.3 | la libreria sympy | 1.13.3 | tabellare | 0.9.0 |
| tenacità | 9.0.0 | TensorBoard | 2.19.0 | server di dati di TensorBoard | 0.7.2 |
| tensorboardX | 2.6.2.2 | TensorFlow | 2.19.0 | Stima di tensore tensorflow | 2.15.0 |
| termcolor | 3.0.1 | finito | 0.17.1 | testuale | 3.1.1 |
| tf_keras | 2.19.0 | thinc | 8.2.4 | threadpoolctl | 3.5.0 |
| tifffile | 2024.12.12 | tiktoken | 0.7.0 | tinycss2 | 1.4.0 |
| tokenize_rt | 6.1.0 | tokenizzatori | 0.21.1 | tomli | 2.0.1 |
| torcia | 2.4.0+CPU | torch-optimizer (ottimizzatore di torch) | 0.3.0 | torcheval | 0.0.7 |
| torchmetrics | 1.4.0.post0 | visione della torcia | 0.19.0+CPU | tornado | 6.4.2 |
| tqdm | 4.67.1 | traitlets (una libreria per la configurazione dei parametri nei programmi Python) | 5.14.3 | trasformatori | 4.49.0 |
| typeguard | 4.4.2 | Typer | 0.15.2 | types-python-dateutil | 2.9.0.20241206 |
| typing_extensions | 4.12.2 | tzdata | 2024.1 | uc-micro-py | 1.0.1 |
| ujson (una libreria per la gestione di JSON in Python) | 5.10.0 | aggiornamenti non supervisionati | 0,1 | Modello URI | 1.3.0 |
| urllib3 | 2.3.0 | uvicorn | 0.34.2 | validatori | 0.34.0 |
| virtualenv | 20.29.3 | Visioni | 0.8.1 | wadllib | 1.3.6 |
| wasabi | 1.1.3 | wcwidth (funzione per determinare la larghezza dei caratteri) | 0.2.5 | Donnola | 0.4.1 |
| webcolors | 24.11.1 | codifiche web | 0.5.1 | cliente WebSocket | 1.8.0 |
| websocket | 11.0.3 | Attrezzo | 3.1.3 | Che cosa è la patch | 1.0.2 |
| ruota | 0.45.1 | widgetsnbextension | 3.6.6 | wordcloud | 1.9.4 |
| rapito | 1.17.0 | xgboost | 2.0.3 | xgboost-ray | 0.1.19 |
| xxhash | 3.5.0 | yapf | 0.33.0 | yarl | 1.18.0 |
| ydata-profiling Profilatura dei dati | 4.16.1 | Zipp | 3.21.0 | zstd | 1.5.5.1 |
Librerie R
Nel Databricks Runtime 17.0, le librerie R sono identiche alle librerie R.
Librerie Java e Scala (cluster Scala 2.12)
Oltre alle librerie Java e Scala in Databricks Runtime 17.0, Databricks Runtime 17.0 ML contiene i file JAR seguenti:
Cluster di CPU
| ID del Gruppo | ID dell'artefatto | Versione |
|---|---|---|
| com.typesafe.akka | akka-actor_2.12 | 2.5.23 |
| ml.dmlc | xgboost4j-spark_2.12 | 1.7.3 |
| ml.dmlc | xgboost4j_2.12 | 1.7.3 |
| org.graphframes | graphframes_2.12 | 0.8.4-db1-spark3.5 |
| org.mlflow | mlflow-client | 2.15.1 |
| org.tensorflow | spark-tensorflow-connector_2.12 | 1.15.0 |
Cluster di GPU
| ID del Gruppo | ID dell'artefatto | Versione |
|---|---|---|
| com.typesafe.akka | akka-actor_2.12 | 2.5.23 |
| ml.dmlc | xgboost4j-gpu_2.12 | 1.7.3 |
| ml.dmlc | xgboost4j-spark-gpu_2.12 | 1.7.3 |
| org.graphframes | graphframes_2.12 | 0.8.4-db1-spark3.5 |
| org.mlflow | mlflow-client | 2.15.1 |
| org.tensorflow | spark-tensorflow-connector_2.12 | 1.15.0 |