Anmerkung
Der Zugriff auf diese Seite erfordert eine Genehmigung. Du kannst versuchen, dich anzumelden oder die Verzeichnisse zu wechseln.
Der Zugriff auf diese Seite erfordert eine Genehmigung. Du kannst versuchen , die Verzeichnisse zu wechseln.
Databricks Runtime 17.0 für Machine Learning bietet eine ready-to-go Umgebung für maschinelles Lernen und Data Science basierend auf Databricks Runtime 17.0. Databricks Runtime ML enthält viele beliebte Machine Learning-Bibliotheken, einschließlich TensorFlow, PyTorch und XGBoost. Databricks Runtime ML enthält AutoML, ein Tool zum automatischen Trainieren von Machine Learning-Pipelines. Databricks Runtime ML unterstützt außerdem das verteilte Deep Learning-Training mithilfe von TorchDistributor, DeepSpeed und Ray.
Tipp
Versionshinweise zu Versionen von Databricks Runtime, die das Ende des Supports (EoS) erreicht haben, finden Sie unter Versionshinweise zum Ende des Supports für Databricks Runtime. Die EoS Databricks-Runtime-Versionen wurden eingestellt und werden möglicherweise nicht aktualisiert.
Neue Features und Verbesserungen
Databricks Runtime 17.0 ML basiert auf Databricks Runtime 17.0. Informationen zu den Neuerungen in Databricks Runtime 17.0, einschließlich Apache Spark MLlib und SparkR, finden Sie in den Anmerkungen zur Databricks Runtime 17.0 .
SparkML wird jetzt auf Standardclustern unterstützt.
Datenbausteine Runtime 17.0 ML unterstützt SparkML auf Standardclustern (früher als Shared Cluster bezeichnet). Informationen zu Standardclustern finden Sie unter Access-Modi.
Die folgenden Einschränkungen gelten beim Ausführen von SparkML auf Standardclustern:
- Die maximale Modellgröße beträgt 1 GB.
- Die maximale Größe des Modellcaches pro Sitzung beträgt 10 GB.
- Die Schulung des Strukturmodells wird frühzeitig beendet, wenn die Modellgröße etwa 1 GB überschreitet.
- Die folgenden SparkML-Modelle werden nicht unterstützt:
- VerteiltesLDAModell
- FPGrowthModel
Andere Änderungen
XGBoost4J-Spark entfernt
XGBoost4J-Spark, das in früheren Versionen von Databricks Runtime ML enthalten war, ist nicht in Databricks Runtime 17.0 ML enthalten. Databricks empfiehlt die Verwendung der Python-API für xgboost.spark. Siehe Verteiltes Training von XGBoost-Modellen mithilfe von xgboost.spark.
Cosmos DB Online Store-Anbieter wird nicht mehr unterstützt
Der Cosmos DB Online Store-Anbieter ist nicht kompatibel mit Databricks Runtime 17.0 ML oder höher.
Systemumgebung
Die Systemumgebung in Databricks Runtime 17.0 ML unterscheidet sich von Databricks Runtime 17.0 wie folgt.
- Für GPU-Cluster umfasst Databricks Runtime ML die folgenden NVIDIA-GPU-Bibliotheken:
- CUDA 12.6
- cublas 12.6.4.1-1
- cusolver 11.7.1.2-1
- cupti 12.6.80-1
- cusparse 12.5.4.2-1
- cuDNN 9.5.1.17-1
- NCCL 2.26.2
- TensorRT 10.2.0.19-1
Bibliotheken
In den folgenden Abschnitten werden die Bibliotheken aufgeführt, die in Databricks Runtime 17.0 ML enthalten sind, die sich von denen unterscheiden, die in Databricks Runtime 17.0 enthalten sind.
Inhalt dieses Abschnitts:
- Bibliotheken der obersten Ebene
- Python-Bibliotheken
- R-Bibliotheken
- Java- und Scala-Bibliotheken (Scala 2.12-Cluster)
Bibliotheken der obersten Ebene
Databricks Runtime 17.0 ML enthält die folgenden Bibliotheken der obersten Ebene:
- Dateien
- GraphFrames
- MLflow
- PyTorch
- Spark-Tensorflow-Verbinder
- Scikit-learn
- Streaming
- TensorFlow
- TensorBoard
- Transformatoren
Python-Bibliotheken
Databricks Runtime 17.0 ML verwendet virtualenv für die Python-Paketverwaltung und enthält viele beliebte ML-Pakete.
Zusätzlich zu den in den folgenden Abschnitten angegebenen Paketen enthält Databricks Runtime 17.0 ML auch die folgenden Pakete:
- automl 1.30.0
Um die Databricks Runtime ML Python-Umgebung in Ihrer lokalen virtuellen Python-Umgebung zu reproduzieren, laden Sie die requirements-17.0.txt Datei herunter und führen Sie sie aus pip install -r requirements-17.0.txt. Mit diesem Befehl werden alle Open-Source-Bibliotheken installiert, die Databricks Runtime ML verwendet, aber keine Bibliotheken, die von Databricks entwickelt wurden, wie zum Beispiel databricks-automl oder der Databricks-Fork von hyperopt.
Python-Bibliotheken in CPU-Clustern
| Bibliothek | Version | Bibliothek | Version | Bibliothek | Version |
|---|---|---|---|---|---|
| absl-py | 1.0.0 | beschleunigen | 1.5.2 | aiohappyeyeballs | 2.4.4 |
| aiohttp | 3.11.10 | aiohttp-cors | 0.8.1 | aiosignal | 1.2.0 |
| Alambik | 1.15.2 | annotated-types | 0.7.0 | anyio | 4.6.2 |
| argcomplete | 3.6.2 | argon2-cffi | 21.3.0 | argon2-cffi-bindings | 21.2.0 |
| Pfeil | 1.3.0 | astor | 0.8.1 | asttokens | 2.0.5 |
| astunparse | 1.6.3 | async-lru | 2.0.4 | attrs | 24.3.0 |
| audioread | 3.0.1 | autocommand | 2.2.2 | azure-common | 1.1.28 |
| azure-core | 1.33.0 | Azure-Cosmos | 4.3.1 | Azure-Identity | 1.20.0 |
| azure-mgmt-core | 1.5.0 | azure-mgmt-web | 8.0.0 | azure-storage-blob | 12.23.0 |
| azure-storage-file-datalake | 12.17.0 | babel | 2.16.0 | backoff | 2.2.1 |
| backports.tarfile | 1.2.0 | bcrypt | 3.2.0 | beautifulsoup4 | 4.12.3 |
| schwarz | 24.10.0 | Bleichmittel | 6.2.0 | Blinker | 1.7.0 |
| blis | 0.7.11 | boto3 | 1.36.2 | botocore | 1.36.3 |
| Brotli | 1.1.0 | CacheWerkzeuge | 5.5.1 | Katalog | 2.0.10 |
| category-encoders | 2.6.3 | certifi | 2025.1.31 | cffi | 1.17.1 |
| chardet | 4.0.0 | Charset-Normalizer | 3.3.2 | circuitbreaker | 2.1.3 |
| click | 8.1.7 | cloudpathlib | 0.21.0 | cloudpickle | 3.0.0 |
| cmdstanpy | 1.2.5 | farbig | 0.5.6 | colorlog | 6.9.0 |
| comm | 0.2.1 | Komponist | 0.29.0 | confection | 0.1.5 |
| configparser | 5.2.0 | contourpy | 1.3.1 | coolname | 2.2.0 |
| cramjam | 2.10.0 | Kryptographie | 43.0.3 | Fahrradfahrer | 0.11.0 |
| cymem | 2.0.11 | Cython | 3.0.12 | dacite | 1.9.2 |
| databricks-automl-runtime | 0.2.21 | Databricks-SDK | 0.49.0 | Datensätze | 2.20.0 |
| dbl-tempo | 0.1.26 | dbus-python | 1.3.2 | debugpy | 1.8.11 |
| Dekorateur | 5.1.1 | deepspeed | 0.14.4 | defusedxml | 0.7.1 |
| Als veraltet markiert | 1.2.13 | dill | 0.3.8 | distlib | 0.3.9 |
| dm-Baum | 0.1.9 | docstring-to-markdown | 0.11 | Einstiegspunkte | 0,4 |
| auswerten | 0.4.2 | executing | 0.8.3 | Übersicht der Facetten | 1.1.1 |
| Farama-Notifications | 0.0.4 | fastapi | 0.115.12 | fastjsonschema | 2.21.1 |
| fasttext-wheel | 0.9.2 | Dateisperrung | 3.13.1 | Flask | 2.2.5 |
| FlatBuffers | 25.2.10 | fonttools | 4.55.3 | fqdn | 1.5.1 |
| frozenlist | 1.5.0 | fsspec | 2023.5.0 | Zukunft | 0.18.3 |
| gast | 0.4.0 | gitdb | 4.0.11 | GitPython | 3.1.43 |
| google-api-core | 2.20.0 | google-auth | 2.38.0 | google-auth-oauthlib | 1.0.0 |
| google-cloud-core | 2.4.3 | Google Cloud-Speicher | 2.10.0 | google-crc32c | 1.7.1 |
| Google-Pasta | 0.2.0 | google-resumable-media | 2.7.2 | googleapis-common-protos | 1.65.0 |
| gql | 3.5.2 | graphql-core | 3.2.4 | greenlet | 3.1.1 |
| grpcio | 1.67.0 | grpcio-status | 1.67.0 | gunicorn | 20.1.0 |
| Gymnasium | 0.28.1 | h11 | 0.14.0 | h5py | 3.12.1 |
| hjson | 3.1.0 | Ferien | 0.54 | htmlmin | 0.1.12 |
| httpcore | 1.0.2 | httplib2 | 0.20.4 | httpx | 0.27.0 |
| huggingface-hub | 0.30.2 | idna | 3.7 | ImageHash | 4.3.1 |
| imageio | 2.37.0 | imbalanced-learn | 0.13.0 | importlib-metadata | 6.0.0 |
| importlib_resources | 6.5.2 | inflect | 7.3.1 | iniconfig | 1.1.1 |
| ipyflow-core | 0.0.209 | ipykernel | 6.29.5 | ipython | 8.30.0 |
| ipython-genutils | 0.2.0 | ipywidgets | 7.8.1 | isodate | 0.6.1 |
| isoduration | 20.11.0 | es ist gefährlich | 2.2.0 | jaraco.context | 5.3.0 |
| jaraco.functools | 4.0.1 | jaraco.text | 3.12.1 | jax-jumpy | 1.0.0 |
| Jedi | 0.19.2 | Jinja2 | 3.1.5 | jiter | 0.9.0 |
| jmespath | 1.0.1 | joblib | 1.4.2 | joblibspark | 0.5.1 |
| json5 | 0.9.25 | jsonpatch | 1.33 | jsonpointer | 3.0.0 |
| jsonschema | 4.23.0 | jsonschema-Spezifikationen | 2023.7.1 | Jupyter-Ereignisse | 0.10.0 |
| jupyter-lsp | 2.2.0 | jupyter_client | 8.6.3 | jupyter_core | 5.7.2 |
| jupyter_server | 2.14.1 | jupyter_server_terminals | 0.4.4 | jupyterlab | 4.3.4 |
| jupyterlab-pygments | 0.1.2 | jupyterlab-widgets | 1.0.0 | jupyterlab_server | 2.27.3 |
| keras | 3.5.0 | kiwisolver | 1.4.8 | langchain | 0.3.21 |
| langchain-core | 0.3.55 | langchain-text-splitters | 0.3.8 | langcodes | 3.5.0 |
| langsmith | 0.1.133 | Sprachdaten | 1.3.0 | launchpadlib | 1.11.0 |
| lazr.restfulclient | 0.14.6 | lazr.uri | 1.0.6 | lazy_loader | 0,4 |
| libclang | 15.0.6.1 | librosa | 0.10.2 | lightgbm | 4.5.0 |
| lightning-utilities | 0.14.3 | linkify-it-py | 2.0.0 | llvmlite | 0.44.0 |
| lz4 | 4.3.2 | Mako | 1.2.0 | marisa-trie | 1.2.0 |
| Markdown | 3.4.1 | markdown-it-py | 2.2.0 | MarkupSafe | 3.0.2 |
| matplotlib | 3.10.0 | matplotlib-inline | 0.1.7 | mccabe | 0.7.0 |
| mdit-py-plugins | 0.3.0 | mdurl | 0.1.0 | memray | 1.17.1 |
| mistune | 2.0.4 | ml_dtypes | 0.5.1 | mlflow-skinny | 2.21.3 |
| mmh3 | 5.1.0 | more-itertools | 10.3.0 | mosaicml-cli | 0.6.41 |
| mosaicml-streaming | 0.8.0 | mpmath | 1.3.0 | msal | 1.32.0 |
| msal-extensions | 1.3.1 | msgpack | 1.1.0 | multidict | 6.1.0 |
| multimethod | 1.12 | Multiprozessor | 0.70.16 | murmurhash | 1.0.12 |
| mypy-Erweiterungen | 1.0.0 | namex | 0.0.8 | nbclient | 0.8.0 |
| nbconvert | 7.16.4 | nbformat | 5.10.4 | nest-asyncio | 1.6.0 |
| networkx | 3.4.2 | ninja | 1.11.1.1 | nltk | 3.9.1 |
| nodeenv | 1.9.1 | Notebook | 7.3.2 | notebook_shim | 0.2.3 |
| numba | 0.61.0 | numpy | 2.1.3 | nvidia-ml-py | 12.570.86 |
| oauthlib | 3.2.0 | oci | 2.150.2 | openai | 1.40.2 |
| opencensus | 0.11.4 | opencensus-Kontext | 0.1.3 | opentelemetry-api | 1.32.1 |
| opentelemetry-sdk | 1.32.1 | opentelemetry-semantic-conventions | 0.53b1 | opt_einsum | 3.4.0 |
| optree | 0.15.0 | optuna | 3.6.1 | optuna-integration | 3.6.0 |
| orjson | 3.10.16 | Überschreibt | 7.4.0 | Verpackung | 24.1 |
| Pandas | 2.2.3 | pandocfilters | 1.5.0 | paramiko | 3.4.0 |
| parso | 0.8.4 | pathspec | 0.10.3 | patsy | 1.0.1 |
| pexpect | 4.8.0 | phik | 0.12.4 | Kissen | 11.1.0 |
| pip | 25.0 | platformdirs | 3.10.0 | plotly | 5.24.1 |
| pluggy | 1.5.0 | pmdarima | 2.0.4 | Hündchen | 1.8.2 |
| preshed | 3.0.9 | prometheus_client | 0.21.0 | prompt-toolkit | 3.0.43 |
| propcache | 0.2.0 | prophet | 1.1.6 | proto-plus | 1.26.1 |
| protobuf | 5.29.4 | psutil | 5.9.0 | psycopg2 | 2.9.3 |
| ptyprocess | 0.7.0 | pure-eval | 0.2.2 | puremagic | 1.28 |
| py-cpuinfo | 9.0.0 | py-spy | 0.4.0 | pyarrow | 19.0.1 |
| pyarrow-hotfix | 0,6 | Pyasn1 | 0.4.8 | Pyasn1-Module | 0.2.8 |
| pybind11 | 2.13.6 | pyccolo | 0.0.71 | pycparser | 2.21 |
| pydantic | 2.10.6 | pydantic_core | 2.27.2 | pyflakes | 3.2.0 |
| Pygments | 2.15.1 | PyGObject | 3.48.2 | pyiceberg | 0.9.0 |
| PyJWT | 2.10.1 | PyNaCl | 1.5.0 | pyodbc | 5.2.0 |
| pyOpenSSL | 24.2.1 | pyparsing | 3.2.0 | pyright | 1.1.394 |
| pytesseract | 0.3.10 | pytest | 8.3.5 | Python-dateutil | 2.9.0.post0 |
| python-editor | 1.0.4 | python-json-logger | 3.2.1 | python-lsp-jsonrpc | 1.1.2 |
| Python-LSP-Server | 1.12.0 | python-snappy | 0.7.3 | pytoolconfig | 1.2.6 |
| pytorch-ranger | 0.1.1 | pytz | 2024.1 | PyWavelets | 1.8.0 |
| PyYAML | 6.0.2 | pyzmq | 26.2.0 | Fragebogen | 2.1.0 |
| ray | 2.37.0 | Referenzierung | 0.30.2 | regex | 2024.11.6 |
| requests | 2.32.3 | requests-oauthlib | 1.3.1 | Anforderungs-toolbelt | 1.0.0 |
| rfc3339-Prüfer | 0.1.4 | rfc3986-validator | 0.1.1 | rich | 13.9.4 |
| Seil | 1.12.0 | rpds-py | 0.22.3 | rsa | 4.9.1 |
| ruamel.yaml | 0.18.10 | ruamel.yaml.clib | 0.2.12 | s3transfer | 0.11.3 |
| safetensors | 0.5.3 | scikit-image | 0.25.0 | scikit-learn | 1.6.1 |
| scipy | 1.15.1 | Seegeboren | 0.13.2 | Send2Trash | 1.8.2 |
| Satztransformatoren | 3.0.1 | sentencepiece | 0.2.0 | setuptools | 74.0.0 |
| shap | 0.46.0 | shellingham | 1.5.4 | simplejson | 3.17.6 |
| six | 1.16.0 | sklearn-compat | 0.1.3 | slicer | 0.0.8 |
| smart-open | 7.1.0 | smmap | 5.0.0 | sniffio | 1.3.0 |
| sortierte Container | 2.4.0 | Sounddatei | 0.12.1 | soupsieve | 2,5 |
| soxr | 0.5.0.post1 | spacy | 3.7.5 | spacy-legacy | 3.0.12 |
| spacy-loggers | 1.0.5 | SQLAlchemy | 2.0.37 | sqlparse | 0.4.2 |
| srsly | 2.5.1 | ssh-import-id | 5.11 | Stapeldaten | 0.2.0 |
| stanio | 0.5.1 | starlette | 0.46.2 | StatistikModelle | 0.14.4 |
| strictyaml | 1.7.3 | sympy | 1.13.3 | tabellarisieren | 0.9.0 |
| Hartnäckigkeit | 9.0.0 | tensorboard | 2.19.0 | tensorboard-data-server | 0.7.2 |
| tensorboardX | 2.6.2.2 | TensorFlow | 2.19.0 | tensorflow-estimator | 2.15.0 |
| termcolor | 3.0.1 | terminado | 0.17.1 | textual | 3.1.1 |
| tf_keras | 2.19.0 | thinc | 8.2.4 | threadpoolctl | 3.5.0 |
| tifffile | 2024.12.12 | tiktoken | 0.7.0 | tinycss2 | 1.4.0 |
| tokenize_rt | 6.1.0 | tokenizers | 0.21.1 | tomli | 2.0.1 |
| Fackel | 2.4.0+cpu | torch-optimizer | 0.3.0 | torcheval | 0.0.7 |
| TorchMetrics | 1.4.0.post0 | torchvision | 0.19.0+cpu | Tornado | 6.4.2 |
| tqdm | 4.67.1 | traitlets | 5.14.3 | Transformatoren | 4.49.0 |
| typeguard | 4.4.2 | typer | 0.15.2 | types-python-dateutil | 2.9.0.20241206 |
| typing_extensions | 4.12.2 | tzdata | 2024.1 | uc-micro-py | 1.0.1 |
| ujson | 5.10.0 | unbeaufsichtigte Aktualisierungen | 0,1 | URI-Vorlage | 1.3.0 |
| urllib3 | 2.3.0 | uvicorn | 0.34.2 | Validatoren | 0.34.0 |
| virtualenv | 20.29.3 | Visionen | 0.8.1 | wadllib | 1.3.6 |
| wasabi | 1.1.3 | wcwidth | 0.2.5 | weasel | 0.4.1 |
| webcolors | 24.11.1 | Webkodierungen | 0.5.1 | WebSocket-Client | 1.8.0 |
| websockets | 11.0.3 | Werkzeug | 3.1.3 | whatthepatch | 1.0.2 |
| Rad | 0.45.1 | widgetsnbextension | 3.6.6 | wordcloud | 1.9.4 |
| Eingehüllt | 1.17.0 | xgboost | 2.0.3 | xgboost-ray | 0.1.19 |
| xxhash | 3.5.0 | yapf | 0.33.0 | yarl | 1.18.0 |
| ydata-profiling | 4.16.1 | zipp | 3.21.0 | zstd | 1.5.5.1 |
Python-Bibliotheken für GPU-Cluster
Hinweis
PyTorch verwendet die CUDA PyPI-Abhängigkeiten, um CUDA-Unterstützung anstelle der CUDA-Bibliotheksversionen bereitzustellen, die in Databricks Runtime 17.0 ML integriert sind.
| Bibliothek | Version | Bibliothek | Version | Bibliothek | Version |
|---|---|---|---|---|---|
| absl-py | 1.0.0 | beschleunigen | 1.5.2 | aiohappyeyeballs | 2.4.4 |
| aiohttp | 3.11.10 | aiohttp-cors | 0.8.1 | aiosignal | 1.2.0 |
| Alambik | 1.15.2 | annotated-types | 0.7.0 | anyio | 4.6.2 |
| argcomplete | 3.6.2 | argon2-cffi | 21.3.0 | argon2-cffi-bindings | 21.2.0 |
| Pfeil | 1.3.0 | astor | 0.8.1 | asttokens | 2.0.5 |
| astunparse | 1.6.3 | async-lru | 2.0.4 | attrs | 24.3.0 |
| audioread | 3.0.1 | autocommand | 2.2.2 | azure-common | 1.1.28 |
| azure-core | 1.33.0 | Azure-Cosmos | 4.3.1 | Azure-Identity | 1.20.0 |
| azure-mgmt-core | 1.5.0 | azure-mgmt-web | 8.0.0 | azure-storage-blob | 12.23.0 |
| azure-storage-file-datalake | 12.17.0 | babel | 2.16.0 | backoff | 2.2.1 |
| backports.tarfile | 1.2.0 | bcrypt | 3.2.0 | beautifulsoup4 | 4.12.3 |
| schwarz | 24.10.0 | Bleichmittel | 6.2.0 | Blinker | 1.7.0 |
| blis | 0.7.11 | boto3 | 1.36.2 | botocore | 1.36.3 |
| Brotli | 1.1.0 | CacheWerkzeuge | 5.5.1 | Katalog | 2.0.10 |
| category-encoders | 2.6.3 | certifi | 2025.1.31 | cffi | 1.17.1 |
| chardet | 4.0.0 | Charset-Normalizer | 3.3.2 | circuitbreaker | 2.1.3 |
| click | 8.1.7 | cloudpathlib | 0.21.0 | cloudpickle | 3.0.0 |
| cmdstanpy | 1.2.5 | farbig | 0.5.6 | colorlog | 6.9.0 |
| comm | 0.2.1 | Komponist | 0.29.0 | confection | 0.1.5 |
| configparser | 5.2.0 | contourpy | 1.3.1 | coolname | 2.2.0 |
| cramjam | 2.10.0 | Kryptographie | 43.0.3 | Fahrradfahrer | 0.11.0 |
| cymem | 2.0.11 | Cython | 3.0.12 | dacite | 1.9.2 |
| databricks-automl-runtime | 0.2.21 | Databricks-SDK | 0.49.0 | Datensätze | 2.20.0 |
| dbl-tempo | 0.1.26 | dbus-python | 1.3.2 | debugpy | 1.8.11 |
| Dekorateur | 5.1.1 | deepspeed | 0.14.4 | defusedxml | 0.7.1 |
| Als veraltet markiert | 1.2.13 | dill | 0.3.8 | distlib | 0.3.9 |
| dm-Baum | 0.1.9 | docstring-to-markdown | 0.11 | Einstiegspunkte | 0,4 |
| auswerten | 0.4.2 | executing | 0.8.3 | Übersicht der Facetten | 1.1.1 |
| Farama-Notifications | 0.0.4 | fastapi | 0.115.12 | fastjsonschema | 2.21.1 |
| fasttext-wheel | 0.9.2 | Dateisperrung | 3.13.1 | Flask | 2.2.5 |
| FlatBuffers | 25.2.10 | fonttools | 4.55.3 | fqdn | 1.5.1 |
| frozenlist | 1.5.0 | fsspec | 2023.5.0 | Zukunft | 0.18.3 |
| gast | 0.4.0 | gitdb | 4.0.11 | GitPython | 3.1.43 |
| google-api-core | 2.20.0 | google-auth | 2.38.0 | google-auth-oauthlib | 1.0.0 |
| google-cloud-core | 2.4.3 | Google Cloud-Speicher | 2.10.0 | google-crc32c | 1.7.1 |
| Google-Pasta | 0.2.0 | google-resumable-media | 2.7.2 | googleapis-common-protos | 1.65.0 |
| gql | 3.5.2 | graphql-core | 3.2.4 | greenlet | 3.1.1 |
| grpcio | 1.67.0 | grpcio-status | 1.67.0 | gunicorn | 20.1.0 |
| Gymnasium | 0.28.1 | h11 | 0.14.0 | h5py | 3.12.1 |
| hjson | 3.1.0 | Ferien | 0.54 | htmlmin | 0.1.12 |
| httpcore | 1.0.2 | httplib2 | 0.20.4 | httpx | 0.27.0 |
| huggingface-hub | 0.30.2 | idna | 3.7 | ImageHash | 4.3.1 |
| imageio | 2.37.0 | imbalanced-learn | 0.13.0 | importlib-metadata | 6.0.0 |
| importlib_resources | 6.5.2 | inflect | 7.3.1 | iniconfig | 1.1.1 |
| ipyflow-core | 0.0.209 | ipykernel | 6.29.5 | ipython | 8.30.0 |
| ipython-genutils | 0.2.0 | ipywidgets | 7.8.1 | isodate | 0.6.1 |
| isoduration | 20.11.0 | es ist gefährlich | 2.2.0 | jaraco.context | 5.3.0 |
| jaraco.functools | 4.0.1 | jaraco.text | 3.12.1 | jax-jumpy | 1.0.0 |
| Jedi | 0.19.2 | Jinja2 | 3.1.5 | jiter | 0.9.0 |
| jmespath | 1.0.1 | joblib | 1.4.2 | joblibspark | 0.5.1 |
| json5 | 0.9.25 | jsonpatch | 1.33 | jsonpointer | 3.0.0 |
| jsonschema | 4.23.0 | jsonschema-Spezifikationen | 2023.7.1 | Jupyter-Ereignisse | 0.10.0 |
| jupyter-lsp | 2.2.0 | jupyter_client | 8.6.3 | jupyter_core | 5.7.2 |
| jupyter_server | 2.14.1 | jupyter_server_terminals | 0.4.4 | jupyterlab | 4.3.4 |
| jupyterlab-pygments | 0.1.2 | jupyterlab-widgets | 1.0.0 | jupyterlab_server | 2.27.3 |
| keras | 3.5.0 | kiwisolver | 1.4.8 | langchain | 0.3.21 |
| langchain-core | 0.3.55 | langchain-text-splitters | 0.3.8 | langcodes | 3.5.0 |
| langsmith | 0.1.133 | Sprachdaten | 1.3.0 | launchpadlib | 1.11.0 |
| lazr.restfulclient | 0.14.6 | lazr.uri | 1.0.6 | lazy_loader | 0,4 |
| libclang | 15.0.6.1 | librosa | 0.10.2 | lightgbm | 4.5.0 |
| lightning-utilities | 0.14.3 | linkify-it-py | 2.0.0 | llvmlite | 0.44.0 |
| lz4 | 4.3.2 | Mako | 1.2.0 | marisa-trie | 1.2.0 |
| Markdown | 3.4.1 | markdown-it-py | 2.2.0 | MarkupSafe | 3.0.2 |
| matplotlib | 3.10.0 | matplotlib-inline | 0.1.7 | mccabe | 0.7.0 |
| mdit-py-plugins | 0.3.0 | mdurl | 0.1.0 | memray | 1.17.1 |
| mistune | 2.0.4 | ml_dtypes | 0.5.1 | mlflow-skinny | 2.21.3 |
| mmh3 | 5.1.0 | more-itertools | 10.3.0 | mosaicml-cli | 0.6.41 |
| mosaicml-streaming | 0.8.0 | mpmath | 1.3.0 | msal | 1.32.0 |
| msal-extensions | 1.3.1 | msgpack | 1.1.0 | multidict | 6.1.0 |
| multimethod | 1.12 | Multiprozessor | 0.70.16 | murmurhash | 1.0.12 |
| mypy-Erweiterungen | 1.0.0 | namex | 0.0.8 | nbclient | 0.8.0 |
| nbconvert | 7.16.4 | nbformat | 5.10.4 | nest-asyncio | 1.6.0 |
| networkx | 3.4.2 | ninja | 1.11.1.1 | nltk | 3.9.1 |
| nodeenv | 1.9.1 | Notebook | 7.3.2 | notebook_shim | 0.2.3 |
| numba | 0.61.0 | numpy | 2.1.3 | nvidia-ml-py | 12.570.86 |
| oauthlib | 3.2.0 | oci | 2.150.2 | openai | 1.40.2 |
| opencensus | 0.11.4 | opencensus-Kontext | 0.1.3 | opentelemetry-api | 1.32.1 |
| opentelemetry-sdk | 1.32.1 | opentelemetry-semantic-conventions | 0.53b1 | opt_einsum | 3.4.0 |
| optree | 0.15.0 | optuna | 3.6.1 | optuna-integration | 3.6.0 |
| orjson | 3.10.16 | Überschreibt | 7.4.0 | Verpackung | 24.1 |
| Pandas | 2.2.3 | pandocfilters | 1.5.0 | paramiko | 3.4.0 |
| parso | 0.8.4 | pathspec | 0.10.3 | patsy | 1.0.1 |
| pexpect | 4.8.0 | phik | 0.12.4 | Kissen | 11.1.0 |
| pip | 25.0 | platformdirs | 3.10.0 | plotly | 5.24.1 |
| pluggy | 1.5.0 | pmdarima | 2.0.4 | Hündchen | 1.8.2 |
| preshed | 3.0.9 | prometheus_client | 0.21.0 | prompt-toolkit | 3.0.43 |
| propcache | 0.2.0 | prophet | 1.1.6 | proto-plus | 1.26.1 |
| protobuf | 5.29.4 | psutil | 5.9.0 | psycopg2 | 2.9.3 |
| ptyprocess | 0.7.0 | pure-eval | 0.2.2 | puremagic | 1.28 |
| py-cpuinfo | 9.0.0 | py-spy | 0.4.0 | pyarrow | 19.0.1 |
| pyarrow-hotfix | 0,6 | Pyasn1 | 0.4.8 | Pyasn1-Module | 0.2.8 |
| pybind11 | 2.13.6 | pyccolo | 0.0.71 | pycparser | 2.21 |
| pydantic | 2.10.6 | pydantic_core | 2.27.2 | pyflakes | 3.2.0 |
| Pygments | 2.15.1 | PyGObject | 3.48.2 | pyiceberg | 0.9.0 |
| PyJWT | 2.10.1 | PyNaCl | 1.5.0 | pyodbc | 5.2.0 |
| pyOpenSSL | 24.2.1 | pyparsing | 3.2.0 | pyright | 1.1.394 |
| pytesseract | 0.3.10 | pytest | 8.3.5 | Python-dateutil | 2.9.0.post0 |
| python-editor | 1.0.4 | python-json-logger | 3.2.1 | python-lsp-jsonrpc | 1.1.2 |
| Python-LSP-Server | 1.12.0 | python-snappy | 0.7.3 | pytoolconfig | 1.2.6 |
| pytorch-ranger | 0.1.1 | pytz | 2024.1 | PyWavelets | 1.8.0 |
| PyYAML | 6.0.2 | pyzmq | 26.2.0 | Fragebogen | 2.1.0 |
| ray | 2.37.0 | Referenzierung | 0.30.2 | regex | 2024.11.6 |
| requests | 2.32.3 | requests-oauthlib | 1.3.1 | Anforderungs-toolbelt | 1.0.0 |
| rfc3339-Prüfer | 0.1.4 | rfc3986-validator | 0.1.1 | rich | 13.9.4 |
| Seil | 1.12.0 | rpds-py | 0.22.3 | rsa | 4.9.1 |
| ruamel.yaml | 0.18.10 | ruamel.yaml.clib | 0.2.12 | s3transfer | 0.11.3 |
| safetensors | 0.5.3 | scikit-image | 0.25.0 | scikit-learn | 1.6.1 |
| scipy | 1.15.1 | Seegeboren | 0.13.2 | Send2Trash | 1.8.2 |
| Satztransformatoren | 3.0.1 | sentencepiece | 0.2.0 | setuptools | 74.0.0 |
| shap | 0.46.0 | shellingham | 1.5.4 | simplejson | 3.17.6 |
| six | 1.16.0 | sklearn-compat | 0.1.3 | slicer | 0.0.8 |
| smart-open | 7.1.0 | smmap | 5.0.0 | sniffio | 1.3.0 |
| sortierte Container | 2.4.0 | Sounddatei | 0.12.1 | soupsieve | 2,5 |
| soxr | 0.5.0.post1 | spacy | 3.7.5 | spacy-legacy | 3.0.12 |
| spacy-loggers | 1.0.5 | SQLAlchemy | 2.0.37 | sqlparse | 0.4.2 |
| srsly | 2.5.1 | ssh-import-id | 5.11 | Stapeldaten | 0.2.0 |
| stanio | 0.5.1 | starlette | 0.46.2 | StatistikModelle | 0.14.4 |
| strictyaml | 1.7.3 | sympy | 1.13.3 | tabellarisieren | 0.9.0 |
| Hartnäckigkeit | 9.0.0 | tensorboard | 2.19.0 | tensorboard-data-server | 0.7.2 |
| tensorboardX | 2.6.2.2 | TensorFlow | 2.19.0 | tensorflow-estimator | 2.15.0 |
| termcolor | 3.0.1 | terminado | 0.17.1 | textual | 3.1.1 |
| tf_keras | 2.19.0 | thinc | 8.2.4 | threadpoolctl | 3.5.0 |
| tifffile | 2024.12.12 | tiktoken | 0.7.0 | tinycss2 | 1.4.0 |
| tokenize_rt | 6.1.0 | tokenizers | 0.21.1 | tomli | 2.0.1 |
| Fackel | 2.4.0+cpu | torch-optimizer | 0.3.0 | torcheval | 0.0.7 |
| TorchMetrics | 1.4.0.post0 | torchvision | 0.19.0+cpu | Tornado | 6.4.2 |
| tqdm | 4.67.1 | traitlets | 5.14.3 | Transformatoren | 4.49.0 |
| typeguard | 4.4.2 | typer | 0.15.2 | types-python-dateutil | 2.9.0.20241206 |
| typing_extensions | 4.12.2 | tzdata | 2024.1 | uc-micro-py | 1.0.1 |
| ujson | 5.10.0 | unbeaufsichtigte Aktualisierungen | 0,1 | URI-Vorlage | 1.3.0 |
| urllib3 | 2.3.0 | uvicorn | 0.34.2 | Validatoren | 0.34.0 |
| virtualenv | 20.29.3 | Visionen | 0.8.1 | wadllib | 1.3.6 |
| wasabi | 1.1.3 | wcwidth | 0.2.5 | weasel | 0.4.1 |
| webcolors | 24.11.1 | Webkodierungen | 0.5.1 | WebSocket-Client | 1.8.0 |
| websockets | 11.0.3 | Werkzeug | 3.1.3 | whatthepatch | 1.0.2 |
| Rad | 0.45.1 | widgetsnbextension | 3.6.6 | wordcloud | 1.9.4 |
| Eingehüllt | 1.17.0 | xgboost | 2.0.3 | xgboost-ray | 0.1.19 |
| xxhash | 3.5.0 | yapf | 0.33.0 | yarl | 1.18.0 |
| ydata-profiling | 4.16.1 | zipp | 3.21.0 | zstd | 1.5.5.1 |
R-Bibliotheken
Die R-Bibliotheken sind identisch mit den R-Bibliotheken in Databricks Runtime 17.0.
Java- und Scala-Bibliotheken (Scala 2.12-Cluster)
Zusätzlich zu Java- und Scala-Bibliotheken in Databricks Runtime 17.0 enthält Databricks Runtime 17.0 ML die folgenden JARs:
Rechencluster
| Gruppen-ID | Artefakt-ID | Version |
|---|---|---|
| com.typesafe.akka | akka-actor_2.12 | 2.5.23 |
| ml.dmlc | xgboost4j-spark_2.12 | 1.7.3 |
| ml.dmlc | xgboost4j_2.12 | 1.7.3 |
| org.graphframes | graphframes_2.12 | 0.8.4-db1-spark3.5 |
| org.mlflow | mlflow-client | 2.15.1 |
| org.tensorflow | spark-tensorflow-connector_2.12 | 1.15.0 |
GPU-Cluster
| Gruppen-ID | Artefakt-ID | Version |
|---|---|---|
| com.typesafe.akka | akka-actor_2.12 | 2.5.23 |
| ml.dmlc | xgboost4j-gpu_2.12 | 1.7.3 |
| ml.dmlc | xgboost4j-spark-gpu_2.12 | 1.7.3 |
| org.graphframes | graphframes_2.12 | 0.8.4-db1-spark3.5 |
| org.mlflow | mlflow-client | 2.15.1 |
| org.tensorflow | spark-tensorflow-connector_2.12 | 1.15.0 |