Udostępnij przez

Databricks Runtime 13.2 for Machine Learning (EoS)

Uwaga

Obsługa tej wersji środowiska Databricks Runtime została zakończona. Aby uzyskać datę zakończenia pomocy technicznej, zobacz Historia zakończenia pomocy technicznej. Wszystkie obsługiwane wersje środowiska Databricks Runtime można znaleźć w temacie Databricks Runtime release notes versions and compatibility (Wersje i zgodność środowiska Databricks Runtime).

Środowisko Databricks Runtime 13.2 for Machine Learning zapewnia gotowe do użycia środowisko do uczenia maszynowego i nauki o danych oparte na środowisku Databricks Runtime 13.2 (EoS). Środowisko Databricks Runtime ML zawiera wiele popularnych bibliotek uczenia maszynowego, w tym TensorFlow, PyTorch i XGBoost. Środowisko Databricks Runtime ML obejmuje rozwiązanie AutoML— narzędzie do automatycznego trenowania potoków uczenia maszynowego. Środowisko Databricks Runtime ML obsługuje również trenowanie rozproszonego uczenia głębokiego przy użyciu struktury Horovod.

Aby uzyskać więcej informacji, w tym instrukcje dotyczące tworzenia klastra uczenia maszynowego usługi Databricks Runtime, zobacz Sztuczna inteligencja i uczenie maszynowe w usłudze Databricks.

Nowe funkcje i ulepszenia

Środowisko Databricks Runtime 13.2 ML jest oparte na środowisku Databricks Runtime 13.2. Aby uzyskać informacje o nowościach w środowisku Databricks Runtime 13.2, w tym Apache Spark MLlib i SparkR, zobacz informacje o wersji Databricks Runtime 13.2 (EoS).

Zmiany w magazynie funkcji usługi Databricks

  • Minimalna wymagana mlflow-skinny wersja to teraz 2.4.0.
  • Tworzenie zestawu szkoleniowego kończy się niepowodzeniem, jeśli podany DataFrame nie zawiera wszystkich wymaganych kluczy wyszukiwania.

Środowisko systemu

Środowisko systemowe w środowisku Databricks Runtime 13.2 ML różni się od środowiska Databricks Runtime 13.2 w następujący sposób:

Środowisko Databricks Runtime 13.2 ML zawiera bibliotekę XGBoost 1.7.3, która nie obsługuje klastrów gpu z możliwościami obliczeniowymi 5.2 i nowszymi.

Biblioteki

W poniższych sekcjach wymieniono biblioteki zawarte w środowisku Databricks Runtime 13.2 ML, które różnią się od bibliotek zawartych w środowisku Databricks Runtime 13.2.

W tej sekcji:

Biblioteki najwyższego poziomu

Środowisko Databricks Runtime 13.2 ML obejmuje następujące biblioteki najwyższego poziomu:

Biblioteki języka Python

Środowisko Databricks Runtime 13.2 ML używa usługi Virtualenv do zarządzania pakietami języka Python i zawiera wiele popularnych pakietów uczenia maszynowego.

Oprócz pakietów określonych w poniższych sekcjach środowisko Databricks Runtime 13.2 ML zawiera również następujące pakiety:

  • hyperopt 0.2.7+db3
  • sparkdl 3.0.0_db1
  • automl 1.19.0

Aby odtworzyć środowisko Języka Python środowiska Databricks Runtime ML w lokalnym środowisku wirtualnym języka Python, pobierz plik requirements-13.2.txt i uruchom polecenie pip install -r requirements-13.2.txt. To polecenie instaluje wszystkie biblioteki typu open source używane przez usługę Databricks Runtime ML, ale nie instaluje bibliotek opracowanych przez usługę Databricks, takich jak databricks-automl, databricks-feature-storelub rozwidlenie usługi Databricks .hyperopt

Biblioteki języka Python w klastrach procesora CPU

Biblioteka Wersja Biblioteka Wersja Biblioteka Wersja
absl-py 1.0.0 przyspieszać 0.19.0 aiohttp 3.8.4
aiosignal 1.3.1 appdirs 1.4.4 argon2-cffi 21.3.0
argon2-cffi-bindings 21.2.0 Astor 0.8.1 asttokens 2.2.1
astunparse 1.6.3 limit czasu asynchronicznego 4.0.2 attrs 21.4.0
odczyt dźwięku 3.0.0 azure-core 1.27.1 azure-cosmos 4.3.1b1
Azure Storage Blob 12.17.0b1 Usługa przechowywania w chmurze Azure (azure-storage-file-datalake) 12.11.0 Wezwanie zwrotne 0.2.0
bcrypt 3.2.0 beautifulsoup4 4.11.1 black (czarny) 22.6.0
wybielacz 4.1.0 kierunkowskaz 1.4 błogość 0.7.9
boto3 1.24.28 botocore 1.27.28 cachetools (narzędzia do zarządzania pamięcią podręczną) 4.2.4
katalog 2.0.8 kodery kategorii 2.6.0 certyfikat 2022.9.14
cffi 1.15.1 chardet 4.0.0 normalizator zestawu znaków 2.0.4
kliknięcie 8.0.4 cloudpickle (biblioteka Python do serializacji obiektów) 2.0.0 cmdstanpy 1.1.0
słodycze 0.0.4 configparser 5.2.0 konwertuj 2.4.0
kryptografia 37.0.1 rowerzysta 0.11.0 cymem 2.0.7
Cython 0.29.32 dacyt 1.8.1 databricks-automl-runtime 0.2.16
databricks-cli 0.17.7 Sklep z funkcjami Databricks (databricks-feature-store) 0.13.1 databricks-sdk 0.1.6
dataclasses-json 0.5.8 usługi Power BI 2.12.0 dbl-tempo 0.1.23
dbus-python 1.2.18 debugpy 1.5.1 dekorator 5.1.1
defusedxml (biblioteka zabezpieczająca przetwarzanie XML) 0.7.1 koper 0.3.4 bufor dyskowy 5.6.1
distlib 0.3.6 Konwertowanie docstringów na markdown 0,12 punkty wejścia 0,4
efem 4.1.4 ocenić 0.4.0 Wykonywanie 1.2.0
aspekty — omówienie 1.0.3 fastjsonschema 2.17.1 FastText 0.9.2
blokada plików 3.6.0 Flask 1.1.2+db1 flatbuffers 26.05.23
fonttools 4.25.0 zamrożona lista 1.3.3 fsspec 2022.7.1
przyszłość 0.18.2 Gast 0.4.0 gitdb (baza danych Git) 4.0.10
GitPython 3.1.27 google-api-core 2.8.2 google-auth (autoryzacja Google) 1.33.0
google-auth-oauthlib (biblioteka uwierzytelniania OAuth dla Google) 0.4.6 google-cloud-core 2.3.2 Google Cloud Storage (usługa przechowywania danych w chmurze od Google) 2.9.0
google-crc32c (biblioteka do obsługi algorytmu crc32c od Google) 1.5.0 makaron google 0.2.0 Google Media z Możliwością Wznowienia 2.5.0
googleapis-common-protos 1.56.4 zielona nitka 1.1.1 grpcio 1.48.1
stan obiektu grpcio 1.48.1 gunicorn 20.1.0 Gviz-API 1.10.0
h5py 3.7.0 wakacje 0.25 korowód 0.28.0
htmlmin 0.1.12 httplib2 0.20.2 przytulanieface-hub 0.15.1
IDNA 3.3 ImageHash 4.3.1 niezrównoważona nauka 0.8.1
importlib-metadata 4.11.3 importlib-resources 5.12.0 ipykernel 6.17.1
ipython 8.10.0 ipython-genutils 0.2.0 ipywidgets 7.7.2
isodate 0.6.1 jegodangerous 2.0.1 Jedi 0.18.1
Jeepney 0.7.1 Jinja2 2.11.3 jmespath 0.10.0
joblib 1.2.0 joblibspark 0.5.1 jsonschema 4.16.0
jupyter-client 7.3.4 jupyter_core 4.11.2 jupyterlab-pygments 0.1.2
Widżety JupyterLab 1.0.0 Keras 2.11.0 breloczek 23.5.0
kiwisolver 1.4.2 koreański kalendarz księżycowy 0.3.1 langchain 0.0.181
kody językowe 3.3.0 launchpadlib 1.10.16 lazr.restfulclient 0.14.4
lazr.uri 1.0.6 leniwy ładowacz 0,2 libclang 15.0.6.1
librosa 0.10.0 lightgbm 3.3.5 llvmlite 0.38.0
KsiężycowyCalendar 0.0.9 Mako 1.2.0 Markdown 3.3.4
MarkupSafe 2.0.1 Zefir 3.19.0 marshmallow-enum 1.5.1
biblioteka matplotlib 3.5.2 biblioteka matplotlib-inline 0.1.6 Mccabe 0.7.0
Mistune 0.8.4 mleap 0.20.0 mlflow-skinny 2.4.1
więcej itertools 8.10.0 msgpack 1.0.5 multidict 6.0.4
wielometoda 1.9.1 przetwarzanie wieloprocesowe 0.70.12.2 szmurhash 1.0.9
mypy-extensions 0.4.3 NBClient 0.5.13 nbconvert - narzędzie do konwersji plików Jupyter Notebook 6.4.4
nbformat 5.5.0 nest-asyncio 1.5.5 networkx 2.8.4
Ninja 1.11.1 Natural Language Toolkit (nltk) 3.7 nodeenv 1.8.0
notes 6.4.12 numba 0.55.1 numexpr 2.8.4
numpy 1.21.5 oauthlib 3.2.0 openai 0.27.7
openapi-schema-pydantic 1.2.4 opt-einsum 3.3.0 opakowanie 21,3
Pandas 1.4.4 pandocfilters 1.5.0 paramiko - biblioteka do protokołu SSH2 dla języka Python 2.9.2
parso 0.8.3 specyfikacja ścieżki 0.9.0 patia 0.10.1
Patsy 0.5.2 petastorm 0.12.1 pexpect 4.8.0
phik 0.12.3 pickleshare (jeśli to nazwa własna, nie trzeba tłumaczyć) 0.7.5 Poduszka 9.2.0
pip (menedżer pakietów Pythona) 22.2.2 platformdirs 2.5.2 kreślenie 5.9.0
wtyczka 1.0.0 pmdarima 2.0.3 kundel 1.7.0
przeszhetowany 3.0.8 prometheus-client 0.14.1 zestaw narzędzi prompt 3.0.36
prorok 1.1.3 Protobuf (w skrócie od Protocol Buffers) 3.19.4 psutil 5.9.0
psycopg2 2.9.3 ptyprocess 0.7.0 pure-eval 0.2.2
pyarrow 8.0.0 pyasn1 0.4.8 pyasn1-modules 0.2.8
pybind11 2.10.4 pycparser 2.21 pydantic (biblioteka Python do walidacji danych i zarządzania ustawieniami) 1.10.6
pyflakes (narzędzie do analizy statycznej kodu Python) 3.0.1 Pygments 2.11.2 PyGObject 3.42.1
PyJWT 2.3.0 PyMeeus 0.5.12 PyNaCl 1.5.0
pyodbc 4.0.32 pyparsing – biblioteka do przetwarzania tekstu w Pythonie 3.0.9 pyright 1.1.294
pirstent 0.18.0 pytesseract 0.3.10 python-dateutil (biblioteka Pythona do zarządzania datami) 2.8.2
Python-editor 1.0.4 python-lsp-jsonrpc 1.0.0 python-lsp-server 1.7.1
pytoolconfig 1.2.2 pytz (biblioteka Pythona do obliczeń stref czasowych) 2022.1 PyWavelets 1.3.0
PyYAML 6.0 pyzmq 23.2.0 wyrażenie regularne 2022.7.9
żądania 2.28.1 requests-oauthlib 1.3.1 Odpowiedzi 0.18.0
lina 1.7.0 RSA 4.9 s3transfer 0.6.0
scikit-learn 1.1.1 scipy (biblioteka naukowa dla Pythona) 1.9.1 urodzony na morzu 0.11.2
SecretStorage 3.3.1 Send2Trash 1.8.0 transformatory zdań 2.2.2
element zdania 0.1.99 setuptools 63.4.1 Shap 0.41.0
simplejson 3.17.6 Sześć 1.16.0 fragmentator 0.0.7
inteligentne-otwarcie 5.2.1 smmap 5.0.0 Plik dźwiękowy 0.12.1
zupy 2.3.1 soxr 0.3.5 przestronny 3.5.3
spacy-legacy 3.0.12 spacy-loggers 1.0.4 spark-tensorflow-distributor (biblioteka do dystrybucji TensorFlow w Spark) 1.0.0
SQLAlchemy 1.4.39 sqlparse 0.4.2 serio 2.4.6
ssh-import-id (narzędzie do importowania kluczy SSH) 5,11 stos danych 0.6.2 statsmodels - biblioteka do modelowania statystycznego 0.13.2
tabulacji 0.8.10 splątane-up-in-unicode 0.2.0 Wytrzymałość 8.1.0
tablica tensorboard 2.11.0 serwer danych TensorBoard 0.6.1 wtyczka TensorBoard do profilowania 2.11.2
wtyczka-tensorboard-wit 1.8.1 tensorflow-cpu 2.11.0 tensorflow-estimator (moduł TensorFlow do estymacji) 2.11.0
tensorflow-io-gcs-filesystem 0.32.0 termcolor (narzędzie do zarządzania kolorami w terminalu) 2.3.0 zakończony 0.13.1
ścieżka testowa 0.6.0 cienki 8.1.10 threadpoolctl 2.2.0
tiktoken 0.4.0 tokenize-rt 4.2.1 tokenizatory 0.13.3
tomli 2.0.1 pochodnia 1.13.1+procesor TorchVision (Wizja Pochodni 0.14.1+ procesor
tornado 6.1 tqdm 4.64.1 traitlety 5.1.1
Transformatory 4.29.2 osłona typów 2.13.3 pisarz 0.7.0
inspekcja wpisywania 0.9.0 moduł typing_extensions 4.3.0 ujson (szybka biblioteka do obsługi formatu JSON) 5.4.0
nienadzorowane uaktualnienia 0.1 urllib3 1.26.11 virtualenv 20.16.3
Wizje 0.7.5 wadllib 1.3.6 wasabi 1.1.2
szerokość(wcwidth) 0.2.5 kodowania webowe 0.5.1 websocket-klient 0.58.0
Narzędzie 2.0.3 czymjestłatka 1.0.2 wheel 0.37.1
widgetsnbextension 3.6.1 wordcloud 1.9.2 zawijanie 1.14.1
xgboost 1.7.5 xxhash 3.2.0 yapf (Yet Another Python Formatter - Kolejny Formatator Pythona) 0.31.0
Yarl 1.9.2 profilowanie danych 4.2.0 zamek błyskawiczny 3.8.0

Biblioteki języka Python w klastrach gpu

Biblioteka Wersja Biblioteka Wersja Biblioteka Wersja
absl-py 1.0.0 przyspieszać 0.19.0 aiohttp 3.8.4
aiosignal 1.3.1 appdirs 1.4.4 argon2-cffi 21.3.0
argon2-cffi-bindings 21.2.0 Astor 0.8.1 asttokens 2.2.1
astunparse 1.6.3 limit czasu asynchronicznego 4.0.2 attrs 21.4.0
odczyt dźwięku 3.0.0 azure-core 1.27.1 azure-cosmos 4.3.1b1
Azure Storage Blob 12.17.0b1 Usługa przechowywania w chmurze Azure (azure-storage-file-datalake) 12.11.0 Wezwanie zwrotne 0.2.0
bcrypt 3.2.0 beautifulsoup4 4.11.1 black (czarny) 22.6.0
wybielacz 4.1.0 kierunkowskaz 1.4 błogość 0.7.9
boto3 1.24.28 botocore 1.27.28 cachetools (narzędzia do zarządzania pamięcią podręczną) 4.2.4
katalog 2.0.8 kodery kategorii 2.6.0 certyfikat 2022.9.14
cffi 1.15.1 chardet 4.0.0 normalizator zestawu znaków 2.0.4
kliknięcie 8.0.4 cloudpickle (biblioteka Python do serializacji obiektów) 2.0.0 cmdstanpy 1.1.0
słodycze 0.0.4 configparser 5.2.0 konwertuj 2.4.0
kryptografia 37.0.1 rowerzysta 0.11.0 cymem 2.0.7
Cython 0.29.32 dacyt 1.8.1 databricks-automl-runtime 0.2.16
databricks-cli 0.17.7 Sklep z funkcjami Databricks (databricks-feature-store) 0.13.1 databricks-sdk 0.1.6
dataclasses-json 0.5.8 usługi Power BI 2.12.0 dbl-tempo 0.1.23
dbus-python 1.2.18 debugpy 1.5.1 dekorator 5.1.1
defusedxml (biblioteka zabezpieczająca przetwarzanie XML) 0.7.1 koper 0.3.4 bufor dyskowy 5.6.1
distlib 0.3.6 Konwertowanie docstringów na markdown 0,12 einops 0.6.1
punkty wejścia 0,4 efem 4.1.4 ocenić 0.4.0
Wykonywanie 1.2.0 aspekty — omówienie 1.0.3 fastjsonschema 2.17.1
FastText 0.9.2 blokada plików 3.6.0 flash-attn 1.0.5
Flask 1.1.2+db1 flatbuffers 26.05.23 fonttools 4.25.0
zamrożona lista 1.3.3 fsspec 2022.7.1 przyszłość 0.18.2
Gast 0.4.0 gitdb (baza danych Git) 4.0.10 GitPython 3.1.27
google-api-core 2.8.2 google-auth (autoryzacja Google) 1.33.0 google-auth-oauthlib (biblioteka uwierzytelniania OAuth dla Google) 0.4.6
google-cloud-core 2.3.2 Google Cloud Storage (usługa przechowywania danych w chmurze od Google) 2.9.0 google-crc32c (biblioteka do obsługi algorytmu crc32c od Google) 1.5.0
makaron google 0.2.0 Google Media z Możliwością Wznowienia 2.5.0 googleapis-common-protos 1.56.4
zielona nitka 1.1.1 grpcio 1.48.1 stan obiektu grpcio 1.48.1
gunicorn 20.1.0 Gviz-API 1.10.0 h5py 3.7.0
wakacje 0.25 korowód 0.28.0 htmlmin 0.1.12
httplib2 0.20.2 przytulanieface-hub 0.15.1 IDNA 3.3
ImageHash 4.3.1 niezrównoważona nauka 0.8.1 importlib-metadata 4.11.3
importlib-resources 5.12.0 ipykernel 6.17.1 ipython 8.10.0
ipython-genutils 0.2.0 ipywidgets 7.7.2 isodate 0.6.1
jegodangerous 2.0.1 Jedi 0.18.1 Jeepney 0.7.1
Jinja2 2.11.3 jmespath 0.10.0 joblib 1.2.0
joblibspark 0.5.1 jsonschema 4.16.0 jupyter-client 7.3.4
jupyter_core 4.11.2 jupyterlab-pygments 0.1.2 Widżety JupyterLab 1.0.0
Keras 2.11.0 breloczek 23.5.0 kiwisolver 1.4.2
koreański kalendarz księżycowy 0.3.1 langchain 0.0.181 kody językowe 3.3.0
launchpadlib 1.10.16 lazr.restfulclient 0.14.4 lazr.uri 1.0.6
leniwy ładowacz 0,2 libclang 15.0.6.1 librosa 0.10.0
lightgbm 3.3.5 llvmlite 0.38.0 KsiężycowyCalendar 0.0.9
Mako 1.2.0 Markdown 3.3.4 MarkupSafe 2.0.1
Zefir 3.19.0 marshmallow-enum 1.5.1 biblioteka matplotlib 3.5.2
biblioteka matplotlib-inline 0.1.6 Mccabe 0.7.0 Mistune 0.8.4
mleap 0.20.0 mlflow-skinny 2.4.1 więcej itertools 8.10.0
msgpack 1.0.5 multidict 6.0.4 wielometoda 1.9.1
przetwarzanie wieloprocesowe 0.70.12.2 szmurhash 1.0.9 mypy-extensions 0.4.3
NBClient 0.5.13 nbconvert - narzędzie do konwersji plików Jupyter Notebook 6.4.4 nbformat 5.5.0
nest-asyncio 1.5.5 networkx 2.8.4 Ninja 1.11.1
Natural Language Toolkit (nltk) 3.7 nodeenv 1.8.0 notes 6.4.12
numba 0.55.1 numexpr 2.8.4 numpy 1.21.5
oauthlib 3.2.0 openai 0.27.7 openapi-schema-pydantic 1.2.4
opt-einsum 3.3.0 opakowanie 21,3 Pandas 1.4.4
pandocfilters 1.5.0 paramiko - biblioteka do protokołu SSH2 dla języka Python 2.9.2 parso 0.8.3
specyfikacja ścieżki 0.9.0 patia 0.10.1 Patsy 0.5.2
petastorm 0.12.1 pexpect 4.8.0 phik 0.12.3
pickleshare (jeśli to nazwa własna, nie trzeba tłumaczyć) 0.7.5 Poduszka 9.2.0 pip (menedżer pakietów Pythona) 22.2.2
platformdirs 2.5.2 kreślenie 5.9.0 wtyczka 1.0.0
pmdarima 2.0.3 kundel 1.7.0 przeszhetowany 3.0.8
zestaw narzędzi prompt 3.0.36 prorok 1.1.3 Protobuf (w skrócie od Protocol Buffers) 3.19.4
psutil 5.9.0 psycopg2 2.9.3 ptyprocess 0.7.0
pure-eval 0.2.2 pyarrow 8.0.0 pyasn1 0.4.8
pyasn1-modules 0.2.8 pybind11 2.10.4 pycparser 2.21
pydantic (biblioteka Python do walidacji danych i zarządzania ustawieniami) 1.10.6 pyflakes (narzędzie do analizy statycznej kodu Python) 3.0.1 Pygments 2.11.2
PyGObject 3.42.1 PyJWT 2.3.0 PyMeeus 0.5.12
PyNaCl 1.5.0 pyodbc 4.0.32 pyparsing – biblioteka do przetwarzania tekstu w Pythonie 3.0.9
pyright 1.1.294 pirstent 0.18.0 pytesseract 0.3.10
python-dateutil (biblioteka Pythona do zarządzania datami) 2.8.2 Python-editor 1.0.4 python-lsp-jsonrpc 1.0.0
python-lsp-server 1.7.1 pytoolconfig 1.2.2 pytz (biblioteka Pythona do obliczeń stref czasowych) 2022.1
PyWavelets 1.3.0 PyYAML 6.0 pyzmq 23.2.0
wyrażenie regularne 2022.7.9 żądania 2.28.1 requests-oauthlib 1.3.1
Odpowiedzi 0.18.0 lina 1.7.0 RSA 4.9
s3transfer 0.6.0 scikit-learn 1.1.1 scipy (biblioteka naukowa dla Pythona) 1.9.1
urodzony na morzu 0.11.2 SecretStorage 3.3.1 Send2Trash 1.8.0
transformatory zdań 2.2.2 element zdania 0.1.99 setuptools 63.4.1
Shap 0.41.0 simplejson 3.17.6 Sześć 1.16.0
fragmentator 0.0.7 inteligentne-otwarcie 5.2.1 smmap 5.0.0
Plik dźwiękowy 0.12.1 zupy 2.3.1 soxr 0.3.5
przestronny 3.5.3 spacy-legacy 3.0.12 spacy-loggers 1.0.4
spark-tensorflow-distributor (biblioteka do dystrybucji TensorFlow w Spark) 1.0.0 SQLAlchemy 1.4.39 sqlparse 0.4.2
serio 2.4.6 ssh-import-id (narzędzie do importowania kluczy SSH) 5,11 stos danych 0.6.2
statsmodels - biblioteka do modelowania statystycznego 0.13.2 tabulacji 0.8.10 splątane-up-in-unicode 0.2.0
Wytrzymałość 8.1.0 tablica tensorboard 2.11.0 serwer danych TensorBoard 0.6.1
wtyczka TensorBoard do profilowania 2.11.2 wtyczka-tensorboard-wit 1.8.1 TensorFlow 2.11.0
tensorflow-estimator (moduł TensorFlow do estymacji) 2.11.0 tensorflow-io-gcs-filesystem 0.32.0 termcolor (narzędzie do zarządzania kolorami w terminalu) 2.3.0
zakończony 0.13.1 ścieżka testowa 0.6.0 cienki 8.1.10
threadpoolctl 2.2.0 tiktoken 0.4.0 tokenize-rt 4.2.1
tokenizatory 0.13.3 tomli 2.0.1 pochodnia 1.13.1+cu117
TorchVision (Wizja Pochodni 0.14.1+cu117 tornado 6.1 tqdm 4.64.1
traitlety 5.1.1 Transformatory 4.29.2 osłona typów 2.13.3
pisarz 0.7.0 inspekcja wpisywania 0.9.0 moduł typing_extensions 4.3.0
ujson (szybka biblioteka do obsługi formatu JSON) 5.4.0 nienadzorowane uaktualnienia 0.1 urllib3 1.26.11
virtualenv 20.16.3 Wizje 0.7.5 wadllib 1.3.6
wasabi 1.1.2 szerokość(wcwidth) 0.2.5 kodowania webowe 0.5.1
websocket-klient 0.58.0 Narzędzie 2.0.3 czymjestłatka 1.0.2
wheel 0.37.1 widgetsnbextension 3.6.1 wordcloud 1.9.2
zawijanie 1.14.1 xgboost 1.7.5 xxhash 3.2.0
yapf (Yet Another Python Formatter - Kolejny Formatator Pythona) 0.31.0 Yarl 1.9.2 profilowanie danych 4.2.0
zamek błyskawiczny 3.8.0

Biblioteki R

Biblioteki języka R są identyczne z bibliotekami języka R w środowisku Databricks Runtime 13.2.

Biblioteki Java i Scala (klaster Scala 2.12)

Oprócz bibliotek Java i Scala w środowisku Databricks Runtime 13.2 środowisko Databricks Runtime 13.2 ML zawiera następujące elementy JAR:

Klastry procesora CPU

Identyfikator grupy Identyfikator artefaktu Wersja
com.typesafe.akka akka-actor_2.12 2.5.23
ml.dmlc xgboost4j-spark_2.12 1.7.3
ml.dmlc xgboost4j_2.12 1.7.3
org.graphframes graphframes_2.12 0.8.2-db2-spark3.4
org.mlflow mlflow-client 2.4.1
org.scala-lang.modules scala-java8-compat_2.12 0.8.0
org.tensorflow spark-tensorflow-connector_2.12 1.15.0

Klastry procesora GPU

Identyfikator grupy Identyfikator artefaktu Wersja
com.typesafe.akka akka-actor_2.12 2.5.23
ml.dmlc xgboost4j-gpu_2.12 1.7.3
ml.dmlc xgboost4j-spark-gpu_2.12 1.7.3
org.graphframes graphframes_2.12 0.8.2-db2-spark3.4
org.mlflow mlflow-client 2.4.1
org.scala-lang.modules scala-java8-compat_2.12 0.8.0
org.tensorflow spark-tensorflow-connector_2.12 1.15.0
  • Last updated on