Bagikan melalui


Databricks Runtime 13.3 LTS untuk Pembelajaran Mesin

Databricks Runtime 13.3 LTS untuk Pembelajaran Mesin menyediakan lingkungan siap pakai untuk pembelajaran mesin dan ilmu data berdasarkan Databricks Runtime 13.3 LTS. Databricks Runtime ML berisi banyak perpustakaan pembelajaran mesin populer, termasuk TensorFlow, PyTorch, dan XGBoost. Databricks Runtime ML mencakup AutoML, alat untuk secara otomatis melatih alur pembelajaran mesin. Databricks Runtime ML juga mendukung pelatihan pembelajaran mendalam menggunakan Horovod.

Catatan

LTS berarti versi ini berada di bawah dukungan jangka panjang. Lihat siklus hidup versi Databricks Runtime LTS.

Untuk informasi selengkapnya, termasuk instruksi untuk membuat kluster ML Runtime Databricks, lihat AI dan pembelajaran mesin di Databricks.

Tips

Untuk melihat catatan rilis untuk versi Databricks Runtime yang telah mencapai akhir dukungan (EoS), lihat Catatan rilis Databricks Runtime yang akhir dukungannya. Versi EoS Databricks Runtime telah dihentikan dan mungkin tidak diperbarui.

Fitur dan peningkatan baru

Databricks Runtime 13.3 LTS ML dibangun di atas Databricks Runtime 13.3 LTS. Untuk informasi tentang apa yang baru di Databricks Runtime 13.3 LTS, termasuk Apache Spark MLlib dan SparkR, lihat catatan rilis Databricks Runtime 13.3 LTS .

Perubahan pada Gudang Fitur Databricks

  • Databricks Runtime 13.3 LTS ML berisi klien Feature Store v0.14.0. Dengan versi klien 0.14.0 ke atas, Anda harus menentukan kolom kunci tanda waktu dalam primary_keys argumen. Kunci tanda waktu adalah bagian dari "kunci primer" yang secara unik mengidentifikasi setiap baris dalam tabel fitur.
  • Anda sekarang dapat mengecualikan nilai fitur dengan tanda waktu sebelum waktu yang ditentukan dari set pelatihan. Untuk detailnya, lihat Mengatur batas waktu untuk nilai fitur historis.
  • Fitur pembelajaran mesin sekarang dapat dihitung sesuai permintaan pada waktu inferensi. Logika, model, dan data komputasi fitur semuanya diatur oleh Katalog Unity. Ini memungkinkan model untuk menghitung fitur menggunakan input yang hanya tersedia pada waktu inferensi, seperti lokasi pengguna saat ini. Untuk informasi selengkapnya, lihat Komputasi fitur sesuai permintaan.

Lingkungan sistem

Lingkungan sistem di Databricks Runtime 13.3 LTS ML berbeda dari Databricks Runtime 13.3 LTS sebagai berikut:

Databricks Runtime 13.3 LTS ML mencakup XGBoost 1.7.3, yang tidak mendukung kluster GPU dengan kemampuan komputasi 5.2 ke bawah.

Paket miniconda telah dihapus dari Databricks Runtime 13.0 ML ke atas.

Pustaka

Bagian berikut mencantumkan pustaka yang termasuk dalam Databricks Runtime 13.3 LTS ML yang berbeda dari pustaka dalam Databricks Runtime 13.3 LTS.

Di bagian ini:

Pustaka tingkat atas

Databricks Runtime 13.3 LTS ML menyertakan perpustakaan berkualitas tinggi berikut:

Pustaka Python

Databricks Runtime 13.3 LTS ML menggunakan Virtualenv untuk manajemen paket Python dan mencakup banyak paket ML populer.

Selain paket yang ditentukan di bagian berikut, Databricks Runtime 13.3 LTS ML juga mencakup paket berikut:

  • hyperopt 0.2.7+db3
  • 3.0.0_db1 sparkdl
  • automl 1.20.0

Untuk mereproduksi lingkungan Databricks Runtime ML Python di lingkungan virtual Python lokal Anda, unduh file requirements-13.3.txt dan jalankan pip install -r requirements-13.3.txt. Perintah ini menginstal semua pustaka sumber terbuka yang digunakan Databricks Runtime ML, tetapi tidak menginstal pustaka yang dikembangkan oleh Databricks, seperti databricks-automl, , databricks-feature-storeatau fork Databricks dari hyperopt.

Perpustakaan Python di kluster CPU

Pustaka Versi Pustaka Versi Pustaka Versi
absl-py 1.0.0 Mempercepat 0.20.3 aiohttp 3.8.5
aiosignal 1.3.1 anyio 3.5.0 direktori aplikasi 1.4.4
argon2-cffi 21.3.0 Pengikatan Argon2-cffi 21.2.0 Astor 0.8.1
asttoken 2.2.1 astunparse 1.6.3 batas waktu asinkron 4.0.2
atribut 21.4.0 audioread 3.0.0 azure-core 1.28.0
azure-cosmos 4.3.1 Penyimpanan Blok Azure 12.17.0 Azure Storage File Data Lake 12.12.0
panggilan balik 0.2.0 bcrypt 3.2.0 beautifulsoup4 4.11.1
hitam 22.6.0 pemutih 4.1.0 blinker 1.4
kebahagiaan 0.7.10 boto3 1.24.28 botocore 1.27.28
cachetools (perangkat untuk caching) 4.2.4 katalog 2.0.9 pengode kategori 2.6.1
sertifikat 2022.9.14 cffi 1.15.1 chardet 4.0.0
charset-normalizer 2.0.4 klik 8.0.4 cloudpickle (perpustakaan Python untuk serialisasi objek) 2.0.0
cmdstanpy 1.1.0 konfeksi 0.1.0 configparser 5.2.0
mengonversi tanggal 2.4.0 kriptografi 37.0.1 pengendara sepeda 0.11.0
cymem 2.0.7 Cython 0.29.32 dasit 1.8.1
databricks-automl-runtime 0.2.17 databricks-cli 0.17.7 penyimpanan fitur databricks 0.14.0
databricks-sdk 0.1.6 dataclasses-json 0.5.13 kumpulan data 2.13.1
dbl-tempo 0.1.23 dbus-python 1.2.18 debugpy 1.6.0
dekorator 5.1.1 defusedxml 0.7.1 adas 0.3.4
diskcache 5.6.1 distlib 0.3.7 konversi docstring ke markdown 0.12
titik masuk 0,4 ephem 4.1.4 menilai 0.4.0
menjalankan 1.2.0 ikhtisar-faset 1.0.3 fastapi 0.98.0
fastjsonschema 2.18.0 fasttext 0.9.2 filelock 3.6.0
Botol 1.1.2+db1 FlatBuffers 26/05/2023 alat pengelola font 4.25.0
daftar beku 1.4.0 fsspec 2022.7.1 masa depan 0.18.2
Gast 0.4.0 gitdb 4.0.10 GitPython 3.1.27
google-api-core 2.8.2 google-auth (autentikasi Google) 1.33.0 google-auth-oauthlib 0.4.6
google-cloud-core 2.3.3 google-cloud-storage (penyimpanan awan Google) 2.10.0 google-crc32c 1.5.0
Google Pasta 0.2.0 google-resumable-media (layanan media berkelanjutan dari Google) 2.5.0 googleapis-common-protos 1.56.4
greenlet 1.1.1 grpcio 1.48.1 grpcio-status 1.48.1
gunicorn 20.1.0 gviz-api 1.10.0 h11 0.14.0
h5py 3.7.0 hari libur 0.27.1 Horovod 0.28.1
htmlmin 0.1.12 httplib2 0.20.2 httptools 0.6.0
huggingface-hub 0.16.4 IDNA 3.3 Hash Gambar 4.3.1
pembelajaran-tidak-seimbang 0.10.1 importlib-metadata 4.11.3 importlib-resources 6.0.0
ipykernel 6.17.1 ipython 8.10.0 ipython-genutils 0.2.0
ipywidgets 7.7.2 isodate 0.6.1 itu berbahaya 2.0.1
Jedi 0.18.1 kendaraan umum jeepney 0.7.1 Jinja2 2.11.3
jmespath 0.10.0 joblib 1.2.0 joblibspark 0.5.1
jsonschema 4.16.0 jupyter-client (klien Jupyter) 7.3.4 jupyter_core 4.11.2
jupyterlab-pygments 0.1.2 jupyterlab-widgets 1.0.0 keras 2.11.0
gantungan kunci 23.5.0 kiwisolver 1.4.2 langchain 0.0.217
langchainplus-sdk 0.0.20 kodebahasa 3.3.0 launchpadlib 1.10.16
lazr.restfulclient (klien layanan web yang menggunakan RESTful) 0.14.4 lazr.uri 1.0.6 lazy_loader 0,3
libclang 15.0.6.1 librosa 0.10.0 lightgbm 3.3.5
llvmlite 0.38.0 Kalender Bulan 0.0.9 Mako 1.2.0
Markdown 3.3.4 MarkupSafe 2.0.1 Marshmallow 3.20.1
matplotlib 3.5.2 matplotlib-inline 0.1.6 Mccabe 0.7.0
salah menyetel 0.8.4 mleap 0.20.0 mlflow-skinny (versi ringan) 2.5.0
more-itertools 8.10.0 msgpack 1.0.5 multidikat 6.0.4
metode majemuk 1.9.1 multiproses 0.70.12.2 Murmur Hash 1.0.9
ekstensi mypy 0.4.3 nbclient 0.5.13 nbconvert 6.4.4
nbformat 5.5.0 nest-asyncio 1.5.5 networkx 2.8.4
ninja 1.11.1 nltk 3.7 nodeenv 1.8.0
buku catatan 6.4.12 numba 0.55.1 numexpr 2.8.4
numpy (perpustakaan Python untuk operasi numerik) 1.21.5 oauthlib 3.2.0 OpenAI 0.27.8
openapi-schema-pydantic 1.2.4 opt-einsum 3.3.0 kemasan 21.3
Panda 1.4.4 Pandocfilters 1.5.0 paramiko 2.9.2
pengurai 0.8.3 spesifikasi jalur 0.9.0 pati 0.10.2
kambing hitam 0.5.2 Petastorm 0.12.1 pexpect=4.8.0 4.8.0
phik 0.12.3 pickleshare 0.7.5 Bantal 9.2.0
pipa 22.2.2 platformdir 2.5.2 secara plot 5.9.0
pengaya 1.0.0 pmdarima 2.0.3 Pochi 1.7.0
tanpa informasi tambahan mengenai konteks yang berarti bagi istilah "preshed", mungkin terpikir untuk menggambarkan istilah tersebut sebagai langkah atau proses yang sedang terjadi sebelum sesuatu diselesaikan atau diproses lebih lanjut. 3.0.8 prometheus-client 0.14.1 prompt-toolkit 3.0.36
nabi 1.1.4 protobuf 3.19.4 psutil 5.9.0
psycopg2 2.9.3 ptyprocess 0.7.0 pure-eval 0.2.2
pyarrow 8.0.0 pyasn1 0.4.8 pyasn1-modul 0.2.8
pybind11 2.11.1 pycparser 2.21 pydantic (perpustakaan Python untuk validasi data) 1.10.6
pyflakes 3.0.1 Pygments 2.11.2 PyGObject 3.42.1
PyJWT 2.3.0 PyMeeus 0.5.12 PyNaCl 1.5.0
pyodbc 4.0.32 pyparsing 3.0.9 pyright 1.1.294
pyrsistent 0.18.0 pytesseract 0.3.10 python-dateutil 2.8.2
python-dotenv 1.0.0 python-editor 1.0.4 python-lsp-jsonrpc 1.0.0
python-lsp-server 1.7.1 pytoolconfig 1.2.2 pytz 2022.1
PyWavelets 1.3.0 PyYAML (paket untuk memproses bahasa YAML dalam Python) 6.0 pyzmq 23.2.0
regex 2022.7.9 permintaan 2.28.1 requests-oauthlib 1.3.1
tanggapan 0.18.0 tali 1.7.0 Rsa 4.9
s3transfer 0.6.0 safetensor 0.3.1 scikit-learn 1.1.1
scipy (perpustakaan Python untuk komputasi ilmiah) 1.9.1 Seaborn (perpustakaan Python untuk visualisasi data) 0.11.2 SecretStorage 3.3.1
Send2Trash 1.8.0 transformator kalimat 2.2.2 sentencepiece 0.1.99
setuptools 63.4.1 bentuk 0.41.0 simplejson 3.17.6
Enam 1.16.0 pemotong 0.0.7 smart-open 5.2.1
smmap 5.0.0 Sniffio 1.2.0 berkas suara 0.12.1
alat penyaring sup 2.3.1 soxr 0.3.5 luas 3.5.3
warisan spasi 3.0.12 pencatat spasi 1.0.4 spark-tensorflow-distributor 1.0.0
SQLAlchemy 1.4.39 sqlparse 0.4.2 seriusan 2.4.7
ssh-import-id 5.11 stack-data 0.6.2 starlette 0.27.0
statsmodels (paket Python untuk pemodelan statistik) 0.13.2 menyusun dalam bentuk tabel 0.8.10 terjebak-dalam-unicode 0.2.0
kegigihan 8.1.0 TensorBoard 2.11.0 tensorboard-data-server 0.6.1
Plugin Profil Tensorboard 2.11.2 tensorboard-plugin-wit 1.8.1 tensorflow-cpu 2.11.1
tensorflow-estimator (penghitung dalam TensorFlow) 2.11.0 tensorflow-io-gcs-filesystem 0.32.0 Termcolor 2.3.0
selesai 0.13.1 jalur uji 0.6.0 Thinc 8.1.10
threadpoolctl 2.2.0 tiktoken 0.4.0 Tokenisasi-RT 4.2.1
tokenisasi 0.13.3 tomli 2.0.1 obor 1.13.1+cpu
visi obor 0.14.1+cpu Tornado 6.1 tqdm 4.64.1
traitlets=5.0.5 5.1.1 Transformer 4.30.2 typeguard (penjaga tipe) 2.13.3
Typer 0.7.0 mengetik-memeriksa 0.9.0 ekstensi pengetikan (typing_extensions) 4.3.0
ujson 5.4.0 pembaruan otomatis (unattended-upgrades) 0.1 urllib3 1.26.11
uvicorn 0.23.1 uvloop 0.17.0 virtualenv 20.16.3
Visi 0.7.5 wadllib 1.3.6 wasabi 1.1.2
watchfiles 0.19.0 wcwidth 0.2.5 webencodings versi 0.5.1 0.5.1
websocket-klien 0.58.0 websocket 11.0.3 Alat kerja 2.0.3
apa itu patch 1.0.2 wheel 0.37.1 widgetsnbextension 3.6.1
wordcloud 1.9.2 terbungkus 1.14.1 xgboost 1.7.6
xxhash 3.2.0 yapf 0.31.0 yarl 1.9.2
Pembuatan profil ydata 4.2.0 zipp 3.8.0

Pustaka Python pada kluster GPU

Pustaka Versi Pustaka Versi Pustaka Versi
absl-py 1.0.0 Mempercepat 0.20.3 aiohttp 3.8.5
aiosignal 1.3.1 anyio 3.5.0 direktori aplikasi 1.4.4
argon2-cffi 21.3.0 Pengikatan Argon2-cffi 21.2.0 Astor 0.8.1
asttoken 2.2.1 astunparse 1.6.3 batas waktu asinkron 4.0.2
atribut 21.4.0 audioread 3.0.0 azure-core 1.28.0
azure-cosmos 4.3.1 Penyimpanan Blok Azure 12.17.0 Azure Storage File Data Lake 12.12.0
panggilan balik 0.2.0 bcrypt 3.2.0 beautifulsoup4 4.11.1
hitam 22.6.0 pemutih 4.1.0 blinker 1.4
kebahagiaan 0.7.10 boto3 1.24.28 botocore 1.27.28
cachetools (perangkat untuk caching) 4.2.4 katalog 2.0.9 pengode kategori 2.6.1
sertifikat 2022.9.14 cffi 1.15.1 chardet 4.0.0
charset-normalizer 2.0.4 klik 8.0.4 cloudpickle (perpustakaan Python untuk serialisasi objek) 2.0.0
cmdstanpy 1.1.0 konfeksi 0.1.0 configparser 5.2.0
mengonversi tanggal 2.4.0 kriptografi 37.0.1 pengendara sepeda 0.11.0
cymem 2.0.7 Cython 0.29.32 dasit 1.8.1
databricks-automl-runtime 0.2.17 databricks-cli 0.17.7 penyimpanan fitur databricks 0.14.0
databricks-sdk 0.1.6 dataclasses-json 0.5.13 kumpulan data 2.13.1
dbl-tempo 0.1.23 dbus-python 1.2.18 debugpy 1.6.0
dekorator 5.1.1 defusedxml 0.7.1 adas 0.3.4
diskcache 5.6.1 distlib 0.3.7 konversi docstring ke markdown 0.12
einops 0.6.1 titik masuk 0,4 ephem 4.1.4
menilai 0.4.0 menjalankan 1.2.0 ikhtisar-faset 1.0.3
fastapi 0.98.0 fastjsonschema 2.18.0 fasttext 0.9.2
filelock 3.6.0 flash-attn 1.0.7 Botol 1.1.2+db1
FlatBuffers 26/05/2023 alat pengelola font 4.25.0 daftar beku 1.4.0
fsspec 2022.7.1 masa depan 0.18.2 Gast 0.4.0
gitdb 4.0.10 GitPython 3.1.27 google-api-core 2.8.2
google-auth (autentikasi Google) 1.33.0 google-auth-oauthlib 0.4.6 google-cloud-core 2.3.3
google-cloud-storage (penyimpanan awan Google) 2.10.0 google-crc32c 1.5.0 Google Pasta 0.2.0
google-resumable-media (layanan media berkelanjutan dari Google) 2.5.0 googleapis-common-protos 1.56.4 greenlet 1.1.1
grpcio 1.48.1 grpcio-status 1.48.1 gunicorn 20.1.0
gviz-api 1.10.0 h11 0.14.0 h5py 3.7.0
hari libur 0.27.1 Horovod 0.28.1 htmlmin 0.1.12
httplib2 0.20.2 httptools 0.6.0 huggingface-hub 0.16.4
IDNA 3.3 Hash Gambar 4.3.1 pembelajaran-tidak-seimbang 0.10.1
importlib-metadata 4.11.3 importlib-resources 6.0.0 ipykernel 6.17.1
ipython 8.10.0 ipython-genutils 0.2.0 ipywidgets 7.7.2
isodate 0.6.1 itu berbahaya 2.0.1 Jedi 0.18.1
kendaraan umum jeepney 0.7.1 Jinja2 2.11.3 jmespath 0.10.0
joblib 1.2.0 joblibspark 0.5.1 jsonschema 4.16.0
jupyter-client (klien Jupyter) 7.3.4 jupyter_core 4.11.2 jupyterlab-pygments 0.1.2
jupyterlab-widgets 1.0.0 keras 2.11.0 gantungan kunci 23.5.0
kiwisolver 1.4.2 langchain 0.0.217 langchainplus-sdk 0.0.20
kodebahasa 3.3.0 launchpadlib 1.10.16 lazr.restfulclient (klien layanan web yang menggunakan RESTful) 0.14.4
lazr.uri 1.0.6 lazy_loader 0,3 libclang 15.0.6.1
librosa 0.10.0 lightgbm 3.3.5 llvmlite 0.38.0
Kalender Bulan 0.0.9 Mako 1.2.0 Markdown 3.3.4
MarkupSafe 2.0.1 Marshmallow 3.20.1 matplotlib 3.5.2
matplotlib-inline 0.1.6 Mccabe 0.7.0 salah menyetel 0.8.4
mleap 0.20.0 mlflow-skinny (versi ringan) 2.5.0 more-itertools 8.10.0
msgpack 1.0.5 multidikat 6.0.4 metode majemuk 1.9.1
multiproses 0.70.12.2 Murmur Hash 1.0.9 ekstensi mypy 0.4.3
nbclient 0.5.13 nbconvert 6.4.4 nbformat 5.5.0
nest-asyncio 1.5.5 networkx 2.8.4 ninja 1.11.1
nltk 3.7 nodeenv 1.8.0 buku catatan 6.4.12
numba 0.55.1 numexpr 2.8.4 numpy (perpustakaan Python untuk operasi numerik) 1.21.5
oauthlib 3.2.0 OpenAI 0.27.8 openapi-schema-pydantic 1.2.4
opt-einsum 3.3.0 kemasan 21.3 Panda 1.4.4
Pandocfilters 1.5.0 paramiko 2.9.2 pengurai 0.8.3
spesifikasi jalur 0.9.0 pati 0.10.2 kambing hitam 0.5.2
Petastorm 0.12.1 pexpect=4.8.0 4.8.0 phik 0.12.3
pickleshare 0.7.5 Bantal 9.2.0 pipa 22.2.2
platformdir 2.5.2 secara plot 5.9.0 pengaya 1.0.0
pmdarima 2.0.3 Pochi 1.7.0 tanpa informasi tambahan mengenai konteks yang berarti bagi istilah "preshed", mungkin terpikir untuk menggambarkan istilah tersebut sebagai langkah atau proses yang sedang terjadi sebelum sesuatu diselesaikan atau diproses lebih lanjut. 3.0.8
prompt-toolkit 3.0.36 nabi 1.1.4 protobuf 3.19.4
psutil 5.9.0 psycopg2 2.9.3 ptyprocess 0.7.0
pure-eval 0.2.2 pyarrow 8.0.0 pyasn1 0.4.8
pyasn1-modul 0.2.8 pybind11 2.11.1 pycparser 2.21
pydantic (perpustakaan Python untuk validasi data) 1.10.6 pyflakes 3.0.1 Pygments 2.11.2
PyGObject 3.42.1 PyJWT 2.3.0 PyMeeus 0.5.12
PyNaCl 1.5.0 pyodbc 4.0.32 pyparsing 3.0.9
pyright 1.1.294 pyrsistent 0.18.0 pytesseract 0.3.10
python-dateutil 2.8.2 python-dotenv 1.0.0 python-editor 1.0.4
python-lsp-jsonrpc 1.0.0 python-lsp-server 1.7.1 pytoolconfig 1.2.2
pytz 2022.1 PyWavelets 1.3.0 PyYAML (paket untuk memproses bahasa YAML dalam Python) 6.0
pyzmq 23.2.0 regex 2022.7.9 permintaan 2.28.1
requests-oauthlib 1.3.1 tanggapan 0.18.0 tali 1.7.0
Rsa 4.9 s3transfer 0.6.0 safetensor 0.3.1
scikit-learn 1.1.1 scipy (perpustakaan Python untuk komputasi ilmiah) 1.9.1 Seaborn (perpustakaan Python untuk visualisasi data) 0.11.2
SecretStorage 3.3.1 Send2Trash 1.8.0 transformator kalimat 2.2.2
sentencepiece 0.1.99 setuptools 63.4.1 bentuk 0.41.0
simplejson 3.17.6 Enam 1.16.0 pemotong 0.0.7
smart-open 5.2.1 smmap 5.0.0 Sniffio 1.2.0
berkas suara 0.12.1 alat penyaring sup 2.3.1 soxr 0.3.5
luas 3.5.3 warisan spasi 3.0.12 pencatat spasi 1.0.4
spark-tensorflow-distributor 1.0.0 SQLAlchemy 1.4.39 sqlparse 0.4.2
seriusan 2.4.7 ssh-import-id 5.11 stack-data 0.6.2
starlette 0.27.0 statsmodels (paket Python untuk pemodelan statistik) 0.13.2 menyusun dalam bentuk tabel 0.8.10
terjebak-dalam-unicode 0.2.0 kegigihan 8.1.0 TensorBoard 2.11.0
tensorboard-data-server 0.6.1 Plugin Profil Tensorboard 2.11.2 tensorboard-plugin-wit 1.8.1
TensorFlow 2.11.1 tensorflow-estimator (penghitung dalam TensorFlow) 2.11.0 tensorflow-io-gcs-filesystem 0.32.0
Termcolor 2.3.0 selesai 0.13.1 jalur uji 0.6.0
Thinc 8.1.10 threadpoolctl 2.2.0 tiktoken 0.4.0
Tokenisasi-RT 4.2.1 tokenisasi 0.13.3 tomli 2.0.1
obor 1.13.1+cu117 visi obor 0.14.1+cu117 Tornado 6.1
tqdm 4.64.1 traitlets=5.0.5 5.1.1 Transformer 4.30.2
typeguard (penjaga tipe) 2.13.3 Typer 0.7.0 mengetik-memeriksa 0.9.0
ekstensi pengetikan (typing_extensions) 4.3.0 ujson 5.4.0 pembaruan otomatis (unattended-upgrades) 0.1
urllib3 1.26.11 uvicorn 0.23.1 uvloop 0.17.0
virtualenv 20.16.3 Visi 0.7.5 wadllib 1.3.6
wasabi 1.1.2 watchfiles 0.19.0 wcwidth 0.2.5
webencodings versi 0.5.1 0.5.1 websocket-klien 0.58.0 websocket 11.0.3
Alat kerja 2.0.3 apa itu patch 1.0.2 wheel 0.37.1
widgetsnbextension 3.6.1 wordcloud 1.9.2 terbungkus 1.14.1
xgboost 1.7.6 xxhash 3.2.0 yapf 0.31.0
yarl 1.9.2 Pembuatan profil ydata 4.2.0 zipp 3.8.0

Pustaka R

Pustaka R identik dengan Pustaka R di Databricks Runtime 13.3 LTS.

Pustaka Java dan Scala (Kluster Scala 2.12)

Selain pustaka Java dan Scala di Databricks Runtime 13.3 LTS, Databricks Runtime 13.3 LTS ML berisi JAR berikut:

Kluster CPU

ID Grup ID Artefak Versi
com.typeafe.akka akka-actor_2.12 2.5.23
ml.dmlc xgboost4j-spark_2.12 1.7.3
ml.dmlc xgboost4j_2.12 1.7.3
org.graphframe graphframes_2.12 0.8.2-db2-spark3.4
org.mlflow mlflow-client 2.5.0
org.scala-lang.modules scala-java8-compat_2.12 0.8.0
org.tensorflow spark-tensorflow-connector_2.12 1.15.0

Kluster GPU

ID Grup ID Artefak Versi
com.typeafe.akka akka-actor_2.12 2.5.23
ml.dmlc xgboost4j-gpu_2.12 1.7.3
ml.dmlc xgboost4j-spark-gpu_2.12 1.7.3
org.graphframe graphframes_2.12 0.8.2-db2-spark3.4
org.mlflow mlflow-client 2.5.0
org.scala-lang.modules scala-java8-compat_2.12 0.8.0
org.tensorflow spark-tensorflow-connector_2.12 1.15.0