Catatan
Akses ke halaman ini memerlukan otorisasi. Anda dapat mencoba masuk atau mengubah direktori.
Akses ke halaman ini memerlukan otorisasi. Anda dapat mencoba mengubah direktori.
Databricks Runtime 14.3 LTS untuk Pembelajaran Mesin menyediakan lingkungan yang siap digunakan untuk pembelajaran mesin dan sains data berdasarkan Databricks Runtime 14.3 LTS. Databricks Runtime ML berisi banyak perpustakaan pembelajaran mesin yang populer, termasuk TensorFlow, PyTorch, dan XGBoost. Databricks Runtime ML mencakup AutoML, alat untuk secara otomatis melatih alur pembelajaran mesin. Databricks Runtime ML juga mendukung pelatihan pembelajaran mendalam menggunakan Horovod.
Catatan
LTS berarti versi ini berada di bawah dukungan jangka panjang. Lihat Siklus hidup Databricks Runtime LTS.
Petunjuk / Saran
Untuk melihat catatan rilis untuk versi Databricks Runtime yang telah mencapai akhir dukungan (EoS), lihat catatan rilis Databricks Runtime akhir dukungan. Versi EoS Databricks Runtime telah dihentikan dan mungkin tidak diperbarui.
Fitur dan peningkatan baru
Databricks Runtime 14.3 LTS ML dibangun di atas Databricks Runtime 14.3 LTS. Untuk informasi tentang apa yang baru di Databricks Runtime 14.3 LTS, termasuk Apache Spark MLlib dan SparkR, lihat catatan rilis Databricks Runtime 14.3 LTS .
Lingkungan sistem
Lingkungan sistem di Databricks Runtime 14.3 LTS ML berbeda dari Databricks Runtime 14.3 LTS sebagai berikut:
- Untuk kluster GPU, Databricks Runtime ML menyertakan pustaka GPU NVIDIA berikut:
- CUDA 11.8
- cuDNN 8.9.0.131-1
- NCCL 2.15.5
- TensorRT 8.5.3-1
Databricks Runtime 14.3 LTS ML mencakup XGBoost 1.7.6, yang tidak mendukung kluster GPU dengan kemampuan komputasi 5.2 ke bawah.
Pustaka
Bagian berikut mencantumkan pustaka yang disertakan dalam Databricks Runtime 14.3 LTS ML yang berbeda dari yang disertakan dalam Databricks Runtime 14.3 LTS.
Di bagian ini:
- Perpustakaan terbaik
- pustaka Python
- Pustaka R
- pustaka-pustaka Java dan Scala (kluster Scala 2.12)
Pustaka tingkat atas
Databricks Runtime 14.3 LTS ML menyertakan pustaka kelas atas berikut:
- GraphFrame
- Horovod dan HorovodRunner
- MLflow
- PyTorch
- spark-tensorflow-connector
- TensorFlow
- TensorBoard
- Scikit-learn
pustaka Python
Databricks Runtime 14.3 LTS ML menggunakan virtualenv untuk manajemen paket Python dan mencakup banyak paket ML populer.
Selain paket yang ditentukan di bagian berikut, Databricks Runtime 14.3 LTS ML juga mencakup paket berikut:
- hyperopt 0.2.7+db4
- 3.0.0_db1 sparkdl
- automl 1.24.0
Untuk mereproduksi lingkungan Python Databricks Runtime ML di lingkungan virtual Python lokal Anda, unduh file requirements-14.3.txt dan jalankan pip install -r requirements-14.3.txt. Perintah ini menginstal semua pustaka open source yang digunakan Databricks Runtime ML, tetapi tidak menginstal pustaka yang dikembangkan oleh Databricks, seperti databricks-automl, databricks-feature-store, atau fork Databricks dari hyperopt.
Python pustaka pada kluster CPU
| Pustaka | Versi | Pustaka | Versi | Pustaka | Versi |
|---|---|---|---|---|---|
| absl-py | 1.0.0 | Mempercepat | 0.25.0 | aiohttp | 3.9.1 |
| aiosignal | 1.3.1 | anyio | 3.5.0 | direktori aplikasi | 1.4.4 |
| argon2-cffi | 21.3.0 | Pengikatan Argon2-cffi | 21.2.0 | Astor | 0.8.1 |
| asttoken | 2.0.5 | astunparse | 1.6.3 | batas waktu asinkron | 4.0.3 |
| atribut | 22.1.0 | audioread | 3.0.1 | azure-core | 1.29.1 |
| azure-cosmos | 4.3.1 | Azure Storage Blob | 12.19.0 | Azure Storage File Data Lake | 12.14.0 |
| panggilan balik | 0.2.0 | bcrypt | 3.2.0 | beautifulsoup4 | 4.11.1 |
| hitam | 22.6.0 | pemutih | 4.1.0 | blinker | 1.4 |
| kebahagiaan | 0.7.11 | boto3 | 1.24.28 | botocore | 1.27.96 |
| cachetools (perangkat untuk caching) | 5.3.2 | katalog | 2.0.10 | pengkode kategori | 2.6.3 |
| sertifikat | 2022.12.7 | cffi | 1.15.1 | chardet | 4.0.0 |
| charset-normalizer | 2.0.4 | klik | 8.0.4 | cloudpathlib | 0.16.0 |
| cloudpickle (perpustakaan Python untuk serialisasi objek) | 2.0.0 | cmdstanpy | 1.2.0 | komunikasi | 0.1.2 |
| konfeksi | 0.1.4 | configparser | 5.2.0 | konturpy | 1.0.5 |
| Kriptografi | 39.0.1 | pengendara sepeda | 0.11.0 | cymem | 2.0.8 |
| Cython | 0.29.32 | batu vulkanik dacite | 1.8.1 | databricks-automl-runtime | 0.2.20 |
| databricks-cli | 0.18.0 | Databricks-rekayasa fitur | 0.2.0 | databricks-sdk | 0.1.6 |
| dataclasses-json | 0.6.3 | kumpulan data | 2.15.0 | dbl-tempo | 0.1.26 |
| dbus-python | 1.2.18 | debugpy | 1.6.7 | penghias | 5.1.1 |
| deepspeed | 0.12.4 | defusedxml | 0.7.1 | adas | 0.3.6 |
| diskcache | 5.6.3 | distlib | 0.3.7 | konversi docstring ke markdown | 0.11 |
| titik masuk | 0,4 | menilai | 0.4.1 | mengeksekusi | 0.8.3 |
| gambaran umum aspek | 1.1.1 | fastjsonschema | 2.19.1 | fasttext | 0.9.2 |
| filelock | 3.9.0 | Botol | 2.2.5 | FlatBuffers | 26/05/2023 |
| alat pengelola font | 4.25.0 | daftar beku | 1.4.1 | fsspec | 2023.6.0 |
| masa depan | 0.18.3 | Gast | 0.4.0 | gitdb | 4.0.11 |
| GitPython | 3.1.27 | google-api-core | 2.15.0 | google-auth (autentikasi Google) | 2.21.0 |
| google-auth-oauthlib | 1.0.0 | google-cloud-core | 2.4.1 | penyimpanan awan Google | 2.11.0 |
| google-crc32c | 1.5.0 | Google Pasta | 0.2.0 | google-resumable-media (layanan media berkelanjutan dari Google) | 2.7.0 |
| googleapis-common-protos | 1.62.0 | greenlet | 2.0.1 | grpcio | 1.48.2 |
| grpcio-status | 1.48.1 | gunicorn | 20.1.0 | gviz-api | 1.10.0 |
| h5py | 3.7.0 | hjson | 3.1.0 | hari libur | 0.38 |
| Horovod | 0.28.1 | htmlmin | 0.1.12 | httplib2 | 0.20.2 |
| huggingface-hub | 0.19.4 | IDNA | 3.4 | Hash Gambar | 4.3.1 |
| pembelajaran-tidak-seimbang | 0.11.0 | importlib-metadata | 4.11.3 | importlib-resources | 6.1.1 |
| ipykernel | 6.25.0 | ipython | 8.14.0 | ipython-genutils | 0.2.0 |
| ipywidgets | 7.7.2 | isodate | 0.6.1 | itu berbahaya | 2.0.1 |
| Jedi | 0.18.1 | Jeepney | 0.7.1 | Jinja2 | 3.1.2 |
| jmespath | 0.10.0 | joblib | 1.2.0 | joblibspark | 0.5.1 |
| jsonpatch | 1,33 | jsonpointer | 2.4 | jsonschema | 4.17.3 |
| jupyter-client (klien Jupyter) | 7.3.4 | jupyter-server | 1.23.4 | jupyter_core | 5.2.0 |
| jupyterlab-pygments | 0.1.2 | jupyterlab-widgets | 1.0.0 | keras | 2.14.0 |
| gantungan kunci | 23.5.0 | kiwisolver | 1.4.4 | langchain | 0.0.348 |
| langchain-core | 0.0.13 | langkode | 3.3.0 | langsmith | 0.0.79 |
| launchpadlib | 1.10.16 | lazr.restfulclient (klien layanan web yang menggunakan RESTful) | 0.14.4 | lazr.uri | 1.0.6 |
| lazy_loader | 0,3 | libclang | 15.0.6.1 | librosa | 0.10.1 |
| lightgbm | 4.1.0 | llvmlite | 0.39.1 | lxml | 4.9.1 |
| Mako | 1.2.0 | Markdown | 3.4.1 | MarkupSafe | 2.1.1 |
| Marshmallow | 3.20.2 | matplotlib | 3.7.0 | matplotlib-inline | 0.1.6 |
| Mccabe | 0.7.0 | penyetelan salah | 0.8.4 | ml-dtypes | 0.2.0 |
| mlflow-skinny (versi ringan) | 2.9.2 | more-itertools | 8.10.0 | mpmath | 1.2.1 |
| msgpack | 1.0.7 | multidict | 6.0.4 | metode ganda | 1.10 |
| multiproses | 0.70.14 | Murmur Hash | 1.0.10 | ekstensi mypy | 0.4.3 |
| nbclassic | 0.5.2 | nbclient | 0.5.13 | nbconvert | 6.5.4 |
| nbformat | 5.7.0 | nest-asyncio | 1.5.6 | networkx | 2.8.4 |
| ninja | 1.11.1.1 | nltk | 3.7 | nodeenv | 1.8.0 |
| buku catatan | 6.5.2 | buku_catatan_shim | 0.2.2 | numba | 0.56.4 |
| numpy (perpustakaan Python untuk operasi numerik) | 1.23.5 | oauthlib | 3.2.0 | openai | 0.28.1 |
| opt-einsum | 3.3.0 | pengemasan | 23.2 | Panda | 1.5.3 |
| Pandocfilters | 1.5.0 | paramiko | 2.9.2 | pengurai | 0.8.3 |
| spesifikasi jalur | 0.10.3 | kambing hitam | 0.5.3 | Petastorm | 0.12.1 |
| pexpect | 4.8.0 | phik | 0.12.4 | pickleshare | 0.7.5 |
| Bantal | 9.4.0 | pipa | 22.3.1 | platformdir | 2.5.2 |
| plotly | 5.9.0 | pengaya | 1.0.0 | pmdarima | 2.0.4 |
| Anjing kecil | 1.4.0 | tanpa informasi tambahan mengenai konteks yang berarti bagi istilah "preshed", mungkin terpikir untuk menggambarkan istilah tersebut sebagai langkah atau proses yang sedang terjadi sebelum sesuatu diselesaikan atau diproses lebih lanjut. | 3.0.9 | prometheus-client | 0.14.1 |
| prompt-toolkit | 3.0.36 | nabi | 1.1.5 | protobuf | 4.24.0 |
| psutil | 5.9.0 | psycopg2 | 2.9.3 | ptyprocess | 0.7.0 |
| pure-eval | 0.2.2 | py-cpuinfo | 9.0.0 | pyarrow | 8.0.0 |
| pyarrow-hotfix | 0,5 | pyasn1 | 0.4.8 | pyasn1-modul | 0.2.8 |
| pybind11 | 2.11.1 | pycparser | 2.21 | pydantic (perpustakaan Python untuk validasi data) | 1.10.6 |
| pyflakes | 3.1.0 | Pygments | 2.11.2 | PyGObject | 3.42.1 |
| PyJWT | 2.3.0 | PyNaCl | 1.5.0 | pynvml | 11.5.0 |
| pyodbc | 4.0.32 | pyparsing | 3.0.9 | pyright | 1.1.294 |
| pyrsistent | 0.18.0 | pytesseract | 0.3.10 | python-dateutil | 2.8.2 |
| editor Python | 1.0.4 | python-lsp-jsonrpc | 1.1.1 | python-lsp-server | 1.8.0 |
| pytoolconfig | 1.2.5 | pytz | 2022.7 | PyWavelets | 1.4.1 |
| PyYAML (paket untuk memproses bahasa YAML dalam Python) | 6.0 | pyzmq | 23.2.0 | regex | 2022.7.9 |
| permintaan | 2.28.1 | requests-oauthlib | 1.3.1 | Respons | 0.18.0 |
| tali | 1.7.0 | Rsa | 4.9 | s3transfer | 0.6.2 |
| safetensors | 0.4.1 | scikit-learn | 1.1.1 | scipy (perpustakaan Python untuk komputasi ilmiah) | 1.10.0 |
| Seaborn (perpustakaan Python untuk visualisasi data) | 0.12.2 | SecretStorage | 3.3.1 | Send2Trash | 1.8.0 |
| transformator kalimat | 2.2.2 | sentencepiece | 0.1.99 | setuptools | 65.6.3 |
| bentuk | 0.44.0 | simplejson | 3.17.6 | Enam | 1.16.0 |
| pemotong | 0.0.7 | smart-open | 5.2.1 | smmap | 5.0.0 |
| Sniffio | 1.2.0 | berkas suara | 0.12.1 | alat penyaring sup | 2.3.2.post1 |
| soxr | 0.3.7 | lapang | 3.7.2 | spacy-legacy | 3.0.12 |
| pencatat spasi | 1.0.5 | spark-tensorflow-distributor | 1.0.0 | SQLAlchemy | 1.4.39 |
| sqlparse | 0.4.2 | Seriusan | 2.4.8 | ssh-import-id | 5.11 |
| stack-data | 0.2.0 | stanio | 0.3.0 | statsmodels (paket Python untuk pemodelan statistik) | 0.13.5 |
| sympy | 1.11.1 | menyusun dalam bentuk tabel | 0.8.10 | Terjerat dalam Unicode | 0.2.0 |
| kegigihan | 8.1.0 | TensorBoard | 2.14.1 | tensorboard-data-server | 0.7.2 |
| Plugin Profil Tensorboard | 2.14.0 | tensorflow-cpu | 2.14.1 | tensorflow-estimator (penghitung dalam TensorFlow) | 2.14.0 |
| tensorflow-io-gcs-filesystem | 0.35.0 | Termcolor | 2.4.0 | selesai | 0.17.1 |
| Thinc | 8.2.2 | threadpoolctl | 2.2.0 | tiktoken | 0.5.2 |
| tinycss2 | 1.2.1 | Tokenisasi-RT | 4.2.1 | tokenisasi | 0.15.0 |
| tomli | 2.0.1 | obor | 2.0.1+cpu | torchvision | 0.15.2+cpu |
| Tornado | 6.1 | tqdm | 4.64.1 | traitlets=5.0.5 | 5.7.1 |
| Transformer | 4.36.1 | typeguard (penjaga tipe) | 2.13.3 | Typer | 0.9.0 |
| mengetik-memeriksa | 0.9.0 | ekstensi pengetikan (typing_extensions) | 4.4.0 | ujson | 5.4.0 |
| pembaruan otomatis tanpa pengawasan | 0.1 | urllib3 | 1.26.14 | virtualenv | 20.16.7 |
| Visi | 0.7.5 | wadllib | 1.3.6 | wasabi | 1.1.2 |
| wcwidth | 0.2.5 | Musang | 0.3.4 | webencodings versi 0.5.1 | 0.5.1 |
| websocket-klien | 0.58.0 | Alat kerja | 2.2.2 | apa itu patch | 1.0.2 |
| wheel | 0.38.4 | widgetsnbextension | 3.6.1 | wordcloud | 1.9.3 |
| terbungkus | 1.14.1 | xgboost | 1.7.6 | xxhash | 3.4.1 |
| yapf | 0.33.0 | yarl | 1.9.4 | Pembuatan profil ydata | 4.2.0 |
| zipp | 3.11.0 |
Perpustakaan Python pada klaster GPU
| Pustaka | Versi | Pustaka | Versi | Pustaka | Versi |
|---|---|---|---|---|---|
| absl-py | 1.0.0 | Mempercepat | 0.25.0 | aiohttp | 3.9.1 |
| aiosignal | 1.3.1 | anyio | 3.5.0 | direktori aplikasi | 1.4.4 |
| argon2-cffi | 21.3.0 | Pengikatan Argon2-cffi | 21.2.0 | Astor | 0.8.1 |
| asttoken | 2.0.5 | astunparse | 1.6.3 | batas waktu asinkron | 4.0.3 |
| atribut | 22.1.0 | audioread | 3.0.1 | azure-core | 1.29.1 |
| azure-cosmos | 4.3.1 | Azure Storage Blob | 12.19.0 | Azure Storage File Data Lake | 12.14.0 |
| panggilan balik | 0.2.0 | bcrypt | 3.2.0 | beautifulsoup4 | 4.11.1 |
| hitam | 22.6.0 | pemutih | 4.1.0 | blinker | 1.4 |
| kebahagiaan | 0.7.11 | boto3 | 1.24.28 | botocore | 1.27.96 |
| cachetools (perangkat untuk caching) | 5.3.2 | katalog | 2.0.10 | pengkode kategori | 2.6.3 |
| sertifikat | 2022.12.7 | cffi | 1.15.1 | chardet | 4.0.0 |
| charset-normalizer | 2.0.4 | klik | 8.0.4 | cloudpathlib | 0.16.0 |
| cloudpickle (perpustakaan Python untuk serialisasi objek) | 2.0.0 | cmake | 3.28.1 | cmdstanpy | 1.2.0 |
| komunikasi | 0.1.2 | konfeksi | 0.1.4 | configparser | 5.2.0 |
| konturpy | 1.0.5 | Kriptografi | 39.0.1 | pengendara sepeda | 0.11.0 |
| cymem | 2.0.8 | Cython | 0.29.32 | batu vulkanik dacite | 1.8.1 |
| databricks-automl-runtime | 0.2.20 | databricks-cli | 0.18.0 | Databricks-rekayasa fitur | 0.2.0 |
| databricks-sdk | 0.1.6 | dataclasses-json | 0.6.3 | kumpulan data | 2.15.0 |
| dbl-tempo | 0.1.26 | dbus-python | 1.2.18 | debugpy | 1.6.7 |
| penghias | 5.1.1 | deepspeed | 0.12.4 | defusedxml | 0.7.1 |
| adas | 0.3.6 | diskcache | 5.6.3 | distlib | 0.3.7 |
| konversi docstring ke markdown | 0.11 | einops | 0.7.0 | titik masuk | 0,4 |
| menilai | 0.4.1 | mengeksekusi | 0.8.3 | gambaran umum aspek | 1.1.1 |
| fastjsonschema | 2.19.1 | fasttext | 0.9.2 | filelock | 3.9.0 |
| flash-attn | 2.3.6 | Botol | 2.2.5 | FlatBuffers | 26/05/2023 |
| alat pengelola font | 4.25.0 | daftar beku | 1.4.1 | fsspec | 2023.6.0 |
| masa depan | 0.18.3 | Gast | 0.4.0 | gitdb | 4.0.11 |
| GitPython | 3.1.27 | google-api-core | 2.15.0 | google-auth (autentikasi Google) | 2.21.0 |
| google-auth-oauthlib | 1.0.0 | google-cloud-core | 2.4.1 | penyimpanan awan Google | 2.11.0 |
| google-crc32c | 1.5.0 | Google Pasta | 0.2.0 | google-resumable-media (layanan media berkelanjutan dari Google) | 2.7.0 |
| googleapis-common-protos | 1.62.0 | greenlet | 2.0.1 | grpcio | 1.48.2 |
| grpcio-status | 1.48.1 | gunicorn | 20.1.0 | gviz-api | 1.10.0 |
| h5py | 3.7.0 | hjson | 3.1.0 | hari libur | 0.38 |
| Horovod | 0.28.1 | htmlmin | 0.1.12 | httplib2 | 0.20.2 |
| huggingface-hub | 0.19.4 | IDNA | 3.4 | Hash Gambar | 4.3.1 |
| pembelajaran-tidak-seimbang | 0.11.0 | importlib-metadata | 4.11.3 | importlib-resources | 6.1.1 |
| ipykernel | 6.25.0 | ipython | 8.14.0 | ipython-genutils | 0.2.0 |
| ipywidgets | 7.7.2 | isodate | 0.6.1 | itu berbahaya | 2.0.1 |
| Jedi | 0.18.1 | Jeepney | 0.7.1 | Jinja2 | 3.1.2 |
| jmespath | 0.10.0 | joblib | 1.2.0 | joblibspark | 0.5.1 |
| jsonpatch | 1,33 | jsonpointer | 2.4 | jsonschema | 4.17.3 |
| jupyter-client (klien Jupyter) | 7.3.4 | jupyter-server | 1.23.4 | jupyter_core | 5.2.0 |
| jupyterlab-pygments | 0.1.2 | jupyterlab-widgets | 1.0.0 | keras | 2.14.0 |
| gantungan kunci | 23.5.0 | kiwisolver | 1.4.4 | langchain | 0.0.348 |
| langchain-core | 0.0.13 | langkode | 3.3.0 | langsmith | 0.0.79 |
| launchpadlib | 1.10.16 | lazr.restfulclient (klien layanan web yang menggunakan RESTful) | 0.14.4 | lazr.uri | 1.0.6 |
| lazy_loader | 0,3 | libclang | 15.0.6.1 | librosa | 0.10.1 |
| lightgbm | 4.1.0 | Menyalakan | 17.0.6 | llvmlite | 0.39.1 |
| lxml | 4.9.1 | Mako | 1.2.0 | Markdown | 3.4.1 |
| MarkupSafe | 2.1.1 | Marshmallow | 3.20.2 | matplotlib | 3.7.0 |
| matplotlib-inline | 0.1.6 | Mccabe | 0.7.0 | penyetelan salah | 0.8.4 |
| ml-dtypes | 0.2.0 | mlflow-skinny (versi ringan) | 2.9.2 | more-itertools | 8.10.0 |
| mpmath | 1.2.1 | msgpack | 1.0.7 | multidict | 6.0.4 |
| metode ganda | 1.10 | multiproses | 0.70.14 | Murmur Hash | 1.0.10 |
| ekstensi mypy | 0.4.3 | nbclassic | 0.5.2 | nbclient | 0.5.13 |
| nbconvert | 6.5.4 | nbformat | 5.7.0 | nest-asyncio | 1.5.6 |
| networkx | 2.8.4 | ninja | 1.11.1.1 | nltk | 3.7 |
| nodeenv | 1.8.0 | buku catatan | 6.5.2 | buku_catatan_shim | 0.2.2 |
| numba | 0.56.4 | numpy (perpustakaan Python untuk operasi numerik) | 1.23.5 | oauthlib | 3.2.0 |
| openai | 0.28.1 | opt-einsum | 3.3.0 | pengemasan | 23.2 |
| Panda | 1.5.3 | Pandocfilters | 1.5.0 | paramiko | 2.9.2 |
| pengurai | 0.8.3 | spesifikasi jalur | 0.10.3 | kambing hitam | 0.5.3 |
| Petastorm | 0.12.1 | pexpect | 4.8.0 | phik | 0.12.4 |
| pickleshare | 0.7.5 | Bantal | 9.4.0 | pipa | 22.3.1 |
| platformdir | 2.5.2 | plotly | 5.9.0 | pengaya | 1.0.0 |
| pmdarima | 2.0.4 | Anjing kecil | 1.4.0 | tanpa informasi tambahan mengenai konteks yang berarti bagi istilah "preshed", mungkin terpikir untuk menggambarkan istilah tersebut sebagai langkah atau proses yang sedang terjadi sebelum sesuatu diselesaikan atau diproses lebih lanjut. | 3.0.9 |
| prompt-toolkit | 3.0.36 | nabi | 1.1.5 | protobuf | 4.24.0 |
| psutil | 5.9.0 | psycopg2 | 2.9.3 | ptyprocess | 0.7.0 |
| pure-eval | 0.2.2 | py-cpuinfo | 9.0.0 | pyarrow | 8.0.0 |
| pyarrow-hotfix | 0,5 | pyasn1 | 0.4.8 | pyasn1-modul | 0.2.8 |
| pybind11 | 2.11.1 | pycparser | 2.21 | pydantic (perpustakaan Python untuk validasi data) | 1.10.6 |
| pyflakes | 3.1.0 | Pygments | 2.11.2 | PyGObject | 3.42.1 |
| PyJWT | 2.3.0 | PyNaCl | 1.5.0 | pynvml | 11.5.0 |
| pyodbc | 4.0.32 | pyparsing | 3.0.9 | pyright | 1.1.294 |
| pyrsistent | 0.18.0 | pytesseract | 0.3.10 | python-dateutil | 2.8.2 |
| editor Python | 1.0.4 | python-lsp-jsonrpc | 1.1.1 | python-lsp-server | 1.8.0 |
| pytoolconfig | 1.2.5 | pytz | 2022.7 | PyWavelets | 1.4.1 |
| PyYAML (paket untuk memproses bahasa YAML dalam Python) | 6.0 | pyzmq | 23.2.0 | regex | 2022.7.9 |
| permintaan | 2.28.1 | requests-oauthlib | 1.3.1 | Respons | 0.18.0 |
| tali | 1.7.0 | Rsa | 4.9 | s3transfer | 0.6.2 |
| safetensors | 0.4.1 | scikit-learn | 1.1.1 | scipy (perpustakaan Python untuk komputasi ilmiah) | 1.10.0 |
| Seaborn (perpustakaan Python untuk visualisasi data) | 0.12.2 | SecretStorage | 3.3.1 | Send2Trash | 1.8.0 |
| transformator kalimat | 2.2.2 | sentencepiece | 0.1.99 | setuptools | 65.6.3 |
| bentuk | 0.44.0 | simplejson | 3.17.6 | Enam | 1.16.0 |
| pemotong | 0.0.7 | smart-open | 5.2.1 | smmap | 5.0.0 |
| Sniffio | 1.2.0 | berkas suara | 0.12.1 | alat penyaring sup | 2.3.2.post1 |
| soxr | 0.3.7 | lapang | 3.7.2 | spacy-legacy | 3.0.12 |
| pencatat spasi | 1.0.5 | spark-tensorflow-distributor | 1.0.0 | SQLAlchemy | 1.4.39 |
| sqlparse | 0.4.2 | Seriusan | 2.4.8 | ssh-import-id | 5.11 |
| stack-data | 0.2.0 | stanio | 0.3.0 | statsmodels (paket Python untuk pemodelan statistik) | 0.13.5 |
| sympy | 1.11.1 | menyusun dalam bentuk tabel | 0.8.10 | Terjerat dalam Unicode | 0.2.0 |
| kegigihan | 8.1.0 | TensorBoard | 2.14.1 | tensorboard-data-server | 0.7.2 |
| Plugin Profil Tensorboard | 2.14.0 | TensorFlow | 2.14.1 | tensorflow-estimator (penghitung dalam TensorFlow) | 2.14.0 |
| tensorflow-io-gcs-filesystem | 0.35.0 | Termcolor | 2.4.0 | selesai | 0.17.1 |
| Thinc | 8.2.2 | threadpoolctl | 2.2.0 | tiktoken | 0.5.2 |
| tinycss2 | 1.2.1 | Tokenisasi-RT | 4.2.1 | tokenisasi | 0.15.0 |
| tomli | 2.0.1 | obor | 2.0.1+cu118 | torchvision | 0.15.2+cu118 |
| Tornado | 6.1 | tqdm | 4.64.1 | traitlets=5.0.5 | 5.7.1 |
| Transformer | 4.36.1 | Triton | 2.0.0 | typeguard (penjaga tipe) | 2.13.3 |
| Typer | 0.9.0 | mengetik-memeriksa | 0.9.0 | ekstensi pengetikan (typing_extensions) | 4.4.0 |
| ujson | 5.4.0 | pembaruan otomatis tanpa pengawasan | 0.1 | urllib3 | 1.26.14 |
| virtualenv | 20.16.7 | Visi | 0.7.5 | wadllib | 1.3.6 |
| wasabi | 1.1.2 | wcwidth | 0.2.5 | Musang | 0.3.4 |
| webencodings versi 0.5.1 | 0.5.1 | websocket-klien | 0.58.0 | Alat kerja | 2.2.2 |
| apa itu patch | 1.0.2 | wheel | 0.38.4 | widgetsnbextension | 3.6.1 |
| wordcloud | 1.9.3 | terbungkus | 1.14.1 | xgboost | 1.7.6 |
| xxhash | 3.4.1 | yapf | 0.33.0 | yarl | 1.9.4 |
| Pembuatan profil ydata | 4.2.0 | zipp | 3.11.0 |
Pustaka R
Pustaka R identik dengan Pustaka R di Databricks Runtime 14.3 LTS.
pustaka Java dan Scala (kluster Scala 2.12)
Selain pustaka Java dan Scala di Databricks Runtime 14.3 LTS, Databricks Runtime 14.3 LTS ML berisi JAR berikut:
Kluster CPU
| ID Grup | ID Artefak | Versi |
|---|---|---|
| com.typesafe.akka | akka-actor_2.12 | 2.5.23 |
| ml.dmlc | xgboost4j-spark_2.12 | 1.7.3 |
| ml.dmlc | xgboost4j_2.12 | 1.7.3 |
| org.graphframes | graphframes_2.12 | 0.8.2-db2-spark3.4 |
| org.mlflow | mlflow-client | 2.9.2 |
| org.scala-lang.modules | scala-java8-compat_2.12 | 0.8.0 |
| org.tensorflow | spark-tensorflow-connector_2.12 | 1.15.0 |
Kluster GPU
| ID Grup | ID Artefak | Versi |
|---|---|---|
| com.typesafe.akka | akka-actor_2.12 | 2.5.23 |
| ml.dmlc | xgboost4j-gpu_2.12 | 1.7.3 |
| ml.dmlc | xgboost4j-spark-gpu_2.12 | 1.7.3 |
| org.graphframes | graphframes_2.12 | 0.8.2-db2-spark3.4 |
| org.mlflow | mlflow-client | 2.9.2 |
| org.scala-lang.modules | scala-java8-compat_2.12 | 0.8.0 |
| org.tensorflow | spark-tensorflow-connector_2.12 | 1.15.0 |