Not
Bu sayfaya erişim yetkilendirme gerektiriyor. Oturum açmayı veya dizinleri değiştirmeyi deneyebilirsiniz.
Bu sayfaya erişim yetkilendirme gerektiriyor. Dizinleri değiştirmeyi deneyebilirsiniz.
Machine Learning için Databricks Runtime 16.4 LTS, Databricks Runtime 16.4 LTS'ye dayalı makine öğrenmesi ve veri bilimi için hazırto-go bir ortam sağlar. Databricks Runtime ML, TensorFlow, PyTorch ve XGBoost gibi birçok popüler makine öğrenmesi kitaplığı içerir. Databricks Runtime ML, makine öğrenmesi işlem hatlarını otomatik olarak eğitmeye yönelik bir araç olan AutoML'yi içerir. Databricks Runtime ML, TorchDistributor, DeepSpeed ve Ray kullanarak dağıtılmış derin öğrenme eğitimini de destekler.
Tavsiye
Destek sonuna (EoS) ulaşmış Databricks Runtime sürümlerinin sürüm notlarını görmek için bkz. Destek sonu Databricks Runtime sürüm notları. EoS Databricks Runtime sürümleri kullanımdan kaldırılmıştır ve güncelleştirilmemiş olabilir.
Yeni özellikler ve geliştirmeler
Databricks Runtime 16.4 LTS ML, Databricks Runtime 16.4 LTS üzerine kurulmuştur. Apache Spark MLlib ve SparkR dahil olmak üzere Databricks Runtime 16.4 LTS'deki yenilikler hakkında bilgi için bkz. Databricks Runtime 16.4 LTS sürüm notları .
Diğer değişiklikler
XGBoost4J-Spark kullanım dışı bırakıldı
XGBoost4J-Spark artık kullanım dışıdır ve sonraki ana Databricks Runtime ML sürümünde önceden yüklenmez. Databricks, için xgboost.sparkPython API'sinin kullanılmasını önerir. Bkz. kullanarak xgboost.sparkXGBoost modellerinin dağıtılmış eğitimi.
TensorFlow 2.17.x cuDNN kitaplığını yükleyemiyor
Databricks Runtime 16.4 LTS ML'de TensorFlow 2.17.x'in (varsayılan sürüm) cuDNN kitaplığı yükleme hatası nedeniyle GPU cihazlarına erişememesi bilinen bir sorundur. Bu sorunu düzeltmek için TensorFlow'u 2.18.x veya üzeri bir sürüme yükseltin.
Sistem ortamı
Databricks Runtime 16.4 LTS ML'deki sistem ortamı aşağıdaki gibi Databricks Runtime 16.4 LTS'den farklıdır.
- GPU kümeleri için Databricks Runtime ML aşağıdaki NVIDIA GPU kitaplıklarını içerir:
- CUDA 12.6
- cublas 12.6.0.22-1
- cusolver 11.6.4.38-1
- cupti 12.6.37-1
- Seyrek 12.5.2.23-1
- cuDNN 9.3.0.75-1
- NCCL 2.22.3
- TensorRT 10.2.0.19-1
Kitaplık
Databricks Runtime 16.4 LTS ML'de yer alan ve Databricks Runtime 16.4 LTS'dekilerden farklı olan kitaplıklar aşağıdaki bölümlerde listelenmiştir.
Bu bölümde:
- Üst katman kitaplıkları
- Python kitaplıkları
- R kitaplıkları
- Java ve Scala kitaplıkları (Scala 2.12 kümesi)
Üst katman kitaplıkları
Databricks Runtime 16.4 LTS ML aşağıdaki üst katman kitaplıklarını içerir:
- Veri Kümeleri
- GraphFrame'ler
- MLflow
- PyTorch
- spark-tensorflow-connector (spark-tensorflow bağlayıcısı)
- Scikit-learn
- Akış
- TensorFlow
- TensorBoard
- Transformers
Python kitaplıkları
Databricks Runtime 16.4 LTS ML, Python paket yönetimi için kullanılır virtualenv ve birçok popüler ML paketi içerir.
Aşağıdaki bölümlerde belirtilen paketlere ek olarak Databricks Runtime 16.4 LTS ML aşağıdaki paketleri de içerir:
- hyperopt 0.2.8+db1
- automl 1.30.0
Databricks Runtime ML Python ortamını yerel Python sanal ortamınızda yeniden oluşturmak için requirements-16.4.txt dosyasını indirin ve çalıştırın pip install -r requirements-16.4.txt. Bu komut, Databricks Runtime ML tarafından kullanılan tüm açık kaynak kitaplıkları yükler, ancak databricks-automl veya hyperoptDatabricks çatalı gibi Databricks tarafından geliştirilen kitaplıkları yüklemez.
CPU kümelerinde Python kitaplıkları
| Kütüphane | Sürüm | Kütüphane | Sürüm | Kütüphane | Sürüm |
|---|---|---|---|---|---|
| absl-py | 1.0.0 | hızlandırmak | 1.5.2 | aiohttp | 3.9.5 |
| aiohttp-cors | 0.8.1 | aiosignal | 1.2.0 | imbik | 1.14.1 |
| anotasyonlu türler | 0.7.0 | anyio | 4.2.0 | argcomplete | 3.6.2 |
| argon2-cffi | 21.3.0 | argon2-cffi-bağlantıları | 21.2.0 | yön oku | 1.2.3 |
| Astor | 0.8.1 | ast jetonları | 2.0.5 | astunparse | 1.6.3 |
| async-lru | 2.0.4 | özellikler | 23.1.0 | sesli okuma | 3.0.1 |
| otomatik komut | 2.2.2 | azure-core | 1.33.0 | azure-cosmos | 4.3.1 |
| Azure-Kimlik | 1.21.0 | Azure depolama bloğu | 12.23.0 | Azure Storage File Data Lake | 12.17.0 |
| Babel | 2.11.0 | geri çekilme | 2.2.1 | backports.tarfile | 1.2.0 |
| bcrypt | 3.2.0 | beautifulsoup4 | 4.12.3 | siyah | 24.4.2 |
| ağartıcı | 4.1.0 | sinyal lambası | 1.7.0 | mutluluk | 0.7.11 |
| boto3 | 1.34.69 | botocore | 1.34.69 | Brotli | 1.0.9 |
| önbellek araçları | 5.3.3 | katalog | 2.0.10 | kategori kodlayıcıları | 2.6.3 |
| sertifika | 2024.6.2 | cffi | 1.16.0 | chardet | 4.0.0 |
| karakter seti normalleştirici | 2.0.4 | devre kesici | 2.1.3 | tıkla | 8.1.7 |
| cloudpathlib | 0.21.0 | cloudpickle (bulut serileştirme modülü) | 2.2.1 | cmdstanpy | 1.2.5 |
| renkli | 0.5.6 | renk günlüğü | 6.9.0 | İletişim | 0.2.1 |
| besteci | 0.29.0 | şekerleme | 0.1.5 | yapılandırmaparser | 5.2.0 |
| ContourPy | 1.2.0 | coolname | 2.2.0 | şifreleme | 42.0.5 |
| bisikletçi | 0.11.0 | cymem | 2.0.11 | Cython | 3.0.11 |
| dazit | 1.9.2 | databricks-automl-runtime | 0.2.21 | Databricks Özellik Mühendisliği | 0.10.2 |
| databricks yazılım geliştirme kiti (SDK) | 0.30.0 | veri kümeleri | 3.5.0 | dbl-tempo | 0.1.26 |
| dbus-python | 1.3.2 | hata ayıklama | 1.6.7 | dekoratör | 5.1.1 |
| Deepspeed | 0.16.5 | defusedxml modülü | 0.7.1 | Önerilmiyor | 1.2.18 |
| dereotu | 0.3.8 | daistlib | 0.3.8 | dm-tree | 0.1.9 |
| docstring'i markdown formatına dönüştürme | 0.11 | einops | 0.8.1 | giriş noktaları | 0.4 |
| değerlendirmek | 0.4.3 | Uygulamak | 0.8.3 | fasetler-genel bakış | 1.1.1 |
| Farama-Bildirimler | 0.0.4 | fastapi | 0.115.12 | fastjsonschema | 2.21.1 |
| fasttext-wheel | 0.9.2 | dosya kilidi | 3.13.1 | Şişe | 2.2.5 |
| FlatBuffers | 25.2.10 | font araçları | 4.51.0 | FQDN (Tam Nitelikli Alan Adı) | 1.5.1 |
| dondurulmuş liste | 1.4.0 | fsspec | 2023.5.0 | gelecek | 0.18.3 |
| Misafir | 0.4.0 | gitdb (Git veritabanı) | 4.0.11 | GitPython | 3.1.37 |
| google-api-core (Google API çekirdek kütüphanesi) | 2.20.0 | google-auth (kimlik doğrulama) | 2.21.0 | google-auth-oauthlib | 1.2.1 |
| google-cloud-core | 2.4.3 | Google Cloud Storage (Google Bulut Depolama) | 2.10.0 | google-crc32c | 1.7.1 |
| Google-Pasta | 0.2.0 | Google Devam Ettirilebilir Medya | 2.7.2 | googleapis-common-protos kütüphaneleri | 1.70.0 |
| gql | 3.5.2 | graphql-core | 3.2.4 | yeşillik | 3.0.1 |
| grpcio | 1.60.0 | grpcio-status | 1.60.0 | gunicorn | 20.1.0 |
| gviz-api | 1.10.0 | spor salonu | 0.28.1 | h11 | 0.14.0 |
| h5py | 3.11.0 | hjson | 3.1.0 | Tatil | 0.54 |
| htmlmin (HTML küçültme aracı) | 0.1.12 | httpcore | 1.0.8 | httplib2 | 0.20.4 |
| httpx | 0.28.1 | huggingface-hub (Hugging Face merkezi) | 0.29.3 | Uluslararası Alan Adları Uygulaması (IDNA) | 3.7 |
| Görüntü Hash | 4.3.1 | imageio | 2.33.1 | dengesiz-öğrenme | 0.12.3 |
| importlib-metadata | 6.0.0 | importlib_resources | 6.5.2 | çekimlemek | 7.3.1 |
| ipyflow-core | 0.0.201 | ipykernel | 6.28.0 | ipython | 8.25.0 |
| ipython-genutils | 0.2.0 | ipywidgets (Python'da interaktif widget kütüphanesi) | 7.7.2 | izodat | 0.6.1 |
| İzodurasyon | 20.11.0 | bu tehlikeli | 2.2.0 | jaraco.context | 5.3.0 |
| jaraco.functools | 4.0.1 | jaraco.text | 3.12.1 | jax-jumpy | 1.0.0 |
| Jedi | 0.19.1 | Jinja2 | 3.1.4 | titreşim | 0.9.0 |
| jmespath | 1.0.1 | joblib kütüphanesi | 1.4.2 | joblibspark | 0.5.3 |
| json5 | 0.9.6 | json yaması | 1,33 | jsonpointer | 3.0.0 |
| JSON şeması | 4.19.2 | json şema spesifikasyonları | 2023.7.1 | Jupyter Etkinlikleri | 0.10.0 |
| jupyter-lsp | 2.2.0 | Jupyter istemcisi | 8.6.0 | jupyter_core | 5.7.2 |
| Jupyter sunucusu | 2.14.1 | Jupyter Sunucu Terminalleri | 0.4.4 | jupyterlab | 4.0.11 |
| jupyterlab-pygments | 0.1.2 | JupyterLab Sunucusu | 2.25.1 | Keras | 3.9.0 |
| kiwisolver | 1.4.4 | langchain | 0.3.21 | langchain-core | 0.3.51 |
| langchain metin ayırıcılar | 0.3.8 | dil kodları | 3.5.0 | langsmith | 0.1.133 |
| dil_verisi | 1.3.0 | başlatma çubuğu | 1.11.0 | lazr.restfulclient | 0.14.6 |
| lazr.uri | 1.0.6 | tembel yükleyici | 0.4 | libclang | 15.0.6.1 |
| librosa | 0.10.2 | LightGBM (açık kaynak kodlu bir makine öğrenme algoritması) | 4.5.0 | yıldırım araçları | 0.14.3 |
| linkify-it-py | 2.0.0 | llvmlite | 0.42.0 | lz4 | 4.3.2 |
| Mako | 1.2.0 | marisa-trie | 1.2.0 | Markdown | 3.4.1 |
| markdown-it-py | 2.2.0 | MarkupSafe | 2.1.3 | matplotlib (Python için popüler bir grafik kütüphanesi) | 3.8.4 |
| matplotlib-inline | 0.1.6 | Mccabe | 0.7.0 | mdit-py-plugins | 0.3.0 |
| mdurl | 0.1.0 | Memray | 1.17.1 | hatalı ayarlamak | 2.0.4 |
| ml-dtypes | 0.4.1 | mlflow-skinny | 2.21.3 | more-itertools kütüphanesi | 10.3.0 |
| mozaikml-cli | 0.6.41 | mosaicml-streaming | 0.11.0 | mpmath | 1.3.0 |
| Microsoft Kimlik Doğrulama Kitaplığı (MSAL) | 1.32.0 | msal-eklentileri | 1.3.1 | msgpack | 1.1.0 |
| Multidict sözlük | 6.0.4 | çoklu yöntem | 1.12 | çok işlemcili | 0.70.16 |
| MurmurHash | 1.0.12 | mypy | 1.10.0 | mypy uzantıları | 1.0.0 |
| namex | 0.0.8 | nbclient | 0.8.0 | nbconvert (belge dönüştürme aracı) | 7.10.0 |
| nbformat | 5.9.2 | nest-asyncio | 1.6.0 | networkx | 3.2.1 |
| Ninja | 1.11.1.1 | nltk | 3.8.1 | nodeenv | 1.9.1 |
| dizüstü bilgisayar | 7.0.8 | notebook_shim | 0.2.3 | numba | 0.59.1 |
| numpy kütüphanesi | 1.26.4 | oauthlib (kimlik doğrulama kütüphanesi) | 3.2.0 | Ocı | 2.150.0 |
| openai | 1.69.0 | opencensus | 0.11.4 | opencensus bağlamı | 0.1.3 |
| opentelemetry-API | 1.32.0 | opentelemetry-sdk | 1.32.0 | opentelemetry-anlamsal-kurallar | 0,53b0 |
| opt_einsum | 3.4.0 | geri çevirme | 0.15.0 | optuna | 3.6.1 |
| Optuna entegrasyonu | 3.6.0 | orjson | 3.10.16 | Geçersiz kılınır | 7.4.0 |
| Ambalaj | 24.1 | Pandalar | 1.5.3 | pandoc filtreleri | 1.5.0 |
| paramiko | 3.4.0 | Parso | 0.8.3 | pathspec | 0.10.3 |
| avanak | 0.5.6 | pexpect | 4.8.0 | phik | 0.12.4 |
| yastık | 10.3.0 | Pip | 24,2 | platformdirs | 3.10.0 |
| Plotly yazılımı | 5.22.0 | fişimsi | 1.0.0 | pmdarima | 2.0.4 |
| köpekçik | 1.8.2 | ["Preshed" kelimesinin tam anlamı ve bağlamı hakkında daha fazla bilgiye ihtiyaç duyulmaktadır.] | 3.0.9 | prometheus-client | 0.14.1 |
| Prompt Araç Takımı | 3.0.43 | peygamber | 1.1.6 | proto-plus | 1.26.1 |
| Protobuf | 4.24.1 | psutil | 5.9.0 | psycopg2 | 2.9.3 |
| ptyprocess | 0.7.0 | saf değerlendirme | 0.2.2 | py-cpuinfo | 9.0.0 |
| py-spy | 0.4.0 | serçe | 15.0.2 | pyasn1 | 0.4.8 |
| pyasn1-modules | 0.2.8 | pybind11 | 2.13.6 | pyccolo | 0.0.65 |
| pycparser kütüphanesi | 2.21 | Python programlama dilinde veri doğrulama ve ayar yönetimi için kullanılan "pydantic" kütüphanesi. | 2.8.2 | pydantic_core | 2.20.1 |
| pyflakes (bir Python kod analiz aracı) | 3.2.0 | Pygmentler | 2.15.1 | PyGObject | 3.48.2 |
| PyJWT | 2.7.0 | PyNaCl | 1.5.0 | pyodbc | 5.0.1 |
| pyOpenSSL | 24.0.0 | pyparsing (bir Python kütüphanesi) | 3.0.9 | pyright | 1.1.294 |
| pytesseract | 0.3.10 | python-dateutil (Python tarih ve saat işleme kütüphanesi) | 2.9.0.post0 | python düzenleyicisi | 1.0.4 |
| python-json-logger | 2.0.7 | python-lsp-jsonrpc | 1.1.2 | python-lsp-server (Python LSP Sunucusu) | 1.10.0 |
| python-snappy | 0.6.1 | pytoolconfig | 1.2.6 | pytorch-ranger | 0.1.1 |
| pytz kütüphanesi (Python zaman dilimi hesaplamaları için kullanılan) | 2024.1 | PyWavelets | 1.5.0 | PyYAML | 6.0.1 |
| pyzmq | 25.1.2 | soru listesi | 2.1.0 | ışın | 2.37.0 |
| referans alma | 0.30.2 | regex | 2023.10.3 | İstekler | 2.32.2 |
| requests-oauthlib (bir OAuth şifreleme kütüphanesi) | 1.3.1 | requests-toolbelt | 1.0.0 | RFC 3339 doğrulayıcı (rfc3339-validator) | 0.1.4 |
| RFC 3986 geçerlilik denetleyicisi | 0.1.1 | zengin | 13.3.5 | halat | 1.12.0 |
| rpds-py | 0.10.6 | RSA şifreleme algoritması | 4,9 | ruamel.yaml | 0.18.10 |
| ruamel.yaml.clib | 0.2.12 | s3transfer | 0.10.2 | güvenlitensörler | 0.4.4 |
| scikit-image | 0.23.2 | scikit-learn | 1.4.2 | scipy (Python için bir bilimsel hesaplama kütüphanesi) | 1.13.1 |
| denizanadan | 0.13.2 | Send2Trash | 1.8.2 | cümle transformatörleri | 3.4.1 |
| cümle parçası | 0.2.0 | kurulum araçları | 74.0.0 | şekil | 0.46.0 |
| shellingham | 1.5.4 | simplejson | 3.17.6 | altı | 1.16.0 |
| Dilimleyici | 0.0.8 | Smart-Open | 5.2.1 | smmap | 5.0.0 |
| sniffio | 1.3.0 | ses dosyası | 0.12.1 | çorba süzgeci | 2,5 |
| soxr | 0.5.0.post1 | boşluklu | 3.7.5 | spacy-legacy (bir yazılım kütüphanesi veya araç adı olabilir) | 3.0.12 |
| spacy-loggers | 1.0.5 | SQLAlchemy | 2.0.30 | sqlparse | 0.4.2 |
| Harbi mi? | 2.5.1 | ssh-import-id—SSH kimlik aktarımı komutu | 5.11 | yığın verisi | 0.2.0 |
| stanio | 0.5.1 | yıldızcık | 0.46.2 | statsmodeller | 0.14.2 |
| Sympy (Python'da sembolik matematik kütüphanesi) | 1.13.1 | tablolaştır | 0.9.0 | Unicode'da karmaşa | 0.2.0 |
| Azim | 8.2.2 | TensorBoard aracı | 2.17.0 | TensorBoard veri sunucusu | 0.7.2 |
| tensorboard-plugin-profile (TensorBoard eklenti profili) | 2.17.0 | tensorboardX | 2.6.2.2 | TensorFlow | 2.17.0 |
| tensorflow-estimatör | 2.15.0 | termcolor | 3.0.1 | tamamlandı | 0.17.1 |
| Metin | 3.1.0 | tf_keras | 2.17.0 | thinc | 8.2.5 |
| threadpoolctl | 2.2.0 | tifffile (TIFF dosya kütüphanesi) | 2023.4.12 | tiktoken | 0.7.0 |
| tinycss2 | 1.2.1 | tokenize-rt | 4.2.1 | tokenleştiriciler | 0.21.0 |
| Tomli | 2.0.1 | meşale | 2.6.0+cpu | torch-optimizatör | 0.3.0 |
| torcheval | 0.0.7 | torchmetrics | 1.6.0 | meşale vizyonu | 0.21.0+cpu |
| kasırga | 6.4.1 | tqdm (bir Python kütüphanesi) | 4.66.4 | Traitlets (Python kütüphanesi/modülü) | 5.14.3 |
| Transformatörler | 4.50.2 | typeguard (tip koruma) | 4.4.2 | Typer | 0.15.2 |
| protobuf türleri | 3.20.3 | types-psutil | 5.9.0 | types-pytz | 2023.3.1.1 |
| types-PyYAML | 6.0.0 | taleplerin türleri | 2.31.0.0 | types-setuptools | 68.0.0.0 |
| altı tip | 1.16.0 | types-urllib3 | 1.26.25.14 | typing_extensions | 4.11.0 |
| uc-micro-py | 1.0.1 | ujson (hızlı JSON işleme kütüphanesi) | 5.10.0 | katılımsız yükseltmeler | 0,1 |
| URI şablonu | 1.3.0 | urllib3 | 1.26.16 | uvicorn | 0.34.1 |
| doğrulayıcılar | 0.34.0 | virtualenv | 20.26.2 | Vizyonlar/Görüler | 0.7.5 |
| wadllib | 1.3.6 | Wasabi | 1.1.3 | wcwidth (bir karakterin genişliğini hesaplayan fonksiyon) | 0.2.5 |
| gelincik | 0.4.1 | web renkleri | 24.11.1 | web kodlamaları | 0.5.1 |
| WebSocket istemcisi | 1.8.0 | websockets | 11.0.3 | Werkzeug | 3.0.3 |
| yama nedir | 1.0.2 | tekerlek | 0.43.0 | kelime bulutu | 1.9.4 |
| sarmalanmış | 1.14.1 | xgboost | 2.0.3 | xgboost-ray | 0.1.19 |
| xxhash | 3.4.1 | yapf | 0.33.0 | yarl | 1.9.3 |
| ydata profil oluşturma | 4.9.0 | fermuar çek | 3.17.0 | zstd | 1.5.5.1 |
GPU kümelerinde Python kitaplıkları
Uyarı
PyTorch, Databricks Runtime 16.4 LTS ML'de yerleşik olarak bulunan CUDA kitaplık sürümleri yerine CUDA desteği sağlamak için CUDA PyPI bağımlılıklarını kullanır.
| Kütüphane | Sürüm | Kütüphane | Sürüm | Kütüphane | Sürüm |
|---|---|---|---|---|---|
| absl-py | 1.0.0 | hızlandırmak | 1.5.2 | aiohttp | 3.9.5 |
| aiohttp-cors | 0.8.1 | aiosignal | 1.2.0 | anotasyonlu türler | 0.7.0 |
| anyio | 4.2.0 | argcomplete | 3.6.2 | argon2-cffi | 21.3.0 |
| argon2-cffi-bağlantıları | 21.2.0 | yön oku | 1.2.3 | Astor | 0.8.1 |
| ast jetonları | 2.0.5 | astunparse | 1.6.3 | async-lru | 2.0.4 |
| özellikler | 23.1.0 | sesli okuma | 3.0.1 | otomatik komut | 2.2.2 |
| azure-core | 1.33.0 | azure-cosmos | 4.3.1 | Azure-Kimlik | 1.21.0 |
| Azure depolama bloğu | 12.23.0 | Azure Storage File Data Lake | 12.17.0 | Babel | 2.11.0 |
| geri çekilme | 2.2.1 | backports.tarfile | 1.2.0 | bcrypt | 3.2.0 |
| beautifulsoup4 | 4.12.3 | siyah | 24.4.2 | ağartıcı | 4.1.0 |
| sinyal lambası | 1.7.0 | mutluluk | 0.7.11 | boto3 | 1.34.69 |
| botocore | 1.34.69 | Brotli | 1.0.9 | önbellek araçları | 5.3.3 |
| katalog | 2.0.10 | kategori kodlayıcıları | 2.6.3 | sertifika | 2024.6.2 |
| cffi | 1.16.0 | chardet | 4.0.0 | karakter seti normalleştirici | 2.0.4 |
| devre kesici | 2.1.3 | tıkla | 8.1.7 | cloudpathlib | 0.21.0 |
| cloudpickle (bulut serileştirme modülü) | 2.2.1 | cmdstanpy | 1.2.5 | renkli | 0.5.6 |
| renk günlüğü | 6.9.0 | İletişim | 0.2.1 | besteci | 0.29.0 |
| şekerleme | 0.1.5 | yapılandırmaparser | 5.2.0 | ContourPy | 1.2.0 |
| coolname | 2.2.0 | şifreleme | 42.0.5 | bisikletçi | 0.11.0 |
| cymem | 2.0.11 | Cython | 3.0.11 | dazit | 1.9.2 |
| databricks-automl-runtime | 0.2.21 | Databricks Özellik Mühendisliği | 0.10.2 | databricks yazılım geliştirme kiti (SDK) | 0.30.0 |
| veri kümeleri | 3.5.0 | dbl-tempo | 0.1.26 | dbus-python | 1.3.2 |
| hata ayıklama | 1.6.7 | dekoratör | 5.1.1 | Deepspeed | 0.16.5 |
| defusedxml modülü | 0.7.1 | Önerilmiyor | 1.2.18 | dereotu | 0.3.8 |
| daistlib | 0.3.8 | dm-tree | 0.1.9 | docstring'i markdown formatına dönüştürme | 0.11 |
| einops | 0.8.1 | giriş noktaları | 0.4 | değerlendirmek | 0.4.3 |
| Uygulamak | 0.8.3 | fasetler-genel bakış | 1.1.1 | Farama-Bildirimler | 0.0.4 |
| fastapi | 0.115.12 | fastjsonschema | 2.21.1 | fasttext-wheel | 0.9.2 |
| dosya kilidi | 3.13.1 | flash_attn | 2.7.4.post1 | Şişe | 2.2.5 |
| FlatBuffers | 25.2.10 | font araçları | 4.51.0 | FQDN (Tam Nitelikli Alan Adı) | 1.5.1 |
| dondurulmuş liste | 1.4.0 | fsspec | 2023.5.0 | gelecek | 0.18.3 |
| Misafir | 0.4.0 | gitdb (Git veritabanı) | 4.0.11 | GitPython | 3.1.37 |
| google-api-core (Google API çekirdek kütüphanesi) | 2.20.0 | google-auth (kimlik doğrulama) | 2.21.0 | google-auth-oauthlib | 1.2.1 |
| google-cloud-core | 2.4.3 | Google Cloud Storage (Google Bulut Depolama) | 2.10.0 | google-crc32c | 1.7.1 |
| Google-Pasta | 0.2.0 | Google Devam Ettirilebilir Medya | 2.7.2 | googleapis-common-protos kütüphaneleri | 1.70.0 |
| gql | 3.5.2 | graphql-core | 3.2.4 | yeşillik | 3.0.1 |
| grpcio | 1.60.0 | grpcio-status | 1.60.0 | gunicorn | 20.1.0 |
| gviz-api | 1.10.0 | spor salonu | 0.28.1 | h11 | 0.14.0 |
| h5py | 3.11.0 | hjson | 3.1.0 | Tatil | 0.54 |
| htmlmin (HTML küçültme aracı) | 0.1.12 | httpcore | 1.0.8 | httplib2 | 0.20.4 |
| httpx | 0.28.1 | huggingface-hub (Hugging Face merkezi) | 0.29.3 | Uluslararası Alan Adları Uygulaması (IDNA) | 3.7 |
| Görüntü Hash | 4.3.1 | imageio | 2.33.1 | dengesiz-öğrenme | 0.12.3 |
| importlib-metadata | 6.0.0 | importlib_resources | 6.5.2 | çekimlemek | 7.3.1 |
| ipyflow-core | 0.0.201 | ipykernel | 6.28.0 | ipython | 8.25.0 |
| ipython-genutils | 0.2.0 | ipywidgets (Python'da interaktif widget kütüphanesi) | 7.7.2 | izodat | 0.6.1 |
| İzodurasyon | 20.11.0 | bu tehlikeli | 2.2.0 | jaraco.context | 5.3.0 |
| jaraco.functools | 4.0.1 | jaraco.text | 3.12.1 | jax-jumpy | 1.0.0 |
| Jedi | 0.19.1 | Jinja2 | 3.1.4 | titreşim | 0.9.0 |
| jmespath | 1.0.1 | joblib kütüphanesi | 1.4.2 | joblibspark | 0.5.3 |
| json5 | 0.9.6 | json yaması | 1,33 | jsonpointer | 3.0.0 |
| JSON şeması | 4.19.2 | json şema spesifikasyonları | 2023.7.1 | Jupyter Etkinlikleri | 0.10.0 |
| jupyter-lsp | 2.2.0 | Jupyter istemcisi | 8.6.0 | jupyter_core | 5.7.2 |
| Jupyter sunucusu | 2.14.1 | Jupyter Sunucu Terminalleri | 0.4.4 | jupyterlab | 4.0.11 |
| jupyterlab-pygments | 0.1.2 | JupyterLab Sunucusu | 2.25.1 | Keras | 3.9.0 |
| kiwisolver | 1.4.4 | langchain | 0.3.21 | langchain-core | 0.3.51 |
| langchain metin ayırıcılar | 0.3.8 | dil kodları | 3.5.0 | langsmith | 0.1.133 |
| dil_verisi | 1.3.0 | başlatma çubuğu | 1.11.0 | lazr.restfulclient | 0.14.6 |
| lazr.uri | 1.0.6 | tembel yükleyici | 0.4 | libclang | 15.0.6.1 |
| librosa | 0.10.2 | LightGBM (açık kaynak kodlu bir makine öğrenme algoritması) | 4.5.0 | yıldırım araçları | 0.14.3 |
| linkify-it-py | 2.0.0 | llvmlite | 0.42.0 | lz4 | 4.3.2 |
| Mako | 1.2.0 | marisa-trie | 1.2.0 | Markdown | 3.4.1 |
| markdown-it-py | 2.2.0 | MarkupSafe | 2.1.3 | matplotlib (Python için popüler bir grafik kütüphanesi) | 3.8.4 |
| matplotlib-inline | 0.1.6 | Mccabe | 0.7.0 | mdit-py-plugins | 0.3.0 |
| mdurl | 0.1.0 | Memray | 1.17.1 | hatalı ayarlamak | 2.0.4 |
| ml-dtypes | 0.4.1 | mlflow-skinny | 2.21.3 | more-itertools kütüphanesi | 10.3.0 |
| mozaikml-cli | 0.6.41 | mosaicml-streaming | 0.11.0 | mpmath | 1.3.0 |
| Microsoft Kimlik Doğrulama Kitaplığı (MSAL) | 1.32.0 | msal-eklentileri | 1.3.1 | msgpack | 1.1.0 |
| Multidict sözlük | 6.0.4 | çoklu yöntem | 1.12 | çok işlemcili | 0.70.16 |
| MurmurHash | 1.0.12 | mypy | 1.10.0 | mypy uzantıları | 1.0.0 |
| namex | 0.0.8 | nbclient | 0.8.0 | nbconvert (belge dönüştürme aracı) | 7.10.0 |
| nbformat | 5.9.2 | nest-asyncio | 1.6.0 | networkx | 3.2.1 |
| Ninja | 1.11.1.1 | nltk | 3.8.1 | nodeenv | 1.9.1 |
| dizüstü bilgisayar | 7.0.8 | notebook_shim | 0.2.3 | numba | 0.59.1 |
| numpy kütüphanesi | 1.26.4 | nvidia-cublas-cu12 | 12.4.5.8 | nvidia-cuda-cupti-cu12 | 12.4.127 |
| nvidia-cuda-nvrtc-cu12 | 12.4.127 | Nvidia CUDA Runtime - cu12 | 12.4.127 | nvidia-cudnn-cu12 | 9.1.0.70 |
| nvidia-cufft-cu12 | 11.2.1.3 | nvidia-curand-cu12 | 10.3.5.147 | nvidia-cusolver-cu12 | 11.6.1.9 |
| nvidia-cusparse-cu12 | 12.3.1.170 | nvidia-cusparselt-cu12 | 0.6.2 | nvidia-nccl-cu12 | 2.21.5 |
| nvidia-nvjitlink-cu12 | 12.4.127 | nvidia-nvtx-cu12 | 12.4.127 | oauthlib (kimlik doğrulama kütüphanesi) | 3.2.0 |
| Ocı | 2.150.0 | openai | 1.69.0 | opencensus | 0.11.4 |
| opencensus bağlamı | 0.1.3 | opentelemetry-API | 1.32.0 | opentelemetry-sdk | 1.32.0 |
| opentelemetry-anlamsal-kurallar | 0,53b0 | opt_einsum | 3.4.0 | geri çevirme | 0.15.0 |
| optuna | 3.6.1 | Optuna entegrasyonu | 3.6.0 | orjson | 3.10.16 |
| Geçersiz kılınır | 7.4.0 | Ambalaj | 24.1 | Pandalar | 1.5.3 |
| pandoc filtreleri | 1.5.0 | paramiko | 3.4.0 | Parso | 0.8.3 |
| pathspec | 0.10.3 | avanak | 0.5.6 | pexpect | 4.8.0 |
| phik | 0.12.4 | yastık | 10.3.0 | Pip | 24,2 |
| platformdirs | 3.10.0 | Plotly yazılımı | 5.22.0 | fişimsi | 1.0.0 |
| pmdarima | 2.0.4 | köpekçik | 1.8.2 | ["Preshed" kelimesinin tam anlamı ve bağlamı hakkında daha fazla bilgiye ihtiyaç duyulmaktadır.] | 3.0.9 |
| prometheus-client | 0.14.1 | Prompt Araç Takımı | 3.0.43 | peygamber | 1.1.6 |
| proto-plus | 1.26.1 | Protobuf | 4.24.1 | psutil | 5.9.0 |
| psycopg2 | 2.9.3 | ptyprocess | 0.7.0 | saf değerlendirme | 0.2.2 |
| py-cpuinfo | 9.0.0 | py-spy | 0.4.0 | serçe | 15.0.2 |
| pyasn1 | 0.4.8 | pyasn1-modules | 0.2.8 | pybind11 | 2.13.6 |
| pyccolo | 0.0.65 | pycparser kütüphanesi | 2.21 | Python programlama dilinde veri doğrulama ve ayar yönetimi için kullanılan "pydantic" kütüphanesi. | 2.8.2 |
| pydantic_core | 2.20.1 | pyflakes (bir Python kod analiz aracı) | 3.2.0 | Pygmentler | 2.15.1 |
| PyGObject | 3.48.2 | PyJWT | 2.7.0 | PyNaCl | 1.5.0 |
| pyodbc | 5.0.1 | pyOpenSSL | 24.0.0 | pyparsing (bir Python kütüphanesi) | 3.0.9 |
| pyright | 1.1.294 | pytesseract | 0.3.10 | python-dateutil (Python tarih ve saat işleme kütüphanesi) | 2.9.0.post0 |
| python düzenleyicisi | 1.0.4 | python-json-logger | 2.0.7 | python-lsp-jsonrpc | 1.1.2 |
| python-lsp-server (Python LSP Sunucusu) | 1.10.0 | python-snappy | 0.6.1 | pytoolconfig | 1.2.6 |
| pytorch-ranger | 0.1.1 | pytz kütüphanesi (Python zaman dilimi hesaplamaları için kullanılan) | 2024.1 | PyWavelets | 1.5.0 |
| PyYAML | 6.0.1 | pyzmq | 25.1.2 | soru listesi | 2.1.0 |
| ışın | 2.37.0 | referans alma | 0.30.2 | regex | 2023.10.3 |
| İstekler | 2.32.2 | requests-oauthlib (bir OAuth şifreleme kütüphanesi) | 1.3.1 | requests-toolbelt | 1.0.0 |
| RFC 3339 doğrulayıcı (rfc3339-validator) | 0.1.4 | RFC 3986 geçerlilik denetleyicisi | 0.1.1 | zengin | 13.3.5 |
| halat | 1.12.0 | rpds-py | 0.10.6 | RSA şifreleme algoritması | 4,9 |
| ruamel.yaml | 0.18.10 | ruamel.yaml.clib | 0.2.12 | s3transfer | 0.10.2 |
| güvenlitensörler | 0.4.4 | scikit-image | 0.23.2 | scikit-learn | 1.4.2 |
| scipy (Python için bir bilimsel hesaplama kütüphanesi) | 1.13.1 | denizanadan | 0.13.2 | Send2Trash | 1.8.2 |
| cümle transformatörleri | 3.4.1 | cümle parçası | 0.2.0 | kurulum araçları | 74.0.0 |
| şekil | 0.46.0 | shellingham | 1.5.4 | simplejson | 3.17.6 |
| altı | 1.16.0 | Dilimleyici | 0.0.8 | Smart-Open | 5.2.1 |
| smmap | 5.0.0 | sniffio | 1.3.0 | ses dosyası | 0.12.1 |
| çorba süzgeci | 2,5 | soxr | 0.5.0.post1 | boşluklu | 3.7.5 |
| spacy-legacy (bir yazılım kütüphanesi veya araç adı olabilir) | 3.0.12 | spacy-loggers | 1.0.5 | SQLAlchemy | 2.0.30 |
| sqlparse | 0.4.2 | Harbi mi? | 2.5.1 | ssh-import-id—SSH kimlik aktarımı komutu | 5.11 |
| yığın verisi | 0.2.0 | stanio | 0.5.1 | yıldızcık | 0.46.2 |
| statsmodeller | 0.14.2 | Sympy (Python'da sembolik matematik kütüphanesi) | 1.13.1 | tablolaştır | 0.9.0 |
| Unicode'da karmaşa | 0.2.0 | Azim | 8.2.2 | TensorBoard aracı | 2.17.0 |
| TensorBoard veri sunucusu | 0.7.2 | tensorboard-plugin-profile (TensorBoard eklenti profili) | 2.17.0 | tensorboardX | 2.6.2.2 |
| TensorFlow | 2.17.0 | tensorflow-estimatör | 2.15.0 | termcolor | 3.0.1 |
| tamamlandı | 0.17.1 | Metin | 3.1.0 | tf_keras | 2.17.0 |
| thinc | 8.2.5 | threadpoolctl | 2.2.0 | tifffile (TIFF dosya kütüphanesi) | 2023.4.12 |
| tiktoken | 0.7.0 | tinycss2 | 1.2.1 | tokenize-rt | 4.2.1 |
| tokenleştiriciler | 0.21.0 | Tomli | 2.0.1 | meşale | 2.6.0+cu124 |
| torch-optimizatör | 0.3.0 | torcheval | 0.0.7 | torchmetrics | 1.6.0 |
| meşale vizyonu | 0.21.0+cu124 | kasırga | 6.4.1 | tqdm (bir Python kütüphanesi) | 4.66.4 |
| Traitlets (Python kütüphanesi/modülü) | 5.14.3 | Transformatörler | 4.50.2 | Triton (Neptün'ün uydusu) | 3.2.0 |
| typeguard (tip koruma) | 4.4.2 | Typer | 0.15.2 | protobuf türleri | 3.20.3 |
| types-psutil | 5.9.0 | types-pytz | 2023.3.1.1 | types-PyYAML | 6.0.0 |
| taleplerin türleri | 2.31.0.0 | types-setuptools | 68.0.0.0 | altı tip | 1.16.0 |
| types-urllib3 | 1.26.25.14 | typing_extensions | 4.11.0 | uc-micro-py | 1.0.1 |
| ujson (hızlı JSON işleme kütüphanesi) | 5.10.0 | katılımsız yükseltmeler | 0,1 | URI şablonu | 1.3.0 |
| urllib3 | 1.26.16 | uvicorn | 0.34.1 | doğrulayıcılar | 0.34.0 |
| virtualenv | 20.26.2 | Vizyonlar/Görüler | 0.7.5 | wadllib | 1.3.6 |
| Wasabi | 1.1.3 | wcwidth (bir karakterin genişliğini hesaplayan fonksiyon) | 0.2.5 | gelincik | 0.4.1 |
| web renkleri | 24.11.1 | web kodlamaları | 0.5.1 | WebSocket istemcisi | 1.8.0 |
| websockets | 11.0.3 | Werkzeug | 3.0.3 | yama nedir | 1.0.2 |
| tekerlek | 0.43.0 | kelime bulutu | 1.9.4 | sarmalanmış | 1.14.1 |
| xgboost | 2.0.3 | xgboost-ray | 0.1.19 | xxhash | 3.4.1 |
| yapf | 0.33.0 | yarl | 1.9.3 | ydata profil oluşturma | 4.9.0 |
| fermuar çek | 3.17.0 | zstd | 1.5.5.1 |
R kütüphaneleri
R kitaplıkları Databricks Runtime 16.4 LTS'deki R Kitaplıklarıyla aynıdır.
Java ve Scala kitaplıkları (Scala 2.12 kümesi)
Databricks Runtime 16.4 LTS'deki Java ve Scala kitaplıklarına ek olarak, Databricks Runtime 16.4 LTS ML aşağıdaki JAR'leri içerir:
CPU kümeleri
| Grup Kimliği | Nesne Kimliği | Sürüm |
|---|---|---|
| com.typesafe.akka | akka-actor_2.12 | 2.5.23 |
| ml.dmlc | xgboost4j-spark_2.12 | 1.7.3 |
| ml.dmlc | xgboost4j_2.12 | 1.7.3 |
| org.graphframes | graphframes_2.12 | 0.8.4-db1-spark3.5 |
| org.mlflow | mlflow-client | 2.15.1 |
| org.tensorflow | spark-tensorflow-connector_2.12 | 1.15.0 |
GPU kümeleri
| Grup Kimliği | Nesne Kimliği | Sürüm |
|---|---|---|
| com.typesafe.akka | akka-actor_2.12 | 2.5.23 |
| ml.dmlc | xgboost4j-gpu_2.12 | 1.7.3 |
| ml.dmlc | xgboost4j-spark-gpu_2.12 | 1.7.3 |
| org.graphframes | graphframes_2.12 | 0.8.4-db1-spark3.5 |
| org.mlflow | mlflow-client | 2.15.1 |
| org.tensorflow | spark-tensorflow-connector_2.12 | 1.15.0 |