Machine Learning için Databricks Runtime 13.3 LTS

Machine Learning için Databricks Runtime 13.3 LTS, Databricks Runtime 13.3 LTS'yi temel alan makine öğrenmesi ve veri bilimi için kullanıma hazır bir ortam sağlar. Databricks Runtime ML, TensorFlow, PyTorch ve XGBoost gibi birçok popüler makine öğrenmesi kitaplığı içerir. Databricks Runtime ML, makine öğrenmesi işlem hatlarını otomatik olarak eğitmeye yönelik bir araç olan AutoML'yi içerir. Databricks Runtime ML, Horovod kullanarak dağıtılmış derin öğrenme eğitimini de destekler.

Databricks Runtime ML kümesi oluşturma yönergeleri de dahil olmak üzere daha fazla bilgi için bkz . Databricks'te AI ve Machine Learning.

Yeni özellikler ve geliştirmeler

Databricks Runtime 13.3 LTS ML, Databricks Runtime 13.3 LTS üzerine kurulmuştur. Apache Spark MLlib ve SparkR dahil olmak üzere Databricks Runtime 13.3 LTS'deki yenilikler hakkında bilgi için bkz . Databricks Runtime 13.3 LTS sürüm notları.

Databricks Özellik Deposu'na yapılan değişiklikler

  • Databricks Runtime 13.3 LTS ML, Özellik Deposu istemcisi v0.14.0'ı içerir. İstemci sürümü 0.14.0 ve üzeriyle, bağımsız değişkende primary_keys zaman damgası anahtar sütunları belirtmeniz gerekir. Zaman damgası anahtarları, özellik tablosundaki her satırı benzersiz olarak tanımlayan "birincil anahtarların" bir parçasıdır.
  • Artık belirli bir süreden önce zaman damgalarına sahip özellik değerlerini eğitim kümesinden hariç tutabilirsiniz. Ayrıntılar için bkz . Geçmiş özellik değerleri için zaman sınırı ayarlama.
  • Makine öğrenmesi özellikleri artık çıkarım zamanında isteğe bağlı olarak hesaplanabilir. Özellik hesaplama mantığı, modelleri ve verilerin tümü Unity Kataloğu tarafından yönetilir. Bu, modellerin özellikleri yalnızca kullanıcının geçerli konumu gibi çıkarım zamanında kullanılabilen girişleri kullanarak hesaplamasına olanak tanır. Daha fazla bilgi için bkz . Python kullanıcı tanımlı işlevleri kullanarak isteğe bağlı işlem özellikleri.

Sistem ortamı

Databricks Runtime 13.3 LTS ML'deki sistem ortamı, Databricks Runtime 13.3 LTS'den aşağıdaki gibi farklıdır:

  • DBUtils: Databricks Runtime ML, Kitaplık yardımcı programını (dbutils.library) (eski) içermez. Bunun yerine komutları kullanın %pip . Bkz. Not defteri kapsamlı Python kitaplıkları.
  • GPU kümeleri için Databricks Runtime ML aşağıdaki NVIDIA GPU kitaplıklarını içerir:
    • CUDA 11.7
    • cuDNN 8.5.0.96-1
    • NCCL 2.15.1
    • TensorRT 7.2.2

Databricks Runtime 13.3 LTS ML, işlem özelliği 5.2 ve altındaki GPU kümelerini desteklemeyen XGBoost 1.7.3'i içerir.

Miniconda paketi Databricks Runtime 13.0 ML ve üstünden kaldırılmıştır.

Kitaplıklar

Aşağıdaki bölümlerde Databricks Runtime 13.3 LTS ML'de bulunan ve Databricks Runtime 13.3 LTS'de bulunan kitaplıklardan farklı kitaplıklar listelenmiştir.

Bu bölümde:

Üst katman kitaplıkları

Databricks Runtime 13.3 LTS ML aşağıdaki üst katman kitaplıklarını içerir:

Python kitaplıkları

Databricks Runtime 13.3 LTS ML, Python paket yönetimi için Virtualenv kullanır ve birçok popüler ML paketi içerir.

Aşağıdaki bölümlerde belirtilen paketlere ek olarak Databricks Runtime 13.3 LTS ML aşağıdaki paketleri de içerir:

  • hyperopt 0.2.7+db3
  • sparkdl 3.0.0_db1
  • automl 1.20.0

Databricks Runtime ML Python ortamını yerel Python sanal ortamınızda yeniden oluşturmak için requirements-13.3.txt dosyasını indirin ve çalıştırınpip install -r requirements-13.3.txt. Bu komut, Databricks Runtime ML'nin kullandığı tüm açık kaynak kitaplıklarını yükler, ancak Databricks tarafından geliştirilen , databricks-feature-storeveya Databricks çatalı hyperoptgibi databricks-automlkitaplıkları yüklemez.

CPU kümelerinde Python kitaplıkları

Kitaplık Sürüm Kitaplık Sürüm Kitaplık Sürüm
absl-py 1.0.0 Hızlandır 0.20.3 aiohttp 3.8.5
aiosignal 1.3.1 anyio 3.5.0 appdirs 1.4.4
argon2-cffi 21.3.0 argon2-cffi-bindings 21.2.0 Astor 0.8.1
asttokens 2.2.1 astunparse 1.6.3 zaman uyumsuz zaman aşımı 4.0.2
attrs 21.4.0 sesli okuma 3.0.0 azure-core 1.28.0
azure-cosmos 4.3.1 azure-storage-blob 12.17.0 azure-storage-file-datalake 12.12.0
geri arama 0.2.0 bcrypt 3.2.0 beautifulsoup4 4.11.1
Siyah 22.6.0 Çamaşır suyu 4.1.0 yanıp sönen 1.4
Blıs 0.7.10 boto3 1.24.28 botocore 1.27.28
önbellek araçları 4.2.4 Katalog 2.0.9 kategori kodlayıcıları 2.6.1
sertifikalı 2022.9.14 cffi 1.15.1 chardet 4.0.0
charset-normalizer 2.0.4 tıklama 8.0.4 cloudpickle 2.0.0
cmdstanpy 1.1.0 Konfeksiyon 0.1.0 yapılandırmaparser 5.2.0
dönüştürme tarihi 2.4.0 Şifreleme 37.0.1 Cycler 0.11.0
cymem 2.0.7 Cython 0.29.32 dacite 1.8.1
databricks-automl-runtime 0.2.17 databricks-cli 0.17.7 databricks-feature-store 0.14.0
databricks-sdk 0.1.6 dataclasses-json 0.5.13 veri kümeleri 2.13.1
dbl-tempo 0.1.23 dbus-python 1.2.18 hata ayıklama 1.6.0
Dekoratör 5.1.1 defusedxml 0.7.1 Dereotu 0.3.4
diskcache 5.6.1 daistlib 0.3.7 docstring-to-markdown 0,12
Entrypoints 0.4 ephem 4.1.4 değerlendir 0.4.0
Yürütme 1.2.0 modellere genel bakış 1.0.3 fastapi 0.98.0
fastjsonschema 2.18.0 fasttext 0.9.2 dosya kilidi 3.6.0
Flask 1.1.2+db1 flatbuffers 23.5.26 fonttools 4.25.0
frozenlist 1.4.0 fsspec 2022.7.1 Gelecek 0.18.2
Gast 0.4.0 gitdb 4.0.10 GitPython 3.1.27
google-api-core 2.8.2 google-auth 1.33.0 google-auth-oauthlib 0.4.6
google-cloud-core 2.3.3 google-cloud-storage 2.10.0 google-crc32c 1.5.0
google-pasta 0.2.0 google-resumable-media 2.5.0 googleapis-common-protos 1.56.4
yeşillik 1.1.1 grpcio 1.48.1 grpcio-status 1.48.1
gunicorn 20.1.0 gviz-api 1.10.0 h11 0.14.0
h5py 3.7.0 Tatil 0.27.1 horovod 0.28.1
htmlmin 0.1.12 httplib2 0.20.2 httptools 0.6.0
huggingface-hub 0.16.4 ıdna 3.3 ImageHash 4.3.1
dengesiz-öğrenme 0.10.1 importlib-metadata 4.11.3 importlib-resources 6.0.0
ipykernel 6.17.1 ipython 8.10.0 ipython-genutils 0.2.0
ipywidgets 7.7.2 izodat 0.6.1 itsdangerous 2.0.1
Jedi 0.18.1 Jeepney 0.7.1 Jinja2 2.11.3
jmespath 0.10.0 joblib 1.2.0 joblibspark 0.5.1
jsonschema 4.16.0 jupyter-client 7.3.4 jupyter_core 4.11.2
jupyterlab-pygments 0.1.2 jupyterlab pencere öğeleri 1.0.0 keras 2.11.0
Anahtarlık 23.5.0 kiwisolver 1.4.2 langchain 0.0.217
langchainplus-sdk 0.0.20 langcodes 3.3.0 başlatma çubuğu 1.10.16
lazr.restfulclient 0.14.4 lazr.uri 1.0.6 lazy_loader 0.3
libclang 15.0.6.1 librosa 0.10.0 lightgbm 3.3.5
llvmlite 0.38.0 LunarCalendar 0.0.9 Mako 1.2.0
Markdown 3.3.4 İşaretlemeyi Kasa 2.0.1 Hatmi 3.20.1
matplotlib 3.5.2 matplotlib-inline 0.1.6 Mccabe 0.7.0
yanlış 0.8.4 mleap 0.20.0 mlflow-skinny 2.5.0
more-itertools 8.10.0 msgpack 1.0.5 multidict 6.0.4
multimethod 1.9.1 çok işlemcili 0.70.12.2 murmurhash 1.0.9
mypy uzantıları 0.4.3 nbclient 0.5.13 nbconvert 6.4.4
nbformat 5.5.0 nest-asyncio 1.5.5 networkx 2.8.4
Ninja 1.11.1 nltk 3.7 nodeenv 1.8.0
not defteri 6.4.12 numba 0.55.1 numexpr 2.8.4
numpy 1.21.5 oauthlib 3.2.0 openai 0.27.8
openapi-schema-pydantic 1.2.4 opt-einsum 3.3.0 Ambalaj 21.3
pandas 1.4.4 pandocfilters 1.5.0 paramiko 2.9.2
parso 0.8.3 pathspec 0.9.0 pathy 0.10.2
Patsy 0.5.2 petastorm 0.12.1 pexpect 4.8.0
phik 0.12.3 pickleshare 0.7.5 Yastık 9.2.0
Pip 22.2.2 platformdirs 2.5.2 çizim 5.9.0
takılmış 1.0.0 pmdarima 2.0.3 Pooch 1.7.0
önceden gösterilmiş 3.0.8 prometheus-client 0.14.1 prompt-toolkit 3.0.36
Peygamber 1.1.4 protobuf 3.19.4 psutil 5.9.0
psycopg2 2.9.3 ptyprocess 0.7.0 saf değerlendirme 0.2.2
serçe 8.0.0 pyasn1 0.4.8 pyasn1-modules 0.2.8
pybind11 2.11.1 pycparser 2.21 pydantic 1.10.6
pyflakes 3.0.1 Pygments 2.11.2 PyGObject 3.42.1
PyJWT 2.3.0 PyMeeus 0.5.12 PyNaCl 1.5.0
pyodbc 4.0.32 pyparsing 3.0.9 pyright 1.1.294
pirsistent 0.18.0 pytesseract 0.3.10 python-dateutil 2.8.2
python-dotenv 1.0.0 python düzenleyicisi 1.0.4 python-lsp-jsonrpc 1.0.0
python-lsp-server 1.7.1 pytoolconfig 1.2.2 pytz 2022.1
PyWavelets 1.3.0 PyYAML 6,0 pyzmq 23.2.0
Regex 2022.7.9 istekler 2.28.1 requests-oauthlib 1.3.1
Yanıt 0.18.0 Ip 1.7.0 rsa 4,9
s3transfer 0.6.0 safetensors 0.3.1 scikit-learn 1.1.1
scipy 1.9.1 Sinan 0.11.2 Gizli dizi Depolama 3.3.1
Send2Trash 1.8.0 cümle transformatörleri 2.2.2 cümle parçası 0.1.99
kurulum araçları 63.4.1 Shap 0.41.0 simplejson 3.17.6
Altı 1.16.0 Dilimleyici 0.0.7 akıllı açma 5.2.1
smmap 5.0.0 sniffio 1.2.0 ses dosyası 0.12.1
soupsieve 2.3.1 soxr 0.3.5 spacy 3.5.3
spacy-legacy 3.0.12 spacy-loggers 1.0.4 spark-tensorflow-distributor 1.0.0
SQLAlchemy 1.4.39 sqlparse 0.4.2 srsly 2.4.7
ssh-import-id 5.11 stack-data 0.6.2 starlette 0.27.0
statsmodeller 0.13.2 sekmeli 0.8.10 unicode'da karışık 0.2.0
Azim 8.1.0 tensorboard 2.11.0 tensorboard-data-server 0.6.1
tensorboard-plugin-profile 2.11.2 tensorboard-plugin-wit 1.8.1 tensorflow-cpu 2.11.1
tensorflow-estimator 2.11.0 tensorflow-io-gcs-filesystem 0.32.0 termcolor 2.3.0
terminado 0.13.1 test yolu 0.6.0 thinc 8.1.10
threadpoolctl 2.2.0 tiktoken 0.4.0 tokenize-rt 4.2.1
belirteç oluşturucular 0.13.3 tomli 2.0.1 Meşale 1.13.1+cpu
torchvision 0.14.1+cpu Kasırga 6.1 tqdm 4.64.1
traitlets 5.1.1 Transformers 4.30.2 typeguard 2.13.3
Typer 0.7.0 yazma-inceleme 0.9.0 typing_extensions 4.3.0
ujson 5.4.0 katılımsız yükseltmeler 0,1 urllib3 1.26.11
uvicorn 0.23.1 uvloop 0.17.0 virtualenv 20.16.3
Vizyon 0.7.5 wadllib 1.3.6 Wasabi 1.1.2
watchfiles 0.19.0 wcwidth 0.2.5 webencodings 0.5.1
websocket-client 0.58.0 websockets 11.0.3 Werkzeug 2.0.3
whatthepatch 1.0.2 Tekerlek 0.37.1 widgetsnbextension 3.6.1
wordcloud 1.9.2 kaydırma 1.14.1 xgboost 1.7.6
xxhash 3.2.0 yapf 0.31.0 yarl 1.9.2
ydata-profil oluşturma 4.2.0 zipp 3.8.0

GPU kümelerinde Python kitaplıkları

Kitaplık Sürüm Kitaplık Sürüm Kitaplık Sürüm
absl-py 1.0.0 Hızlandır 0.20.3 aiohttp 3.8.5
aiosignal 1.3.1 anyio 3.5.0 appdirs 1.4.4
argon2-cffi 21.3.0 argon2-cffi-bindings 21.2.0 Astor 0.8.1
asttokens 2.2.1 astunparse 1.6.3 zaman uyumsuz zaman aşımı 4.0.2
attrs 21.4.0 sesli okuma 3.0.0 azure-core 1.28.0
azure-cosmos 4.3.1 azure-storage-blob 12.17.0 azure-storage-file-datalake 12.12.0
geri arama 0.2.0 bcrypt 3.2.0 beautifulsoup4 4.11.1
Siyah 22.6.0 Çamaşır suyu 4.1.0 yanıp sönen 1.4
Blıs 0.7.10 boto3 1.24.28 botocore 1.27.28
önbellek araçları 4.2.4 Katalog 2.0.9 kategori kodlayıcıları 2.6.1
sertifikalı 2022.9.14 cffi 1.15.1 chardet 4.0.0
charset-normalizer 2.0.4 tıklama 8.0.4 cloudpickle 2.0.0
cmdstanpy 1.1.0 Konfeksiyon 0.1.0 yapılandırmaparser 5.2.0
dönüştürme tarihi 2.4.0 Şifreleme 37.0.1 Cycler 0.11.0
cymem 2.0.7 Cython 0.29.32 dacite 1.8.1
databricks-automl-runtime 0.2.17 databricks-cli 0.17.7 databricks-feature-store 0.14.0
databricks-sdk 0.1.6 dataclasses-json 0.5.13 veri kümeleri 2.13.1
dbl-tempo 0.1.23 dbus-python 1.2.18 hata ayıklama 1.6.0
Dekoratör 5.1.1 defusedxml 0.7.1 Dereotu 0.3.4
diskcache 5.6.1 daistlib 0.3.7 docstring-to-markdown 0,12
einops 0.6.1 Entrypoints 0.4 ephem 4.1.4
değerlendir 0.4.0 Yürütme 1.2.0 modellere genel bakış 1.0.3
fastapi 0.98.0 fastjsonschema 2.18.0 fasttext 0.9.2
dosya kilidi 3.6.0 flash-attn 1.0.7 Flask 1.1.2+db1
flatbuffers 23.5.26 fonttools 4.25.0 frozenlist 1.4.0
fsspec 2022.7.1 Gelecek 0.18.2 Gast 0.4.0
gitdb 4.0.10 GitPython 3.1.27 google-api-core 2.8.2
google-auth 1.33.0 google-auth-oauthlib 0.4.6 google-cloud-core 2.3.3
google-cloud-storage 2.10.0 google-crc32c 1.5.0 google-pasta 0.2.0
google-resumable-media 2.5.0 googleapis-common-protos 1.56.4 yeşillik 1.1.1
grpcio 1.48.1 grpcio-status 1.48.1 gunicorn 20.1.0
gviz-api 1.10.0 h11 0.14.0 h5py 3.7.0
Tatil 0.27.1 horovod 0.28.1 htmlmin 0.1.12
httplib2 0.20.2 httptools 0.6.0 huggingface-hub 0.16.4
ıdna 3.3 ImageHash 4.3.1 dengesiz-öğrenme 0.10.1
importlib-metadata 4.11.3 importlib-resources 6.0.0 ipykernel 6.17.1
ipython 8.10.0 ipython-genutils 0.2.0 ipywidgets 7.7.2
izodat 0.6.1 itsdangerous 2.0.1 Jedi 0.18.1
Jeepney 0.7.1 Jinja2 2.11.3 jmespath 0.10.0
joblib 1.2.0 joblibspark 0.5.1 jsonschema 4.16.0
jupyter-client 7.3.4 jupyter_core 4.11.2 jupyterlab-pygments 0.1.2
jupyterlab pencere öğeleri 1.0.0 keras 2.11.0 Anahtarlık 23.5.0
kiwisolver 1.4.2 langchain 0.0.217 langchainplus-sdk 0.0.20
langcodes 3.3.0 başlatma çubuğu 1.10.16 lazr.restfulclient 0.14.4
lazr.uri 1.0.6 lazy_loader 0.3 libclang 15.0.6.1
librosa 0.10.0 lightgbm 3.3.5 llvmlite 0.38.0
LunarCalendar 0.0.9 Mako 1.2.0 Markdown 3.3.4
İşaretlemeyi Kasa 2.0.1 Hatmi 3.20.1 matplotlib 3.5.2
matplotlib-inline 0.1.6 Mccabe 0.7.0 yanlış 0.8.4
mleap 0.20.0 mlflow-skinny 2.5.0 more-itertools 8.10.0
msgpack 1.0.5 multidict 6.0.4 multimethod 1.9.1
çok işlemcili 0.70.12.2 murmurhash 1.0.9 mypy uzantıları 0.4.3
nbclient 0.5.13 nbconvert 6.4.4 nbformat 5.5.0
nest-asyncio 1.5.5 networkx 2.8.4 Ninja 1.11.1
nltk 3.7 nodeenv 1.8.0 not defteri 6.4.12
numba 0.55.1 numexpr 2.8.4 numpy 1.21.5
oauthlib 3.2.0 openai 0.27.8 openapi-schema-pydantic 1.2.4
opt-einsum 3.3.0 Ambalaj 21.3 pandas 1.4.4
pandocfilters 1.5.0 paramiko 2.9.2 parso 0.8.3
pathspec 0.9.0 pathy 0.10.2 Patsy 0.5.2
petastorm 0.12.1 pexpect 4.8.0 phik 0.12.3
pickleshare 0.7.5 Yastık 9.2.0 Pip 22.2.2
platformdirs 2.5.2 çizim 5.9.0 takılmış 1.0.0
pmdarima 2.0.3 Pooch 1.7.0 önceden gösterilmiş 3.0.8
prompt-toolkit 3.0.36 Peygamber 1.1.4 protobuf 3.19.4
psutil 5.9.0 psycopg2 2.9.3 ptyprocess 0.7.0
saf değerlendirme 0.2.2 serçe 8.0.0 pyasn1 0.4.8
pyasn1-modules 0.2.8 pybind11 2.11.1 pycparser 2.21
pydantic 1.10.6 pyflakes 3.0.1 Pygments 2.11.2
PyGObject 3.42.1 PyJWT 2.3.0 PyMeeus 0.5.12
PyNaCl 1.5.0 pyodbc 4.0.32 pyparsing 3.0.9
pyright 1.1.294 pirsistent 0.18.0 pytesseract 0.3.10
python-dateutil 2.8.2 python-dotenv 1.0.0 python düzenleyicisi 1.0.4
python-lsp-jsonrpc 1.0.0 python-lsp-server 1.7.1 pytoolconfig 1.2.2
pytz 2022.1 PyWavelets 1.3.0 PyYAML 6,0
pyzmq 23.2.0 Regex 2022.7.9 istekler 2.28.1
requests-oauthlib 1.3.1 Yanıt 0.18.0 Ip 1.7.0
rsa 4,9 s3transfer 0.6.0 safetensors 0.3.1
scikit-learn 1.1.1 scipy 1.9.1 Sinan 0.11.2
Gizli dizi Depolama 3.3.1 Send2Trash 1.8.0 cümle transformatörleri 2.2.2
cümle parçası 0.1.99 kurulum araçları 63.4.1 Shap 0.41.0
simplejson 3.17.6 Altı 1.16.0 Dilimleyici 0.0.7
akıllı açma 5.2.1 smmap 5.0.0 sniffio 1.2.0
ses dosyası 0.12.1 soupsieve 2.3.1 soxr 0.3.5
spacy 3.5.3 spacy-legacy 3.0.12 spacy-loggers 1.0.4
spark-tensorflow-distributor 1.0.0 SQLAlchemy 1.4.39 sqlparse 0.4.2
srsly 2.4.7 ssh-import-id 5.11 stack-data 0.6.2
starlette 0.27.0 statsmodeller 0.13.2 sekmeli 0.8.10
unicode'da karışık 0.2.0 Azim 8.1.0 tensorboard 2.11.0
tensorboard-data-server 0.6.1 tensorboard-plugin-profile 2.11.2 tensorboard-plugin-wit 1.8.1
tensorflow 2.11.1 tensorflow-estimator 2.11.0 tensorflow-io-gcs-filesystem 0.32.0
termcolor 2.3.0 terminado 0.13.1 test yolu 0.6.0
thinc 8.1.10 threadpoolctl 2.2.0 tiktoken 0.4.0
tokenize-rt 4.2.1 belirteç oluşturucular 0.13.3 tomli 2.0.1
Meşale 1.13.1+cu117 torchvision 0.14.1+cu117 Kasırga 6.1
tqdm 4.64.1 traitlets 5.1.1 Transformers 4.30.2
typeguard 2.13.3 Typer 0.7.0 yazma-inceleme 0.9.0
typing_extensions 4.3.0 ujson 5.4.0 katılımsız yükseltmeler 0,1
urllib3 1.26.11 uvicorn 0.23.1 uvloop 0.17.0
virtualenv 20.16.3 Vizyon 0.7.5 wadllib 1.3.6
Wasabi 1.1.2 watchfiles 0.19.0 wcwidth 0.2.5
webencodings 0.5.1 websocket-client 0.58.0 websockets 11.0.3
Werkzeug 2.0.3 whatthepatch 1.0.2 Tekerlek 0.37.1
widgetsnbextension 3.6.1 wordcloud 1.9.2 kaydırma 1.14.1
xgboost 1.7.6 xxhash 3.2.0 yapf 0.31.0
yarl 1.9.2 ydata-profil oluşturma 4.2.0 zipp 3.8.0

R kitaplıkları

R kitaplıkları Databricks Runtime 13.3 LTS'deki R Kitaplıklarıyla aynıdır.

Java ve Scala kitaplıkları (Scala 2.12 kümesi)

Databricks Runtime 13.3 LTS'deki Java ve Scala kitaplıklarına ek olarak, Databricks Runtime 13.3 LTS ML aşağıdaki JAR'leri içerir:

CPU kümeleri

Grup Kimliği Yapıt Kimliği Sürüm
com.typesafe.akka akka-actor_2.12 2.5.23
ml.dmlc xgboost4j-spark_2.12 1.7.3
ml.dmlc xgboost4j_2.12 1.7.3
org.graphframes graphframes_2.12 0.8.2-db2-spark3.4
org.mlflow mlflow-client 2.5.0
org.scala-lang.modules scala-java8-compat_2.12 0.8.0
org.tensorflow spark-tensorflow-connector_2.12 1.15.0

GPU kümeleri

Grup Kimliği Yapıt Kimliği Sürüm
com.typesafe.akka akka-actor_2.12 2.5.23
ml.dmlc xgboost4j-gpu_2.12 1.7.3
ml.dmlc xgboost4j-spark-gpu_2.12 1.7.3
org.graphframes graphframes_2.12 0.8.2-db2-spark3.4
org.mlflow mlflow-client 2.5.0
org.scala-lang.modules scala-java8-compat_2.12 0.8.0
org.tensorflow spark-tensorflow-connector_2.12 1.15.0