Databricks Runtime 4.1 ML (EoS)
Poznámka:
Podpora této verze Databricks Runtime skončila. Datum ukončení podpory najdete v tématu Historie ukončení podpory. Všechny podporované verze databricks Runtime najdete v poznámkách k verzi Databricks Runtime a kompatibilitu.
Databricks Runtime 4.1 ML poskytuje připravené prostředí pro strojové učení a datové vědy. Obsahuje několik oblíbených knihoven, včetně TensorFlow, Keras a XGBoost. Podporuje také distribuované trénování TensorFlow pomocí Horovodu.
Poznámka:
Tato verze byla vyřazena 17. ledna 2019. V závislosti na verzích knihovny, které chcete použít, doporučujeme použít novější verzi Databricks Runtime ML.
Další informace, včetně pokynů k vytvoření clusteru Databricks Runtime ML, najdete v tématu AI a strojové učení v Databricks.
Poznámka:
Verze Databricks Runtime ML vyzvednou všechny aktualizace údržby základní verze Databricks Runtime. Seznam všech aktualizací údržby najdete v tématu Aktualizace údržby pro Databricks Runtime (archivováno).
Knihovny
Databricks Runtime 4.1 ML je postaven na Databricks Runtime 4.1. Informace o novinkách v Databricks Runtime 4.1 najdete ve zprávě k vydání verze Databricks Runtime 4.1 (EoS ). Kromě nových funkcí v Databricks Runtime 4.1 obsahuje Databricks Runtime 4.1 ML následující knihovny pro podporu strojového učení. Některé z nich jsou také zahrnuty v základní Databricks Runtime 4.1 a jsou zaznamenány jako takové.
Kategorie | Knihovny |
---|---|
Distribuované hluboké učení | Distribuované trénování pomocí Horovodu a Sparku: - HorovodEstimator - horovod 0.12.1 - openmpi 3.0.0 - paramiko 2.4.1 - cloudpickle 0.5.2 Distribuované predikce TensorFlow a Kerasu: – předběžná verze spark-deep-learning 1.0 - tensorframes 0.3.0 |
Hloubkové učení | [Keras]: - keras 2.1.5 - h5py 2.7.1 TensorFlow: – (clustery procesorů) tensorflow 1.7.1 – (clustery GPU) tensorflow-gpu 1.7.1 Knihovny GPU : – CUDA 9.0 (také nainstalovaný v base Databricks Runtime) – cuDNN 7.0 (také nainstalovaný v base Databricks Runtime) - NCCL 2.0.5-3 |
XGBoost | - XGBoost4j 0.8-spark2.3-s_2.11 |
Další knihovny strojového učení | - numpy 1.14.2 (také nainstalovaný v base Databricks Runtime; verze se může lišit) - scikit-learn 0.18.1 (také nainstalovaný v base Databricks Runtime) - scipy (také nainstalované v base Databricks Runtime) |