Contoh HorovodRunner
Penting
Horovod dan HorovodRunner sekarang tidak digunakan lagi dan tidak akan diinstal sebelumnya di Databricks Runtime 16.0 ML ke atas. Untuk pembelajaran mendalam terdistribusi, Databricks merekomendasikan penggunaan TorchDistributor untuk pelatihan terdistribusi dengan PyTorch atau tf.distribute.Strategy API untuk pelatihan terdistribusi dengan TensorFlow.
Contoh di bagian ini menunjukkan cara menggunakan HorovodRunner untuk melakukan pelatihan terdistribusi menggunakan model jaringan saraf konvolusional pada dataset MNIST, database besar digit tulisan tangan.
Saran dan Komentar
Segera hadir: Sepanjang tahun 2024 kami akan menghentikan penggunaan GitHub Issues sebagai mekanisme umpan balik untuk konten dan menggantinya dengan sistem umpan balik baru. Untuk mengetahui informasi selengkapnya, lihat: https://aka.ms/ContentUserFeedback.
Kirim dan lihat umpan balik untuk