Адаптация PyTorch с одним узлом к распределенному глубокому обучению

Узнайте, как выполнять распределенное обучение моделей машинного обучения с помощью PyTorch.

Эта записная книжка использует рекомендуемый рабочий процесс разработки. Сначала показано, как обучить модель на одном узле, а затем адаптировать код с помощью HorovodRunner для распределенного обучения.

Пример записной книжки HorovodRunner PyTorch MNIST

Получение записной книжки