Заметки о выпуске Виртуальной машины для обработки и анализа данных Azure

В этой статье описаны выпуски Виртуальная машина для обработки и анализа данных Azure. Полный список включенных средств вместе с номерами версий см . в этом ресурсе.

Из-за быстро развивающихся потребностей и обновлений пакетов мы нацелены на новые выпуски Azure Виртуальная машина для обработки и анализа данных для образов Windows и Ubuntu каждый месяц.

портал Azure пользователи могут найти последний образ, доступный для подготовки Виртуальная машина для обработки и анализа данных. Для пользователей CLI или Azure Resource Manager (ARM) образы отдельных версий хранятся в течение 12 месяцев. По истечении этого периода определенные версии образов больше не доступны для подготовки.

Ознакомьтесь со списком известных проблем , чтобы узнать о известных ошибках и обходных решениях.

21 октября 2024 г.

Виртуальная машина для обработки и анализа данных — Ubuntu 22.04

Описание.

Образ DSVM-Ubuntu-22.04 — это специализированный Виртуальная машина для обработки и анализа данных, построенный на надежной платформе Ubuntu 22.04. Он поставляется с готовым набором популярных средств обработки и интеллекта, включая платформы глубокого обучения, записные книжки Jupyter и библиотеки визуализаций. Оптимизированный для простого разработки и развертывания, этот образ обеспечивает улучшенную совместимость с современным оборудованием, позволяя специалистам по обработке и анализу данных, инженерам машинного обучения и исследователям ИИ эффективно ускорить свои рабочие процессы. Независимо от того, создаете ли вы модели, выполняете имитацию или анализируете большие наборы данных, DSVM-Ubuntu-22.04 позволяет использовать инструменты и производительность, необходимые для внедрения инноваций.

• ОС: Ubuntu-22.04
• ImageVersion: 24.10.02
• Версия пакета SDK: 1.57.0
• Версия Python: 3.10.8

DSVM 22.04 содержит все последние пакеты, установленные и поставляемые с 20.04

18 октября 2024 г.

Виртуальная машина для обработки и анализа данных — Ubuntu 20.04

Версия 24.10.01

• Пакет SDK 1.57.0
• NVIDIA 535.183.01
• Cuda cuda_12.2.r12
• Версия Python 3.10.8

Виртуальная машина для обработки и анализа данных — Windows 2022

Версия 24.09.26

• Пакет SDK 1.57.0

Виртуальная машина для обработки и анализа данных — Windows 2019

Версия 24.10.07

• Пакет SDK 1.57.0

17 июня 2024 г.

Виртуальная машина для обработки и анализа данных — Windows 2022

Версия 24.05.20

• Пакет SDK 1.56.0

Виртуальная машина для обработки и анализа данных — Windows 2019

Версия 24.05.20

• Пакет SDK 1.56.0

Виртуальная машина для обработки и анализа данных — Ubuntu 20.04

Версия 24.05.24

• Пакет SDK 1.56.0

4 мая 2024 г.

Виртуальная машина для обработки и анализа данных — Windows 2022

Версия 24.05.03

• Пакет SDK 1.55
• azureml-dataset-runtime version 1.55.0
• azureml-train-automl-client
• azureml-dataset-runtime [fuse,pandas] version 1.55.0
• GitPython version 3.1.41
• pyarrow version 14.0.2

Устранена проблема: установка Office365ProPlus

20 декабря 2023 г.

Виртуальная машина для обработки и анализа данных — Ubuntu 20.04

Версия 23.12.18

Основные изменения:

• numpy version 1.22.3
• pytz version 2022.6
• torch version 1.12.0
• certifi version 2023.7.2
• azure-mgmt-network до версии 25.1.0.
• scikit-learn version 1.0.2
• scipy version 1.9.2
• accuracy
• pickle5
• pillow version 10.1.0
• experimental
• ipykernel version 6.14.0
• en_core_web_sm

18 декабря 2023 г.

Виртуальная машина для обработки и анализа данных — Windows 2019

Версия 23.12.11

Основные изменения:

• Пакет SDK 1.54.0
• numba
• Scipy
• azure-core до версии 1.29.4.
• azure-identity до версии 1.14.0.
• azure-storage-queue до версии 12.7.2.

5 декабря 2023 г.

Предложение Виртуальная машина для обработки и анализа данных (DSVM) для виртуальной машины Обработка и анализ данных — Windows 2022 теперь общедоступен в Marketplace.

Версия 23.11.23

Основные изменения:

• Пакет SDK 1.54.0
• numba
• Scipy
• azure-core до версии 1.29.4.
• azure-identity до версии 1.14.0.
• azure-storage-queue до версии 12.7.2.

26 июля 2023 г.

Новое предложение Виртуальная машина для обработки и анализа данных (DSVM) для Обработка и анализ данных виртуальной машины — Windows 2022 (предварительная версия) теперь находится в Marketplace.

Версия 23.06.25

Основные изменения:

• Пакет SDK 1.51.0

26 апреля 2023 г.

Виртуальная машина для обработки и анализа данных — Ubuntu 20.04

Версия 23.04.24

Основные изменения:

• Пакет SDK 1.50.0
• Dotnet обновлен до 6.0 пакета SDK
• Функция GPU PyTorch исправлена в среде azureml_py38_PT_and_TF.
• Blbfuse обновлен до blobfuse2

4 апреля 2023 г.

Виртуальная машина для обработки и анализа данных — Windows 2019

Версия: 23.03.31

Основные изменения:

• Пакет SDK 1.49
• Драйверы Cuda обновлены до 11.4
• Функции GPU PyTorch, фиксированные в azureml_py38 средах и azureml_py28_PT_and_TF средах
• Dotnet обновлено до 6.0

10 января 2023 г.

Виртуальная машина для обработки и анализа данных — Ubuntu 20.04

Версия: 23.01.06

Основные изменения:

• Добавлен пакет R ranger
• Закреплено pandas==1.1.5 и numpy==1.23.0 в azureml_py38 среде

30 ноября 2022 г.

Виртуальная машина для обработки и анализа данных — Ubuntu 20.04

Версия: 22.11.25

Основные изменения:

• Azure Machine Learning SDK V2 Примеры включены
• Ray до версии 2.0.0.
• Добавлено clock, recipes R пакеты
• azureml-core до версии 1.47.0.
• azure-ai-ml до версии 1.1.1.

Виртуальная машина для обработки и анализа данных — Windows 2019

Версия: 22.11.27

Основные изменения:

• Azure Machine Learning SDK V2 Примеры включены
• RScirpt Выравнивание пути к среде
• Ray пакет версии 2.0.0 , добавленный в azureml_py38 среды и azureml_py38_PT_TF среды.
• azureml-core до версии 1.47.0.
• azure-ai-ml до версии 1.1.1.

20 сентября 2022 г.

Объявление: начиная с 1 октября 2022 г. в Marketplace не будет доступен ubuntu 18 Виртуальная машина для обработки и анализа данных (DSVM). Мы рекомендуем пользователям переключаться на DSVM Ubuntu 20, так как мы продолжаем отправлять обновления и исправления на нашей последней виртуальной машине Обработка и анализ данных — Ubuntu 20.04

Пользователи, использующие шаблон Azure Resource Manager (ARM) или масштаб виртуальных машин, для развертывания виртуальных машин Ubuntu DSVM должны задать конфигурацию

ПРЕДЛОЖЕНИЕ	Номер SKU
ubuntu-2004	2004 для 1-го поколения или 2004-го поколения для размеров виртуальных машин 2-го поколения

вместо

ПРЕДЛОЖЕНИЕ	Номер SKU
ubuntu-1804	1804 для 1-го поколения или 1804-го поколения 2-го поколения для размеров виртуальных машин 2-го поколения

Примечание.

Нет проблем для существующих клиентов, которые по-прежнему используют DSVM Ubuntu-18, по состоянию на наше обновление за октябрь 2022 года. Однако план нерекомендуемого использования запланирован на декабрь 2022 года. Рекомендуется переключиться на DSVM Ubuntu-20 в самом раннем удобном режиме.

19 сентября 2022 г.

Виртуальная машина для обработки и анализа данных — Ubuntu 20.04

Версия 22.09.19

Основные изменения:

• .NET Framework до версии 3.1.423.
• Azure Cli до версии 2.40.0.
• Intelijidea до версии 2022.2.2.
• Браузер Microsoft Edge до версии 107.0.1379.1
• Nodejs до версии v16.17.0.
• Pycharm до версии 2022.2.1.

Обновления конкретной среды:

azureml_py38:

• azureml-core до версии 1.45.0.

py38_default:

• Jupyter Lab до версии 3.4.7.
• azure-core до версии 1.25.1.
• keras до версии 2.10.0.
• tensorflow-gpu до версии 2.10.0.

12 сентября 2022 г.

Виртуальная машина для обработки и анализа данных — Windows 2019

Версия 22.09.06

Основные изменения:

• Обновлен базовый образ уровня ОС.

16 августа 2022 г.

Виртуальная машина для обработки и анализа данных — Ubuntu 20.04

Версия 22.08.11

Основные изменения:

• Версия Jupyterlab обновлена до 3.4.5.
• matplotlib и azureml-mlflow добавлено в среду sdkv2.
• Модуль порождения Jupyterhub перенастроен на корневую среду.

28 июля 2022 г.

Виртуальная машина для обработки и анализа данных — Ubuntu 20.04

Версия 22.07.19

Основные изменения:

• Azure Cli обновлено до версии 2.38.0

• Nodejs обновлено до версии v16.16.0

• Scala обновлено до версии 2.12.15

• Spark обновлено до версии 3.2.2

• Записная книжка MMLSpark представила версию v0.10.0

• 4 другие библиотеки R:

  • doParallel
  • дворник
  • palmerpenguins
  • skimr

• Добавлена новая среда Машинное обучение Azureazureml_310_sdkv2

Виртуальная машина для обработки и анализа данных — Windows 2019

Версия 22.07.18

Основные изменения:

• Обновлен общий уровень ОС.

11 июля 2022 г.

виртуальная машина Обработка и анализ данных — Ubuntu 18.04 виртуальная машина Обработка и анализ данных — Ubuntu 20.04

Версия 22.07.08

Основные изменения:

• Исправлены незначительные ошибки.

28 июня 2022 г.

Виртуальная машина для обработки и анализа данных — Windows 2019виртуальная машина Обработка и анализ данных — Ubuntu 20.04

Версия 22.06.10

Виртуальная машина для обработки и анализа данных — Ubuntu 18.04

Версия 22.06.13

Основные изменения:

• Удалите Rstudio программное средство из образов Виртуальная машина для обработки и анализа данных (DSVM).

17 мая 2022 г.

Виртуальная машина для обработки и анализа данных — Ubuntu 20.04

Версия 22.05.11

Основные изменения:

• Обновлено log4j(v2) до версии 2.17.2

29 апреля 2022 г.

виртуальная машина Обработка и анализ данных — Ubuntu 18.04виртуальная машина Обработка и анализ данных — Ubuntu 20.04

Версия 22.04.27

Основные изменения:

• Исправление импорта расширений R Studio Plotly и summarytools.
• Cudatoolkit и CUDNN обновлены до версии 13.1 и 2.8.1 соответственно.
• Исправление Python 3.8 — Машинное обучение Azure выполнение записной книжки, закрепленное matplotlib к 0.11.0 3.2.1 пакетам и cycler пакетам в Azureml_py38 среде.

26 апреля 2022 г.

Виртуальная машина для обработки и анализа данных — Windows 2019

Версия: 22.04.21

Основные изменения:

• Исправление расширения R Studio Plotly.
• Обновлен путь среды Rscript для поддержки последней версии R Studio 4.1.3.

14 апреля 2022 г.

Новое предложение Виртуальная машина для обработки и анализа данных (DSVM) для виртуальной машины Обработка и анализ данных — Ubuntu 20.04 в настоящее время находится в Marketplace.

Версия: 22.04.05

04 апреля 2022 г.

Новый образ для виртуальной машины Обработка и анализ данных — Ubuntu 18.04

Версия: 22.04.01

Основные изменения:

• Обновленная среда R: добавлены следующие библиотеки:

  • Cluster
  • Devtools Factoextra
  • GlueHere
  • Ottr
  • Paletteer
  • Patchwork
  • Plotly
  • Rmd2jupyter
  • Scales
  • Statip
  • Summarytools
  • Tidyverse
  • Tidymodels
  • Testthat

• Дальнейшее Log4j устранение уязвимостей , хотя и не использовано, мы переместили все в версиюv2, мы удалили старыйlog4j jars1.0, и мы переместили log4j jars log4j версии 2.0

• Azure CLI до версии 2.33.1.

• Исправлена проблема с доступом к jupyterhub с помощью общедоступного IP-адреса.

• Перепроектирование сред Conda , как мы продолжаем выравнивание и уточнение сред Conda, мы создали:

  • azureml_py38: среда на основе Python 3.8 с предварительно установленным пакетом SDK для Машинное обучение Azure, который также содержит среду AutoML
  • azureml_py38_PT_TF: дополнительная azureml_py38 среда, предустановленная с последней TensorFlow и PyTorch
  • py38_default: системная среда по умолчанию на основе Python 3.8.
  • Мы удалили
    • azureml_py36_tensorflow
    • azureml_py36_pytorch
    • py38_tensorflow
    • py38_pytorch Средах

18 марта 2022 г.

Виртуальная машина для обработки и анализа данных — Windows 2019

Версия: 22.03.09

Основные изменения:

• Обновленная среда R: добавлены следующие библиотеки:

  • Cluster
  • Devtools Factoextra
  • GlueHere
  • Ottr
  • Paletteer
  • Patchwork
  • Plotly
  • Rmd2jupyter
  • Scales
  • Statip
  • Summarytools
  • Tidyverse
  • Tidymodels
  • Testthat

• Дальнейшее Log4j устранение уязвимостей — хотя и не использовалось, мы переместили все log4j в версию 2, мы удалили старый jars1.0 log4j и переместили log4j jars версии 2.0.

• Azure CLI версии 2.33.1

• Перепроектирование сред Conda — как и далее с выравниванием и уточнением сред Conda, мы создали:

  • azureml_py38: среда на основе Python 3.8 с предварительно установленным пакетом SDK Машинное обучение Azure, содержащим также среду AutoML
  • azureml_py38_PT_TF: дополнительная среда azureml_py38 с предустановленными последними версиями TensorFlow и PyTorch
  • py38_default: системная среда по умолчанию на основе Python 3.8
  • Мы удалили среды azureml_py36_tensorflow, azureml_py36_pytorch, py38_tensorflow и py38_pytorch.

9 марта 2022 г.

Виртуальная машина для обработки и анализа данных — Windows 2019

Версия: 21.12.03

Виртуальная машина для обработки и анализа данных Windows 2019 (DSVM) поддерживается в издателе: microsoft-dsvm, идентификатор предложения: dsvm-win-2019, идентификатор плана/номер SKU: winserver-2019

Пользователи, использующие шаблон Azure Resource Manager (ARM) или масштаб виртуальных машин, устанавливающие для развертывания виртуальных машин Windows DSVM, должны настроить номер SKU winserver-2019 вместо server-2019этого, так как мы продолжаем отправлять обновления в образы WINDOWS DSVM в новом номере SKU с марта 2022 года.

3 декабря 2021 г.

Новый образ для Windows Server 2019

Версия: 21.12.03

Основные изменения:

• Pytorch обновлен до версии 1.10.0
• TensorFlow обновлен до версии 2.7.0
• Исправление для среды sdk Машинное обучение Azure и AutoML
• Обновление Безопасности Windows
• Улучшение стабильности и исправление незначительных ошибок

4 ноября 2021 г.

Новый образ для Ubuntu 18.04

Версия: 21.11.04

Основные изменения:

• Версия .NET Framework изменена на 3.1.414
• Версия Azcopy изменена на 10.13.0
• Версия Azure CLI изменена на 2.30.0
• Версия CUDA изменена на 11.5
• Версия Docker изменена на 20.10.10
• Версия Intellijidea изменена на 2021.2.3
• Версия драйверов NVIDIA изменена на 470.103.01.
• Версия NVIDIA SMI изменена на 470.103.01.
• Версия Node.js изменена на v16.13.0
• Версия Pycharm изменена на 2021.2.3
• Версия VS Code изменена на 1.61.2
• Конда
  • azureml_py36_automl
    • Версия azureml-core изменена на 1.35.0
  • py38_default
    • Версия Jupyter Lab / jupyterlab изменена на 3.2.1
    • Версия Jupyter Notebook / notebook изменена на 6.4.5
    • Версия сервера Jupyter / jupyter_server изменена на 1.11.2
    • Версия профилировщика Profiler с подключаемым модулем TensorBoard / torch-tb-profiler изменена на 0.3.1
    • Версия azure-core изменена на 1.19.1
    • Версия matplotlib изменена на 3.4.3
    • Версия mkl изменена на 2021.4.0
    • Версия onnx изменена на 1.10.2
    • Версия opencv-python изменена на 4.5.4.58
    • Версия pandas изменена на 1.3.4
    • Версия pytorch изменена на 1.10.0
    • Версия scikit-learn изменена на 1.0.1
    • Версия tensorflow-gpu изменена на 2.6.2

7 октября 2021 г.

Новый образ для Ubuntu 18.04

Версия: 21.10.07

Основные изменения:

• Версия pytorch изменена на 1.9.1
• Версия Docker изменена на 20.10.9
• Версия Intellijidea изменена на 2021.2.2
• Версия Node.js изменена на v14.18.0
• Версия Pycharm изменена на 2021.2.2
• Версия VS Code изменена на 1.60.2
• Исправлена среда AutoML (azureml_py36_automl)
• Исправлена стабильность Обозревателя службы хранилища
• Улучшение стабильности и исправление незначительных ошибок

11 августа 2021 г.

Новый образ для Windows Server 2019

Версия: 21.08.11

Основные изменения:

• Обновление Безопасности Windows
• Обновление NVIDIA CuDNN до версии 8.1.0
• Обновление Jupyter Lab до версии 3.0.16
• Добавление MLFLow для отслеживания экспериментов
• Улучшение стабильности и исправление незначительных ошибок

12 июля 2021 г.

Новый образ для Ubuntu 18.04

Основные изменения:

• Обновление до PyTorch 1.9.0
• Обновление Azure CLI до версии 2.26.1
• Обновление расширения Машинного обучения Azure CLI до версии 1.29.0
• Обновление VS Code до версии 1.58.1
• Улучшение стабильности и исправление незначительных ошибок

22 июня 2021 г.

Новый образ для Windows Server 2019

Версия: 21.06.22

Основные изменения:

• Обновление до PyTorch 1.9.0
• Исправлена ошибка, из-за которой Git был недоступен

1 июня 2021 г.

Новый образ для Ubuntu 18.04

Версия: 21.06.01

Основные изменения:

• Docker по умолчанию включен.
• JupyterHub использует JupyterLab по умолчанию
• Версии Python обновлены для исправления CVE-2020-15523.
• IntelliJ IDEA обновлен до версии 2021.1 для исправления CVE-2021-25758.
• PyCharm Community обновлен до 2021.1.
• TensorFlow обновлен до версии 2.5.0.

С рабочего стола удалены несколько значков.

22 мая 2021 г.

Новый образ для Windows Server 2019

Версия: 21.05.22

К выбранным обновлениям версий относятся:

• AzCopy 10.10.0
• Azure CLI 2.23.0
• Azure Data Studio 1.28.0
• CUDA 11.1
• Java 11
• Julia 1.0.5;
• Jupyter Lab 2.2.6
• Браузер Microsoft Edge
• NodeJS 16.2.0
• Power BI Desktop 2.93.641.0 64 бит (май 2021 г.)
• PyCharm Community Edition 2021.1.1
• Python 3.8
• PyTorch 1.8.1
• R 4.1.0
• RStudio 1.4.1106
• Spark 3.1.1
• Обозреватель службы хранилища 1.19.1
• TensorFlow 2.5.0
• Visual Studio Code 1.56.2 вкл. расширение Машинное обучение Azure
• Visual Studio Community Edition 2019 (версия 16.9.6)

Удалены браузер Firefox, Apache Drill и Microsoft Integration Runtime.

Темный режим; измененные значки на рабочем столе; Фон фона

12 мая 2021 г.

Новый образ для Ubuntu 18.04

К выбранным обновлениям версий относятся:

• azcopy 10.10
• Azure CLI 2.23.0
• Azure Data Studio 1.22.1
• Обозреватель службы хранилища Azure 1.19.1
• CUDA 11.3, cuDNN 8, NCCL2
• dask 2021.01.0
• Java 11 (OpenJDK)
• Jupyter Lab 3.0.14
• Браузер Microsoft Edge (бета)
• Python 3.8
• PyTorch 1.8.1, включая torchaudio torchtext torchvision, torch-tb-profiler
• R 4.0.5
• Spark 3.1 incl. mmlspark, соединители к хранилищу BLOB-объектов, Data Lake, Azure Cosmos DB
• TensorFlow 2.4.1 вкл. TensorBoard
• VS.Code 1.56

Добавлен Docker. Для сохранения ресурсов служба Docker не запускается по умолчанию. Чтобы запустить службу Docker, выполните следующую команду в командной строке:

sudo systemctl start docker

Примечание.

Если на компьютере установлены GPU, можно использовать GPU в контейнерах, добавив в команду Docker параметр --gpus.

Например, эта команда

sudo docker run --gpus all -it --rm -v local_dir:container_dir nvcr.io/nvidia/pytorch:18.04-py3

запускает контейнер Ubuntu 18.04 с предварительно установленной версией PyTorch и всеми включенными GPU. Он также создает локальную папку local_dir , доступную в контейнере в container_dir.

24 февраля 2020 г.

Теперь доступны образы Виртуальная машина для обработки и анализа данных (DSVM) для Ubuntu 18.04 и Windows 2019.

8 октября 2019 г.

Обновления программного обеспечения в DSVM Windows

• Обозреватель службы хранилища Azure 1.10.1
• Firefox 69.0.2
• Power BI Desktop 2.73.55xx
• PyCharm 19.2.3
• RStudio 1.2.50xx

Изменен браузер по умолчанию для Windows

Ранее в качестве браузера по умолчанию настраивался Internet Explorer. Теперь пользователям предлагается выбрать браузер по умолчанию при первом входе в систему.