Notas sobre a versão da Máquina Virtual de Ciência de Dados do Azure

  • Artigo

Neste artigo, saiba mais sobre as versões da Máquina Virtual de Ciência de Dados do Azure. Para ver a lista completa das ferramentas incluídas, juntamente com os números de versão, confira esta página.

Devido às necessidades em rápida evolução e atualizações de pacotes, nós visamos lançar uma nova Máquina Virtual de Ciência de Dados do Azure para imagens do Windows e Ubuntu todos os meses.

Os usuários do portal do Azure sempre encontrarão a imagem mais recente disponível para provisionar a Máquina Virtual de Ciência de Dados. Para usuários da CLI ou ARM (Azure Resource Manager), mantemos imagens de versões individuais disponíveis por doze meses. Após esse período, a versão específica da imagem não estará mais disponível para provisionamento.

Veja a lista de problemas conhecidos para aprender sobre erros e soluções conhecidas.

20 de dezembro de 2023

VM de Ciência de Dados – Ubuntu 20.04

Versão23.12.18

As principais alterações são:

  • numpy versão 1.22.3
  • pytz versão 2022.6
  • torch versão 1.12.0
  • certifi versão 2023.7.2
  • azure-mgmt-network para a versão 25.1.0
  • scikit-learn versão 1.0.2
  • scipy versão 1.9.2
  • accuracy
  • pickle5
  • pillow versão 10.1.0
  • experimental
  • ipykernel versão 6.14.0
  • en_core_web_sm

18 de dezembro de 2023

Máquina Virtual de Ciência de Dados – Windows 2019

Versão23.12.11

As principais alterações são:

  • SDK 1.54.0
  • numba
  • Scipy
  • azure-core para a versão 1.29.4
  • azure-identity para a versão 1.14.0
  • azure-storage-queue para a versão 12.7.2

5 de dezembro de 2023

A oferta DSVM para VM de Ciência de Dados – Windows 2022 já está disponível no mercado.

Versão23.11.23

As principais alterações são:

  • SDK 1.54.0
  • numba
  • Scipy
  • azure-core para a versão 1.29.4
  • azure-identity para a versão 1.14.0
  • azure-storage-queue para a versão 12.7.2

26 de julho de 2023

Uma nova oferta DSVM de VM de Ciência de Dados – Windows 2022 (versão prévia) está atualmente ativa no marketplace.

Versão23.06.25

As principais alterações são:

  • SDK 1.51.0

26 de abril de 2023

VM de Ciência de Dados – Ubuntu 20.04

Versão23.04.24

As principais alterações são:

  • SDK 1.50.0
  • Dotnet atualizado para o SDK 6.0
  • A funcionalidade de GPU do PyTorch foi corrigida no ambiente de `azureml_py38_PT_and_TF.
  • Blobfuse atualizado para blobfuse2

4 de abril de 2023

Máquina Virtual de Ciência de Dados – Windows 2019

Versão: 23.03.31

As principais alterações são:

  • SDK 1.49
  • Drivers Cuda atualizados para 11.4
  • Funcionalidade de GPU do PyTorch corrigida em ambientes azureml_py38 e azureml_py28_PT_and_TF
  • Dotnet atualizado para 6.0

10 de janeiro de 2023

VM de Ciência de Dados – Ubuntu 20.04

Versão: 23.01.06

As principais alterações são:

  • Adição do pacote R "ranger"
  • Anexação de pandas==1.1.5 e numpy==1.23.0 ambiente azureml_py38

30 de novembro de 2022

VM de Ciência de Dados – Ubuntu 20.04

Versão: 22.11.25

As principais alterações são:

  • Exemplos de Azure Machine Learning SDK V2 incluídos
  • Ray para a versão 2.0.0
  • Adicionados os pacotes clock, recipes e R
  • azureml-core para a versão 1.47.0
  • azure-ai-ml para a versão 1.1.1

Máquina Virtual de Ciência de Dados – Windows 2019

Versão: 22.11.27

As principais alterações são:

  • Exemplos de Azure Machine Learning SDK V2 incluídos
  • Alinhamento do caminho do ambiente RScirpt
  • Pacote 2.0.0, versão Ray, adicionado aos ambientes azureml_py38 e azureml_py38_PT_TF.
  • azureml-core para a versão 1.47.0
  • azure-ai-ml para a versão 1.1.1

20 de setembro de 2022

Anúncio: a partir de 1º de outubro de 2022, o Ubuntu 18, 2022 DSVM não estará disponível no marketplace. Recomendamos que os usuários alternem para o Ubuntu 20 DVSM à medida que continuamos a enviar atualizações/patches em nossa VM de Ciência de Dados mais recente – Ubuntu 20.04

Os usuários que estão usando o modelo do ARM (Azure Resource Manager)/conjunto de dimensionamento de máquinas virtuais para implantar as máquinas DSVM do Ubuntu devem configurar:

Oferta SKU
ubuntu-2004 2004 para Gen1 ou 2004-gen2 para tamanhos de VM Gen2

Em vez de:

Oferta SKU
ubuntu-1804 1804 para Gen1 ou 1804-gen2 para tamanhos de VM Gen2

Observação: não há impacto para os clientes existentes que ainda estão no Ubuntu-18 DSVM a partir de nossa atualização de outubro de 2022. No entanto, o plano de preterimento está agendado para dezembro de 2022. Recomendamos que você alterne para o Ubuntu-20 DSVM assim que possível.

19 de setembro de 2022

VM de Ciência de Dados – Ubuntu 20.04

Versão22.09.19

As principais alterações são:

  • .NET Framework para a versão 3.1.423
  • Azure Cli para a versão 2.40.0
  • Intelijidea para a versão 2022.2.2
  • Navegador Microsoft Edge para a versão 107.0.1379.1
  • Nodejs para a versão v16.17.0
  • Pycharm para a versão 2022.2.1

Atualizações específicas do ambiente:

azureml_py38:

  • azureml-core para a versão 1.45.0

py38_default:

  • Jupyter Lab para a versão 3.4.7
  • azure-core para a versão 1.25.1
  • keras para a versão 2.10.0
  • tensorflow-gpu para a versão 2.10.0

12 de setembro de 2022

Máquina Virtual de Ciência de Dados – Windows 2019

Versão22.09.06

As principais alterações são:

  • Atualizações de imagem no nível do sistema operacional base.

16 de agosto de 2022

VM de Ciência de Dados – Ubuntu 20.04

Versão22.08.11

As principais alterações são:

  • Atualização do Jupyterlab para a versão 3.4.5
  • matplotlib, azureml-mlflow adicionados ao ambiente sdkv2.
  • Gerador Jupyterhub reconfigurado para o ambiente raiz.

28 de julho de 2022

VM de Ciência de Dados – Ubuntu 20.04

Versão22.07.19

As principais alterações são:

  • Azure Cli foi atualizado para a versão 2.38.0
  • Nodejs foi atualizado para a versão v16.16.0
  • Scala foi atualizado para a versão 2.12.15
  • Spark foi atualizado para a versão 3.2.2
  • MMLSpark recursos do notebook v0.10.0
  • 4 bibliotecas adicionais do R: zelador, skimr, palmerpenguins e doParallel
  • Adição de um novo ambiente azureml_310_sdkv2 do Azure Machine Learning

Máquina Virtual de Ciência de Dados – Windows 2019

Versão22.07.18

Principais alterações:

  • Atualizações gerais no nível do SO.

11 de julho de 2022

VM de Ciência de Dados – Ubuntu 18.04 e VM de Ciência de Dados – Ubuntu 20.04

Versão22.07.08

As principais alterações são:

  • Correções de bug secundárias.

28 de junho de 2022

Máquina Virtual de Ciência de Dados – Windows 2019 e VM de Ciência de Dados – Ubuntu 20.04

Versão22.06.10

VM de Ciência de Dados – Ubuntu 18.04

Versão22.06.13

As principais alterações são:

  • Remova a ferramenta de software Rstudio das imagens DSVM.

17 de maio de 2022

VM de Ciência de Dados – Ubuntu 20.04

Versão22.05.11

As principais alterações são:

  • log4j(v2) atualizado para a versão 2.17.2

29 de abril de 2022

VM de Ciência de Dados – Ubuntu 18.04 e VM de Ciência de Dados – Ubuntu 20.04

Versão22.04.27

As principais alterações são:

  • Plotly e summarytools correção de importação de runtime de extensões do R Studio.
  • Cudatoolkit e CUDNN atualizados para 13.1 e 2.8.1, respectivamente.
  • Correção de Python 3.8: execução do notebook do Azure Machine Learning, anexação de matplotlib em 3.2.1 e de cycler nos pacotes 0.11.0 do ambiente Azureml_py38.

26 de abril de 2022

Máquina Virtual de Ciência de Dados – Windows 2019

Versão: 22.04.21

As principais alterações são:

  • Plotly Patch de extensão do R Studio.
  • Atualize Rscript o caminho de desenvolvimento para dar suporte à versão mais recente do R Studio4.1.3.

14 de abril de 2022

Uma nova oferta de DSVM de VM de Ciência de Dados – Ubuntu 20.04 está atualmente ativa no marketplace.

Versão: 22.04.05

04 de abril de 2022

Nova imagem para VM de Ciência de Dados – Ubuntu 18.04

Versão: 22.04.01

As principais alterações são:

  • Ambiente R atualizado – bibliotecas adicionadas: Cluster, Devtools Factoextra, GlueHere, Ottr, Paletteer, Patchwork, Plotly, Rmd2jupyter, Scales, Statip, Summarytools, Tidyverse, Tidymodels e Testthat
  • Mais mitigação de vulnerabilidades Log4j - embora não tenha sido usado, movemos tudo log4j para a versão v2, removemos jars antigos log4j jars1.0 e movemos a versão log4j 2.0.
  • Azure CLI para a versão 2.33.1
  • Corrigido jupyterhub problema de acesso usando endereço IP públicos
  • Redesenho dos ambientes Conda - continuamos com o alinhamento e refinamento dos ambientes Conda por isso criamos:
    • azureml_py38: ambiente baseado no Python 3.8 com o SDK do Azure Machine Learning instalado previamente contendo também o ambiente do AutoML
    • azureml_py38_PT_TF: ambiente azureml_py38 adicional, pré-instalado com os mais recentes TensorFlow e PyTorch
    • py38_default: ambiente do sistema padrão baseado em Python 3.8
    • Removemos azureml_py36_tensorflow, azureml_py36_pytorch, py38_tensorflow e ambientes py38_pytorch.

18 de março de 2022

Máquina Virtual de Ciência de Dados – Windows 2019

Versão: 22.03.09

As principais alterações são:

  • Ambiente R atualizado – bibliotecas adicionadas: Cluster, Devtools Factoextra, GlueHere, Ottr, Paletteer, Patchwork, Plotly, Rmd2jupyter, Scales, Statip, Summarytools, Tidyverse, Tidymodels e Testthat
  • Log4jMitigação de vulnerabilidades posteriores – embora não seja usada, movemos todas para alog4j versão v2, removemos log4j jars1.0 antigos e movemoslog4j jars da versão 2.0.
  • A CLI do Azure foi alterada para a versão 2.33.1
  • Redesenho dos ambientes Conda - continuamos com o alinhamento e refinamento dos ambientes Conda por isso criamos:
    • azureml_py38: ambiente baseado no Python 3.8 com o SDK do Azure Machine Learning instalado previamente contendo também o ambiente do AutoML
    • azureml_py38_PT_TF: ambiente complementar azureml_py38 pré-instalado com TensorFlow e PyTorch mais recentes
    • py38_default: ambiente do sistema padrão baseado em Python 3.8
    • removemos azureml_py36_tensorflow, azureml_py36_pytorch, py38_tensorflow e ambientes py38_pytorch.

9 de março de 2022

Máquina Virtual de Ciência de Dados – Windows 2019

Versão: 21.12.03

O Windows DSVM 2019 agora terá suporte no publicador: microsoft-dsvm, ID da oferta: dsvm-win-2019, ID do plano/ID da SKU: winserver-2019

Os usuários que usam o modelo ARM (Azure Resource Manager)/conjunto de dimensionamento de máquinas virtuais para implantar as máquinas DSVM do Windows devem configurar o SKU com winserver-2019, em vez de server-2019, pois continuaremos a enviar atualizações para imagens de DSVM do Windows na nova SKU a partir de março de 2022.

3 de dezembro de 2021

Nova imagem para o Windows Server 2019.

Versão: 21.12.03

As principais alterações são:

  • Pytorch atualizado para a versão 1.10.0
  • Tensorflow atualizado para a versão 2.7.0
  • Correção para o SDK do Azure Machine Learning & ambiente AutoML
  • Atualização de segurança do Windows
  • Melhoria de estabilidade e correções de bugs secundárias

4 de novembro de 2021

Nova imagem para Ubuntu 18.04.

Versão: 21.11.04

As principais alterações são:

  • O .NET Framework foi alterado para a versão 3.1.414
  • O Azcopy foi alterado para a versão 10.13.0
  • A CLI do Azure foi alterada para a versão 2.30.0
  • O CUDA foi alterado para a versão 11.5
  • O Docker foi alterado para a versão 20.10.10
  • O Intellijidea foi alterado para a versão 2021.2.3
  • Drivers NVIDIA alterados para a versão 470.103.01
  • SMI NVIDIA alterados para a versão 470.103.01
  • O Nodejs foi alterado para a versão v16.13.0
  • O Pycharm foi alterado para a versão 2021.2.3
  • O VS Code foi alterado para a versão 1.61.2
  • Conda
    • azureml_py36_automl
      • O azureml-core foi alterado para a versão 1.35.0
    • py38_default
      • O Jupyter Lab/jupyterlab foi alterado para a versão 3.2.1
      • O Jupyter Notebook/Notebook foi alterado para a versão 6.4.5
      • O Servidor Jupyter/jupyter_server foi alterado para a versão 1.11.2
      • O plugin TensorBoard do Profiler PyTorch/torch-tb-profiler foi alterado para a versão 0.3.1
      • O azure-core foi alterado para a versão 1.19.1
      • O matplotlib foi alterado para a versão 3.4.3
      • O mkl foi alterado para a versão 2021.4.0
      • O onnx foi alterado para a versão 1.10.2
      • O opencv-python foi alterado para a versão 4.5.4.58
      • O pandas foi alterado para a versão 1.3.4
      • O pytorch foi alterado para a versão 1.10.0
      • O scikit-learn foi alterado para a versão 1.0.1
      • O tensorflow-gpu foi alterado para a versão 2.6.2

7 de outubro de 2021

Nova imagem para Ubuntu 18.04.

Versão: 21.10.07

As principais alterações são:

  • O pytorch foi alterado para a versão 1.9.1
  • O Docker foi alterado para a versão 20.10.9
  • O Intellijidea foi alterado para a versão 2021.2.2
  • O Nodejs foi alterado para a versão v14.18.0
  • O Pycharm foi alterado para a versão 2021.2.2
  • O VS Code foi alterado para a versão 1.60.2
  • O ambiente AutoML foi corrigido (azureml_py36_automl)
  • A estabilidade do Gerenciador de Armazenamento do Microsoft Azure foi corrigida
  • Melhoria de estabilidade e correções de bugs secundárias

11 de agosto de 2021

Nova imagem para o Windows Server 2019.

Versão: 21.08.11

As principais alterações são:

  • Atualização de segurança do Windows
  • Atualização do Nvidia CuDNN para 8.1.0
  • Atualização do Jupyter Lab – para 3.0.16
  • MLFLow adicionado para acompanhamento de experimentos
  • Melhoria de estabilidade e correções de bugs secundárias

12 de julho de 2021

Nova imagem para Ubuntu 18.04.

As principais alterações são:

  • Atualização para PyTorch 1.9.0
  • Atualização da CLI do Azure para 2.26.1
  • Atualização da extensão do Azure Machine Learning para a CLI do Azure para 1.29.0
  • Atualização do VS Code versão 1.58.1
  • Melhoria de estabilidade e correções de bugs secundárias

22 de junho de 2021

Nova imagem para o Windows Server 2019.

Versão: 21.06.22

As principais alterações são:

  • Atualização para PyTorch 1.9.0
  • Correção de um bug em que o Git não estava disponível

1º de junho de 2021

Nova imagem para Ubuntu 18.04.

Versão: 21.06.01

As principais alterações são:

  • O Docker é habilitado por padrão
  • JupyterHub está usando JupyterLab por padrão
  • Versões do Python atualizadas para corrigir o CVE-2020-15523
  • IntelliJ IDEA atualizado para a versão 2021,1 para corrigir o CVE-2021-25758
  • PyCharm Community atualizado para 2021.1
  • TensorFlow atualizado para a versão 2.5.0

Foram removidos vários ícones da área de trabalho.

22 de maio de 2021

Nova imagem para o Windows Server 2019.

Versão: 21.05.22

As atualizações de versão selecionadas são:

  • CUDA 11.1
  • Python 3.8
  • PyTorch 1.8.1
  • TensorFlow 2.5.0
  • Spark 3.1.1
  • Java 11
  • R 4.1.0
  • Julia 1.0.5
  • NodeJS 16.2.0
  • Visual Studio Code 1.56.2 incl. Extensão do Azure Machine Learning
  • PyCharm Community Edition 2021.1.1
  • Jupyter Lab 2.2.6
  • RStudio 1.4.1106
  • Visual Studio Community Edition 2019 (versão 16.9.6)
  • Azure CLI 2.23.0
  • Storage Explorer 1.19.1
  • AzCopy 10.10.0
  • Power BI Desktop 2.93.641.0 64-bit (maio de 2021)
  • Azure Data Studio 1.28.0
  • Navegador Microsoft Edge

O Firefox, o Apache Drill e o Microsoft Integration Runtime foram removidos.
Modo escuro, ícones alterados na área de trabalho, alteração em segundo plano do papel de parede.

12 de maio de 2021

Nova imagem para Ubuntu 18.04.

As atualizações de versão selecionadas são:

  • CUDA 11.3, cuDNN 8, NCCL2
  • Python 3.8
  • R 4.0.5
  • Spark 3.1 incl. mmlspark, conectores para Armazenamento de Blobs, Data Lake, Azure Cosmos DB
  • Java 11 (OpenJDK)
  • Jupyter Lab 3.0.14
  • PyTorch 1.8.1 inclusive torchaudio torchtext torchvision, torch-tb-profiler
  • TensorFlow 2.4.1 incl. TensorBoard
  • dask 2021.01.0
  • VS.Code 1.56
  • Azure Data Studio 1.22.1
  • Azure CLI 2.23.0
  • Gerenciador de Armazenamento do Azure 1.19.1
  • azcopy 10.10
  • Navegador Microsoft Edge (beta)

Docker adicionado. Para salvar recursos, o serviço do Docker não é iniciado por padrão. Para iniciar o serviço docker, execute os seguintes comandos de linha de comando: 
sudo systemctl start docker

Observação

Se seu computador tiver GPU(s), você poderá usar as GPU(s) dentro dos contêineres adicionando um parâmetro --gpus ao comando Docker.

Por exemplo, executar

sudo docker run --gpus all -it --rm -v local_dir:container_dir nvcr.io/nvidia/pytorch:18.04-py3

executará um contêiner do Ubuntu 18.04 com o PyTorch pré-instalado e todas as GPUs habilitadas. Ele também disponibilizará uma pasta local local_dir no contêiner em container_dir.

24 de fevereiro de 2020

Imagens da Máquina Virtual de Ciência de Dados para o Ubuntu 18.04 e o Windows 2019 agora estão disponíveis.

8 de outubro de 2019

Atualizações do software no DSVM do Windows

  • Gerenciador de Armazenamento do Azure 1.10.1
  • Power BI Desktop 2.73.55xx
  • Firefox 69.0.2
  • PyCharm 19.2.3
  • RStudio 1.2.50xx

Navegador padrão do Windows atualizado

Anteriormente, o navegador padrão era o Internet Explorer. Agora, os usuários devem escolher um navegador padrão quando entrarem pela primeira vez.