A máquina virtual (VM) da série ND A100 v4 é uma nova adição emblemática à família de GPUs do Azure. Esses tamanhos são projetados para treinamento de Deep Learning high-end e cargas de trabalho HPC de expansão e expansão fortemente acopladas.
A série ND A100 v4 começa com uma única VM e oito GPUs NVIDIA Ampere A100 40GB Tensor Core. As implantações baseadas em ND A100 v4 podem ser dimensionadas para milhares de GPUs com 1,6 TB/s de largura de banda de interconexão por VM. Cada GPU dentro da VM é fornecida com sua própria conexão dedicada e independente de topologia de 200 GB/s NVIDIA Mellanox HDR InfiniBand. Essas conexões são configuradas automaticamente entre VMs que ocupam o mesmo Conjunto de Escala de Máquina Virtual do Azure e dão suporte a RDMA direto de GPU.
Cada GPU possui conectividade NVLINK 3.0 para comunicação dentro da VM com 96 núcleos físicos de CPU AMD Epyc™ 7V12 (Roma) de 2ª geração atrás deles.
Essas instâncias fornecem excelente desempenho para muitas ferramentas de IA, ML e análise que suportam aceleração de GPU 'pronta para uso', como TensorFlow, Pytorch, Caffe, RAPIDS e outras estruturas. Além disso, a interconexão InfiniBand escalável suporta um grande conjunto de ferramentas de IA e HPC existentes que são construídas nas bibliotecas de comunicação NCCL2 da NVIDIA para clustering contínuo de GPUs.
Especificações do anfitrião
Parte
Quantidade Unidades de contagem
Especificações ID de SKU, Unidades de Desempenho, etc.
1 A velocidade do disco temporário geralmente difere entre as operações RR (leitura aleatória) e RW (gravação aleatória). As operações RR são normalmente mais rápidas do que as operações RW. A velocidade RW é geralmente mais lenta do que a velocidade RR em séries, onde apenas o valor da velocidade RR é listado.
A capacidade de armazenamento é apresentada em unidades de GiB ou 1024^3 bytes. Ao comparar discos medidos em GB (1000^3 bytes) com discos medidos em GiB (1024^3), lembre-se de que os números de capacidade fornecidos em GiB podem parecer menores. Por exemplo, 1023 GiB = 1098,4 GB.
O débito do disco é medido em operações de entrada/saída por segundo (IOPS) e MBps, em que MBps = 10^6 bytes/seg.
Para saber como obter o melhor desempenho de armazenamento para suas VMs, consulte Desempenho de máquina virtual e disco.
Informações de armazenamento remoto (não armazenado em cache) para cada tamanho
Nome do tamanho
Max Discos de Armazenamento Remoto (Qtd.)
IOPS de disco sem cache
Velocidade do disco sem cache (MBps)
Burstde disco não armazenado em cache 1 IOPS
Burstde disco sem cache de 1 velocidade (MBps)
IOPS especiaisde 2 discos não armazenadas em cache
A capacidade de armazenamento é apresentada em unidades de GiB ou 1024^3 bytes. Ao comparar discos medidos em GB (1000^3 bytes) com discos medidos em GiB (1024^3), lembre-se de que os números de capacidade fornecidos em GiB podem parecer menores. Por exemplo, 1023 GiB = 1098,4 GB.
O débito do disco é medido em operações de entrada/saída por segundo (IOPS) e MBps, em que MBps = 10^6 bytes/seg.
Os discos de dados podem operar nos modos em cache ou não colocado em cache. Para uma operação do disco de dados em cache, o modo de cache do anfitrião está definido como ReadOnly ou ReadWrite. Para uma operação do disco de dados não colocada em cache, o modo de cache do anfitrião está definido como None.
Para saber como obter o melhor desempenho de armazenamento para suas VMs, consulte Desempenho de máquina virtual e disco.
Informações da interface de rede para cada tamanho
A largura de banda de rede esperada é a largura de banda agregada máxima alocada por tipo de VM em todas as NICs, para todos os destinos. Para obter mais informações, consulte Largura de banda da rede da máquina virtual
Os limites máximos não são garantidos. Os limites oferecem orientação para selecionar o tipo de VM certo para o aplicativo pretendido. O desempenho real da rede dependerá de vários fatores, incluindo congestionamento da rede, cargas de aplicativos e configurações de rede. Para obter informações sobre como otimizar a taxa de transferência de rede, consulte Otimizar a taxa de transferência de rede para máquinas virtuais do Azure.
Para alcançar o desempenho de rede esperado no Linux ou Windows, talvez seja necessário selecionar uma versão específica ou otimizar sua VM. Para obter mais informações, consulte Teste de largura de banda/taxa de transferência (NTTTCP).
Informações do acelerador (GPUs, FPGAs, etc.) para cada tamanho