Řada ND A100 v4

  • Článek

Platí pro: ✔️ Flexibilní škálovací sady virtuálních ✔️ počítačů s Linuxem Uniform Scale Sets ✔️.

Virtuální počítač ŘADY ND A100 v4 je novým vlajkovým doplňkem řady Azure GPU. Je navržená pro vysoce komplexní hloubkové Učení trénování a úzce propojené úlohy HPC s vertikálním navýšením kapacity a horizontálním navýšením kapacity.

Řada ND A100 v4 začíná jedním virtuálním počítačem a osmi grafickými procesory NVIDIA Ampere A100 40 GB Tensor Core GPU. Nasazení založená na ND A100 v4 můžou vertikálně navýšit kapacitu až na tisíce GPU s šířkou pásma 1,6 TB/s propojování na virtuální počítač. Každý GPU v rámci virtuálního počítače má vlastní vyhrazené topologie nezávislé na 200 GB/s NVIDIA Mellanox HDR InfiniBand. Tato připojení se mezi virtuálními počítači, které zabírají stejnou škálovací sadu virtuálních počítačů, automaticky konfigurují a podporují RDMA s GPUDirect.

Každý GPU nabízí připojení NVLINK 3.0 pro komunikaci v rámci virtuálního počítače a instance je podporována 96 fyzickými jádry procesoru AMD Epyc™ 7V12 (Řím).

Tyto instance poskytují vynikající výkon pro mnoho nástrojů pro AI, ML a analýzy, které podporují akceleraci GPU", jako jsou TensorFlow, Pytorch, Caffe, RAPIDS a další architektury. Kromě toho je propojení InfiniBand se škálováním na více systémů podporováno velkou sadou stávajících nástrojů AI a HPC, které jsou založené na komunikačních knihovnách NCCL2 společnosti NVIDIA pro bezproblémové clusterování gpu.

Důležité

Pokud chcete začít s virtuálními počítači ND A100 v4, projděte si postup konfigurace a optimalizace úloh HPC, včetně konfigurace ovladače a sítě. Kvůli zvýšenému využití vstupně-výstupních operací paměti GPU vyžaduje ND A100 v4 použití virtuálních počítačů generace 2 a imagí z marketplace.

podpora Azure s Ubuntu 20.04/22.04, RHEL 7.9/8.7/9.3, AlmaLinux 8.8/9.2 a SLES 15 pro virtuální počítače ND A100 v4. Na Azure Marketplace jsou k dispozici nabídky optimalizovaných a předem nakonfigurovaných imagí virtuálních počítačů s Linuxem pro úlohy HPC/AI s celou řadou nainstalovaných nástrojů a knihoven PROSTŘEDÍ HPC, a proto se důrazně doporučují. V současné době se podporují image virtuálních počítačů Ubuntu-HPC 20.04/22.04 a AlmaLinux-HPC 8.6/8.7.


Premium Storage: Podporováno
Ukládání do mezipaměti Premium Storage: Podporováno
Disky Úrovně Ultra: Podporované (další informace o dostupnosti, využití a výkonu)
Migrace za provozu: Nepodporuje se
Aktualizace zachování paměti: Nepodporuje se
Podpora generování virtuálních počítačů: Generace 2
Akcelerované síťové služby: Podporováno
Dočasné disky s operačním systémem: Podporované
InfiniBand: Podporováno, GPUDirect RDMA, 8 x 200 Gigabit HDR
NVIDIA NVLink Interconnect: Podporováno
Vnořená virtualizace: Nepodporuje se

Velikost Virtuální procesory Paměť: GiB Dočasné úložiště (SSD): GiB GPU Paměť GPU: GiB Max. datových disků Maximální propustnost disku bez mezipaměti: IOPS / MB/s Maximální šířka pásma sítě Maximální počet síťových karet
Standard_ND96asr_A100_v4 96 900 6000 8 A100 40 GB GPU (NVLink 3.0) 320 32 80,000 / 800 24 000 Mb/s 8

Definice tabulky velikostí

  • Kapacita úložiště je v jednotkách GiB, tj. 1024^3 bajtů. Při porovnávání disků měřených v GB (1000^3 bajtů) s disky měřenými v GiB (1024^3) nezapomeňte, že čísla kapacity uvedená v GiB mohou být menší. Například 1023 GiB = 1098,4 GB.

  • Propustnost disku se měří v počtu V/V operací za sekundu (IOPS) a v MB/s, kde 1 MB/s = 10^6 bajtů/s.

  • Disky pro ukládání dat můžou fungovat v režimu s mezipamětí, nebo bez ní. Pro diskové operace s mezipamětí je možné nastavit mezipaměť na hostiteli jen na čtení nebo na čtení i zápis. Pro diskové operace bez mezipaměti je mezipaměť na hostiteli nastavená na žádná.

  • Informace o tom, jak získat nejlepší výkon úložiště pro virtuální počítače, najdete v tématu Výkon virtuálního počítače a disku.

  • Očekávaná šířka pásma sítě je maximální agregovaná šířka pásma přidělená jednotlivým typům virtuálních počítačů pro všechny síťové karty pro všechny cíle. Další informace najdete v tématu Šířka pásma sítě virtuálních počítačů.

    Horní limity nejsou zaručeny. Omezení nabízejí pokyny pro výběr správného typu virtuálního počítače pro zamýšlenou aplikaci. Skutečný výkon sítě bude záviset na několika faktorech, včetně zahlcení sítě, zatížení aplikace a nastavení sítě. Informace o optimalizaci propustnosti sítě najdete v tématu Optimalizace propustnosti sítě pro virtuální počítače Azure. Abyste dosáhli očekávaného výkonu sítě v Linuxu nebo Windows, možná budete muset vybrat konkrétní verzi nebo optimalizovat virtuální počítač. Další informace najdete v tématu Testování šířky pásma a propustnosti (NTTTCP).

Další velikosti a informace

Cenová kalkulačka: Cenová kalkulačka

Další informace otypech

Další kroky

Přečtěte si další informace o tom, jak vám výpočetní jednotky Azure (ACU) můžou pomoct porovnat výkon výpočetních prostředků napříč skladovými jednotkami Azure.