Kihasználatlan virtuális gépek használata a Batch használatával

  • Cikk
  • 7 perc alatt elolvasható

Azure Batch kihasználatlan virtuális gépeket (VM-eket) kínál a Batch számítási feladatok költségeinek csökkentése érdekében. A kihasználatlan virtuális gépek lehetővé teszik a Batch számítási feladatok új típusait azáltal, hogy lehetővé teszik nagy mennyiségű számítási teljesítmény alacsony költségű használatát.

A kihasználatlan virtuális gépek kihasználják a többletkapacitást az Azure-ban. Ha kihasználatlan virtuális gépeket ad meg a készletekben, Azure Batch használhatja ezt a többletet, ha elérhető.

A kihasználatlan virtuális gépek használatának kompromisszuma az, hogy ezek a virtuális gépek nem mindig lesznek lefoglalhatók, vagy a rendelkezésre álló kapacitástól függően bármikor elővehetők. Emiatt a kihasználatlan virtuális gépek a legmegfelelőbbek a kötegelt és aszinkron feldolgozási számítási feladatokhoz, ahol a feladat befejezési ideje rugalmas, és a munka sok virtuális gép között oszlik el.

A kihasználatlan virtuális gépeket a dedikált virtuális gépekhez képest alacsonyabb áron kínáljuk. A díjszabás részleteiért lásd: Batch-díjszabás.

A kihasználatlan és az alacsony prioritású virtuális gépek közötti különbségek

A Batch kétféle alacsony költségű előre kiürülhető virtuális gépet kínál:

  • Kihasználatlan virtuális gépek, egy modern Azure-beli ajánlat, amely egypéldányos virtuális gépekként vagy Virtual Machine Scale Sets ként is elérhető.
  • Alacsony prioritású virtuális gépek, amelyek egy örökölt ajánlat, amely csak Azure Batch keresztül érhető el.

A lekért csomópont típusa a Batch-fiók készletfoglalási módjától függ, amely a fiók létrehozásakor állítható be. A felhasználói előfizetési készlet foglalási módját használó Batch-fiókok mindig kihasználatlan virtuális gépeket kapnak. A Batch felügyelt készlet foglalási módját használó Batch-fiókok mindig alacsony prioritású virtuális gépeket kapnak.

Az Azure-beli kihasználatlan virtuális gépek és a Batch alacsony prioritású virtuális gépei hasonlóak, de van néhány különbség a viselkedésben.

Spot virtuális gépek Alacsony prioritású virtuális gépek
Támogatott Batch-fiókok Felhasználó-előfizetéses Batch-fiókok Batch által felügyelt Batch-fiókok
Támogatott Batch-készletkonfigurációk Virtuális gép konfigurációja Virtuális gép konfigurációja és felhőszolgáltatás konfigurálása (elavult)
Elérhető régiók A kihasználatlan virtuális gépeket támogató összes régió A Microsoft Azure China 21Vianet kivételével minden régió
Ügyféljogosultság Egyes előfizetési ajánlattípusok nem érhetők el. További információ a kihasználatlanság korlátozásairól Minden Batch-ügyfél számára elérhető
A kizárás lehetséges okai Kapacitás Kapacitás
Díjszabási modell Változó kedvezmények a standard virtuálisgép-árakhoz képest Rögzített kedvezmények a standard virtuálisgép-árakhoz képest
Kvótamodell Az előfizetés alapvető kvótáitól függően A Batch-fiók alapkvótáitól függően
Rendelkezésre állási SLA None None

Batch-támogatás kihasználatlan virtuális gépekhez

Azure Batch számos olyan képességet biztosít, amelyek megkönnyítik a kihasználatlan virtuális gépek használatát és előnyeit:

  • A Batch-készletek dedikált és kihasználatlan virtuális gépeket is tartalmazhatnak. Az egyes típusú virtuális gépek száma megadható a készlet létrehozásakor vagy módosításakor egy meglévő készlet esetében, az explicit átméretezési művelet vagy az automatikus skálázás használatával. A feladat- és feladatbeküldés a készletben lévő virtuálisgép-típusoktól függetlenül változatlan maradhat. A készletet úgy is konfigurálhatja, hogy teljesen kihasználatlan virtuális gépeket használjon a feladatok minél olcsóbb futtatásához, de dedikált virtuális gépeket is elindíthat, ha a kapacitás egy minimális küszöbérték alá csökken, hogy a feladatok fussanak.
  • A Batch-készletek automatikusan megkeresik a kihasználatlan virtuális gépek célszámát. Ha a virtuális gépek ki vannak téve vagy nem érhetők el, a Batch megpróbálja lecserélni az elveszett kapacitást, és visszatérni a célhoz.
  • Ha a tevékenységek megszakadnak, a Batch észleli és automatikusan újra lekérdezi a feladatokat, hogy újra fussanak.
  • A kihasználatlan virtuális gépek külön vCPU-kvótával rendelkeznek, amely eltér a dedikált virtuális gépekhez tartozótól. A kihasználatlan virtuális gépek kvótája magasabb, mint a dedikált virtuális gépek kvótája, mivel a kihasználatlan virtuális gépek költségei alacsonyabbak. További információ: Batch-szolgáltatáskvóták és -korlátok.

Megfontolandó szempontok és használati esetek

Számos Batch számítási feladat alkalmas kihasználatlan virtuális gépekhez. Érdemes lehet használni őket, ha a feladatok több párhuzamos tevékenységre vannak felosztva, vagy ha sok feladat van felskálázva és elosztva számos virtuális gépen.

Néhány példa a kihasználatlan virtuális gépek használatához jól használható kötegelt feldolgozási használati esetekre:

  • Fejlesztés és tesztelés: Különösen nagy léptékű megoldások fejlesztése esetén jelentős megtakarítások valósíthatók meg. A tesztelés minden típusa előnyös lehet, de a nagy léptékű terheléses tesztelés és a regressziós tesztelés kiválóan használható.
  • Igény szerinti kapacitás kiegészítése: A kihasználatlan virtuális gépek a rendszeres dedikált virtuális gépek kiegészítésére használhatók. Ha elérhető, a feladatok méretezhetők, így gyorsabban befejeződhetnek az alacsonyabb költségek érdekében; ha nem érhető el, a dedikált virtuális gépek alapkonfigurációja továbbra is elérhető marad.
  • Rugalmas feladatvégrehajtási idő: Ha a feladatok befejezési ideje rugalmas, akkor a kapacitás esetleges csökkenése elviselhető; azonban a kihasználatlan virtuális gépek hozzáadásával a feladatok gyakran gyorsabban és alacsonyabb költségek mellett futnak.

A Batch-készletek többféleképpen konfigurálhatók kihasználatlan virtuális gépek használatára:

  • A készletek csak kihasználatlan virtuális gépeket használhatnak. Ebben az esetben a Batch helyreállítja az előre beállított kapacitást, ha elérhető. Ez a konfiguráció a feladatok végrehajtásának legolcsóbb módja.
  • A kihasználatlan virtuális gépek dedikált virtuális gépek rögzített alapkonfigurációjával használhatók. A dedikált virtuális gépek rögzített száma biztosítja, hogy mindig legyen némi kapacitás a feladatok előrehaladásának fenntartásához.
  • A készletek dedikált és kihasználatlan virtuális gépek dinamikus kombinációját használhatják, így az olcsóbb kihasználatlan virtuális gépek csak akkor használhatók, ha elérhetők, de a teljes árú dedikált virtuális gépek szükség esetén felskálázhatók. Ez a konfiguráció minimális kapacitást biztosít a feladatok előrehaladásának fenntartásához.

A kihasználatlan virtuális gépek használatának tervezésekor tartsa szem előtt az alábbi eljárásokat:

  • A többletkapacitás azure-beli használatának maximalizálása érdekében a megfelelő feladatok felskálázhatók.
  • Időnként előfordulhat, hogy a virtuális gépek nem érhetők el vagy nincsenek előre hozzárendelve, ami a feladatok kapacitásának csökkenését eredményezi, és a feladat megszakításához és újrafuttatásához vezethet.
  • A rövidebb végrehajtási idővel rendelkező tevékenységek általában a kihasználatlan virtuális gépek esetében működnek a legjobban. A hosszabb feladatokkal rendelkező feladatokra nagyobb hatással lehet, ha megszakad. Ha a hosszú ideig futó tevékenységek ellenőrzőpont-műveletet alkalmaznak a végrehajtás közbeni előrehaladás mentéséhez, ez a hatás csökkenhet.
  • A több virtuális gépet használó, hosszan futó MPI-feladatok nem alkalmasak a kihasználatlan virtuális gépek használatára, mivel egy előre meghatározott virtuális gép miatt a teljes feladatnak újra kell futnia.
  • A kihasználatlan csomópontok használhatatlanként jelölhetők meg, ha a hálózati biztonsági csoport (NSG) szabályai helytelenül vannak konfigurálva.

Készletek létrehozása és kezelése kihasználatlan virtuális gépekkel

A Batch-készletek dedikált és kihasználatlan virtuális gépeket (más néven számítási csomópontokat) is tartalmazhatnak. A számítási csomópontok célszámát a dedikált és a kihasználatlan virtuális gépekhez is beállíthatja. A csomópontok célszáma határozza meg, hogy hány virtuális gép legyen a készletben.

Ha például azure-beli virtuális gépeket (ebben az esetben Linux rendszerű virtuális gépeket) használó készletet szeretne létrehozni 5 dedikált és 20 kihasználatlan virtuális géppel:

ImageReference imageRef = new ImageReference(
    publisher: "Canonical",
    offer: "UbuntuServer",
    sku: "20.04-LTS",
    version: "latest");

// Create the pool
VirtualMachineConfiguration virtualMachineConfiguration =
    new VirtualMachineConfiguration("batch.node.ubuntu 20.04", imageRef);

pool = batchClient.PoolOperations.CreatePool(
    poolId: "vmpool",
    targetDedicatedComputeNodes: 5,
    targetLowPriorityComputeNodes: 20,
    virtualMachineSize: "Standard_D2_v2",
    virtualMachineConfiguration: virtualMachineConfiguration);

A dedikált és a kihasználatlan virtuális gépek csomópontjainak aktuális számát is lekérheti:

int? numDedicated = pool1.CurrentDedicatedComputeNodes;
int? numLowPri = pool1.CurrentLowPriorityComputeNodes;

A készletcsomópontok tulajdonsága jelzi, hogy a csomópont dedikált vagy kihasználatlan virtuális gép-e:

bool? isNodeDedicated = poolNode.IsDedicated;

Előfordulhat, hogy a virtuális gépek időnként ki lesznek ürülve. Ha előkép történik, a rendszer újra lekérdezi és újra futtatja az előre megadott csomóponti virtuális gépeken futó feladatokat.

A Virtuálisgép-konfigurációs készletek esetében a Batch a következő viselkedéseket is végrehajtja:

  • A korábban létrehozott virtuális gépek állapota Preempted állapotúra frissült.
  • A virtuális gép hatékonyan törlődik, ami a virtuális gépen helyben tárolt adatok elvesztéséhez vezet.
  • A készletben lévő listacsomópontok művelete továbbra is az előre megadott csomópontokat adja vissza.
  • A készlet folyamatosan megpróbálja elérni az elérhető kihasználatlan csomópontok célszámát. Ha a rendszer cserekapacitást talál, a csomópontok megőrzik az azonosítójukat, de újrainicializálódnak, és a Létrehozás és a Kezdés állapoton haladnak végig, mielőtt elérhetővé válnak a feladatütemezéshez.
  • A preemption-számok metrikaként érhetők el a Azure Portal.

Kihasználatlan virtuális gépeket tartalmazó méretezési készletek

A kizárólag dedikált virtuális gépekből álló készletekhez hasonlóan a Kihasználatlan virtuális gépeket tartalmazó készleteket is skálázhatja az Átméretezés metódus meghívásával vagy az automatikus skálázás használatával.

A készlet átméretezési művelete egy második választható paramétert vesz igénybe, amely frissíti a targetLowPriorityNodes értékét:

pool.Resize(targetDedicatedComputeNodes: 0, targetLowPriorityComputeNodes: 25);

A készlet automatikus skálázási képlete az alábbiak szerint támogatja a kihasználatlan virtuális gépeket:

  • Lekérheti vagy beállíthatja a szolgáltatás által definiált változó értékét $TargetLowPriorityNodes.
  • Lekérheti a szolgáltatás által definiált változó értékét $CurrentLowPriorityNodes.
  • Lekérheti a szolgáltatás által definiált változó értékét $PreemptedNodeCount. Ez a változó az előre megadott állapotban lévő csomópontok számát adja vissza, és lehetővé teszi a dedikált csomópontok számának vertikális fel- vagy leskálázását a nem elérhető előre megadott csomópontok számától függően.

Feladatok és tevékenységek konfigurálása

A feladatokhoz és feladatokhoz szükség lehet további konfigurációra a kihasználatlan csomópontokhoz:

  • Egy feladat JobManagerTask tulajdonsága AllowLowPriorityNode tulajdonsággal rendelkezik. Ha ez a tulajdonság igaz, a feladatkezelői feladat ütemezhető dedikált vagy kihasználatlan csomóponton. Ha hamis, a feladatkezelői feladat csak egy dedikált csomópontra van ütemezve.
  • A AZ_BATCH_NODE_IS_DEDICATEDkörnyezeti változó elérhető egy feladatalkalmazás számára, így megállapíthatja, hogy egy kihasználatlan helyen vagy egy dedikált csomóponton fut-e.

Kihasználatlan virtuális gépek metrikáinak megtekintése

Az új metrikák a kihasználatlan csomópontok Azure Portal érhetők el. Ezek a metrikák a következők:

  • Low-Priority csomópontok száma
  • Low-Priority magok száma
  • Előre meghatározott csomópontok száma

A metrikák megtekintése a Azure Portal

  1. Az Azure portálon lépjen Batch-fiókjára.
  2. A Figyelés szakaszban válassza a Metrikák lehetőséget.
  3. Válassza ki a kívánt metrikákat a Metrika listából.

Korlátozások

  • A Batchben lévő kihasználatlan virtuális gépek nem támogatják a maximális ár beállítását, és nem támogatják az áralapú kizárásokat. Ezeket csak kapacitási okokból lehet kizárni.
  • A kihasználatlan virtuális gépek csak a virtuálisgép-konfigurációs készletekhez érhetők el, a felhőszolgáltatás konfigurációs készleteihez nem, amelyek elavultak.
  • A kihasználatlan virtuális gépek egyes felhőkhöz, virtuálisgép-méretekhez és előfizetési ajánlattípusokhoz nem érhetők el. További információ a kihasználatlan korlátozásokról.
  • A rövid élettartamú operációsrendszer-lemezek jelenleg nem támogatottak a spot virtuális gépek esetében a Stop-Deallocate szolgáltatás által felügyelt kiürítési szabályzata miatt.

Következő lépések