مشاركة عبر

قم بتوفير عقد حساب Linux في مجمعات الدُفعات

  • مقالة

يمكنك استخدام Azure Batch لتشغيل أحمال عمل الحوسبة المتوازية على كل من الأجهزة الظاهرية Linux وWindows. توضح هذه المقالة كيفية إنشاء مجموعات من عُقد حساب Linux في خدمة Batch باستخدام مكتبات العميل Batch Python وBatch.NET.

تكوين جهاز ظاهري

عند إنشاء مجموعة من عُقد الحوسبة في Batch، يكون لديك خياران يمكنك من خلالهما تحديد حجم العقدة ونظام التشغيل: تكوين الخدمات السحابية وتكوين الجهاز الظاهري. تتكون مجموعات تكوين الجهاز الظاهري من Azure VMs، والتي يمكن إنشاؤها من صور Linux أو Windows. عند إنشاء تجمع باستخدام تكوين الجهاز الظاهري، فإنك تحدد حجم عقدة الحوسبة المتاحة، ومرجع صورة الجهاز الظاهري المراد تثبيته على العقد، ووكيل العقدة الدفعي SKU (برنامج يتم تشغيله على كل عقدة ويوفر واجهة بين العقدة وخدمة الدُفعات).

مرجع صورة الجهاز الظاهري

تستخدم خدمة الدُفعات مجموعات مقياس الآلة الظاهرية لتوفير عُقد الحوسبة في تكوين الجهاز الظاهري. يمكنك تحديد صورة من Azure Marketplace، أو استخدام Azure Compute Gallery لإعداد صورة مخصصة.

عند إنشاء مرجع لصورة جهاز ظاهري، يجب عليك تحديد الخصائص التالية:

خاصية مرجع الصورة مثال
الناشر Canonical
العرض UbuntuServer
SKU 20.04-LTS
إصدار الأحدث

تلميح

يمكنك معرفة المزيد حول هذه الخصائص وكيفية تحديد صور Azure Marketplace في البحث عن صور Linux VM في Azure Marketplace باستخدام Azure CLI. لاحظ أن بعض صور Azure Marketplace غير متوافقة حالياً مع الدُّفعة.

قائمة بصور الجهاز الظاهري

ليست جميع صور Azure Marketplace متوافقة مع وكلاء عقد الدُفعات المتاحين حالياً. لسرد جميع صور الجهاز الظاهري لـ Marketplace المدعومة لخدمة Batch ووحدات SKU لوكيل العقدة المقابلة لها، استخدم list_supported_images(Python) أو ListSupportedImages (Batch.NET) أو واجهة برمجة التطبيقات المقابلة في أخرى لغة SDK.

عامل عقدة وحدة حفظ المخزون

عامل العقدة الدفعة هو برنامج يعمل على كل عقدة في التجمع ويوفر واجهة الأمر والتحكم بين العقدة وخدمة الدفعة. هناك تطبيقات مختلفة لعامل العقدة، والمعروفة باسم وحدة حفظ المخزون، لأنظمة تشغيل مختلفة. بشكل أساسي، عند إنشاء تكوين جهاز ظاهري، فإنك تحدد أولاً مرجع صورة الجهاز الظاهري، ثم تحدد عامل العقدة لتثبيته على الصورة. بشكل عام، كل عامل عقدة وحدة حفظ المخزون متوافق مع صور الجهاز الظاهري متعددة. لعرض وحدات SKU لوكيل العقدة المدعوم وتوافقات صورة الجهاز الظاهري، يمكنك استخدام أمر Azure Batch CLI:

az batch pool supported-images list

لمزيد من المعلومات، يمكنك الرجوع إلى الحساب - قائمة الصور المدعومة - REST API (Azure Batch Service) | Microsoft Docs.

قم بإنشاء مجموعة Linux: Batch Python

يُظهر مقتطف الشفرة التالي مثالاً على كيفية استخدام Microsoft Azure Batch Client Library for Python لإنشاء مجموعة من عُقد حساب Ubuntu Server. لمزيد من التفاصيل حول وحدة Batch Python، قم بعرض الوثائق المرجعية.

ينشئ هذا المقتطف ImageReference بشكل صريح ويحدد كل خاصية من خصائصه (الناشر، العرض، وحدة حفظ المخزون، الإصدار). ومع ذلك، في كود الإنتاج، نوصي باستخدام طريقة list_supported_images للاختيار من مجموعات وحدة حفظ المخزون لعامل العقدة والصورة المتوفرة في وقت التشغيل.

# Import the required modules from the
# Azure Batch Client Library for Python
import azure.batch.batch_service_client as batch
import azure.batch.batch_auth as batchauth
import azure.batch.models as batchmodels

# Specify Batch account credentials
account = "<batch-account-name>"
key = "<batch-account-key>"
batch_url = "<batch-account-url>"

# Pool settings
pool_id = "LinuxNodesSamplePoolPython"
vm_size = "STANDARD_D2_V3"
node_count = 1

# Initialize the Batch client
creds = batchauth.SharedKeyCredentials(account, key)
config = batch.BatchServiceClientConfiguration(creds, batch_url)
client = batch.BatchServiceClient(creds, batch_url)

# Create the unbound pool
new_pool = batchmodels.PoolAddParameter(id=pool_id, vm_size=vm_size)
new_pool.target_dedicated = node_count

# Configure the start task for the pool
start_task = batchmodels.StartTask()
start_task.run_elevated = True
start_task.command_line = "printenv AZ_BATCH_NODE_STARTUP_DIR"
new_pool.start_task = start_task

# Create an ImageReference which specifies the Marketplace
# virtual machine image to install on the nodes
ir = batchmodels.ImageReference(
    publisher="Canonical",
    offer="UbuntuServer",
    sku="20.04-LTS",
    version="latest")

# Create the VirtualMachineConfiguration, specifying
# the VM image reference and the Batch node agent
# to install on the node
vmc = batchmodels.VirtualMachineConfiguration(
    image_reference=ir,
    node_agent_sku_id="batch.node.ubuntu 20.04")

# Assign the virtual machine configuration to the pool
new_pool.virtual_machine_configuration = vmc

# Create pool in the Batch service
client.pool.add(new_pool)

كما ذكرنا سابقاً، نوصي باستخدام طريقة list_supported_images للاختيار ديناميكياً من مجموعات صور وكيل العقدة / Azure Marketplace المدعومة حالياً (بدلاً من إنشاء ImageReference بشكل صريح). يوضح مقتطف Python التالي كيفية استخدام هذه الطريقة.

# Get the list of supported images from the Batch service
images = client.account.list_supported_images()

# Obtain the desired image reference
image = None
for img in images:
  if (img.image_reference.publisher.lower() == "canonical" and
        img.image_reference.offer.lower() == "ubuntuserver" and
        img.image_reference.sku.lower() == "20.04-lts"):
    image = img
    break

if image is None:
  raise RuntimeError('invalid image reference for desired configuration')

# Create the VirtualMachineConfiguration, specifying the VM image
# reference and the Batch node agent to be installed on the node
vmc = batchmodels.VirtualMachineConfiguration(
    image_reference=image.image_reference,
    node_agent_sku_id=image.node_agent_sku_id)

قم بإنشاء تجمع Linux: Batch.NET

يُظهر مقتطف الشفرة التالي مثالاً على كيفية استخدام مكتبة العميل Batch.NET لإنشاء مجموعة من عُقد حساب خادم Ubuntu. لمزيد من التفاصيل حول Batch.NET، راجع الوثائق المرجعية.

يستخدم مقتطف الشفرة التالي طريقة PoolOperations.ListSupportedImages للاختيار من قائمة مجموعات وحدة حفظ المخزون لصورة Azure Marketplace المدعومة حالياً وعامل العقدة. يوصى بهذه التقنية، لأن قائمة المجموعات المدعومة قد تتغير من وقت لآخر. الأكثر شيوعاً، تتم إضافة المجموعات المدعومة.

// Pool settings
const string poolId = "LinuxNodesSamplePoolDotNet";
const string vmSize = "STANDARD_D2_V3";
const int nodeCount = 1;

// Obtain a collection of all available node agent SKUs.
// This allows us to select from a list of supported
// VM image/node agent combinations.
List<ImageInformation> images =
    batchClient.PoolOperations.ListSupportedImages().ToList();

// Find the appropriate image information
ImageInformation image = null;
foreach (var img in images)
{
    if (img.ImageReference.Publisher == "Canonical" &&
        img.ImageReference.Offer == "UbuntuServer" &&
        img.ImageReference.Sku == "20.04-LTS")
    {
        image = img;
        break;
    }
}

// Create the VirtualMachineConfiguration for use when actually
// creating the pool
VirtualMachineConfiguration virtualMachineConfiguration =
    new VirtualMachineConfiguration(image.ImageReference, image.NodeAgentSkuId);

// Create the unbound pool object using the VirtualMachineConfiguration
// created above
CloudPool pool = batchClient.PoolOperations.CreatePool(
    poolId: poolId,
    virtualMachineSize: vmSize,
    virtualMachineConfiguration: virtualMachineConfiguration,
    targetDedicatedComputeNodes: nodeCount);

// Commit the pool to the Batch service
await pool.CommitAsync();

على الرغم من أن المقتطف السابق يستخدم طريقة PoolOperations.istSupportedImages لإدراج قائمة ديناميكية وتحديد من مجموعات وحدة حفظ المخزون لوكيل العقدة والصورة المدعومة (الموصى بها)، يمكنك أيضاً تكوين ImageReference بشكل صريح:

ImageReference imageReference = new ImageReference(
    publisher: "Canonical",
    offer: "UbuntuServer",
    sku: "20.04-LTS",
    version: "latest");

اتصل بعُقد Linux باستخدام SSH

أثناء التطوير أو أثناء استكشاف الأخطاء وإصلاحها، قد تجد أنه من الضروري تسجيل الدخول إلى العقد الموجودة في مجموعتك. بخلاف عقد حساب Windows، لا يمكنك استخدام بروتوكول سطح المكتب البعيد (RDP) للاتصال بعُقد Linux. بدلاً من ذلك، تتيح خدمة Batch الوصول إلى SSH على كل عقدة للاتصال عن بُعد.

يُنشئ مقتطف كود Python التالي مستخدماً على كل عقدة في التجمع، وهو أمر مطلوب للاتصال عن بُعد. ثم يقوم بطباعة معلومات اتصال الغلاف الآمن (SSH) لكل عقدة.

import datetime
import getpass
import azure.batch.batch_service_client as batch
import azure.batch.batch_auth as batchauth
import azure.batch.models as batchmodels

# Specify your own account credentials
batch_account_name = ''
batch_account_key = ''
batch_account_url = ''

# Specify the ID of an existing pool containing Linux nodes
# currently in the 'idle' state
pool_id = ''

# Specify the username and prompt for a password
username = 'linuxuser'
password = getpass.getpass()

# Create a BatchClient
credentials = batchauth.SharedKeyCredentials(
    batch_account_name,
    batch_account_key
)
batch_client = batch.BatchServiceClient(
    credentials,
    base_url=batch_account_url
)

# Create the user that will be added to each node in the pool
user = batchmodels.ComputeNodeUser(username)
user.password = password
user.is_admin = True
user.expiry_time = \
    (datetime.datetime.today() + datetime.timedelta(days=30)).isoformat()

# Get the list of nodes in the pool
nodes = batch_client.compute_node.list(pool_id)

# Add the user to each node in the pool and print
# the connection information for the node
for node in nodes:
    # Add the user to the node
    batch_client.compute_node.add_user(pool_id, node.id, user)

    # Obtain SSH login information for the node
    login = batch_client.compute_node.get_remote_login_settings(pool_id,
                                                                node.id)

    # Print the connection info for the node
    print("{0} | {1} | {2} | {3}".format(node.id,
                                         node.state,
                                         login.remote_login_ip_address,
                                         login.remote_login_port))

سيكون لهذا الرمز نواتج مشابهة للمثال التالي. في هذه الحالة، يحتوي المجمع على أربع عقد Linux.

Password:
tvm-1219235766_1-20160414t192511z | ComputeNodeState.idle | 13.91.7.57 | 50000
tvm-1219235766_2-20160414t192511z | ComputeNodeState.idle | 13.91.7.57 | 50003
tvm-1219235766_3-20160414t192511z | ComputeNodeState.idle | 13.91.7.57 | 50002
tvm-1219235766_4-20160414t192511z | ComputeNodeState.idle | 13.91.7.57 | 50001

بدلاً من كلمة المرور، يمكنك تحديد مفتاح SSH العمومي عند إنشاء مستخدم على عقدة.

في Python SDK، استخدم المعلمة ssh_public_keyفي ComputeNodeUser.

في.NET، استخدم الخاصية ComputeNodeUser.SshPublicKey.

التسعير

تم إنشاء Azure Batch على خدمات Azure Cloud Services وتقنية Azure Virtual Machines. يتم تقديم خدمة الدُفعات نفسها دون تكلفة، ما يعني أنه يتم محاسبتك فقط على موارد الحوسبة (والتكاليف المرتبطة بها) التي تستهلكها حلول الدُفعات الخاصة بك. عند اختيار تكوين الجهاز الظاهري، يتم محاسبتك استنادا إلى بنية تسعير الأجهزة الظاهرية.

إذا قمت بنشر التطبيقات إلى عقد الدُفعات الخاصة بك باستخدام حزم التطبيقات، فستتحمل أيضاً تكاليف موارد تخزين Azure التي تستهلكها حزم التطبيقات الخاصة بك.

الخطوات التالية