دليل أفضل ممارسات حمل العمل للحوسبة عالية الأداء (HPC)
يوفر هذا الدليل أفضل الممارسات والإرشادات لحل التخزين الأنسب لحمل عمل الحوسبة عالية الأداء (HPC).
هناك عادة مفاضلة بين تحسين التكاليف وتحسين الأداء. تركز سلسلة أفضل ممارسات حمل العمل هذه على الحصول على أفضل حل تخزين لأحمال عمل HPC على أجهزة Azure الظاهرية. إذا كان حمل عملك أقل تطلبًا، فقد لا تحتاج إلى كل تحسين موصى به. خذ بعين الاعتبار احتياجات الأداء والتكاليف وأنماط حمل العمل أثناء تقييم هذه التوصيات.
نظرة عامة
يتكون التخزين لأحمال عمل HPC من التخزين الأساسي وفي بعض الحالات، مسرع.
يعمل التخزين الأساسي كمنزل دائم لبياناتك. فهو يحتوي على ميزات غنية لإدارة البيانات وهو دائم ومتاح وقابل للتطوير ومرونة وآمن. يعزز المسرع التخزين الأساسي من خلال توفير وصول عالي الأداء إلى البيانات. يمكن توفير مسرع عند الطلب ويعطي حمل العمل الحسابي الخاص بك وصولا أسرع بكثير إلى البيانات.
الاعتبار الأولي
إذا كنت تبدأ من البداية، فراجع فهم نماذج مخزن البيانات لاختيار مخزن بيانات واختيار خدمة تخزين Azure أو مقدمة إلى Azure Storage للحصول على فكرة عن خيارات خدمة التخزين الخاصة بك.
في لمح البصر
ابدأ بكمية البيانات التي تخطط لتخزينها. بعد ذلك، ضع في اعتبارك عدد مراكز وحدة المعالجة المركزية المستخدمة من قبل حمل العمل وحجم ملفاتك. تساعدك هذه العوامل على تضييق نطاق خدمة التخزين الأساسية التي تناسب حمل العمل الخاص بك وما إذا كنت تريد استخدام مسرع لتحسين الأداء.
| التكوين | وحدة المعالجة المركزية | أحجام الملفات | توصية التخزين الأساسية | توصية المسرع |
|---|---|---|---|---|
| أقل من 50 تيرابايت | غير متوفر | غير متوفر | Azure Files أو Azure NetApp Files. | لا يوجد مسرع |
| 50 تيبي بايت - 5000 تيبي بايت | أقل من 500 | غير متوفر | Azure Files أو Azure NetApp Files. | لا يوجد مسرع |
| 50 تيبي بايت - 5000 تيبي بايت | أكثر من 500 | 1 ميبي بايت وأكبر | Azure Standard Blob. وهو مدعوم من قبل جميع المسرعات، ويدعم العديد من البروتوكولات، وهو فعال من حيث التكلفة. | Azure Managed Lustre. |
| 50 تيبي بايت - 5000 تيبي بايت | أكثر من 500 | أصغر من 1 ميبي بايت | Azure Premium Blob أو Azure Standard Blob. | Azure Managed Lustre. |
| 50 تيبي بايت - 5000 تيبي بايت | أكثر من 500 | أصغر من 512 كيبيبايت | Azure NetApp Files. | لا يوجد مسرع |
| أكثر من 5000 تيرابايت | غير متوفر | غير متوفر | تحدث إلى فريق الحقل أو الحساب. |
تفاصيل الحل
إذا كنت لا تزال عالقا بين الخيارات بعد استخدام أشجار القرار، فإليك المزيد من التفاصيل لكل حل:
| حل | الأداء الأمثل والمقياس | الوصول إلى البيانات (بروتوكول الوصول) | نموذج الفوترة | التخزين الأساسي أو المسرع |
|---|---|---|---|---|
| Azure Standard Blob | جيد للملف الكبير، وأحمال العمل كثيفة النطاق الترددي. | جيد لتطبيقات HPC التقليدية (الملف) والسحابة الأصلية (REST). سهولة الوصول إلى مجموعات البيانات ومشاركتها وإدارتها. يعمل مع جميع المسرعات. |
ادفع مقابل ما تستخدمه. | التخزين الأساسي. |
| Azure Premium Blob | IOPS وزمن الانتقال أفضل من الكائن الثنائي كبير الحجم القياسي. جيد لمجموعات البيانات التي بها العديد من الملفات متوسطة الحجم وأحجام الملفات المختلطة. |
جيد لتطبيقات HPC التقليدية (الملف) والسحابة الأصلية (REST). سهولة الوصول إلى مجموعات البيانات ومشاركتها وإدارتها. يعمل مع جميع المسرعات. |
ادفع مقابل ما تستخدمه. | التخزين الأساسي. |
| Azure Premium Files | السعة والنطاق الترددي المناسبان لمقياس أصغر (<1k cores). IOPS وزمن الانتقال جيد للملفات متوسطة الحجم (>512 KiB). |
التكامل السهل مع Linux (NFS) وWindows (SMB)، ولكن لا يمكن استخدام كل من NFS+SMB للوصول إلى نفس البيانات. | ادفع مقابل ما توفره. | التخزين الأساسي. |
| Azure NetApp Files | السعة وعرض النطاق الترددي جيد للوظائف متوسطة النطاق (1k-10k cores). IOPS وزمن الانتقال جيد لمجموعات بيانات الملفات الصغيرة (<512 KiB). ممتاز لأحمال العمل الصغيرة ذات الملفات المتعددة. |
من السهل دمج Linux وWindows، ويدعم multiprotocol لسير العمل باستخدام كل من Linux + Windows. | ادفع ما تقوم بتوفيره. | اما. |
| Azure Managed Lustre | عرض النطاق الترددي لدعم جميع أحجام الوظائف (1k - >10k cores). IOPS وزمن الانتقال جيد لآلاف الملفات متوسطة الحجم (>512 KiB). الأفضل لأحمال عمل القراءة والكتابة كثيفة النطاق الترددي. |
Lustre, CSI. | ادفع مقابل ما توفره. | دائم بما يكفي لتشغيله كمساحة تخزين مستقلة (أساسية)، وأكثرها فعالية من حيث التكلفة كمسرع. |
مقارنة سعر التخزين الأساسي
بترتيب من الأكثر إلى الأقل تكلفة، أسعار خيارات التخزين الأساسية هي:
- ملفات Azure NetApp
- Azure Premium Blob وAzure Premium Files
- Azure Standard Blob
لمزيد من المعلومات حول التسعير، راجع تسعير منتج Azure.