إنشاء شبكة نظام المجموعة HDInsight

مكتمل

هناك طرق مختلفة لإنشاء شبكة نظام المجموعة HDInsight، يمكن أن يتراوح هذا بين استخدام مدخل Azure من أجل واجهة المستخدم السهلة والإعدادات النصية التي يمكن أن تساعد في عمليات النشر التلقائية. يعرض الجدول التالي الأساليب المختلفة التي يمكنك استخدامها لإعداد شبكة نظام المجموعة HDInsight.

إنشاء شبكة نظام المجموعة باستخدام مستعرض الويب سطر الأوامر واجهة برمجة تطبيقات REST SDK
مدخل Azure
Azure Data Factory
Azure CLI
Azure PowerShell
cURL
.NET SDK
قالب Azure Resource Manager

تتطلب كافة إعدادات HDInsight المعلومات الأساسية التالية، بما في ذلك:

علامة تبويبBasics

تفاصيل المشروع

الاشتراك

تعريف اشتراك Azure الذي سيصدر بموجبها فاتورة HDInsight وتتم إدارتها.

اسم مجموعة الموارد

مجموعة الموارد هي تجميع منطقي لتقنيات وخدمات Azure التي ترتبط عادةً بنفس التطبيق أو دورة حياة التطبيق. خدمات التجميع في نفس مجموعة الموارد التي تُسهل الصيانة الإدارية.

A screenshot of the basic tab in the Create HDInsight Cluster screen in the Azure portal

تفاصيل شبكة نظام المجموعة

اسم شبكة نظام المجموعة

تتمتع أسماء شبكة نظام المجموعة HDInsight بالقيود التالية:

  • الأحرف المسموح بها: a-z، 0-9، A-Z
  • الحد الأقصى للطول: 59
  • الأسماء المحجوزة: التطبيقات
  • نطاق تسمية شبكة نظام المجموعة لـ Azure من خلال كافة الاشتراكات. لذلك، يجب أن يكون اسم شبكة نظام المجموعة فريدًا في جميع أنحاء العالم.
  • يجب أن تكون الأحرف الستة الأولى فريدة داخل VNET

Location

تحديد الموقع من حيث نوع شبكة نظام المجموعة المخزنة. إذا لم يتم تعريف الموقع ثم يتم ترتيب شبكة نظام المجموعة في نفس الموقع مثل التخزين الافتراضي. يجب أن يكون الموقع قريبًا من مستخدميك بقدر الإمكان لتقليل زمن الانتقال.

أنواع شبكة نظام المجموعة

تعريف مكدس ذاكرة التكنولوجيا المؤقتة التي تم توفيرها في شبكة نظام مجموعة الموارد. حدد نوع نظام شبكة نظام المجموعة استنادًا إلى نوع البيانات لديك والنوع الذي يتطلب معالجة تصورك. أنواع شبكة نظام المجموعة المتوفرة المعروضة في الجدول التالي.  

نوع نظام المجموعة الوصف
Apache Hadoop إطار عمل يستخدم HDFS، ونموذج برمجة MapReduce بسيط لمعالجة وتحليل بيانات المجمعة. 
Apache Spark إطار عمل معالجة متوازٍ مفتوح المصدر يدعم المعالجة داخل الذاكرة لتعزيز أداء تطبيقات تحليل البيانات الضخمة.
HBase قاعدة بيانات NoSQL المبنية على Hadoop التي توفر الوصول العشوائي والاتساق القوي لكميات كبيرة من البيانات غير منظمة البنية وشبه منظمة البنية-- التي من المحتمل أن تصل إلى مليارات الصفوف أضعاف ملايين الأعمدة. 
Apache Interactive Query التخزين المؤقت في الذاكرة لاستعلامات Hive التفاعلية والسريعة. 
Apache Kafka منصة مفتوحة المصدر تستخدم للبنية الأساسية لبرنامج ربط العمليات التجارية والتطبيقات الخاصة بالبيانات المتدفقة. كما يوفر Kafka وظيفة قائمة الرسائل التي تسمح لك بنشر تدفقات البيانات والاشتراك فيها.

‏‏الإصدار

تعريف إصدار HDInsight لشبكة نظام المجموعة. HDInsight 4.0 هو أحدث إصدار ويتمتع بأحد أطر العمل التي تم توفيرها لشبكة نظام المجموعة.

معلومات تسجيل دخول شبكة نظام المجموعة

باستخدام شبكة نظام المجموعة HDInsight، يمكنك تكوين حسابين للمستخدمين في أثناء إنشاء شبكة نظام المجموعة.

«تسجيل الدخول إلى شبكة نظام المجموعة وكلمة المرور»

اسم المستخدم الافتراضي هو المسؤول. يستخدم التكوين الأساسي على مدخل Microsoft Azure. في بعض الأحيان يطلق عليه اسم "مستخدم شبكة نظام المجموعة".

SSH اسم المستخدم وكلمة المرور

تستخدم للاتصال بشبكة نظام المجموعة من خلال SSH.

إشعار

تسمح لك حزمة أمان المؤسسة بدمج HDInsight مع خدمات مجال Active Directory وpache Ranger. يمكن إنشاء عدة مستخدمين باستخدام حزمة أمان المؤسسة.

علامة تبويب التخزين

يمكن استخدام شبكات نظام المجموعة HDInsight لخيارات التخزين التالية كما هو موضح في شاشة التخزين:

  • Azure Data Lake Storage Gen2
  • Azure Data Lake Storage الجيل الأول
  • الغرض العام v2 من تخزين Azure
  • الغرض العام v1 من تخزين Azure
  • blob عنصر تخزين Azure (معتمد فقط كتخزين ثانوي)

تسمح لك شاشة التخزين بتحديد حساب التخزين الأساسي والحاويات الافتراضية. يمكنك أيضًا ربط تخزين Azure الإضافي بشبكة نظام المجموعة. تمكنك إعدادات بيانات التعريف من تعريف قاعدة بيانات SQL الخارجية لتخزين جداول Hive بعد حذف شبكة نظام المجموعة، وتحسين أداء Oozie عن طريق تخزين بيانات التعريف في مخزن خارجي.

A screenshot of the storage tab in the Create HDInsight Cluster screen in the Azure portal

الأمان والشبكات

بالنسبة إلى أنواع شبكة نظام المجموعة Hadoop وSpark وHBase وKafka وInteractive Query، يمكنك اختيار تمكين حزمة أمان المؤسسة. توفر هذه الحزمة خيارا للحصول على إعداد نظام مجموعة أكثر أمانا باستخدام Apache Ranger والتكامل مع معرف Microsoft Entra.

A screenshot of the Security and Networking tab in the Create HDInsight Cluster screen in the Azure portal

بالإضافة إلى ذلك، يوصى دائمًا بنشر شبكات نظام المجموعة HDInsight داخل VNet ويمكنك تحديد وتعيين شبكة الاتصال الظاهرية في هذه الشاشة. إذا كان الحل الخاص بك يتطلب تقنيات منتشرة عبر العديد من أنواع مجموعات HDInsight، فيمكن لـ Azure Virtual Network توصيل أنواع المجموعات المطلوبة. يسمح هذا التكوين لشبكة نظام المجموعة ولأي رمز لك بنشرها لهم، للاتصال مباشرة مع بعضها.

التكوين والتسعير

تمكنك هذه الصفحة من تكوين حجم شبكة نظام المجموعة وأدائها وعرض معلومات التكلفة المقدرة. في هذه الشاشة، يمكنك تعريف الأجهزة الظاهرية التي سيتم استخدامها للعقد الرئيس (الرئيسية) ولعقد العمال أيضًا.

A screenshot of the Configuration and Pricing tab in the Create HDInsight Cluster screen in the Azure portal