تمكين مراقبة وظائف HDInsight.

مكتمل

تعتبر مراقبة مجموعة HDInsight محل اهتمام مهندسي البيانات ومسؤولي تكنولوجيا المعلومات على حد سواء، وبذلك يتمكنون من مراقبة المجالات التالية من شبكة نظام المجموعة:

  • صحة وتوافر شبكة نظام المجموعة
  • استخدام الموارد وأدائها
  • معلومات وسجلات حمل العمل

سوف يستخدم مسؤولو تكنولوجيا المعلومات الرصد لعرض صحة وتوافر شبكة نظام المجموعة، فضلاً عن رصد أمن شبكة نظام المجموعة. يهتم مهندسو البيانات بما يلي:

  • معلومات وسجلات حمل العمل
  • مراقبة إخفاقات أو نجاحات الوظيفة
  • أداء شبكة نظام المجموعة
  • عرض أحمال العمل باستخدام السجلات

هناك أداتان رئيسيتان يمكن استخدامهما لمراقبة: Apache Ambari وAzure Monitor.

Apache Ambari

يتم استخدام هذه الأداة لإدارة ومراقبة شبكة نظام المجموعة مفتوحة المصدر. وتوفر لوحة معلومات مع سلسلة من عناصر واجهة المستخدم التي تمكنك من عرض صحة شبكة نظام المجموعة HDInsight من منظور الأجهزة على مستوى كلٍّ من شبكة نظام المجموعة والعقدة. يمكن الوصول إلى لوحة المعلومات من شاشة «النظرة العامة على شبكة نظام المجموعة HDInsight في مدخل Azure».

الوصول إلى Apache Ambari من مدخل Azure

يفتح Apache Ambari في متصفح الويب الذي يوفر لوحة معلومات أدوات الرصد.

لوحة معلومات Apache Ambari.

تعتبر العديد من مناطق Apache Ambari مفيدة لكل من مسؤولي تكنولوجيا المعلومات ومهندسي البيانات. لوحة المعلومات الأولية مفيدة لمسؤولي تكنولوجيا المعلومات من أجل مراقبة صحة شبكة نظام المجموعة في الوقت الحقيقي. هناك مناطق إضافية، مثل «شاشة YARN» التي تمكن مهندسي البيانات من عرض قدرات قائمة الانتظار والوظائف والسجلات المقترنة لمراقبة أحمال العمل على شبكة نظام المجموعة. أيضًا، تمكنك قدرات التنبيه من تحديد المكونات المعطلة بحيث يمكنك أن تصبح استباقيًا في دعم شبكة نظام مجموعتك.

مراقبة‬

Azure Monitor هي أداة مراقبة في نطاق Azure، والتي يمكن استخدامها على شبكة نظام المجموعة HDInsight لمراقبة صحة خدمتك. يتم الكشف عن خصائص Azure Monitor في مدخل Azure مباشرة:

خيارات المراقبة في مدخل Azure

التنبيهات

«التنبيهات» هي أداة مفيدة لمراقبة المصدر في Azure بشكل استباقي، وللعمل بناءً على الشرط. يمكن تعيين «التنبيه» مقابل مصدر معين - مثل شبكة نظام المجموعة HDInsight - لتحديد حدود الشرط الذي يُملى إذا تم إصدار التنبيه. يمكن أن يتضمن الشرط تمكين "التحجيم التلقائي". قد يكون هذا الشرط إما صحيحًا أو خطأ. يمكن أن تتراوح الإجراءات بين إرسال بريد إلكتروني وإعادة تشغيل الخدمة اعتمادًا على كيفية تحديد الشرط.

المقاييس

المقاييس هي أحد مكونات Azure Monitor التي تمكنك من إعداد المخططات المرئية الخاصة بما تريد مراقبته. يمكنك استخدام المخططات المرئية من عرض نقاط البيانات وقياسها وربطها للمساعدة في تحديد ما إذا كان يتم أداء الخدمة في نطاق مقبول. تتضمن مقاييس HDInsight طلبات البوابة لرؤية الحمل على شبكة نظام المجموعة الخاصة بك، وعدد العاملين النشيطين ما يسمح لك بإبقاء العين على حجم شبكة نظام المجموعة الخاصة بك من شبكة نظام المجموعة HDInsight

Diagnostic Settings

تمكنك هذه الإعدادات من تحديد الهدف «إما حساب التخزين أو خدمة مركز الأحداث أو حساب تحليلات السجلات» لتلقي بيانات تشخيصية حول الخدمة التي قمت بتمكينها. يتم إرسال السجلات إلى هدفك المختار، والذي يمكنك من تسجيل نشاط الخدمة مع مرور الوقت وتحليلها لاحقًا. يجب تعيين هذه الإعدادات فقط إذا كنت تريد إجراء تحليل متعمق للخدمة.

Azure Monitor

هناك ارتباط مباشر بـ Azure Monitor بحيث يمكنك استخدام القدرات الكاملة التي يوفرها Azure Monitor

صحة الموارد

تعتبر لوحة المعلومات هذه قياسية عبر جميع الخدمات في Azure، كما تمكنك من عرض صحة خدمة HDInsight في يوم معين. لا توجد إشعارات من هذه المنطقة، ويجب عليك التحقق من ذلك بنفسك. يمكن أن توفر لك صحة الموارد نظرة عامة على المعلومات الصحية.