مراقبة وقت تشغيل التكامل داخل شبكة ظاهرية مدارة
ينطبق على: Azure Data Factory Azure Synapse Analytics
تلميح
جرب Data Factory في Microsoft Fabric، وهو حل تحليلي متكامل للمؤسسات. يغطي Microsoft Fabric كل شيء بدءا من حركة البيانات إلى علم البيانات والتحليلات في الوقت الحقيقي والمعلومات المهنية وإعداد التقارير. تعرف على كيفية بدء إصدار تجريبي جديد مجانا!
يمكنك استخدام شبكة ظاهرية مدارة من Azure Data Factory لتوصيل مصادر البيانات الخاصة بك بشبكة ظاهرية تديرها خدمة Data Factory بشكل آمن. باستخدام هذه الإمكانية، يمكنك إنشاء بيئة خاصة ومعزولة لعمليات تكامل البيانات وتنسيقها.
عند استخدام شبكة ظاهرية مدارة، يمكنك دمج إمكانات تكامل البيانات وتنسيقها في Data Factory مع أمان ومرونة شبكات Azure الظاهرية. فهو يمكنك من إنشاء مسارات تكامل بيانات قوية وقابلة للتطوير وآمنة تتصل بسلاسة بموارد الشبكة الخاصة بك، سواء كانت محلية أو في السحابة.
تتمثل إحدى المشاكل الشائعة للحوسبة المدارة في نقص الرؤية في الأداء والصحة، خاصة داخل بيئة شبكة ظاهرية مدارة. وبدون المراقبة السليمة، يصبح تحديد المشاكل وحلها أمرا صعبا ويمكن أن يؤدي إلى تأخيرات وأخطاء محتملة وتدهور في الأداء.
باستخدام المراقبة المحسنة في Data Factory، يمكنك الحصول على رؤى قيمة حول عمليات تكامل البيانات الخاصة بك. يمكن أن تؤدي هذه الرؤى إلى تحسين الكفاءة، واستخدام أفضل للموارد، وتحسين الأداء العام. باستخدام المراقبة الاستباقية والتنبيهات في الوقت المناسب، يمكنك معالجة المشكلات، وتحسين مهام سير العمل، وضمان التنفيذ السلس لمسارات تكامل البيانات داخل بيئة الشبكة الظاهرية المدارة.
مقاييس جديدة
يعزز إدخال مقاييس جديدة الرؤية وقدرات المراقبة داخل بيئات الشبكة الظاهرية المدارة.
يوفر Azure Data Factory ثلاثة أنواع مميزة من تجمعات الحوسبة:
- حساب نشاط النسخ
- حساب نشاط البنية الأساسية لبرنامج ربط العمليات التجارية، مثل البحث
- حساب نشاط خارجي، مثل دفتر ملاحظات Azure Databricks
توفر تجمعات الحوسبة هذه المرونة وقابلية التوسع لاستيعاب أحمال العمل المتنوعة وتخصيص الموارد على النحو الأمثل. تم تصميم كل منها للتعامل مع متطلبات تنفيذ نشاط محددة.
للمساعدة في ضمان المراقبة المتسقة والشاملة عبر جميع تجمعات الحوسبة، قمنا بتنفيذ نفس مجموعات مقاييس المراقبة:
- استخدام السعة
- النسبة المئوية للسعة المتوفرة
- طول قائمة الانتظار
بغض النظر عن نوع تجمع الحوسبة الذي تستخدمه، يمكنك الوصول إلى مجموعة قياسية من المقاييس وتحليلها للحصول على رؤى حول أداء وصحة أنشطة تكامل البيانات.
إشعار
هذه المقاييس صالحة فقط عندما تقوم بتمكين مدة البقاء (TTL) في وقت تشغيل التكامل داخل شبكة ظاهرية مدارة.
Metric | الوحدة | الوصف |
---|---|---|
نسخ استخدام سعة وقت تشغيل تكامل MVNet | نسبة مئوية | النسبة المئوية القصوى لاستخدام وحدة تكامل البيانات (DIU) لأنشطة نسخ TTL في وقت تشغيل تكامل الشبكة الظاهرية المدارة ضمن نافذة مدتها دقيقة واحدة. |
نسخ النسبة المئوية للسعة المتوفرة لوقت تشغيل تكامل MVNet | نسبة مئوية | النسبة المئوية القصوى ل DIU المتوفرة لأنشطة نسخ TTL في وقت تشغيل تكامل الشبكة الظاهرية المدارة ضمن نافذة مدتها دقيقة واحدة. |
نسخ طول قائمة انتظار الانتظار لوقت تشغيل تكامل MVNet | عدد | طول قائمة انتظار الانتظار لأنشطة نسخ TTL في وقت تشغيل تكامل الشبكة الظاهرية المدارة ضمن نافذة مدتها دقيقة واحدة. |
استخدام سعة البنية الأساسية لبرنامج ربط العمليات التجارية لوقت تشغيل تكامل MVNet | نسبة مئوية | النسبة المئوية القصوى لاستخدام DIU لأنشطة البنية الأساسية لبرنامج ربط العمليات التجارية في وقت تشغيل تكامل الشبكة الظاهرية المدارة ضمن نافذة مدتها دقيقة واحدة. |
النسبة المئوية للسعة المتاحة للبنية الأساسية لبرنامج ربط العمليات التجارية لوقت تشغيل تكامل MVNet | نسبة مئوية | النسبة المئوية القصوى ل DIU المتوفرة لأنشطة البنية الأساسية لبرنامج ربط العمليات التجارية في وقت تشغيل تكامل الشبكة الظاهرية المدارة ضمن نافذة مدتها دقيقة واحدة. |
طول قائمة انتظار انتظار البنية الأساسية لبرنامج ربط العمليات التجارية لوقت تشغيل تكامل MVNet | عدد | طول قائمة انتظار الانتظار لأنشطة البنية الأساسية لبرنامج ربط العمليات التجارية في وقت تشغيل تكامل الشبكة الظاهرية المدارة ضمن نافذة مدتها دقيقة واحدة. |
استخدام السعة الخارجية لوقت تشغيل تكامل MVNet | نسبة مئوية | النسبة المئوية القصوى لاستخدام DIU للأنشطة الخارجية في وقت تشغيل تكامل الشبكة الظاهرية المدارة ضمن نافذة مدتها دقيقة واحدة. |
النسبة المئوية للسعة الخارجية المتوفرة لوقت تشغيل تكامل MVNet | نسبة مئوية | النسبة المئوية القصوى ل DIU المتوفرة للأنشطة الخارجية في وقت تشغيل تكامل الشبكة الظاهرية المدارة ضمن نافذة مدتها دقيقة واحدة. |
طول قائمة انتظار الانتظار الخارجية لوقت تشغيل تكامل MVNet | عدد | طول قائمة انتظار الانتظار للأنشطة الخارجية في وقت تشغيل تكامل الشبكة الظاهرية المدارة ضمن نافذة مدتها دقيقة واحدة. |
لمزيد من المعلومات حول هذه المقاييس، راجع المقاييس المدعومة ل Microsoft.DataFactory/factories.
استخدام مقاييس لتحسين الأداء
باستخدام المقاييس، يمكنك تتبع أداء وقت تشغيل التكامل الخاص بك وتقييمه بسلاسة داخل شبكة ظاهرية مدارة. يمكنك أيضا الكشف عن المجالات المحتملة للتحسين المستمر عن طريق تحسين إعدادات الحوسبة وسير العمل لتحقيق أقصى قدر من الكفاءة.
لتوفير المزيد من الوضوح حول التطبيق العملي لهذه المقاييس، فيما يلي بعض السيناريوهات المثال.
متزن
إذا لاحظت أن استخدام السعة أقل من 100 بالمائة ونسبة السعة المتاحة عالية، يتم استخدام موارد الحوسبة التي قمت بحجزها بكفاءة.
إذا ظل طول قائمة انتظار الانتظار منخفضا باستمرار أو واجه طفرات قصيرة في بعض الأحيان، فإننا ننصحك بقائمة انتظار الأنشطة الأخرى حتى يصل استخدام السعة إلى 100 بالمائة. يساعد هذا النهج على ضمان الاستخدام الأمثل للموارد ويساعد على الحفاظ على سير عمل سلس بأقل تأخير.
الأداء الموجه
إذا لاحظت أن استخدام السعة منخفض باستمرار، ويبقى طول قائمة الانتظار منخفضا باستمرار أو يواجه طفرات قصيرة في بعض الأحيان، فإن موارد الحوسبة التي قمت بحجزها أعلى من الطلب على الأنشطة.
في مثل هذه الحالات، بغض النظر عما إذا كانت نسبة السعة المتاحة عالية أو منخفضة، نوصي بتقليل موارد الحوسبة المخصصة لخفض التكاليف. من خلال تعيين حقوق الحساب لمطابقة متطلبات حمل العمل، يمكنك تحسين استخدام الموارد وتوفير التكاليف دون المساس بكفاءة عملياتك.
التكلفة الموجهة
إذا لاحظت أن جميع المقاييس (بما في ذلك استخدام السعة ونسبة السعة المتوفرة وطول قائمة الانتظار) عالية، فإن موارد الحوسبة التي قمت بحجزها غير كافية على الأرجح للأنشطة الخاصة بك.
في هذا السيناريو، نوصي بزيادة موارد الحوسبة المخصصة لتقليل وقت قائمة الانتظار. تساعد إضافة المزيد من سعة الحوسبة على التأكد من أن أنشطتك لديها موارد كافية للتشغيل بكفاءة، ما يقلل من أي تأخيرات تتسبب فيها قائمة الانتظار المزدحمة.
تنفيذ النشاط المتقطع
إذا لاحظت أن النسبة المئوية للسعة المتوفرة تتقلب بين منخفضة وعالية خلال فترة زمنية محددة، فمن المحتمل أن يكون ذلك بسبب التنفيذ المتقطع للأنشطة الخاصة بك، حيث تكون فترة مدة البقاء (TTL) التي قمت بتكوينها أقصر من الفاصل الزمني بين أنشطتك. يمكن أن يكون لهذا تأثير كبير على أداء سير العمل الخاص بك. لمعالجة هذه المشكلة، هناك حلان محتملان. أولا، يمكنك وضع المزيد من الأنشطة في قائمة الانتظار للحفاظ على حمل عمل متسق واستخدام موارد الحوسبة المتاحة بشكل أكثر فعالية. من خلال الحفاظ على الحوسبة مشاركة مستمرة، يمكنك تجنب وقت التجهيز وتحقيق أداء أفضل. بدلا من ذلك، يمكنك التفكير في تكبير فترة TTL لتتوافق مع الفاصل الزمني بين أنشطتك. وهذا يضمن بقاء موارد الحوسبة متاحة لفترة أطول، مما يقلل من تواتر فترات التجهيز ويحسن كفاءة التكلفة.
من خلال تنفيذ أي من هذين الحلين، يمكنك تحسين أداء سير العمل الخاص بك، وتقليل الآثار المترتبة على التكلفة، وضمان تنفيذ أكثر سلاسة للأنشطة المتقطعة.
المحتوى ذو الصلة
تقدم إلى المقالة التالية للتعرف على الشبكات الظاهرية المدارة ونقاط النهاية الخاصة المدارة: الشبكة الظاهرية المدارة من Azure Data Factory.