إدارة تكوين Trino
إشعار
سنتقاعد Azure HDInsight على AKS في 31 يناير 2025. قبل 31 يناير 2025، ستحتاج إلى ترحيل أحمال العمل الخاصة بك إلى Microsoft Fabric أو منتج Azure مكافئ لتجنب الإنهاء المفاجئ لأحمال العمل الخاصة بك. سيتم إيقاف المجموعات المتبقية على اشتراكك وإزالتها من المضيف.
سيتوفر الدعم الأساسي فقط حتى تاريخ الإيقاف.
هام
هذه الميزة في وضع المعاينة حاليًا. تتضمن شروط الاستخدام التكميلية لمعاينات Microsoft Azure المزيد من الشروط القانونية التي تنطبق على ميزات Azure الموجودة في الإصدار التجريبي أو قيد المعاينة أو التي لم يتم إصدارها بعد في التوفر العام. للحصول على معلومات حول هذه المعاينة المحددة، راجع معلومات معاينة Azure HDInsight على AKS. للأسئلة أو اقتراحات الميزات، يرجى إرسال طلب على AskHDInsight مع التفاصيل ومتابعتنا لمزيد من التحديثات على مجتمع Azure HDInsight.
يأتي نظام مجموعة Trino مع HDInsight على AKS مع معظم التكوينات الافتراضية ل Trino مفتوحة المصدر. توضح هذه المقالة كيفية تحديث ملفات التكوين، وتضيف ملفات التكوين التكميلية الخاصة بك إلى نظام المجموعة.
يمكنك إضافة/تحديث التكوينات بطريقتين:
إشعار
يفرض Trino مع HDInsight على AKS تكوينات معينة ويحظر تعديل بعض الملفات و/أو الخصائص. ويتم ذلك لضمان الأمان/الاتصال المناسب عبر التكوين. يتضمن مثال الملفات/الخصائص المحظورة، على سبيل المثال لا الحصر:
- ملف jvm.config باستثناء إعدادات حجم كومة الذاكرة المؤقتة.
- Node.properties: node.id وnode.data-dir وlog.path وما إلى ذلك.
Config.properties: http-server.authentication.*, http-server.https.* etc.
استخدام مدخل Microsoft Azure
في مدخل Microsoft Azure، يمكنك تعديل ثلاث مجموعات من تكوينات Trino القياسية:
- log.properties
- config.properties
- node.properties
اتبع الخطوات لتعديل التكوينات:
تسجيل الدخول إلى مدخل Azure.
في شريط البحث في مدخل Microsoft Azure، اكتب "HDInsight on AKS cluster" وحدد "Azure HDInsight on AKS clusters" من القائمة المنسدلة.
حدد اسم نظام المجموعة من صفحة القائمة.
انتقل إلى شفرة "Configuration Management".
أضف أزواج قيم المفاتيح الموجودة أو حدثها للتكوينات التي تريد تعديلها. على سبيل المثال، config.properties -> التكوينات المخصصة -> انقر فوق "إضافة" لإضافة إعداد تكوين جديد ثم انقر فوق موافق.
انقر فوق "حفظ" لحفظ التكوينات.
استخدام قالب ARM
المتطلبات الأساسية
- مجموعة Trino تشغيلية مع HDInsight على AKS.
- إنشاء قالب ARM للمجموعة الخاصة بك.
- راجع نموذج قالب ARM لنظام المجموعة الكامل.
- الإلمام بتأليف قالب ARM ونشره.
إدارة نظام المجموعة Cluster management
يمكن تحديد جميع تكوينات Trino في serviceConfigsProfiles.serviceName[“trino”]
ضمن properties.clusterProfile
.
يركز المثال التالي على coordinator/worker/miscfiles
. للحصول على الكتالوجات، راجع إضافة كتالوجات إلى مجموعة موجودة:
"serviceConfigsProfiles": [
{
"serviceName": "trino",
"configs": [
{
"component": "catalogs",
"files": [<file-spec>,…]
},
{
"component": "coordinator",
"files": [<file-spec>,…]
},
{
"component": "worker",
"files": [<file-spec>,…]
},
{
"component": " miscfiles",
"files": [<file-spec>,…]
},
]
}
]
هناك العديد من المكونات التي تتحكم في جوانب التكوين المختلفة:
اسم المكون | الخصائص المطلوبة/المسموح بها لكل مواصفات ملف | الوصف |
---|---|---|
عام | filename , values |
يحتوي على ملفات تكوين لكل من المنسق والعامل. |
منسق | filename , values |
يحتوي على ملفات تكوين للمنسق فقط، ويتجاوز الشائعة إذا كانت موجودة. |
عامل | filename , values |
يحتوي على ملفات تكوين للعمال فقط، ويتجاوز الشائعة إذا كانت موجودة. |
miscfiles |
filename , content |
يحتوي على ملفات تكوين متنوعة يوفرها المستخدم للمجموعة بأكملها. |
الكتالوجات | filename ، إما المحتوى أو القيم |
يحتوي على ملفات الكتالوج للمجموعة بأكملها. |
يوضح المثال التالي:
- تجاوز node.environment الافتراضي لنظام المجموعة (معروض في Trino UI).
- تجاوز قيم config.properties الافتراضية للمنسق والعامل.
- أضف نموذج مجموعات الموارد json وقم بتكوين المنسق لاستخدامه.
"serviceConfigsProfiles": [
{
"serviceName": "trino",
"configs": [
{
"component": "common",
"files": [
{
"fileName": "node.properties",
"values": {
"node.environment": "preview"
}
},
{
"fileName": "config.properties",
"values": {
"join-distribution-type": "AUTOMATIC",
"query.max-execution-time": "5d",
"shutdown.grace-period": "5m"
}
}
]
},
{
"component": "coordinator",
"files": [
{
"fileName": "resource-groups.properties",
"values": {
"resource-groups.configuration-manager": "file",
"resource-groups.config-file": "${MISC:resource-groups}"
}
}
]
},
{
"component": "miscfiles",
"files": [
{
"fileName": "resource-groups",
"path": "/customDir/resource-groups.json",
"content": "{\"rootGroups\":[{\"name\":\"global\",\"softMemoryLimit\":\"80%\",\"hardConcurrencyLimit\":100,\"maxQueued\":1000,\"schedulingPolicy\":\"weighted\",\"jmxExport\":true,\"subGroups\":[{\"name\":\"data_definition\",\"softMemoryLimit\":\"10%\",\"hardConcurrencyLimit\":5,\"maxQueued\":100,\"schedulingWeight\":1},{\"name\":\"adhoc\",\"softMemoryLimit\":\"10%\",\"hardConcurrencyLimit\":50,\"maxQueued\":1,\"schedulingWeight\":10,\"subGroups\":[{\"name\":\"other\",\"softMemoryLimit\":\"10%\",\"hardConcurrencyLimit\":2,\"maxQueued\":1,\"schedulingWeight\":10,\"schedulingPolicy\":\"weighted_fair\",\"subGroups\":[{\"name\":\"${USER}\",\"softMemoryLimit\":\"10%\",\"hardConcurrencyLimit\":1,\"maxQueued\":100}]}]}]},{\"name\":\"admin\",\"softMemoryLimit\":\"100%\",\"hardConcurrencyLimit\":50,\"maxQueued\":100,\"schedulingPolicy\":\"query_priority\",\"jmxExport\":true}],\"selectors\":[{\"group\":\"global.adhoc.other.${USER}\"}],\"cpuQuotaPeriod\":\"1h\"}"
}
]
}
]
}
انشر قالب ARM المحدث ليعكس التغييرات في نظام المجموعة. تعرف على كيفية نشر قالب ARM.