Ρύθμιση παραμέτρων προσαρμοσμένων δυναμικών χώρων συγκέντρωσης στο Microsoft Fabric

Ισχύει για:✅ Μηχανική Δεδομένων Fabric και Επιστήμη Δεδομένων

Οι προσαρμοσμένοι χώροι συγκέντρωσης ζωντανής ροής είναι προϋδραμάτιστα συμπλέγματα Spark που παρέχουν σχεδόν άμεση εκκίνηση περιόδου λειτουργίας για σημειωματάρια στο Fabric. Αυτό το άρθρο δείχνει πώς να δημιουργείτε, να διαμορφώνετε και να διαχειρίζεστε προσαρμοσμένες ζωντανές πισίνες για βέλτιστη απόδοση.

Προϋποθέσεις

Πριν ρυθμίσετε προσαρμοσμένες ζωντανές πισίνες, βεβαιωθείτε ότι έχετε:

  • Πρόσβαση σε έναν χώρο εργασίας Fabric με SKU Fabric επί πληρωμή (οι εκχωρημένοι πόροι δοκιμαστικής έκδοσης Fabric δεν υποστηρίζονται).
  • Ρόλος διαχειριστή ή μέλους στον χώρο εργασίας.
  • Μια ενεργή χωρητικότητα Fabric που έχει εκχωρηθεί στον χώρο εργασίας σας.
  • Ένα δημοσιευμένο περιβάλλον Fabric για χρήση για τη ρύθμιση παραμέτρων βιβλιοθήκης.
  • Ένας υπάρχων προσαρμοσμένος χώρος συγκέντρωσης Spark. Μόνο οι διαχειριστές χώρων εργασίας μπορούν να δημιουργήσουν προσαρμοσμένους χώρους συγκέντρωσης Spark.

Εάν έχετε τον ρόλο Μέλος , ένας διαχειριστής χώρου εργασίας πρέπει να ενεργοποιήσει την υπάρχουσα ρύθμιση χώρου εργασίας Προσαρμογή ρύθμισης παραμέτρων υπολογιστικής λειτουργίας για στοιχεία .

Σημαντικό

Οι χώροι συγκέντρωσης εκκίνησης δεν υποστηρίζονται για προσαρμοσμένους χώρους συγκέντρωσης ζωντανών δραστηριοτήτων. Εάν ο χώρος εργασίας σας χρησιμοποιεί χώρο συγκέντρωσης εκκίνησης, πρέπει να δημιουργήσετε έναν προσαρμοσμένο χώρο συγκέντρωσης Spark πριν ρυθμίσετε τις παραμέτρους ενός προσαρμοσμένου χώρου συγκέντρωσης δυναμικής εκπομπής.

Χρήση της υπάρχουσας ρύθμισης προσαρμογής υπολογιστικής λειτουργίας

Οι προσαρμοσμένοι ζωντανοί χώροι συγκέντρωσης χρησιμοποιούν την υπάρχουσα ρύθμιση χώρου εργασίας Προσαρμογή υπολογιστικής ρύθμισης για στοιχεία . Δεν έχουν ξεχωριστή ρύθμιση ανάθεσης. Για να μπορέσει ένα μέλος χώρου εργασίας να δημιουργήσει ή να ενημερώσει μια προσαρμοσμένη ρύθμιση παραμέτρων χώρου συγκέντρωσης δυναμικών δραστηριοτήτων, ένας διαχειριστής χώρου εργασίας πρέπει να ενεργοποιήσει την υπάρχουσα ρύθμιση:

  1. Μεταβείτε στον χώρο εργασίας fabric σας.

  2. Επιλέξτε Ρυθμίσεις χώρου εργασίας από την κορδέλα αρχικής σελίδας χώρου εργασίας.

  3. Αναπτύξτε το στοιχείο Μηχανική δεδομένων/Επιστήμη και επιλέξτε Ρυθμίσεις Spark.

  4. Επιλέξτε την καρτέλα Pool .

  5. Ενεργοποιήστε την «Προσαρμογή υπολογιστικής διαμόρφωσης για στοιχεία».

    Στιγμιότυπο οθόνης που δείχνει τον διακόπτη για την προσαρμογή της ρύθμισης παραμέτρων υπολογισμού για στοιχεία.

  6. Επιλέξτε Αποθήκευση.

Όταν αυτή η ρύθμιση είναι ενεργοποιημένη, τα μέλη μπορούν να χρησιμοποιήσουν ένα περιβάλλον Fabric για να επιλέξουν έναν υπάρχοντα προσαρμοσμένο χώρο συγκέντρωσης Spark, να προσαρμόσουν τους πυρήνες προγραμμάτων οδήγησης σε επίπεδο περιόδου λειτουργίας, τη μνήμη προγραμμάτων οδήγησης, τους πυρήνες εκτέλεσης και τη μνήμη εκτελεστή και να δημιουργήσουν ή να ενημερώσουν τη ρύθμιση παραμέτρων του χώρου συγκέντρωσης δυναμικών δραστηριοτήτων. Τα μέλη μπορούν στη συνέχεια να αποθηκεύσουν και να δημοσιεύσουν το περιβάλλον.

Αυτή η ρύθμιση δεν επιτρέπει στα μέλη να δημιουργούν ή να διαχειρίζονται προσαρμοσμένους χώρους συγκέντρωσης Spark στις ρυθμίσεις χώρου εργασίας. Ένας διαχειριστής χώρου εργασίας πρέπει να δημιουργήσει τον υποκείμενο προσαρμοσμένο χώρο συγκέντρωσης Spark.

Όταν η Προσαρμογή ρύθμισης παραμέτρων υπολογιστικής λειτουργίας για στοιχεία είναι απενεργοποιημένη, τα περιβάλλοντα χρησιμοποιούν τον προεπιλεγμένο χώρο συγκέντρωσης χώρου εργασίας και την υπολογιστική ρύθμιση παραμέτρων του. Τα μέλη δεν μπορούν να δημιουργήσουν ή να ενημερώσουν μια προσαρμοσμένη ρύθμιση παραμέτρων ζωντανής πισίνας έως ότου ένας διαχειριστής χώρου εργασίας ενεργοποιήσει τη ρύθμιση.

Για περισσότερες πληροφορίες σχετικά με αυτό το στοιχείο ελέγχου χώρου εργασίας, ανατρέξτε στο θέμα Ρυθμίσεις διαχείρισης χώρου εργασίας Data Engineering.

Δημιουργία προσαρμοσμένου χώρου συγκέντρωσης για τον ζωντανό χώρο συγκέντρωσης (μόνο για διαχειριστές)

Αυτή η εργασία απαιτεί τον ρόλο χώρου εργασίας διαχειριστή . Εάν υπάρχει ήδη ένας προσαρμοσμένος χώρος συγκέντρωσης Spark, τα μέλη του χώρου εργασίας μπορούν να παραλείψουν αυτήν την εργασία και να ρυθμίσουν τις παραμέτρους του δυναμικού χώρου συγκέντρωσης στον υπάρχοντα χώρο συγκέντρωσης.

  1. Μεταβείτε στον χώρο εργασίας σας Fabric.
  2. Επιλέξτε Ρυθμίσεις χώρου εργασίας από την κορδέλα αρχικής σελίδας χώρου εργασίας.
  3. Αναπτύξτε το στοιχείο Μηχανική δεδομένων/Επιστήμη και επιλέξτε Ρυθμίσεις Spark.
  4. Επιλέξτε την καρτέλα Pool .
  5. Από την αναπτυσσόμενη λίστα Προεπιλεγμένος χώρος συγκέντρωσης για χώρο εργασίας , επιλέξτε Νέος χώρος συγκέντρωσης.
  6. Εισαγάγετε ένα όνομα για τον χώρο συγκέντρωσης. Αυτό το όνομα είναι ένα μοναδικό αναγνωριστικό για την ομάδα, όπως dev-team-pool ή prod-daily-analytics.
  7. Επιλέξτε μια οικογένεια κόμβων και ένα μέγεθος κόμβου για τον φόρτο εργασίας σας.
  8. Επιλέξτε το πλαίσιο ελέγχου Αυτόματη κλιμάκωση για να ενεργοποιήσετε την αυτόματη κλιμάκωση για τον χώρο συγκέντρωσης.

Ρύθμιση παραμέτρων ζωντανής πισίνας

Οι διαχειριστές και τα μέλη του χώρου εργασίας μπορούν να δημιουργήσουν ή να ενημερώσουν μια ρύθμιση παραμέτρων χώρου συγκέντρωσης σε πραγματικό χρόνο μέσω των ρυθμίσεων περιβάλλοντος . Για τα μέλη, ένας διαχειριστής χώρου εργασίας πρέπει πρώτα να ενεργοποιήσει την Προσαρμογή ρύθμισης παραμέτρων υπολογιστικής λειτουργίας για στοιχεία. Τα μέλη πρέπει να επιλέξουν έναν υπάρχοντα προσαρμοσμένο χώρο συγκέντρωσης Spark που δημιουργήθηκε από έναν διαχειριστή χώρου εργασίας.

  1. Στον χώρο εργασίας σας Fabric, ανοίξτε το περιβάλλον που θέλετε να επισυνάψετε σε μια προσαρμοσμένη δυναμική πισίνα.

  2. Στο αριστερό τμήμα παραθύρου, επιλέξτε Υπολογισμός.

  3. Επιλέξτε τον χώρο συγκέντρωσης που δημιουργήσατε στο προηγούμενο βήμα από την αναπτυσσόμενη λίστα.

  4. Στην περιοχή Live pool, επιλέξτε το κουμπί επιλογής για να ενεργοποιήσετε τον υπολογισμό του live pool για αυτό το περιβάλλον.

    Στιγμιότυπο οθόνης που δείχνει το κουμπί επιλογής Live pool ενεργοποιημένο στο περιβάλλον Ρυθμίσεις υπολογισμού.

  5. Στην περιοχή Πρόγραμμα ζωντανής πισίνας, επιλέξτε το κουμπί επιλογής για να το ενεργοποιήσετε. Όλες οι προσαρμοσμένες ζωντανές πισίνες πρέπει να έχουν πρόγραμμα. Οι συστάδες διατηρούνται ενυδατωμένες μόνο κατά τη διάρκεια του προγραμματισμένου παραθύρου.

  6. Καθορίστε τις ρυθμίσεις χρονοδιαγράμματος:

    • Εάν το χρονοδιάγραμμα είναι επαναλαμβανόμενο
    • Έναρξη και λήξη ημέρας και ώρας
    • Ζώνη ώρας
    • Πότε να απενεργοποιήσετε και να ενεργοποιήσετε ξανά την πισίνα
    • Άλλες ρυθμίσεις ανάλογα με την περίπτωση

    Σημαντικό

    Το Fabric χρησιμοποιεί τυπική παροχή Spark για δραστηριότητα εκτός του προγραμματισμένου παραθύρου, το οποίο έχει πιο αργούς χρόνους εκκίνησης. Τα συμπλέγματα δεν διατηρούνται ζεστά έξω από το προγραμματισμένο παράθυρο.

    Για συμβουλές προγραμματισμού, ανατρέξτε στο θέμα Προγραμματισμός βέλτιστων πρακτικών.

  7. Αποθηκεύστε τις υπολογιστικές ρυθμίσεις.

  8. Επιλέξτε το κουμπί Δημοσίευση στην επάνω κορδέλα.

Μετά τη δημοσίευση, ο χώρος συγκέντρωσης είναι ενεργός και το Fabric ξεκινά την ενυδάτωση των συμπλεγμάτων πριν από την επόμενη περίοδο χρονοδιαγράμματος.

Σημείωμα

Η δημοσίευση μπορεί να διαρκέσει αρκετά λεπτά.

Οποιεσδήποτε αλλαγές στο περιβάλλον απαιτούν την αναδημοσίευση του περιβάλλοντος και την ανανέωση των ενυδατωμένων συστάδων.

Κατανόηση του παραθύρου χρονοδιαγράμματος

Το χρονοδιάγραμμα καθορίζει το παράθυρο κατά το οποίο το Fabric διατηρεί τα συμπλέγματα ενυδατωμένα και μπορεί να ενυδατώσει εκ νέου τα συμπλέγματα που απενεργοποίησε. Δεν διατηρεί τη ζωντανή πισίνα ζεστή έξω από το διαμορφωμένο παράθυρο.

Για παράδειγμα, σκεφτείτε ένα επαναλαμβανόμενο πρόγραμμα που εκτελείται καθημερινά από τις 8:00 π.μ. έως τις 5:00 μ.μ.:

  • Στις 8:00 π.μ., ξεκινά το παράθυρο του ημερήσιου προγράμματος και το Fabric ξεκινά ή συνεχίζει την ενυδάτωση.
  • Κατά τη διάρκεια του παραθύρου χρονοδιαγράμματος, ένα αδρανές σύμπλεγμα μπορεί να απενεργοποιηθεί μετά το διαμορφωμένο χρονικό όριο αδράνειας. Fabric μπορεί να ενυδατώσει ένα ανταλλακτικό σύμφωνα με το διαμορφωμένο διάστημα επανενεργοποίησης.
  • Στις 5:00 μ.μ., το παράθυρο χρονοδιαγράμματος τελειώνει. Το Fabric δεν συνεχίζει την ενυδάτωση των συστάδων μεταξύ 5:00 μ.μ. και 8:00 π.μ. την επόμενη μέρα.
  • Ένα σημειωματάριο που υποβάλλεται εκτός του παραθύρου χρονοδιαγράμματος χρησιμοποιεί τυπική παροχή Spark και δεν λαμβάνει το πλεονέκτημα θερμής εκκίνησης ζωντανής πισίνας.
  • Η ίδια καθημερινή συμπεριφορά επαναλαμβάνεται μέχρι την καθορισμένη ημερομηνία λήξης του χρονοδιαγράμματος.

Η ώρα έναρξης του χρονοδιαγράμματος δεν εγγυάται ότι ένα σύμπλεγμα είναι ήδη διαθέσιμο εκείνη ακριβώς τη στιγμή. Η ενυδάτωση απαιτεί χρόνο, ειδικά μετά από μια ενημέρωση περιβάλλοντος ή όταν το Fabric πρέπει να παρέχει ένα νέο σύμπλεγμα. Εάν ένα προγραμματισμένο σημειωματάριο πρέπει να ξεκινήσει στις 8:00 π.μ., ξεκινήστε το πρόγραμμα ζωντανής πισίνας 60-90 λεπτά νωρίτερα. Πριν από την εκτέλεση του σημειωματαρίου, χρησιμοποιήστε το Κέντρο εποπτείας για να επιβεβαιώσετε ότι τα Διαθέσιμα συμπλέγματα είναι μεγαλύτερα από το μηδέν. Ένας εισερχόμενος φορητός υπολογιστής λαμβάνει μια θερμή συνεδρία μόνο όταν υπάρχει διαθέσιμο συμβατό ενυδατωμένο σύμπλεγμα.

Παρακολούθηση της κατάστασης της πισίνας

Για να ελέγξετε την κατάσταση της προσαρμοσμένης ζωντανής πισίνας σας:

  1. Στην πύλη Fabric, ανοίξτε το Κέντρο παρακολούθησης.

  2. Βρείτε το περιβάλλον που δημοσιεύσατε και επιλέξτε τα αποσιωπητικά (...) για να ανοίξετε το μενού περιβάλλοντος.

  3. Επιλέξτε Προβολή λεπτομερειών.

    Στιγμιότυπο οθόνης που εμφανίζει την κατάσταση του χώρου συγκέντρωσης Live στο κέντρο παρακολούθησης.

  4. Στο δεξιό τμήμα παραθύρου, αναπτύξτε την Κατάσταση χώρου συγκέντρωσης σε πραγματικό χρόνο για να προβάλετε την τρέχουσα κατάσταση του χώρου συγκέντρωσης.

Η κατάσταση του live pool περιλαμβάνει λεπτομέρειες όπως:

  • Κατάσταση πισίνας: Για παράδειγμα, Ενεργή, Ενυδατική, Αδράνεια ή Διακοπή
  • Διαθέσιμα συμπλέγματα: Αριθμός συμπλεγμάτων έτοιμων για συνεδρίες σημειωματαρίου
  • Απασχολημένα συμπλέγματα: Αριθμός συμπλεγμάτων που εκτελούνται αυτήν τη στιγμή
  • Επόμενο χρονοδιάγραμμα: Παράθυρο επερχόμενης δραστηριότητας

Βέλτιστες πρακτικές

Για να αξιοποιήσετε στο έπακρο τις προσαρμοσμένες ζωντανές πισίνες, λάβετε υπόψη τις ακόλουθες βέλτιστες πρακτικές για τη διαμόρφωση και τη διαχείριση:

Βελτιστοποίηση για κόστος και απόδοση

  • Στοίχιση πλήθους με τη ζήτηση: Ορίστε τον μέγιστο αριθμό συμπλεγμάτων με βάση τις αναμενόμενες ταυτόχρονες περιόδους σύνδεσης. Οι υπερβολικές προβλέψεις αυξάνουν το κόστος.
  • Παρακολούθηση χρήσης: Ελέγχετε τακτικά τις μετρήσεις της πισίνας και προσαρμόζετε τον αριθμό των συμπλεγμάτων εάν είναι απαραίτητο.
  • Κλιμακώστε αποτελεσματικά τα χρονοδιαγράμματα: Αποφύγετε τα επικαλυπτόμενα χρονοδιαγράμματα σε πολλές πισίνες, εκτός εάν είναι απαραίτητο.
  • Αξιοποιήστε το χρονικό όριο αδράνειας: Ορίστε τα κατάλληλα χρονικά όρια αδράνειας για να διατηρήσετε μια ισορροπία μεταξύ της διαθεσιμότητας πόρων και της αποφυγής συχνών επανεκκινήσεων συμπλέγματος.

Μέγεθος συμπλέγματος

Κατά τη διαμόρφωση της πισίνας σας, λάβετε υπόψη τις ακόλουθες ρυθμίσεις και συστάσεις:

  • Μέγεθος συμπλέγματος: Ο αριθμός των παρουσιών του εκτελεστή για περιόδους λειτουργίας σημειωματαρίου (εύρος: 1-16).
  • Μέγιστος αριθμός συστάδων: Ο μέγιστος αριθμός συστάδων που πρέπει να διατηρούνται ενυδατωμένες. Ορισμός με βάση τις αναμενόμενες ταυτόχρονες συνεδρίες.
  • Χρονικό όριο αδράνειας: Για πόσο χρονικό διάστημα παραμένει εκχωρημένο ένα αχρησιμοποίητο σύμπλεγμα πριν από τον τερματισμό του από το Fabric.
Τύπος φόρτου εργασίας Προτεινόμενο μέγεθος Περιγραφή
Διερευνητική ανάλυση 2-4 πυρήνες Ελαφρύς φόρτος εργασίας, γρήγορη εξερεύνηση δεδομένων
Μεσαία υπολογιστική 8-12 πυρήνες Ημερήσιες αναφορές, σύνολα δεδομένων μεσαίου μεγέθους
Βαρύς υπολογισμός 14-16 πυρήνες Μεγάλα σύνολα δεδομένων, σύνθετοι μετασχηματισμοί

Διαχείριση εξαρτήσεων βιβλιοθήκης

  • Χρήση ομαδοποίησης περιβάλλοντος: Προεγκαταστήστε κοινές βιβλιοθήκες στο περιβάλλον αντί για εγκατάσταση εν κινήσει.
  • Διαχείριση εκδόσεων περιβάλλοντος: Η ενημέρωση ενός συνδεδεμένου περιβάλλοντος απαιτεί την εκ νέου δημοσίευση και την ανανέωση των ενυδατωμένων συμπλεγμάτων.
  • Ανανέωση ενυδατωμένων συμπλεγμάτων: Μετά από αλλαγές περιβάλλοντος, ανανεώστε την πισίνα ή περιμένετε τον επόμενο προγραμματισμένο κύκλο για να εφαρμόσετε αλλαγές.

Προσαρμογή στα μοτίβα φόρτου εργασίας

  • Παρακολούθηση εξωτερικής συμπεριφοράς: Προσαρμόστε τα χρονικά όρια αδράνειας με βάση τα πραγματικά μοτίβα χρήσης.
  • Κοινή χρήση μεταξύ περιόδων λειτουργίας: Εξετάστε το ενδεχόμενο να κάνετε κοινή χρήση του ίδιου περιβάλλοντος σε πολλούς χώρους συγκέντρωσης, εάν έχετε συνεπή μοτίβα φόρτου εργασίας για τη βελτίωση της χρήσης πόρων.

Προγραμματισμός βέλτιστων πρακτικών

  • Ευθυγράμμιση με μοτίβα φόρτου εργασίας: Προγραμματίστε τις ενεργές ώρες κατά τις οποίες η ομάδα σας εκτελεί αλληλεπιδραστικά ή προγραμματισμένα σημειωματάρια.
  • Χρόνος buffer: Ξεκινήστε το πρόγραμμα 60-90 λεπτά πριν από την πρώτη αναμενόμενη λειτουργία του φορητού υπολογιστή για να επιτρέψετε την ολοκλήρωση της ενυδάτωσης.
  • Επαλήθευση διαθεσιμότητας: Πριν από μια προγραμματισμένη εκτέλεση με ευαισθησία σε λανθάνοντα χρόνο, επιβεβαιώστε ότι η δυναμική ομάδα έχει τουλάχιστον ένα διαθέσιμο σύμπλεγμα στον διανομέα παρακολούθησης.
  • Εξετάστε τις ζώνες ώρας: Εάν η ομάδα σας εκτείνεται σε πολλές ζώνες ώρας, επεκτείνετε το χρονοδιάγραμμα για να καλύψετε τα απαιτούμενα χρονικά εύρη.

Αντιμετώπιση προβλημάτων

Η αντιμετώπιση προβλημάτων προσαρμοσμένων ζωντανών χώρων συγκέντρωσης περιλαμβάνει τον έλεγχο της κατάστασης του χώρου συγκέντρωσης, της εύρυθμης λειτουργίας του περιβάλλοντος και της διαμόρφωσης χρονοδιαγράμματος, όπως περιγράφεται στα ακόλουθα σενάρια:

Η πισίνα παραμένει μη διαθέσιμη

Εάν η πισίνα αποτύχει να ενεργοποιηθεί ή εμφανίζει την κατάσταση "Μη διαθέσιμο":

  • Ελέγξτε ότι οι εκχωρημένοι πόροι Fabric είναι ενεργοί και έχουν εκχωρηθεί αυτήν τη στιγμή στον χώρο εργασίας
  • Βεβαιωθείτε ότι το συνδεδεμένο περιβάλλον είναι σε κατάσταση "Έτοιμο".
  • Βεβαιωθείτε ότι το συνημμένο περιβάλλον είναι δημοσιευμένο και δεν έχει σφάλματα.

Η ενυδάτωση διαρκεί περισσότερο από το αναμενόμενο

Εάν η ενυδάτωση είναι πιο αργή από την αναμενόμενη:

  • Ελέγξτε τις εξαρτήσεις περιβάλλοντος και την κατάσταση κατασκευής.
  • Βεβαιωθείτε ότι το περιβάλλον είναι σε κατάσταση "Έτοιμο".
  • Παρακολουθήστε τις λεπτομέρειες της πισίνας για περισσότερες πληροφορίες.

Οι περίοδοι λειτουργίας ή τα σημειωματάρια αποτυγχάνουν να ξεκινήσουν

Εάν οι περίοδοι λειτουργίας σημειωματαρίου αποτύχουν να ξεκινήσουν ακόμη και με έναν ενεργό χώρο συγκέντρωσης:

  • Βεβαιωθείτε ότι η συνεδρία χρησιμοποιεί το σωστό περιβάλλον.
  • Βεβαιωθείτε ότι η πισίνα είναι σε κατάσταση "Διαθέσιμη" και πλήρως ενυδατωμένη.

Οι ρυθμίσεις ζωντανής πισίνας δεν είναι διαθέσιμες

Εάν δεν μπορείτε να δημιουργήσετε ή να ενημερώσετε τη διαμόρφωση του live pool:

  • Επαληθεύστε ότι έχετε τον ρόλο Διαχειριστής ή Μέλος χώρου εργασίας.
  • Εάν έχετε ρόλο μέλους , ζητήστε από έναν διαχειριστή χώρου εργασίας να ενεργοποιήσει την Προσαρμογή ρύθμισης παραμέτρων υπολογιστικής λειτουργίας για στοιχεία.
  • Βεβαιωθείτε ότι ένας διαχειριστής χώρου εργασίας δημιούργησε μια προσαρμοσμένη ομάδα Spark που μπορείτε να επιλέξετε στο περιβάλλον.