Τι είναι ο πράκτορας μηχανικής δεδομένων Fabric (Project Osmos); (έκδοση προεπισκόπησης)

Ο παράγοντας μηχανικής δεδομένων Fabric (Project Osmos) είναι μια αυτόνομη δυνατότητα μηχανικής δεδομένων για το Microsoft Fabric. Εκτελεί μόνιμες εργασίες που σχεδιάζουν, εκτελούν και επικυρώνουν εργασίες μηχανικής δεδομένων σε πόρους Fabric στους οποίους έχετε εξουσιοδότηση πρόσβασης.

Από ένα υποστηριζόμενο πρόγραμμα-πελάτη γραμμής εντολών, εισαγάγετε ένα αποτέλεσμα Project (μια περιγραφή της πλήρους εργασίας μηχανικής δεδομένων από τερματικό σε τερματικό) και επιλέξτε το lakehouse Fabric που φιλοξενεί την εργασία. Το Project Osmos μπορεί να επιθεωρήσει δεδομένα, να δημιουργήσει και να δοκιμάσει σημειωματάρια Spark, να μετασχηματίσει δεδομένα, να γράψει πίνακες Delta και να επικυρώσει αποτελέσματα. Οι εργασίες συνεχίζουν να εκτελούνται στο Fabric μετά την αποσύνδεση του τοπικού προγράμματος-πελάτη.

Σημαντικό

Ο πράκτορας μηχανικής δεδομένων (Project Osmos) βρίσκεται σε προεπισκόπηση. Οι δυνατότητες προεπισκόπησης κυκλοφορούν με περιορισμένες δυνατότητες και υπόκεινται σε ξεχωριστούς συμπληρωματικούς όρους προεπισκόπησης. Δεν προορίζονται για χρήση παραγωγής, δεν υπόκεινται σε συμβάσεις παροχής υπηρεσιών και ενδέχεται να είναι διαθέσιμες μόνο σε επιλεγμένες περιοχές. Για περισσότερες πληροφορίες, ανατρέξτε στην ενότητα Microsoft Fabric πληροφορίες προεπισκόπησης.

Βασικές δυνατότητες

Ο πράκτορας μηχανικής δεδομένων (Project Osmos) υλοποιεί και εκτελεί εργασίες μηχανικής δεδομένων σε μια διαχειριζόμενη εργασία Fabric. Χρησιμοποιεί SparkCore, μόνιμη κατάσταση, ελέγχους πρόσβασης, παρακολούθηση προόδου και επικύρωση έναντι δεδομένων-στόχων. Πολλαπλοί συντονισμένοι πράκτορες δημιουργούν και αξιολογούν πολλαπλές επιλογές υλοποίησης για την παροχή αποτελεσμάτων ποιότητας παραγωγής.

Το Project Osmos προσθέτει δυνατότητες ειδικά για το Fabric:

  • Εκτέλεση που φιλοξενείται από το Fabric: Οι λειτουργίες κώδικα και δεδομένων εκτελούνται με το Fabric Spark και το OneLake και όχι μόνο σε ένα περιβάλλον τοπικής ανάπτυξης.
  • Μόνιμη κατάσταση εργασίας: Η εργασία συνεχίζει να εκτελείται μετά την αποσύνδεση του τοπικού υπολογιστή-πελάτη και μπορεί να συνεχιστεί χωρίς να ξεκινήσει από την αρχή.
  • Περιβάλλον Lakehouse: Το Project Osmos επιλύει τον χώρο εργασίας Fabric και το προεπιλεγμένο lakehouse περιόδου λειτουργίας Spark από τη διεύθυνση URL lakehouse που παρέχετε.
  • Λειτουργικά προστατευτικά κιγκλιδώματα: Πριν από την εκτέλεση, εξετάζετε τις ρυθμίσεις για τα δικαιώματα, την ασφάλεια εγγραφής, τη συμπεριφορά επανάληψης, την εξέλιξη σχήματος, τα τεχνουργήματα και την προσπάθεια συλλογισμού.
  • Ενσωματωμένη επικύρωση: Η εργασία μπορεί να εκτελέσει τον παραγόμενο κώδικα και να ελέγξει τον αριθμό γραμμών, τα μηδενικά, τα σχήματα και άλλα κριτήρια επιτυχίας στο περιβάλλον προορισμού.
  • Κοινόχρηστη ορατότητα: Οποιοσδήποτε έχει πρόσβαση στο lakehouse όπου ξεκινήσατε την εργασία μπορεί να ελέγξει την πρόοδό του και να παράσχει πληροφορίες εάν χρειάζεται.

Αυτές οι δυνατότητες μετατρέπουν ένα αποτέλεσμα Project σε μια διαχειριζόμενη μονάδα εργασίας μηχανικής δεδομένων και όχι σε μια παροδική απόκριση συνομιλίας.

Πώς λειτουργεί ο data engineering agent (Project Osmos)

Το Project Osmos χρησιμοποιεί έναν διαχειριζόμενο κύκλο ζωής για κάθε εργασία μηχανικής δεδομένων:

  • Ορισμός: Το αποτέλεσμα του Project προσδιορίζει την πλήρη εργασία μηχανικής δεδομένων από άκρο σε άκρο και η διεύθυνση URL του lakehouse προσδιορίζει το lakehouse Fabric που το φιλοξενεί.
  • Σχέδιο: Το Project Osmos αναλύει το διαθέσιμο περιβάλλον και προτείνει ρυθμίσεις λειτουργίας για έλεγχο.
  • Εκτέλεση: Η εργασία εκτελείται στο Fabric και μπορεί να δημιουργήσει, να δοκιμάσει και να βελτιώσει αντικείμενα μηχανικής δεδομένων.
  • Επικύρωση: Η εργασία ελέγχει τα αποτελέσματά της σε σχέση με τα καθορισμένα κριτήρια επιτυχίας και αναφέρει τα αποτελέσματα.
  • Οθόνη: Η εργασία παραμένει διαθέσιμη από το πρόγραμμα-πελάτη γραμμής εντολών και την εμπειρία εργασιών lakehouse.

Το επιλεγμένο lakehouse είναι το προεπιλεγμένο lakehouse για την περίοδο λειτουργίας Spark. Δεν είναι αυτόματα η μόνη πηγή ή προορισμός. Το αποτέλεσμα του Project, τα δικαιώματα Fabric και οι αναθεωρημένες ρυθμίσεις λειτουργίας καθορίζουν το εύρος της εργασίας.

Για τα βήματα για τη δημιουργία της πρώτης σας εργασίας, ανατρέξτε στο θέμα Γρήγορα αποτελέσματα με το Project Osmos.

Επιλέξτε την κατάλληλη περίπτωση χρήσης

Το Project Osmos έχει σχεδιαστεί για εργασίες μηχανικής δεδομένων προσανατολισμένες στα αποτελέσματα που επωφελούνται από αυτόνομο σχεδιασμό, εκτέλεση και επικύρωση.

Υπόθεση χρήσης Παράδειγμα αποτελέσματος
Προετοιμασία δεδομένων Καθαρίστε αρχεία πωλήσεων, τυποποιήστε τύπους, καταργήστε μη έγκυρες σειρές και γράψτε έναν επικυρωμένο πίνακα Delta.
Ενσωμάτωση πίνακα Ενώστε παραγγελίες, πελάτες και δεδομένα προϊόντων και, στη συνέχεια, δημιουργήστε έναν επιμελημένο πίνακα για κατάντη αναλυτικά στοιχεία.
Εκσυγχρονισμός Lakehouse Μετατρέψτε έναν υπάρχοντα μετασχηματισμό σε Spark, δημιουργήστε ένα δοκιμασμένο σημειωματάριο και επικυρώστε το νέο αποτέλεσμα.
Αρχιτεκτονική μενταγιόν Δημιουργήστε μετασχηματισμούς μπρούτζου, ασημιού και χρυσού από αρχεία προέλευσης ως μία ολοκληρωμένη εργασία.
Αποκατάσταση ποιότητας δεδομένων Δημιουργήστε προφίλ ενός πίνακα, εντοπίστε προβλήματα ποιότητας, εφαρμόστε εγκεκριμένες διορθώσεις και αναφέρετε μετρήσεις πριν και μετά.
Βελτίωση απόδοσης Εξετάστε τους πίνακες Delta, προτείνετε αλλαγές διαμερισμάτων ή διάταξης, εφαρμόστε εγκεκριμένες αλλαγές και μετρήστε τα αποτελέσματα.
Βοήθεια για τη μετεγκατάσταση Μετατρέψτε τα αποσπάσματα παλαιού τύπου σε ένα μοντέλο έτοιμο για Fabric, διατηρώντας παράλληλα τους επιχειρηματικούς κανόνες και επικυρώνοντας τα σύνολα.

Το Project Osmos έχει κατασκευαστεί για να επιλύει προκλήσεις μηχανικής δεδομένων. Δεν προορίζεται για ένα γρήγορο ερώτημα, μια αλλαγή αναφοράς Power BI ή άλλες εργασίες μηχανικής που δεν σχετίζονται με δεδομένα.

Εργαστείτε σε όλο το CLI και το Fabric

Το Project Osmos χρησιμοποιεί δύο συνδεδεμένες εμπειρίες. Μπορείτε να δημιουργήσετε και να κατευθύνετε εργασίες από τη γραμμή εντολών σας και να προβάλετε την πρόοδο των εργασιών στην εφαρμογή Fabric:

  • Εμπειρία γραμμής εντολών: Χρησιμοποιήστε το GitHub Copilot CLI, Codex ή Claude Code για να δημιουργήσετε μια εργασία, να εισαγάγετε ένα αποτέλεσμα Project, να εξετάσετε τις ρυθμίσεις λειτουργίας και να στείλετε οδηγίες παρακολούθησης.
  • Εμπειρία Fabric lakehouse: Περιηγηθείτε στις εργασίες του lakehouse, ελέγξτε την κατάσταση, ανοίξτε μια εργασία, εξετάστε τη δραστηριότητα και τα σφάλματα και επιθεωρήστε τα παραγόμενα αποτελέσματα.

Και οι δύο εμπειρίες αναφέρονται στην ίδια εργασία και αναγνωριστικό εργασίας που φιλοξενείται στο Fabric.

Επόμενα βήματα

  • Τελευταία ενημέρωση στις