Κοινή χρήση μέσω


Τι είναι ένα lakehouse στο Microsoft Fabric;

Το Microsoft Fabric Lakehouse είναι μια πλατφόρμα αρχιτεκτονικής δεδομένων για την αποθήκευση, τη διαχείριση και την ανάλυση δομημένων και μη δομημένων δεδομένων σε μία μόνο θέση. Είναι μια ευέλικτη λύση με δυνατότητα κλιμάκωσης που επιτρέπει στους οργανισμούς να χειρίζονται μεγάλους όγκους δεδομένων χρησιμοποιώντας διάφορα εργαλεία και πλαίσια για την επεξεργασία και ανάλυση αυτών των δεδομένων. Ενοποιείται με άλλα εργαλεία διαχείρισης και ανάλυσης δεδομένων για την παροχή μιας ολοκληρωμένης λύσης για τη διαχείριση και ανάλυση δεδομένων.

Gif of overall lakehouse experience.

Τελικό σημείο ανάλυσης SQL Lakehouse

Το Lakehouse δημιουργεί ένα επίπεδο εξυπηρέτησης δημιουργώντας αυτόματα ένα τελικό σημείο ανάλυσης SQL και ένα προεπιλεγμένο μοντέλο σημασιολογίας κατά τη δημιουργία. Αυτή η νέα λειτουργία see-through επιτρέπει στον χρήστη να εργάζεται απευθείας πάνω από τους πίνακες Delta στη λίμνη για να παρέχει μια εμπειρία χωρίς τριβές και αποδοτικής λειτουργίας από την πρόσληψη δεδομένων έως την αναφορά.

Είναι σημαντικό να έχετε υπόψη ότι το τελικό σημείο ανάλυσης SQL είναι μια εμπειρία μόνο για ανάγνωση και δεν υποστηρίζει την πλήρη περιοχή επιφάνειας T-SQL μιας αποθήκης δεδομένων συναλλαγών.

Σημείωμα

Μόνο οι πίνακες σε μορφή Delta είναι διαθέσιμοι στο τελικό σημείο ανάλυσης SQL. Δεν είναι δυνατή η ανάθεση ερωτημάτων σε parquet, CSV και άλλες μορφές χρησιμοποιώντας το τελικό σημείο ανάλυσης SQL. Εάν δεν βλέπετε τον πίνακά σας, θα χρειαστεί να τον μετατρέψετε σε μορφή Delta.

Αυτόματος εντοπισμός και καταχώρηση πίνακα

Ο αυτόματος εντοπισμός και εγγραφή πίνακα είναι μια δυνατότητα του Lakehouse που παρέχει ένα πλήρως διαχειριζόμενο αρχείο στην εμπειρία πίνακα για μηχανικούς δεδομένων και επιστήμονες δεδομένων. Μπορείτε να αποθέσετε ένα αρχείο στη διαχειριζόμενη περιοχή του Lakehouse και το σύστημα το επικυρώνει αυτόματα για υποστηριζόμενες δομημένες μορφές και το καταχωρεί στο μεταστάσιο με τα απαραίτητα μετα-δεδομένα, όπως ονόματα στηλών, μορφές, συμπίεση και πολλά άλλα. (Προς το παρόν, η μόνη υποστηριζόμενη μορφή είναι ο πίνακας Delta.) Στη συνέχεια, μπορείτε να αναφέρετε το αρχείο ως πίνακα και να χρησιμοποιήσετε τη σύνταξη SparkSQL για να αλληλεπιδράσετε με τα δεδομένα.

Αλληλεπίδραση με το στοιχείο Lakehouse

Ένας μηχανικός δεδομένων μπορεί να αλληλεπιδράσει με τη λίμνη και τα δεδομένα εντός της λίμνης με διάφορους τρόπους:

  • Εξερεύνηση Lakehouse: Η εξερεύνηση είναι η κύρια σελίδα αλληλεπίδρασης Lakehouse. Μπορείτε να φορτώσετε δεδομένα στο Lakehouse σας, να εξερευνήσετε δεδομένα στο Lakehouse χρησιμοποιώντας την εξερεύνηση αντικειμένων, να ορίσετε ετικέτες MIP και διάφορα άλλα πράγματα. Μάθετε περισσότερα σχετικά με την εμπειρία εξερεύνησης: Περιηγηθείτε στην εξερεύνηση του Fabric Lakehouse.

  • Σημειωματάρια: Οι μηχανικοί δεδομένων μπορούν να χρησιμοποιήσουν το σημειωματάριο για να γράψουν κώδικα για ανάγνωση, μετασχηματισμό και εγγραφή απευθείας στο Lakehouse ως πίνακες ή/και φακέλους. Μπορείτε να μάθετε περισσότερα σχετικά με τον τρόπο χρήσης σημειωματάριων για το Lakehouse: Εξερευνήστε τα δεδομένα στο lakehouse με ένα σημειωματάριο και Πώς μπορείτε να χρησιμοποιήσετε ένα σημειωματάριο για να φορτώσετε δεδομένα στο lakehouse σας.

  • Διοχετεύσεις: Οι μηχανικοί δεδομένων μπορούν να χρησιμοποιήσουν εργαλεία ενοποίησης δεδομένων, όπως το εργαλείο αντιγραφής διοχέτευσης για την άντληση δεδομένων από άλλες προελεύσεις και τη γη στο Lakehouse. Βρείτε περισσότερες πληροφορίες σχετικά με τον τρόπο χρήσης της δραστηριότητας αντιγραφής: Πώς μπορείτε να αντιγράψετε δεδομένα χρησιμοποιώντας αντιγραφή δραστηριότητας.

  • Ορισμοί εργασίας Apache Spark: Οι μηχανικοί δεδομένων μπορούν να αναπτύξουν ισχυρές εφαρμογές και να οργανώσουν την εκτέλεση των μεταγλωττισμένων εργασιών Spark σε Java, Scala και Python. Μάθετε περισσότερα σχετικά με τις εργασίες Spark: Τι είναι ο ορισμός εργασίας Apache Spark;

  • Ροές δεδομένων Gen 2: Οι μηχανικοί δεδομένων μπορούν να χρησιμοποιήσουν το Dataflows Gen 2 για την πρόσληψη και προετοιμασία των δεδομένων τους. Βρείτε περισσότερες πληροφορίες σχετικά με τη φόρτωση δεδομένων χρησιμοποιώντας ροές δεδομένων: Δημιουργήστε την πρώτη ροή δεδομένων σας για τη λήψη και τον μετασχηματισμό δεδομένων.

Μάθετε περισσότερα σχετικά με τους διαφορετικούς τρόπους φόρτωσης δεδομένων στο lakehouse σας: Επιλογές για τη λήψη δεδομένων στο Fabric Lakehouse.

Πολλαπλές εργασίες με lakehouse

Η εμπειρία πολλαπλών εργασιών παρέχει μια σχεδίαση καρτέλας προγράμματος περιήγησης που σας επιτρέπει να ανοίγετε και να εναλλάσσεστε μεταξύ πολλών στοιχείων απρόσκοπτα, επιτρέποντάς σας να διαχειρίζεστε την αποθήκη δεδομένων σας πιο αποτελεσματικά από ποτέ. Όχι άλλα ταχυδακτυλουργίες μεταξύ διαφορετικών παραθύρων ή απώλεια παρακολούθησης των εργασιών σας. Το Lakehouse παρέχει μια βελτιωμένη εμπειρία πολλαπλών εργασιών για να κάνετε το ταξίδι σας στη διαχείριση δεδομένων όσο το δυνατόν πιο αποδοτικό και φιλικό προς τον χρήστη, με τις ακόλουθες δυνατότητες:

  • Διατήρηση λειτουργιών που εκτελούνται: Μπορείτε να αποστείλετε ή να εκτελέσετε τη λειτουργία φόρτωσης δεδομένων σε μία καρτέλα και να ελέγξετε μια άλλη εργασία σε διαφορετική καρτέλα. Με τις βελτιωμένες πολλαπλές εργασίες, οι λειτουργίες που εκτελούνται δεν ακυρώνονται κατά την περιήγηση μεταξύ καρτελών. Μπορείτε να εστιάσετε στην εργασία σας χωρίς διακοπές.

  • Διατηρήστε το περιβάλλον σας: Επιλεγμένα αντικείμενα, πίνακες δεδομένων ή αρχεία παραμένουν ανοιχτά και άμεσα διαθέσιμα κατά την εναλλαγή μεταξύ καρτελών. Το περιβάλλον του data lakehouse είναι πάντα στη διάθεσή σας.

  • Επανάληψη φόρτωσης λίστας χωρίς αποκλεισμό: Ένας μηχανισμός επαναφόρτωσης χωρίς αποκλεισμό για τα αρχεία και τους πίνακες σας. Μπορείτε να συνεχίσετε να εργάζεστε ενώ η λίστα ανανεώνεται στο παρασκήνιο. Εξασφαλίζει ότι έχετε τα πιο πρόσφατα δεδομένα, παρέχοντάς σας παράλληλα μια ομαλή και αδιάκοπη εμπειρία.

  • Σαφώς καθορισμένες ειδοποιήσεις: Οι αναδυόμενες ειδοποιήσεις καθορίζουν από ποια λίμνη προέρχονται, διευκολύνοντας την παρακολούθηση αλλαγών και ενημερώσεων στο περιβάλλον πολλαπλών εργασιών.

Προσβάσιμη σχεδίαση lakehouse

Η προσβασιμότητα ήταν πάντα μια κορυφαία προτεραιότητα για να διασφαλιστεί ότι το Lakehouse είναι περιεκτικό και φιλικό προς τον χρήστη για όλους. Ακολουθούν οι βασικές πρωτοβουλίες που έχουμε υλοποιήσει μέχρι στιγμής για την υποστήριξη της προσβασιμότητας:

  • Συμβατότητα αναγνώστη οθόνης: Μπορείτε να εργαστείτε απρόσκοπτα με δημοφιλή προγράμματα ανάγνωσης οθόνης, επιτρέποντας στους χρήστες με προβλήματα όρασης να περιηγούνται και να αλληλεπιδρούν αποτελεσματικά με την πλατφόρμα μας.

  • Επανάληψη ροής κειμένου Δυναμική σχεδίαση που προσαρμόζεται σε διαφορετικά μεγέθη και προσανατολισμούς οθόνης. Δυναμική ροή κειμένου και περιεχομένου, διευκολύνοντας τους χρήστες να προβάλλουν και να αλληλεπιδρούν με την εφαρμογή μας σε διάφορες συσκευές.

  • Περιήγηση με το πληκτρολόγιο: Βελτιωμένη περιήγηση με το πληκτρολόγιο για να επιτρέπεται στους χρήστες να μετακινούνται στο lakehouse χωρίς να βασίζονται σε ποντίκι, βελτιώνοντας την εμπειρία για άτομα με κινητικές δυσκολίες.

  • Εναλλακτικό κείμενο για εικόνες: Όλες οι εικόνες περιλαμβάνουν τώρα ένα περιγραφικό εναλλακτικό κείμενο, το οποίο επιτρέπει στα προγράμματα ανάγνωσης οθόνης να μεταφέρουν σημαντικές πληροφορίες.

  • Πεδία φορμών και Ετικέτες: Όλα τα πεδία φόρμας έχουν συσχετισμένες ετικέτες, απλοποιώντας την εισαγωγή δεδομένων για όλους, συμπεριλαμβανομένων εκείνων που χρησιμοποιούν προγράμματα ανάγνωσης οθόνης.

Σε αυτή την επισκόπηση, έχετε μια βασική κατανόηση ενός lakehouse. Προχωρήστε στο επόμενο άρθρο για να μάθετε πώς μπορείτε να δημιουργήσετε και να χρησιμοποιήσετε το δικό σας lakehouse: