Ποια είναι η δομή αποθήκευσης για τις ροές δεδομένων ανάλυσης;

Οι ροές δεδομένων ανάλυσης αποθηκεύουν δεδομένα και μετα-δεδομένα στο Azure Data Lake Υπηρεσία αποθήκευσης. Οι ροές δεδομένων αξιοποιούν μια τυπική δομή για την αποθήκευση και την περιγραφή δεδομένων που έχουν δημιουργηθεί στη λίμνη, η οποία ονομάζεται φάκελοι Common Data Model. Σε αυτό το άρθρο, θα μάθετε περισσότερα σχετικά με το πρότυπο χώρου αποθήκευσης που χρησιμοποιούν οι ροές δεδομένων στο παρασκήνιο.

Υπηρεσία αποθήκευσης χρειάζεται μια δομή για μια αναλυτική ροή δεδομένων

Εάν η ροή δεδομένων είναι τυπική, τότε τα δεδομένα αποθηκεύονται στο Dataverse. Το Dataverse είναι σαν ένα σύστημα βάσης δεδομένων. έχει την έννοια των πινάκων, των προβολών και ούτω καθεξής. Το Dataverse είναι μια δομημένη επιλογή αποθήκευσης δεδομένων που χρησιμοποιείται από τυπικές ροές δεδομένων.

Ωστόσο, όταν η ροή δεδομένων είναι αναλυτική, τα δεδομένα αποθηκεύονται στο Azure Data Lake Υπηρεσία αποθήκευσης. Τα δεδομένα και τα μετα-δεδομένα μιας ροής δεδομένων αποθηκεύονται σε έναν φάκελο Common Data Model. Δεδομένου ότι ένας λογαριασμός χώρου αποθήκευσης μπορεί να έχει πολλές ροές δεδομένων αποθηκευμένες σε αυτόν, έχει εισαχθεί μια ιεραρχία φακέλων και υποφακέλων για να σας βοηθήσει να οργανώσετε τα δεδομένα. Ανάλογα με το προϊόν στο οποίο δημιουργήθηκε η ροή δεδομένων, οι φάκελοι και οι υποφάκελοι μπορεί να αντιπροσωπεύουν χώρους εργασίας (ή περιβάλλοντα) και, στη συνέχεια, τον φάκελο Common Data Model της ροής δεδομένων. Μέσα στον φάκελο Common Data Model, αποθηκεύονται τόσο το σχήμα όσο και τα δεδομένα των πινάκων ροής δεδομένων. Αυτή η δομή ακολουθεί τα πρότυπα που ορίζονται για το Common Data Model.

Τι είναι η δομή αποθήκευσης του Common Data Model;

Το Common Data Model είναι μια δομή μετα-δεδομένων που έχει οριστεί για την επίτευξη συμμόρφωσης και συνέπειας για τη χρήση δεδομένων σε πολλές πλατφόρμες. Το Common Data Model δεν είναι χώρος αποθήκευσης δεδομένων, είναι ο τρόπος αποθήκευσης και ο ορισμός των δεδομένων.

Οι φάκελοι του Common Data Model ορίζουν τον τρόπο αποθήκευσης του σχήματος και των δεδομένων ενός πίνακα. Στο Azure Data Lake Υπηρεσία αποθήκευσης, τα δεδομένα είναι οργανωμένα σε φακέλους. Οι φάκελοι μπορούν να αντιπροσωπεύουν έναν χώρο εργασίας ή περιβάλλον. Σε αυτούς τους φακέλους, δημιουργούνται υποφάκελοι για κάθε ροή δεδομένων.

Τι υπάρχει σε έναν φάκελο ροής δεδομένων;

Κάθε φάκελος ροής δεδομένων περιέχει έναν υποφάκελο για κάθε πίνακα και ένα αρχείο μετα-δεδομένων με την ονομασία model.json.

Το αρχείο μετα-δεδομένων: model.json

Το model.json αρχείο είναι ο ορισμός μετα-δεδομένων της ροής δεδομένων. Αυτό είναι ένα αρχείο που περιέχει όλα τα μετα-δεδομένα ροής δεδομένων. Περιλαμβάνει μια λίστα πινάκων, στηλών και των τύπων δεδομένων τους σε κάθε πίνακα, τη σχέση μεταξύ πινάκων και ούτω καθεξής. Μπορείτε να εξαγάγετε εύκολα αυτό το αρχείο από μια ροή δεδομένων, ακόμα και αν δεν έχετε πρόσβαση στη δομή φακέλων Common Data Model.

Μπορείτε να χρησιμοποιήσετε αυτό το αρχείο JSON για να μετεγκαταστήσετε (ή να εισαγάγετε) τη ροή δεδομένων σας σε έναν άλλο χώρο εργασίας ή περιβάλλον.

Για να μάθετε ακριβώς τι περιλαμβάνει το αρχείο μετα-δεδομένων model.json, μεταβείτε στο αρχείο μετα-δεδομένων (model.json) για το Common Data Model.

Αρχεία δεδομένων

Εκτός από το αρχείο μετα-δεδομένων, ο φάκελος ροής δεδομένων περιλαμβάνει άλλους υποφακέλους. Μια ροή δεδομένων αποθηκεύει τα δεδομένα για κάθε πίνακα σε έναν υποφάκελο με το όνομα του πίνακα. Τα δεδομένα για έναν πίνακα μπορεί να διαιρεθούν σε πολλαπλά διαμερίσματα δεδομένων, αποθηκευμένα σε μορφή CSV.

Πώς μπορείτε να δείτε ή να αποκτήσετε πρόσβαση σε φακέλους του Common Data Model

Εάν χρησιμοποιείτε ροές δεδομένων που χρησιμοποιούν χώρο αποθήκευσης που παρέχεται από το προϊόν στο οποίο δημιουργήθηκαν, δεν θα έχετε απευθείας πρόσβαση σε αυτούς τους φακέλους. Σε αυτές τις περιπτώσεις, η λήψη δεδομένων από τις ροές δεδομένων απαιτεί τη χρήση της σύνδεσης ροής δεδομένων Microsoft Power Platform που είναι διαθέσιμη στην εμπειρία Λήψη δεδομένων στα Υπηρεσία Power BI, Power Apps και Dynamics 35 Πληροφορίες πελατών προϊόντα ή στο Power BI Desktop.

Για να μάθετε πώς λειτουργούν οι ροές δεδομένων και η εσωτερική ενοποίηση του Data Lake Υπηρεσία αποθήκευσης, μεταβείτε στην ενότητα Ενοποίηση ροών δεδομένων και Azure Data Lake (Προεπισκόπηση).

Εάν ο οργανισμός σας έχει ενεργοποιήσει τις ροές δεδομένων για να επωφεληθεί από τον λογαριασμό του Data Lake Υπηρεσία αποθήκευσης και έχει επιλεγεί ως προορισμός φόρτωσης για ροές δεδομένων, εξακολουθείτε να μπορείτε να λάβετε δεδομένα από τη ροή δεδομένων χρησιμοποιώντας τη σύνδεση ροής δεδομένων Power Platform, όπως αναφέρθηκε παραπάνω. Ωστόσο, μπορείτε επίσης να αποκτήσετε πρόσβαση στον φάκελο Common Data Model της ροής δεδομένων απευθείας μέσω της λίμνης, ακόμη και εκτός των εργαλείων και των υπηρεσιών Power Platform. Η πρόσβαση στη λίμνη είναι δυνατή μέσω της πύλης Azure, της Υπηρεσία αποθήκευσης Microsoft Azure Explorer ή οποιασδήποτε άλλης υπηρεσίας ή εμπειρίας που υποστηρίζει το Azure Data Lake Υπηρεσία αποθήκευσης. Περισσότερες πληροφορίες: Σύνδεση Azure Data Lake Storage Gen2 για αποθήκευση ροής δεδομένων

Επόμενα βήματα

• Χρησιμοποιήστε το Common Data Model για να βελτιστοποιήσετε το Azure Data Lake Υπηρεσία αποθήκευσης Gen2

• Το αρχείο μετα-δεδομένων (model.json) για το Common Data Model

• Προσθήκη ενός φακέλου CDM στο Power BI ως ροή δεδομένων (Προεπισκόπηση)

• Σύνδεση Connect Azure Data Lake Storage Gen2 για αποθήκευση ροών δεδομένων

• Ενοποίηση ροών δεδομένων και Azure Data Lake (Προεπισκόπηση)

• Ρύθμιση παραμέτρων ροής δεδομένων χώρου εργασίας (Προεπισκόπηση)