Λήψη δεδομένων από τον χώρο αποθήκευσης Azure

Σε αυτό το άρθρο, θα μάθετε πώς μπορείτε να λάβετε δεδομένα από τον χώρο αποθήκευσης Azure (κοντέινερ ADLS Gen2, κοντέινερ αντικειμένων blob ή μεμονωμένα αντικείμενα blob) σε έναν νέο ή υπάρχοντα πίνακα.

Προαπαιτούμενα στοιχεία

• Ένας χώρος εργασίας με εκχωρημένους πόρους με δυνατότητα Microsoft Fabric
• Μια βάση δεδομένων KQL με δικαιώματα επεξεργασίας
• Ένας λογαριασμός χώρου αποθήκευσης

Πηγή

1. Στην κάτω κορδέλα της βάσης δεδομένων KQL, επιλέξτε Λήψη δεδομένων.

   Στο παράθυρο Λήψη δεδομένων, επιλέγεται η καρτέλα Προέλευση.

2. Επιλέξτε την προέλευση δεδομένων από τη διαθέσιμη λίστα. Σε αυτό το παράδειγμα, κατά την πρόσληψη δεδομένων από τον χώρο αποθήκευσης Azure.

   

Ρύθμιση παραμέτρων

1. Επιλέξτε έναν πίνακα προορισμού. Εάν θέλετε να κάνετε πρόσληψη δεδομένων σε έναν νέο πίνακα, επιλέξτε + Νέος πίνακας και εισαγάγετε ένα όνομα πίνακα.

   Σημείωμα

   Τα ονόματα πινάκων μπορεί να έχουν έως 1024 χαρακτήρες, συμπεριλαμβανομένων διαστημάτων, αλφαριθμητικών, ενωτικών και υπογράμμισης. Δεν υποστηρίζονται ειδικοί χαρακτήρες.

2. Για να προσθέσετε την προέλευση δεδομένων σας, επικολλήστε τη συμβολοσειρά σύνδεσης χώρου αποθήκευσης στο πεδίο URI και, στη συνέχεια, επιλέξτε +. Ο παρακάτω πίνακας παραθέτει τις υποστηριζόμενες μεθόδους ελέγχου ταυτότητας και τα δικαιώματα που απαιτούνται για την πρόσληψη δεδομένων από τον χώρο αποθήκευσης Azure.

   Authentication method	Μεμονωμένο αντικείμενο blob	Κοντέινερ αντικειμένων blob	Azure Data Lake Storage Gen2
   Διακριτικό κοινόχρηστη πρόσβασης (SAS)	Ανάγνωση και εγγραφή	Ανάγνωση και λίστα	Ανάγνωση και λίστα
   Κλειδί πρόσβασης λογαριασμού χώρου αποθήκευσης

   Σημείωμα

   • Μπορείτε να προσθέσετε έως και 10 μεμονωμένα blob ή να προσλάβετε έως και 5000 blob από ένα μόνο κοντέινερ. Δεν μπορείτε να κάνετε πρόσληψη και των δύο ταυτόχρονα.
   • Κάθε αντικείμενο blob μπορεί να είναι έως 1 GB χωρίς συμπίεση.

   1. Εάν επικολλήσετε μια συμβολοσειρά σύνδεσης για ένα κοντέινερ αντικειμένων blob ή ένα Azure Data Lake Storage Gen2, μπορείτε τότε να προσθέσετε τα παρακάτω προαιρετικά φίλτρα:

      

      Ρύθμιση	Περιγραφή πεδίου
      Φίλτρα αρχείων (προαιρετικό)
      Folder path	Φιλτράρει δεδομένα σε αρχεία πρόσληψης με μια συγκεκριμένη διαδρομή φακέλου.
      Επέκταση αρχείου	Φιλτράρει δεδομένα σε αρχεία πρόσληψης μόνο με συγκεκριμένη επέκταση αρχείου.

3. Επιλέξτε Επόμενο

Επιθεωρήσει

Η καρτέλα Επιθεώρηση ανοίγει με μια προεπισκόπηση των δεδομένων.

Για να ολοκληρώσετε τη διαδικασία πρόσληψης, επιλέξτε Τέλος.

Προαιρετικά:

• Επιλέξτε Πρόγραμμα προβολής εντολών για να προβάλετε και να αντιγράψετε τις αυτόματες εντολές που δημιουργούνται από τις εισόδους σας.
• Χρησιμοποιήστε την αναπτυσσόμενη λίστα Αρχείο ορισμού σχήματος για να αλλάξετε το αρχείο από το οποίο συνάγεται το σχήμα.
• Αλλάξτε τη μορφή δεδομένων που συνάγεται αυτόματα επιλέγοντας την επιθυμητή μορφή από την αναπτυσσόμενη λίστα. Για περισσότερες πληροφορίες, ανατρέξτε στο θέμα Μορφές δεδομένων που υποστηρίζονται από τη Ευφυΐα σε πραγματικό χρόνο.
• Επεξεργασία στηλών.
• Εξερευνήστε τις Επιλογές για προχωρημένους με βάση τον τύπο δεδομένων.

Επεξεργασία στηλών

Σημείωμα

• Για τις μορφές σε μορφή πίνακα (CSV, TSV, PSV), δεν μπορείτε να αντιστοιχίζετε μια στήλη δύο φορές. Για να αντιστοιχίστε σε μια υπάρχουσα στήλη, διαγράψτε πρώτα τη νέα στήλη.
• Δεν μπορείτε να αλλάξετε έναν υπάρχοντα τύπο στήλης. Εάν προσπαθήσετε να αντιστοιχίσετε σε μια στήλη που έχει διαφορετική μορφή, μπορεί να καταλήξετε με κενές στήλες.

Οι αλλαγές που μπορείτε να κάνετε σε έναν πίνακα εξαρτώνται από τις ακόλουθες παραμέτρους:

• Ο τύπος πίνακα είναι νέος ή υπάρχων
• Ο τύπος αντιστοίχισης είναι νέος ή υπάρχων

Τύπος πίνακα	Τύπος αντιστοίχισης	Διαθέσιμες προσαρμογές
Νέος πίνακας	Νέα αντιστοίχιση	Μετονομασία στήλης, αλλαγή τύπου δεδομένων, αλλαγή προέλευσης δεδομένων, μετασχηματισμός αντιστοίχισης, προσθήκη στήλης, διαγραφή στήλης
Υπάρχων πίνακας	Νέα αντιστοίχιση	Προσθήκη στήλης (στην οποία μπορείτε έπειτα να αλλάξετε τον τύπο δεδομένων, να μετονομάσετε και να ενημερώσετε)
Υπάρχων πίνακας	Υπάρχουσα αντιστοίχιση	κανένας

Αντιστοίχιση μετασχηματισμών

Ορισμένες αντιστοιχίσεις μορφής δεδομένων (Parquet, JSON και Avro) υποστηρίζουν απλούς μετασχηματισμούς πρόσληψης. Για να εφαρμόσετε μετασχηματισμούς αντιστοίχισης, δημιουργήστε ή ενημερώστε μια στήλη στο παράθυρο Επεξεργασία στηλών .

Οι μετασχηματισμοί αντιστοίχισης μπορούν να εκτελεστούν σε μια στήλη τύπου συμβολοσειράς ή ημερομηνίας/ώρας, με την προέλευση να έχει τύπο δεδομένων ενσωματωμένο ή μεγάλο. Οι υποστηριζόμενοι μετασχηματισμοί αντιστοίχισης είναι οι εξής:

• DateTimeFromUnixSeconds
• DateTimeFromUnixMilliseconds
• DateTimeFromUnixMicroseconds
• DateTimeFromUnixNanoseconds

Επιλογές για προχωρημένους με βάση τον τύπο δεδομένων

Σε μορφή πίνακα (CSV, TSV, PSV):

• Εάν προσλάβετε μορφές σε μορφή πίνακα σε έναν υπάρχοντα πίνακα, μπορείτε να επιλέξετε Σύνθετη>Διατήρηση σχήματος πίνακα. Τα δεδομένα σε μορφή πίνακα δεν περιλαμβάνουν απαραίτητα τα ονόματα των στηλών που χρησιμοποιούνται για την αντιστοίχιση δεδομένων προέλευσης στις υπάρχουσες στήλες. Όταν αυτή η επιλογή είναι ενεργοποιημένη, η αντιστοίχιση γίνεται βάσει σειράς και το σχήμα πίνακα παραμένει το ίδιο. Εάν δεν επιλέγεται αυτή η επιλογή, δημιουργούνται νέες στήλες για εισερχόμενα δεδομένα, ανεξάρτητα από τη δομή των δεδομένων.

• Για να χρησιμοποιήσετε την πρώτη γραμμή ως ονόματα στηλών, επιλέξτε Πρώτη γραμμή για>προχωρημένους είναι κεφαλίδα στήλης.

  

JSON:

• Για να προσδιορίσετε τη διαίρεση στηλών των δεδομένων JSON, επιλέξτε Ένθετα επίπεδα για προχωρημένους>, από 1 έως 100.

• Εάν επιλέξετε Σύνθετες>γραμμές παράλειψης JSON με σφάλματα, τα δεδομένα προσλαμφύονται σε μορφή JSON. Εάν αφήσετε αυτό το πλαίσιο ελέγχου μη επιλεγμένο, τα δεδομένα προσλαμβάνεται σε μορφή πολλών ερωτηματών.

  

Σύνοψη

Στο παράθυρο Προετοιμασία δεδομένων, και τα τρία βήματα επισημαίνονται με πράσινα σημάδια ελέγχου όταν η πρόσληψη δεδομένων ολοκληρωθεί με επιτυχία. Μπορείτε να επιλέξετε μια κάρτα για υποβολή ερωτήματος, να αποθέσετε τα δεδομένα πρόσληψης ή να δείτε έναν πίνακα εργαλείων της σύνοψης πρόσληψης.

Σχετικό περιεχόμενο

• Για να διαχειριστείτε τη βάση δεδομένων σας, ανατρέξτε στο θέμα Διαχείριση δεδομένων
• Για να δημιουργήσετε, αποθηκεύσετε και εξαγάγετε ερωτήματα, ανατρέξτε στο θέμα Υποβολή ερωτημάτων σε ένα σύνολο ερωτημάτων KQL