Stvaranje Azure Synapse Link for Dataverse pomoću Azure Data Lake

Članak
08/05/2024

Azure Synapse Link možete upotrijebiti za povezivanje svojih podataka Microsoft Dataverse s Azure Data Lake Storage druge generacije da biste omogućili različite scenarije analitike. Ovaj vam članak pokazuje kako izvesti sljedeće zadatke:

Povežite svoje podatke za Dataverse sa svojim račuom Azure Data Lake Storage Gen2 pomoću usluge Azure Synapse Link.
Upravljajte tablicama Dataverse koje su uključene u Azure Synapse Link.
Nadzirite Azure Synapse Link.
Prekinite vezu s Azure Synapse Link.
Ponovno povežite Azure Synapse Link.
Pregledajte svoje podatke u Azure Data Lake i razumijte strukturu datoteke.

Napomena

Azure Synapse Link for Dataverse prije je bio poznat kao Izvoz u jezero podataka. Usluga je preimenovana u svibnju 2021. godine, a nastavit će izvoziti podatke u Azure Data Lake kao i Azure Synapse Analytics.

Preduvjeti

Azure Data Lake Storage druge generacije: morate imati račun Azure Data Lake Storage druge generacije i pristup ulozi Vlasnik i Suradnik spremišta podataka za blob. Vaš račun za pohranu mora omogućitihijerarhijski prostor naziva za početno postavljanje i delta sinkronizaciju. Pristup ključu računa za pohranu potreban je samo za početno postavljanje.

Napomena

Račun za pohranu mora biti stvoren u istom Microsoft Entra klijentu kao i vaš Power Apps klijent.
Da biste postavili Omogućeno iz odabranih virtualnih mreža i IP adresa za povezani račun za pohranu da biste odobrili pristup s odabranih IP adresa, morate stvoriti s Azure Synapse Link upravljanim identitetima.Koristite upravljane identitete za Azure s pohranom Azure Data Lake (bez postavljanja upravljanih identiteta morate omogućiti pristup javnoj mreži za resurse Azure za početno postavljanje i delta sinkronizaciju.)
Morate imati pristup uloge Čitač grupi resursa s računom za pohranu.
Da biste povezali okruženje s uslugom Azure Data Lake Storage Gen2, morate imati sigurnosnu ulogu administratora sustava Dataverse.
Mogu se izvesti samo tablice za koje je omogućeno praćenje promjena.
Izrada profila Azure Synapse Link u jednom Dataverse okruženju ograničena je na najviše 10.

Povezivanje Dataverse s Azure Data Lake Storage Gen2

Prijavite se u Power Apps i odaberite željeno okruženje.
U lijevom navigacijskom oknu odaberite Azure Synapse Link. Ako Azure Synapse Link nije vidljiv u oknu bočne ploče, odaberite ... Više i odaberite Otkrij sve. Azure Synapse Link nalazi se u odjeljku Upravljanje podacima.
Na naredbenoj traci odaberite + Nova veza na podatkovno jezero.
Odaberite Pretplata, Grupa resursa i Račun za pohranu. Uvjerite se da račun za pohranu ispunjava zahtjeve navedene u odjeljku Preduvjeti. Odaberite Dalje.

Napomena

Kao dio povezivanja okruženja za podatkovno jezero, vi odobravate pristup usluzi Azure Synapse Link vašem računu za pohranu. Obavezno slijedite preduvjete stvaranja i konfiguriranja Azure Data Lake Storage računa, te dodijelite sebi ulogu vlasnika na računu za pohranu. Uz to odobravate usluzi tijekova podataka platforme Power Platform pristup svom računu za pohranu. Dodatne informacije: Priprema samouslužnih podataka s pomoću tijekova podataka.
Dodajte tablice koje želite izvesti, a zatim odaberite Spremi. Mogu se izvesti samo tablice za koje je omogućeno praćenje promjena. Dodatne informacije: Omogućivanje praćenja promjena.

Možete slijediti korake u ovom članku da biste stvorili vezu iz jednog okruženja na više Azure podatkovnih jezera u pretplati na Azure. Slično tome, vezu možete stvoriti iz više okruženja sustava za isto Azure Data Lake, a sve unutar istog klijenta.

Napomena

Usluga Azure Synapse Link for Dataverse je besprijekorno integrirana u značajku Power Platform izvan kutije. Zadovoljava standarde sigurnosti i upravljanja postavljene za Power Platform pohranu podataka i upravljanje njima. Dodatne informacije: Pohrana podataka i upravljanje njima

Podaci koji se izvoze Azure Synapse Link uslugom šifriraju se pri prijenosu pomoću protokola Transport sloj Security (TLS) 1.2 ili novijeg i kriptiraju u mirovanju u Azure Data Lake Storage Gen2. Dodatno se u pohrani blob u mirovanju šifriraju i prolazni podaci. Šifriranje u Azure Data Lake Storage Gen2 pomaže pri zaštiti podataka, primjenu pravila sigurnosti tvrtke i ispunjavanju regulatornih zahtjeva usklađenosti. Više informacija: Šifriranje podataka u mirovanju Azure

Upravljanje podacima tablice u data lake

Nakon što postavite Azure Synapse Link, možete upravljati tablicama koje se izvoze na jedan od dva načina:

Na portalu autora Power Apps područja Azure Synapse Link, odaberite Upravljanje tablicama na naredbenoj traci da biste dodali ili uklonili jednu ili više povezanih tablica.
Na portalu za proizvođače Power Apps u području Tablice odaberite ... pored tablice, a zatim odaberite povezani data lake u koji želite izvesti podatke tablice.

Nadzirite Azure Synapse Link

Nakon što postavite Azure Synapse Link, možete pratiti Azure Synapse Link na kartici Tablice .

Azure Synapse Link praćenje

Tamo će biti popis tablica koje su dio odabranih Azure Synapse Link.
Postoje različite faze kroz koje cirkulira status sinkronizacije. NotStarted označava da tablica čeka na sinkronizaciju. Nakon što je početna sinkronizacija tablice dovršena, slijedi faza naknadne obrade u kojoj se neće provoditi inkrementalna ažuriranja. To može potrajati nekoliko sati, ovisno o veličini vaših podataka. Dok se odvijaju inkrementalna ažuriranja, datum zadnje sinkronizacije redovito će se ažurirati.
Stupac Broj prikazuje broj napisanih redaka. Kada je opcija Samo dodaj postavljena na Ne, to je ukupan broj zapisa. Kada je opcija Samo dodaj postavljena na Da, to je ukupan broj promjena.
Stupci Samo dodaj i Strategija podjele prikazuju upotrebu različitih naprednih konfiguracija.

Prekid veze s Azure Synapse Link

Odaberite željeni Azure Synapse Link da biste prekinuli vezu.
Odaberite Prekini vezu s data lake s naredbene trake.
Za brisanje oba datotečna sustava data lake odaberite Izbriši datotečni sustav data lake.
Odaberite Da i ostavite nekoliko minuta da se prekinu i izbrišu sve veze.

Ponovno povezivanje s Azure Synapse Link

Ako ste izbrisali datotečni sustav prilikom prekidanja veze, slijedite gornje korake za ponovno povezivanje istog data lake. Ako niste izbrisali datotečni sustav prilikom prekida veze, morate izbrisati podatke za ponovno povezivanje:

Idite na Azure Data Lake.
Izbrišite spremnik Dataverse.
Idite na Power Apps i ponovno povežite data lake.

Pregled vaših podataka u usluzi Azure Data Lake Storage 2. generacije

Odaberite željeni Azure Synapse Link, a zatim odaberite Idi na Azure data lake s gornjeg panela.
Proširite Sustavi datoteka, a zatim odaberite dataverse-environmentName-organizationUniqueName.

Datoteka model.json, zajedno s nazivom i verzijom, sadrži popis tablica koje su izvezene u data lake. Datoteka model.json također uključuje početni status sinkronizacije i završeno vrijeme.

Mapa koja sadrži datoteke sa snimkama razdvojenima zarezom (CSV format) prikazuje se za svaku tablicu koja se izvozi u data lake. Podaci tablice u data lake.

Povezivanje radnog prostora Synapse s postojećim Azure Synapse Link profilom samo pomoću podatkovnog jezera

U adresnoj traci web-preglednika dodajte ?athena.updateLake=true web-adresu koja završava s exporttodatalake.
Odaberite postojeći profil iz Azure Synapse Link područja, a zatim odaberite proširenu mogućnost.
Odaberite Poveži s radnim prostorom Azure Synapse Analytics i pričekajte nekoliko minuta da se sve poveže.

Neprekidna ažuriranja snimke

Podaci usluge Microsoft Dataverse mogu se kontinuirano mijenjati stvaranjem, ažuriranjem i brisanjem transakcija. Snimke pružaju kopiju podataka samo za čitanje koji se ažuriraju u redovitom intervalu, u ovom slučaju svakih sat vremena. Ovo osigurava da u bilo kojem trenutku potrošač analitičkih podataka može pouzdano upotrebljavati podatke u usluzi Data Lake.

Neprekidna ažuriranja snimke.

Kada se tablice dodaju kao dio početnog izvoza, podaci tablice zapisuju se u datoteke table.csv ispod odgovarajućih mapa u data lake. To je interval T1 interval, gdje je stvorena datoteka samo za čitanje snimke pod nazivom tablica-T1.csv—na primjer, Račun-T1.csv ili Kontakti-T1.csv—. Osim toga, ažurira se datoteka model.json kako bi uputila na te datoteke sa snimkama. Ako otvorite datoteku model.json, možete pregledati detalje snimke.

Evo primjera datoteke s particijom Account.csv i mape sa snimkama u usluzi Data Lake.

Snimka tablice računa.

Promjene u usluzi Dataverse kontinuirano se proslijeđuju odgovarajućim CSV datotekama pomoću pokretača sažetka za umetanje. Ovo je interval T2, gdje se snima još jedna snimka. tablica -T2.csv—na primjer, Računi-T2.csv ili Kontakti-T2.csv (pod pretpostavkom da postoje promjene u tablici) —i model.json ažuriraju se na nove datoteke snimki. Svaka nova osoba koja pregledava podatke iz snimke od T2 nadalje usmjerava se prema novijim datotekama snimki. Na ovaj način izvorni preglednik snimke može nastaviti s radom na starijim datotekama T1 snimke dok noviji preglednici mogu čitati najnovija ažuriranja. To je korisno u scenarijima s duljim nizvodnim procesima.

Napomena

Nova datoteka snimka stvara se samo ako postoji ažuriranje podataka. Zadržat će se samo posljednjih pet datoteka snimka. Ustajali podaci automatski će se ukloniti s vašeg Azure Data Lake Storage Gen 2 računa.

Evo primjera datoteke model.json, koja uvijek upućuje na najnoviju datoteku snimke računa s vremenskom oznakom.

Uzorak snimke datoteke model.json.

Što je sljedeće?

Nakon uspješnog korištenja usluge Azure Synapse Link for Dataverse, otkrijte kako možete analizirati i trošiti svoje podatke s pomoću Središta za otkrivanje. Da biste pristupili Središtu za otkrivanje, idite na Power Apps > Azure Synapse Link. Odaberite povezanu uslugu, a zatim odaberite karticu Otkrij Središte. Ovdje možete pronaći preporučene alate i priređenu dokumentaciju koja će vam pomoći da maksimalno iskoristite svoje podatke. Otkrijte Središte.