Najčastejšie otázky Azure Synapse Link for Dataverse

Zákazník by nemal upravovať dátové súbory a do dátových priečinkov by sa nemali umiestňovať žiadne zákaznícke súbory.

Ak chcete získať prístup k vzťahom many-to-many, vzťah je k dispozícii ako tabuľka, ktorú môžete vybrať na stránke Pridať tabuľky pre nový odkaz a na stránke Spravovať tabuľky pre už existujúci odkaz.

Azure Synapse Link je bezplatná funkcia s Dataverse. Za používanie Azure Synapse Link for Dataverse nevznikajú dodatočné poplatky podľa Dataverse. Zvážte však potenciálne náklady na službu Azure:

• Ukladanie dát v Azure Data Lake Storage Gen2: Azure Storage Data Lake Gen2 Cena | Microsoft Azure
• Náklady na spotrebu dát (napríklad Synapse Workspace): Ceny - Azure Synapse Analytics | Microsoft Azure Komplexné informácie Microsoft Cost Management nájdete na: Plánujte riadenie nákladov na Azure – Microsoft Cost Management | Microsoft Learn

Keď pridáte nový stĺpec do tabuľky v zdroji, pridá sa aj na koniec súboru v cieľovom umiestnení v príslušnom oddiele súboru. Zatiaľ čo riadky, ktoré existovali pred pridaním stĺpca, sa v novom stĺpci nezobrazujú, nové alebo aktualizované riadky zobrazujú novo pridaný stĺpec.

Keď odstránite stĺpec z tabuľky v zdroji, stĺpec sa z cieľa nevypustí. Namiesto toho sa riadky už neaktualizujú a pri zachovaní predchádzajúcich riadkov sa označia ako nulové.

Zmena typu údajov stĺpca je prelomovou zmenou a musíte odpojiť a znova prepojiť.

Odstránenie riadku sa rieši inak podľa toho, ktoré možnosti zápisu údajov si vyberiete:

• Aktualizácia na mieste vo formáte CSV: Toto je predvolený režim. Keď v tomto režime odstránite riadok tabuľky, riadok sa odstráni aj z príslušného údajového oddielu v Azure Data Lake. Inými slovami, údaje sa z cieľového miesta odstránia natrvalo.
• Iba pridanie s formátom CSV a prírastkovou aktualizáciou priečinka: V tomto režime, keď sa odstráni Dataverse riadok tabuľky, nie je ťažké ho odstrániť z cieľa. Namiesto toho sa pridá riadok a nastaví sa ako isDeleted=True do súboru v príslušnom údajovom oddiele v Azure Data Lake.
• Export do formátu Delta lake: Azure Synapse Link vykoná mäkké vymazanie údajov počas nasledujúceho synchronizačného cyklu delta, po ktorom nasleduje tvrdé vymazanie po 30 dňoch.

Azure Synapse Link sa riadi spoločným dátovým modelom, ktorý umožňuje zdieľanie údajov a to v rámci aplikácií a obchodných procesov, ako sú Microsoft Power Apps, Power BI, Dynamics 365 a Azure. V každom priečinku CDM sú metadáta, ako napríklad hlavička stĺpca, uložené v súbore model.json. Viac informácií: Spoločný dátový model a Azure Data Lake Storage Gen2 | Microsoft Learn

Model.json zachováva dĺžku databázy pre veľkosť stĺpca. Dataverse má koncepciu dĺžky databázy pre každý stĺpec. Ak vytvoríte stĺpec s veľkosťou 200 a neskôr ho zmenšíte na 100, Dataverse v Dataverse stále umožňuje, aby boli vaše existujúce údaje prítomné. Robí to tak, že drží DBLength na 200 a MaxLength na 100. To, čo vidíte v Model.json, je DBLength a ak to použijete pre následné procesy, nikdy neposkytnete menší priestor pre svoje Dataverse stĺpce.

V exportovaných tabuľkách Dataverse možno očakávať tri formáty dátumu a času.

Toto správanie sa očakáva, keď zvolíte režim exportu len s pripojením a máte tabuľky bez platného stĺpca CreatedOn . Bloby sú usporiadané do súborov, ako napríklad 1.csv, 2.csv (používa sa vlastné rozdelenie z dôvodu absencie platného dátumu vytvorenia). Keď sa ktorýkoľvek oddiel priblíži k 95 % MaxBlockPerBlobLimit, systém automaticky vygeneruje nový súbor – tu znázornený ako 1_001.csv.

Pre tabuľky Dataverse, kde je objem dát vysoký v rámci jedného roka, odporúčame používať mesačné oddiely. Výsledkom budú menšie súbory a lepší výkon. Okrem toho, ak sa riadky v tabuľkách Dataverse často aktualizujú, rozdelenie do viacerých menších súborov pomáha zlepšiť výkon v prípade scenárov aktualizácií na mieste. Delta Lake je k dispozícii iba s ročným oddielom kvôli jeho vynikajúcemu výkonu v porovnaní s formátom CSV.

V režime iba pridania sú prírastkové údaje z tabuliek Dataverse pridané do zodpovedajúceho oddielu súboru v jazere. Ďalšie informácie: Rozšírené možnosti konfigurácie v Azure Synapse Link

Pre zápis údajov tabuliek Dataverse do priestoru Data Lake je odporúčaná možnosť Iba pripojiť, najmä keď sú objemy údajov vysoké v rámci oddielu s často sa meniacimi údajmi. Toto je opäť bežne používaná a veľmi odporúčaná možnosť pre podnikových zákazníkov. Ďalej sa môžete rozhodnúť použiť tento režim pre scenáre, ktorých zámerom je postupne kontrolovať zmeny z Dataverse a spracovať zmeny pre scenáre ETL, AI a ML. Režim iba pridania poskytuje históriu zmien namiesto najnovšej zmeny alebo miestnej aktualizácie a umožňuje niekoľko časových radov zo scenárov umelej inteligencie, napríklad predikciu alebo prognózovanie analýz na základe historických hodnôt.

V režime iba pridania by ste mali identifikovať najnovšiu verziu záznamu s rovnakým ID pomocou VersionNumber a SinkModifiedOn potom použiť isDeleted=0 na najnovšiu verziu.

V prípade režimu iba pripojenia, ak Azure Synapse Link for Dataverse nedostane potvrdenie od Azure Data Lake, že údaje boli potvrdené z akéhokoľvek dôvodu, ako je napríklad oneskorenie siete, Azure Synapse Link skúsí to znova v týchto scenáre a znova odovzdajte údaje. Následná spotreba by mala byť odolná voči tomuto scenáru filtrovaním údajov pomocou SinkModifiedOn.

Očakáva sa. Modifiedon je dátum a čas zmeny záznamu v Dataverse; Sinkmodifiedon je dátum a čas zmeny záznamu v dátovom jazere.

Žiadna tabuľka, ktorá nemá povolené sledovanie zmien, nie je podporovaná okrem nasledujúcich systémových tabuliek:

• Attachment
• Kalendár
• Calendarrule

Úloha konverzie Delta Lake sa spustí, keď došlo k zmene údajov v nakonfigurovanom časovom intervale. Neexistuje žiadna možnosť zastaviť alebo pozastaviť bazén Apache Spark . Časový interval po vytvorení prepojenia však môžete upraviť v časti Spravovať tabuľky > Rozšírený časový interval.

Vyhľadávacie stĺpce sa skladajú z ID a hodnoty. Vyhľadávacie hodnoty sa menia iba v koreňovej tabuľke. Ak chcete lepšie odrážať hodnotu vyhľadávacieho stĺpca, odporúčame vám spojiť sa s pôvodnou koreňovou tabuľkou, aby ste získali najnovšiu hodnotu.

V Dataverse vypočítané stĺpce uchovávajú iba informácie o vzorci a skutočná hodnota závisí od stĺpca základnej tabuľky. Vypočítané stĺpce sú teda podporované iba vtedy, keď sú všetky stĺpce umiestnené v rovnakej exportovanej tabuľke.

Všetky tabuľky, ktoré nemajú pole createdOn, sa predvolene synchronizujú pomocou režimu iba pripojenia. To zahŕňa tabuľky vzťahov a tabuľku ActivityParty.

• Dataverse údaje sú uložené v pripojenom úložnom kontajneri. Na vykonávanie operácií čítania a dotazov prostredníctvom pracovného priestoru Synapse potrebujete rolu „Prispievateľ údajov blobu úložiska“ v prepojenom účte úložiska.
• Ak sa rozhodnete exportovať údaje vo formáte Delta Lake, váš súbor CSV sa po konverzii Delta Lake vyčistí. Musíte vyhľadávať údaje s nerozdelenými tabuľkami cez Synapse Workspace.

Údaje Dataverse sa môžu priebežne meniť prostredníctvom vytvárania, aktualizácie a vymazávania transakcií. Táto chyba je spôsobená zmenou základného súboru, keď z neho čítate údaje. V prípade tabuliek s priebežnými zmenami teda zmeňte svoj kanál spotreby tak, aby na spotrebu používal údaje zo snímok (rozdelené tabuľky). Ďalšie informácie: Riešenie problémov s fondom SQL bez servera

Azure Synapse Link for Dataverse je určený na analytické účely. Zákazníkom odporúčame využiť dlhodobé uchovávanie na účely archivácie. Ďalšie informácie: Dataverse prehľad dlhodobého uchovávania údajov

Pri akomkoľvek priamom volaní SQL na odstránenie záznamu sa služba Azure Synapse Link for Dataverse nespustí, pretože sa nevolá BPO.Delete. Vzorovú funkciu nájdete v časti Ako vyčistiť zdedený prístup.

Pozrite si tiež

Azure Synapse Link for Dataverse