Креирање услуге Azure Synapse Link for Dataverse на платформи Azure Data Lake

Чланак
05/06/2024

Можете користити Azure Synapse Link да повежете своје Microsoft Dataverse податке са услугом Azure Data Lake Storage Gen2 за омогућавање различитих сценарија аналитике. У овом чланку вам показујемо како да извршите следеће задатке:

Повежите своје Dataverse податке на ваш Azure Data Lake Storage Gen2 налог у услузи Azure Synapse Link.
Управљајте Dataverse табелама укљученим у Azure Synapse Link.
Надгледајте свој Azure Synapse Link.
Прекини везу са Azure Synapse Link.
Поново повежите свој Azure Synapse Link.
Прегледајте своје податке на платформи Azure Data Lake и упознајте структуру датотека.

Напомена

Azure Synapse Link for Dataverse је раније био познат као „Извоз у језеро података“. Услуга је преименована у мају 2021. и наставиће да извози податке и у Azure Data Lake, као и у Azure Synapse Analytics.

Предуслови

Azure Data Lake Storage Gen2: Морате имати Azure Data Lake Storage Gen2 налог и приступ улогама Власник и Сарадник за податке складишта блоб објеката. Налог за складиштење мора да омогући хијерархијски простор за име за почетно подешавање и за синхронизацију делте. За почетно подешавање потребан је приступ кључу налога за складиштење.

Напомена

Налог за складиштење мора бити креиран код истог закупца Microsoft Entra као и ваш Power Apps станар.
Да бисте подесили омогућено са изабраних виртуелних мрежа и ИП адреса за повезани налог складишта да бисте одобрили приступ са изабраних ИП адреса, морате креирати Azure Synapse Link контролисане идентитете. Користите контролисане идентитете за Азуре са складиштем језера Азуре података (без подешавања контролисаних идентитета, морате омогућити приступ јавној мрежи за Азуре ресурсе за почетно подешавање и делта синхронизацију.)
Морате имати приступ са улогом читаоца групи ресурса помоћу налога за складиштење.
Да бисте повезали окружење са платформом Azure Data Lake Storage Gen2, морате имати безбедносну улогу Dataverse администратора система.
Могуће је извозити само табеле које имају омогућено праћење промена.
Креирање профила Azure Synapse Link под једним окружењем Dataverse ограничено је на највише 10.

Повежите Dataverse са услугом Azure Data Lake Storage Gen2

пријавите се на Power Apps и изаберите жељено окружење.
У левом окну за навигацију изаберите Azure Synapse Link. Ако Azure Synapse Link није видљиво у окну бочне табле, изаберите ... Више и изаберите Откриј све. Azure Synapse Link се налази у одељку Управљање подацима .
На командној траци изаберите + Нова веза са језером података.
Изаберите Претплату, Групу ресурса и Налог за складиштење. Уверите се да налог за складиштење испуњава захтеве наведене у одељку Предуслови. Изаберите Следеће.

Напомена

Као део повезивања окружења са језером података, ви услузи Azure Synapse Link додељујете приступ вашем налогу за складиштење. Обавезно се придржавајте предуслова креирања и конфигурисања Azure Data Lake Storage налога и додељивања себи улоге власника на складишном налогу. Уз то, одобравате да услуга Power Platform токова података приступа вашем налогу за складиштење података. Још информација: Припрема података за самопослуживање са токовима података.
Додајте табеле које желите да извезете, а затим изаберите Сачувај. Могуће је извозити само табеле са омогућеним праћењем промена. Више информација: Омогућавање праћења промена

Можете да следите кораке у овом чланку да бисте креирали везу од једног окружења до више Азурних језера података у Азуре претплати. Слично томе, могли бисте да креирате везу из више окружења у исти Azure Data Lake, све у оквиру истог закупца.

Напомена

Услуга Azure Synapse Link for Dataverse је неприметно интегрисана Power Platform у функцију "право из кутије". Она испуњава безбедносне и управљачке стандарде постављене за складиштење Power Platform и управљање подацима. Више информација:Складиштење и управљање подацима

Подаци извезени путем услуге Azure Synapse Link су шифровани у транзиту користећи Транспорт Лаyер Сецуритy(ТЛС) 1.2 или новији и шифровани у остатку у Azure Data Lake Storage gen2. Поред тога, привремени подаци у складишту блоб објекта се такође шифрују у мировању. Шифривање у услузи Azure Data Lake Storage Gen2 вам помаже да заштитите податке, примените смернице за безбедност предузећа и испуните захтеве за поштовање прописа. Још информација: Azure Data шифровање у мировању

Управљање подацима табеле у услузи Data Lake

Након што подесите Azure Synapse Link табеле које се извозе, можете да управљате на један од два начина:

На Power Apps порталу креатора, у области Azure Synapse Link изаберите Управљање табелама на командној траци за додавање или уклањање једне или више повезаних табела.
У области Табеле на Power Apps порталу аутора, изаберите … поред табеле, а затим изаберите повезани Data Lake у који желите да извезете податке табеле.

Надгледајте свој Azure Synapse Link

Након што подесите, можете Azure Synapse Link да надгледате испод картице Azure Synapse Link "Табеле · ".

Azure Synapse Link Надгледање

Биће листа табела које су део изабраних Azure Synapse Link.
Постоје различите фазе кроз које циркулише статус синхронизације. NotStarted означава да табела чека на синхронизацију. Када се почетна синхронизација табеле доврши, постоји фаза обраде поште у којој се постепено ажурирање неће догодити. Ово може потрајати неколико сати у зависности од величине података. Како постепена ажурирања почињу да се дешавају, датум последње синхронизације ће се редовно ажурирати.
Колона Бројање приказује редове исписане нумерисано. Када је колона Само прилагање подешена на Не, то је укупан број записа. Када је колона Само прилагање подешена на Да, то је укупан број промена.
Колоне Само прилагање и Стратегија поделе приказују употребу различитих напредних конфигурација.

Прекидање везе са услугом Azure Synapse Link

Изаберите жељени Azure Synapse Link да прекинете везу.
Изаберите Прекини везу са језером података са командне траке.
Да бисте избрисали систем датотека језера података, изаберите опцију Избриши систем датотека језера података.
Изаберите Да и сачекајте неколико минута да се веза прекине и обрише.

Поновно повезивање са услугом Azure Synapse Link

Ако сте избрисали систем датотека приликом прекидања везе, следите горенаведене кораке да бисте поново повезали исто језеро података. Ако нисте избрисали систем датотека приликом раскине везе, морате да обришете податке да бисте поново везали:

Идите у Azure Data Lake.
Избришите Dataverse контејнер.
Идите у Power Apps и поново повежите језеро података.

Прегледајте своје податке у Azure Data Lake Storage Gen2

Изаберите жељени Azure Synapse Link, а затим изаберите Иди у Azure језеро података са горње табле.
Проширите Системе датотека, а затим изаберите Dataverse-environmentName-organizationUniqueName.

Датотека model.json, заједно са својим именом и верзијом, пружа листу табела које су извезене у Data Lake. Датотека model.json такође укључује почетни статус синхронизације и време завршетка синхронизације.

Фасцикла која садржи датотеке снимака раздвојене зарезом (формат CSV) приказује се за сваку табелу која се извози у Data Lake. подаци табеле у услузи Data Lake.

Повезивање радног простора синапсе са постојећим профилом само Azure Synapse Link са језером са подацима

На траци адреса Веб прегледача додајте на Wеб ?athena.updateLake=true адресу која се завршава еxпорттодаталаке.
Изаберите постојећи профил из области, а Azure Synapse Link затим изаберите проширену опцију.
Изаберите опцију Повежи Azure Synapse Analytics са радним простором и дозволи неколико минута да се све повеже.

Непрестана ажурирања снимка

Microsoft Dataverse подаци се могу непрестано мењати кроз креирање, ажурирање и брисање трансакција. Снимци омогућавају копију података само за читање података који се ажурирају у редовним интервалима, у овом случају на сваких сат времена. То осигурава да у било ком тренутку потрошач који анализира податке може поуздано конзумирати податке у језеру.

Непрестана ажурирања снимка.

Када се табеле додају као део почетног извоза, подаци табеле се записују у датотеке table.csv испод одговарајућих фасцикли у услузи Data Lake. Ово је интервал T1, где је креирана датотека снимка само за читање под називом table-T1.csv – на пример, Account-T1.csv или Contacts-T1.csv. Поред тога, датотека model.json се ажурира како би указала на ове датотеке снимака. Отварањем датотеке model.json, можете видети детаље снимка.

Ево примера издељене датотеке Account.csv и фасцикле са снимцима у језеру података.

Снимак табеле пословних контаката.

Промене у услузи Dataverse непрекидно се прослеђују у одговарајуће CSV датотеке помоћу механизма за пуњење датотека. Ово је интервал Т2, где је направљен још један снимак. table-T2.csv – на пример, Accounts-T2.csv или Contacts-T2.csv (под претпоставком да постоје промене у табели) – и model.json се ажурирају у нове датотеке снимака. Свака нова особа која прегледа податке из снимка од Т2 надаље упућује се на новије датотеке снимака. На овај начин, оригинални гледалац снимака може наставити да ради на старијим Т1 датотекама снимака, док новији гледаоци могу да читају најновије исправке. То је корисно у сценаријима који имају дуготрајније последичне процесе.

Напомена

Нова датотека снимка се креира само ако постоји ажурирање података. Биће задржано само последњих пет датотека снимака. Стагнирајући подаци ће аутоматски бити уклоњени са вашег Azure Data Lake Storage Ген 2 налога.

Ево примера датотеке model.json, која увек указује на временски најновију датотеку снимка налога.

Пример датотеке снимка model.json.

Шта је следеће?

Након успешног коришћења услуге Azure Synapse Link for Dataverse, откријте како можете да анализирате и користите своје податке помоћу опције Откривање чворишта. Да бисте приступили Откривању чворишта, идите на Power Apps > Azure Synapse Link. Изаберите повезану услугу, а затим изаберите картицу Чвориште за откривање. Овде можете пронаћи препоручене алатке и одржавану документацију која ће вам помоћи да на најбољи начин искористите своје податке. Чвориште за откривање.