Azure Data Lake көмегімен Azure Synapse сілтеме жасау Dataverse

Түрлі талдау сценарийлерін қосу үшін Azure Synapse Сілтемені Microsoft Dataverse деректеріңізді Azure Data Lake Storage Gen2-ге қосу үшін пайдалануға болады. Бұл мақалада келесі тапсырмаларды орындау жолы көрсетілген:

1. Dataverse деректеріңізді Azure Data Lake Storage Gen2 есептік жазбаңызға Azure Synapse Link қызметі арқылы қосыңыз.
2. Dataverse Сілтемедегі Azure Synapse кестелерді басқарыңыз.
3. Azure Synapse Сілтемеңізді бақылаңыз.
4. Azure Synapse Сілтемеңізді жойыңыз.
5. Azure Synapse Сілтемеңізді қайта байланыстырыңыз.
6. Azure Data Lake бағдарламасындағы деректеріңізді қараңыз және файл құрылымын түсініңіз.

Ескертпе

Azure Synapse Dataverse сілтемесі бұрын деректер көліне экспорттау ретінде белгілі болды. Қызметтің атауы 2021 жылдың мамырынан бастап өзгертілді және деректерді Azure Data Lake қызметіне және Azure Synapse Analytics қызметіне экспорттауды жалғастырады.

Алғышарттар

• Azure Data Lake Storage Gen2: Сізде Azure Data Lake Storage Gen2 тіркелгісі және Иесі және Storage Blob деректерінің қатысушысы болуы керек. рөлге қол жеткізу. Жад есептік жазбаңыз бастапқы орнату және дельта синхрондау үшін Иерархиялық аттар кеңістігін қосуы керек. Жад есептік жазбасының кілтіне рұқсат беру керек. бастапқы орнату үшін ғана.

Ескертпе

• Сақтау тіркелгісі сіздің Microsoft Entra жалға алушымен бірдей Power Apps жалдаушыда жасалуы керек.
• Таңдалған IP мекенжайларынан рұқсат беру үшін Таңдалған виртуалды желілерден және IP мекенжайларынан қосылған байланыстырылған сақтау тіркелгісі үшін орнату үшін Azure Synapse басқарылатын сілтеме жасау керек. идентификаторлар.Azure деректер көлі қоймасымен (сіз) Azure үшін басқарылатын сәйкестіктерді пайдаланыңыз басқарылатын идентификаторлар орнатылса, бастапқы орнату және дельта синхрондау үшін Azure ресурстары үшін жалпы желіге кіруді қосу керек.)
• Осы мақсат үшін таңдалған жад тіркелгісінде жұмсақ жою мүмкіндігін қосуды ұсынамыз. Жұмсақ жоюды қосу кездейсоқ жойылған деректерді жылдам қалпына келтіруге мүмкіндік береді.
• Сізде сақтау тіркелгісі бар ресурс тобына Оқырман рөлдік қатынасы болуы керек.
• Ортаны Azure Data Lake Storage Gen2 тіркелгісіне байланыстыру үшін сізде Dataverse жүйелік әкімшісі қауіпсіздік рөлі болуы керек.
• Өзгерісті бақылау қосылған кестелерді ғана экспорттауға болады.
• Бір Azure Synapse ортасында Dataverse Сілтеме профильдерін жасау ең көбі 10-ға дейін шектеледі.

Dataverse жүйесін Azure Data Lake Storage Gen2 тіркелгісіне қосу

1. жүйеге кіріңіз Power Apps және қалаған ортаңызды таңдаңыз.

2. Сол жақ шарлау тақтасында Azure Synapse Сілтеме таңдаңыз. Бүйірлік тақта тақтасында Azure Synapse Сілтеме көрінбесе, ...Қосымша және Барлығын табу. Azure Synapse СілтемеДеректерді басқару бөлімінде.

3. Пәрмендер жолағында + Деректер көліне жаңа сілтеме таңдаңыз.

4. Жазылым, Ресурстар тобы және Сақтау тіркелгісін таңдаңыз. Сақтау тіркелгісінің Алғышарттар бөлімінде көрсетілген талаптарға сәйкес келетініне көз жеткізіңіз. Келесі пәрменін таңдаңыз.

   Ескертпе

   Ортаны деректер көлімен байланыстыру бөлігі ретінде сіз Azure Synapse Сілтеме қызметіне сақтау тіркелгісіне рұқсат бересіз. Azure деректер көлі сақтау тіркелгісін жасау және теңшеу алғышарттарын орындағаныңызға және өзіңізге сақтау тіркелгісінде иелік рөлін бергеніңізге көз жеткізіңіз. Сонымен қатар сіз Power Platform деректер ағыны қызметіне сақтау орныңыздың тіркелгісіне қатынасу құқығын бересіз. Қосымша ақпарат: Дерек ағындары арқылы өзіне-өзі қызмет көрсету деректерін дайындау.

5. Экспорттағыңыз келетін кестелерді қосыңыз, содан кейін Сақтау таңдаңыз. Өзгерісті бақылау қосылған кестелерді ғана экспорттауға болады. Қосымша ақпарат: Өзгерістерді бақылауды қосу.

   

Azure жазылымында бір ортадан бірнеше Azure деректер көлдеріне сілтеме жасау үшін осы мақаладағы қадамдарды орындауға болады. Сол сияқты, барлығын бір қатысушыда бірнеше ортасынан бір Azure Data Lake деректер көліне сілтеме жасай аласыз.

Ескертпе

Azure Synapse Сілтеме Dataverse қызметіне дайын емес мүмкіндік ретінде Power Platform біріктірілген. Ол Power Platform деректерді сақтау және басқару үшін орнатылған қауіпсіздік және басқару стандарттарына сәйкес келеді. Қосымша ақпарат: Деректерді сақтау және басқару

Azure Synapse Link қызметі арқылы экспортталған деректер тасымалдау кезінде Көлік деңгейінің қауіпсіздігі(TLS) 1.2 немесе одан жоғары нұсқасын пайдаланып шифрланады және тыныш күйде Azure Data Lake Storage 2-ші ұрпақта шифрланады. Сонымен қатар blob сақтау орындағы деректер де сақтау орнында шифрланады. Azure Data Lake Storage Gen2 сақтау орнындағы шифрлау деректерді қорғауға, кәсіпорынның қауіпсіздік саясатын жүзеге асыруға және нормативтік сәйкестік талаптарына сәйкестендіруге көмектеседі. Қосымша ақпарат: Dемалыс кезінде Azure деректер шифрлауы

Кесте деректерін деректер көліне басқару

Azure Synapse Сілтемені орнатқаннан кейін, екі жолдың бірімен экспортталатын кестелерді басқаруға болады:

• Power Apps жасаушы порталында Azure Synapse Сілтеме аймағында пәрмен жолағында Кестелерді басқару пәрменін таңдаңыз. бір немесе бірнеше байланыстырылған кестелерді қосу немесе жою.

• Power Apps жасаушы порталы Кестелер аймағында кестенің жанындағы ... таңдаңыз және содан кейін кесте деректерін экспорттағыңыз келетін байланыстырылған деректер көлін таңдаңыз.

  

Azure Synapse Сілтемеңізді бақылаңыз

Azure Synapse Сілтемені орнатқаннан кейін Azure Synapse Кестелер қойындысының астындағы Сілтемені бақылауға болады.

• Таңдалған Azure Synapse Сілтеменің бөлігі болып табылатын кестелер тізімі болады.
• Синхрондау күйінің әртүрлі кезеңдері бар. NotStarted кесте синхрондауды күтіп тұрғанын көрсетеді. Кестені бастапқы синхрондау Аяқталған болғанда, қосымша жаңартулар орындалмайтын кейінгі өңдеу кезеңі болады. Бұл деректеріңіздің өлшеміне байланысты бірнеше сағатқа созылуы мүмкін. Кезеңдік жаңартулар орын ала бастағанда, соңғы синхрондау күні үнемі жаңартылып отырады.
• Санау бағанында жазылған сандар жолдары көрсетіледі. Тек қосуЖоқ күйіне орнатылғанда, бұл жазбалардың жалпы саны. Тек қосуИә күйіне орнатылғанда, бұл өзгерістердің жалпы саны.
• Тек қосу және Бөлу стратегиясы бағандары әртүрлі кеңейтілген конфигурациялардың қолданылуын көрсетеді.

Azure Synapse Сілтемені жою

1. Байланысты жою үшін қажетті Azure Synapse Сілтемені таңдаңыз.

2. Пәрмендер жолағынан Data lake байланысты жою опциясын таңдаңыз.

3. Деректер көлінің файлдық жүйесін де жою үшін Data lake файлдық жүйесін жою опциясын таңдаңыз.

4. Иә опциясын таңдап, барлығын ажыратуға және жоюға бірнеше минут беріңіз.

Azure Synapse Сілтемені қайта байланыстыру

Егер ажырату кезінде файлдық жүйені жойсаңыз, сол жұмыс кеңістігін қайта байланыстыру үшін жоғарыдағы қадамдарды орындаңыз. Байланысты жою кезінде файлдық жүйені жоймаған болсаңыз, қайта байланыстыру үшін деректерді тазалауыңыз керек:

1. Azure Data Lake жүйесіне өтіңіз.

2. Dataverse контейнерін жойыңыз.

3. Power Apps бағдарламасына өтіңіз және деректер көлін қайта байланыстырыңыз.

Azure Data Lake Storage Gen2 жүйесінде деректеріңізді көру

1. Қажетті Azure Synapse Сілтемені таңдап, жоғарғы панельден Azure деректер көліне өту пәрменін таңдаңыз.

2. Файлдық жүйелер кеңейтіңіз, содан кейін деректерге арналған-ортаныңАты-ұйымныңБірегейАты таңдаңыз.

Model.json файлы өзінің атауымен және нұсқасымен бірге деректер көліне экспортталған кестелер тізімін ұсынады. Сонымен қатар model.json файлында бастапқы синхрондау күйі мен синхрондауды аяқтау уақыты бар.

Суреттер үтірімен бөлінген (CSV пішімі) файлдарды қамтитын қалта деректер көліне экспортталған әр кесте үшін көрсетіледі.

Synapse жұмыс кеңістігін бар Azure Synapse Тек деректер көлімен байланыстыру профилімен байланыстыру

1. Веб-шолғыштардың мекенжай жолағында ?athena.updateLake=true exporttodalake деп аяқталатын веб-мекенжайғақосыңыз.

2. Бар профильді Azure Synapse Сілтеме аймағынан таңдаңыз, содан кейін кеңейтілген опцияны таңдаңыз.

3. Сілтеме Azure Synapse Analytics Жұмыс кеңістігі пәрменін таңдап, барлығын байланыстыру үшін бірнеше минут беріңіз.

Үздіксіз сурет жаңартулары

Microsoft Dataverse деректер жасау, жаңарту және жою транзакциялары арқылы үнемі өзгеріп отырады. Суреттер сағат сайын жүйелі аралықтармен жаңартылатын деректердің тек оқуға арналған көшірмесін қамтамасыз етеді. Бұл кез келген уақытта деректерді талдау тұтынушысы көлдегі деректерді сенімді түрде тұтынатындығына кепілдік береді.

Кестелер бастапқы экспорттаудың бөлігі ретінде қосылған кезде кесте деректері деректер көліндегі сәйкес қалталардың астына table.csv файлдарына жазылады. Бұл T1 аралығы, мұнда кесте-T1.csv деп аталатын суретті тек оқуға арналған файл — мысалы, Account-T1.csv немесе Contacts-T1.csv— құрылды. Сонымен қатар осы сурет файлдарын көрсету үшін model.json файлы жаңартылады. model.json файлын ашып, сурет туралы мәліметтерді көруге болады.

Мұнда деректер көліндегі Account.csv бөлінген файлы мен сурет қалтасының мысалы келтірілген.

Dataverse жүйесіндегі өзгерістер ағындық жүктеу өңдеушісі арқылы тиісті CSV файлдарына үздіксіз жіберіледі. Бұл – басқа сурет алынатын T2 интервалы. table-T2.csv—мысалы, Accounts-T2.csv немесе Contacts-T2.csv (кесте үшін өзгерістер бар болса) —және model.json жаңа сурет файлдарына жаңартылады. Т2 және одан кейінгі сурет деректерін қарайтын кез келген жаңа адам жаңа сурет файлдарына бағытталады. Осылайша, түпнұсқалық суретті көру құралы жаңа қарау құралдарының соңғы жаңартуларды оқу мүмкіндігі бар кезде суреттердің ескі Т1 файлдарында жұмысын жалғастырады. Бұл кейінгі процестерді ұзағырақ іске қосу сценарийлерінде пайдалы.

Ескертпе

Жаңа сурет файлы деректер жаңартуы болған жағдайда ғана жасалады. Соңғы бес сурет файлы ғана сақталады. Тұрақты деректер Azure Data Lake Storage 2-буын тіркелгісінен автоматты түрде жойылады.

Мұнда әрдайым уақытпен белгіленген соңғы тіркелгі суретінің файлын көрсететін model.json файлының мысалы берілген.

Келесі не?

Azure Synapse Сілтеме Dataverse қызметін сәтті пайдаланғаннан кейін Discover Hub арқылы деректеріңізді қалай талдауға және тұтынуға болатынын біліңіз. Discover Hub кіру үшін Power Apps>Azure Synapse Сілтеме бөліміне өтіңіз. Байланыстырылған қызметті таңдап, Discover Hub қойындысын таңдаңыз. Мұнда деректеріңіздің максималды мәнін алуға көмектесетін ұсынылған құралдар мен таңдалған құжаттаманы таба аласыз.

Келесіні де қараңыз:

көмегімен деректер көліндегі Dataverse деректерді талдаңыз Power BI

Azure Data Factory көмегімен деректер көліндегі Dataverse деректерді қабылдау

Azure Synapse Dataverse Жетілдірілген конфигурацияға сілтеме

Azure Synapse Сілтеме жиі қойылатын сұрақтар