Créer Azure Synapse Link for Dataverse avec Azure Synapse Workspace

Vous pouvez utiliser Azure Synapse Link pour connecter vos données Microsoft Dataverse à Azure Synapse Analytics pour explorer vos données et accélérer le délai d’obtention d’informations. Cet article vous explique comment réaliser les tâches suivantes :

1. Connectez vos données Dataverse à votre Azure Synapse Analytics workspace avec le service Azure Synapse Link.
2. Gérez les tables Dataverse incluses dans le service Azure Synapse Link.
3. Surveillez votre service Azure Synapse Link.
4. Dissociez votre Azure Synapse Link.
5. Reliez votre service Azure Synapse Link.
6. Affichez vos données dans Azure Synapse Analytics.

Notes

Azure Synapse Link for Microsoft Dataverse était auparavant connu sous le nom de Exporter vers le lac de données. Ce service a été renommé en mai 2021 et continuera d’exporter des données vers Azure Data Lake ainsi que vers Azure Synapse Analytics.

Conditions préalables

• Dataverse : vous devez disposer du rôle de sécurité Dataverse Administrateur système. De plus, les tables que vous souhaitez exporter via Azure Synapse Link doivent avoir la propriété Suivi des modifications activée. Pour plus d’informations, voir Options avancées

• Azure Data Lake Storage Gen2 : vous devez avoir un compte Azure Data Lake Storage Gen2 et un accès au rôle de Propriétaire et de Contributeur aux données d’objets Blob de stockage. Votre compte de stockage doit activer Espace de noms hiérarchique pour la configuration initiale et la synchronisation delta. Autoriser l’accès à la clé du compte de stockage est requis uniquement pour la configuration initiale.

• Espace de travail Synapse : Vous devez avoir un espace de travail Synapse et l’accès au rôle Administrateurs Synapse dans Synapse Studio. L’espace de travail Synapse doit être dans la même région que votre compte Azure Data Lake Storage Gen2 avec la règle d’accès aux adresses IP allowAll activée. Le compte de stockage doit être ajouté en tant que service lié dans Synapse Studio. Pour créer un espace de travail Synapse, accédez à Création d’un espace de travail Synapse.

Notes

• Le compte de stockage et l’espace de travail Synapse doit être créé dans le même client Microsoft Entra que votre client Power Apps.
• Le compte de stockage et l’espace de travail Synapse doivent être créés dans la même région que l’environnement Power Apps dans lequel vous utiliserez la fonctionnalité et le même groupe de ressources.
• Pour définir Activé à partir des réseaux virtuels et des adresses IP sélectionnés pour le compte de stockage lié et l’espace de travail afin d’accorder l’accès uniquement à partir des réseaux virtuels et des adresses IP sélectionnés ou pour utiliser des points de terminaison privés, vous devez créer un Azure Synapse Link avec des identités gérées. Pour plus d’informations : Utilisez des identités managées pour Azure avec votre Azure Data Lake Storage (sans configuration d’identités managées, vous devez activer l’accès au réseau public pour les ressources Azure pour la configuration initiale et la synchronisation delta.)
• Les espaces de travail Synapse comportant des points de terminaison privés gérés, une protection contre l’exfiltration de données ou des réseaux virtuels gérés ne sont pas pris en charge.
• Vous devez avoir le rôle d’accès Lecteur dans le groupe de ressources avec le compte de stockage et l’espace de travail Synapse.
• Lorsque vous ajoutez plusieurs utilisateurs à l’espace de travail synapse, ils doivent avoir l’accès au rôle Administrateur Synapse dans Synapse Studio et le rôle Contributeur aux données d’objets Blob de stockage sur le compte Azure Data Lake Storage Gen2.
• La création de profils Synapse Link sous un seul environnement DV est limitée à un maximum de 10.

Connecter Dataverse à l’espace de travail Synapse

1. Se connecter à Power Apps et sélectionnez votre environnement préféré.

2. Dans le volet de navigation de gauche, sélectionnez Azure Synapse Link. Si l’élément ne se trouve pas dans le volet latéral, sélectionnez …Plus, puis sélectionnez l’élément souhaité.

3. Dans la barre de commandes, sélectionnez + Nouveau lien.

4. Sélectionnez l’option Se connecter à votre espace de travail Azure Synapse.

5. Sélectionnez Abonnement, Groupe de ressources, Nom de l’espace de travail, et Compte de stockage. Assurez-vous que l’espace de travail et le compte de stockage Synapse répondent aux exigences spécifiées dans la section Conditions préalables. Sélectionnez Suivant.

   

   Notes

   Dans le cadre de la mise en relation de l’environnement à un lac de données, vous accordez l’accès au service Azure Synapse Link à votre compte de stockage. Veillez à avoir suivi les conditions préalables pour créer et configurer le compte Azure Data Lake Storage et vous accorder un rôle de propriétaire sur le compte de stockage. En outre, vous accordez l’accès du service Power Platform Dataflows à votre compte de stockage. Pour plus d’informations : Préparation de données en libre-service avec des flux de données.

6. Ajoutez les tables à exporter, puis sélectionnez Enregistrer. Seules les tables avec le suivi des modifications est activé peuvent être exportées. Pour plus d’informations : Autoriser le suivi des modifications.

   

Vous pouvez suivre les étapes ci-dessus pour créer un lien entre un environnement et plusieurs espaces de travail Azure Synapse Analytics et Azure Data Lake dans votre abonnement Azure en ajoutant un Azure Data Lake en tant que service lié sur un espace de travail Synapse. De même, vous pouvez créer un lien entre plusieurs environnements et le même espace de travail Azure Synapse Analytics et Azure Data Lake, le tout au sein du même locataire.

Notes

Les données exportées par le service Azure Synapse Link sont chiffrées en transit à l’aide de la norme Transport Layer Security (TLS) 1.2 ou supérieure et chiffrées au repos dans Azure Data Lake Storage Gen2. De plus, les données transitoires dans le stockage blob sont également chiffrées au repos. Chiffrement dans Azure Data Lake Storage Gen2 vous aide à protéger vos données, à mettre en œuvre des stratégies de sécurité d’entreprise et à répondre aux exigences de conformité réglementaire. Pour plus d’informations : Chiffrement de données Azure au repos

Actuellement, vous ne pouvez pas fournir d’adresses IP publiques pour le service Azure Synapse Link for Dataverse qui peut être utilisé dans les Paramètres du pare-feu Azure Data Lake. Les règles de réseau IP public n’ont aucun effet sur les demandes provenant de la même région Azure que le compte de stockage. Les services déployés dans la même région que le compte de stockage utilisent des adresses IP Azure privées pour la communication. Par conséquent, vous ne pouvez pas restreindre l’accès à des services Azure spécifiques en fonction de leur plage d’adresses IP sortantes publiques. Pour plus d’informations : Configurer les pare-feu et les réseaux virtuels Azure Storage

Gérer les données de la table dans l’espace de travail Synapse

Après avoir configuré Azure Synapse Link, vous pouvez gérer les tables exportées de l’une des deux manières suivantes :

• Dans la zone Azure Synapse Link de Power Apps (make.powerapps.com), sélectionnez Gérer les tables dans la barre de commandes pour ajouter ou supprimer une ou plusieurs tables liées.

• Sur la zone Tables du portail de créateur Power Apps, sélectionnez … en regard d’une table, puis sélectionnez le lac de données lié dans lequel vous souhaitez exporter les données de la table.

  

Surveiller votre service Azure Synapse Link

Après avoir configuré le service Azure Synapse Link, vous pouvez surveiller Azure Synapse Link sous l’onglet Tables.

• Il y aura une liste de tables qui font partie de la sélection Azure Synapse Link.
• Il y a différentes étapes par lesquelles le statut de synchronisation circulera. NotStarted indique que la table attend d’être synchronisée. Une fois la synchronisation initiale de la table Terminée, il y aura une étape de post-traitement où les mises à jour incrémentielles n’auront pas lieu. Cela peut prendre plusieurs heures selon la taille de vos données. Au fur et à mesure que les mises à jour incrémentielles commencent à avoir lieu, la date de la dernière synchronisation sera régulièrement mise à jour.
• La colonne Compter montre le nombre de lignes écrites. Lorsque Ajouter uniquement est paramétré sur Non, il s’agit du nombre total d’enregistrements. Lorsque Ajouter uniquement est paramétré sur Oui, il s’agit du nombre total de modifications.
• Les colonnes Ajouter uniquement et Stratégie de partition montrent l’utilisation de différentes configurations avancées.

Dissocier un Azure Synapse Link

1. Sélectionnez le service Azure Synapse Link souhaité pour la déconnexion.

2. Sélectionnez Supprimer le lien dans la barre de commandes.

3. Pour supprimer à la fois le système de fichiers Data Lake et la base de données Synapse, saisissez le nom du lien pour confirmer.

4. Sélectionner Oui, et attendez quelques minutes pour que tout soit dissocié et supprimé.

Relier un service Azure Synapse Link

Si vous avez supprimé le système de fichiers lors de la dissociation, suivez les étapes ci-dessus pour lier à nouveau les mêmes espaces de travail et lac de données. Si vous n’avez pas supprimé le système de fichiers lors de la dissociation, vous devez effacer les données à relier :

1. Accédez à Azure Synapse Analytics.

2. Sélectionnez ... pour la base de données non liée, puis Nouveau notebook > Notebook vide.

3. Attachez le notebook à un pool Apache Spark en sélectionnant un pool dans le menu déroulant. Si vous n’avez pas de pool Apache Spark, sélectionnez Gérer les pools pour en créer un.

4. Entrez le script suivant, remplacez <DATABASE_NAME> par le nom de la base de données à dissocier et exécutez le notebook.

    %%sql
    DROP DATABASE <DATABASE_NAME> CASCADE

5. Après avoir exécuté le notebook, actualisez la liste des bases de données dans le panneau de gauche. Si la base de données existe toujours, essayez de faire un clic droit sur la base de données et de sélectionner Effacer.

6. Accédez à Power Apps, et reconnectez l’espace de travail et le lac de données Synapse.

Accéder aux données en quasi-temps réel et aux données d’instantané en lecture seule

Après avoir créé un Azure Synapse Link, deux versions des données de la table seront synchronisées dans Azure Synapse Analytics et/ou dans Azure Data Lake Storage Gen2 dans votre abonnement Azure par défaut pour vous assurer que vous pouvez consommer de manière fiable et à tout moment les données mises à jour dans le lac :

• Données en temps quasi-réel : fournit une copie des données de Dataverse via Azure Synapse Link de manière efficace en détectant les données qui ont changé depuis leur extraction initiale ou leur dernière synchronisation.
• Données d’instantané : fournit une copie en lecture seule des données en temps quasi-réel qui sont mises à jour à intervalles réguliers (dans ce cas, toutes les heures). 

Notes

Pour créer des données d’instantané en lecture seule, assurez-vous que le paramètre Étendue autorisée pour les opérations de copie est configuré sur Depuis n’importe quel compte de stockage. Plus d’informations : Configurer la portée autorisée pour les opérations de copie

1. Sélectionnez le Azure Synapse Link souhaité, puis sélectionnez  Accéder à l’espace de travail Azure Synapse Analytics depuis le volet supérieur.
2. Développez  Bases de données en lac depuis le volet de gauche, sélectionnez dataverse-NomEnvironnement-NomUniqueOrganisation, puis développez  Tables.

Toutes les Tables de données en temps quasi-réel sont répertoriées et disponibles pour analyse avec la convention de dénomination DataverseTableName. Toutes les Tables de données d'instantané sont répertoriées et disponibles pour analyse avec la convention de dénomination DataverseNomTable_partitioned.

Quelle est la prochaine étape ?

Après avoir utilisé avec succès le service Azure Synapse Link for Dataverse, découvrez comment vous pouvez analyser et consommer vos données avec le Centre de découverte. Pour accéder au Centre de découverte, aller à Power Apps > Azure Synapse Link. Sélectionnez votre service lié, puis sélectionnez l’onglet Hub de découverte. Vous trouverez ici des outils recommandés et une documentation organisée pour vous aider à tirer le meilleur parti de vos données.

Voir aussi

Configurer Azure Synapse Link for Dataverse avec votre Azure Data Lake

Configuration avancée de Azure Synapse Link for Dataverse

FAQ Azure Synapse Link

Blog : Annonce d’Azure Synapse Link for Dataverse

Notes

Pouvez-vous nous indiquer vos préférences de langue pour la documentation ? Répondez à un court questionnaire. (veuillez noter que ce questionnaire est en anglais)

Le questionnaire vous prendra environ sept minutes. Aucune donnée personnelle n’est collectée (déclaration de confidentialité).