Partager via

Démarrage rapide : créer votre premier flux de données pour obtenir et transformer des données

Les flux de données sont une technologie de préparation des données en libre-service, basée sur le cloud. Dans cet article, vous créez votre premier flux de données, vous obtenez des données pour votre flux de données, puis vous transformez les données et publiez le flux de données.

Prérequis

Les prérequis suivants sont requis avant de commencer :

Créer un flux de données

Dans cette section, vous créez votre premier flux de données.

  1. Accédez à votre espace de travail Microsoft Fabric.

    Capture d’écran de la fenêtre Espaces de travail à partir de laquelle vous accédez à votre espace de travail.

  2. Sélectionnez +Nouvel élément, puis sélectionnez Dataflow Gen2.

    Capture d’écran avec la sélection Flux de données Gen2 mise en évidence.

Obtenir des données

Nous allons maintenant obtenir des données. Dans cet exemple, vous obtenez des données à partir d’un service OData. Procédez comme suit pour obtenir des données dans votre flux de données.

  1. Dans l’éditeur de flux de données, sélectionnez Obtenir des données, puis Plus.

    Capture d’écran avec l’option Obtenir des données sélectionnée et l’option Plus mise en évidence dans la zone déroulante.

  2. Dans Choisir une source de données, sélectionnez Afficher plus.

    Capture d'écran de Obtenir la source de données avec Afficher plus mis en évidence.

  3. Dans Nouvelle source, sélectionnez Autre>OData comme source de données.

    Capture d’écran de Obtenir la source de données avec la catégorie Autre et le connecteur OData mis en évidence.

  4. Entrez l’URL https://services.odata.org/v4/northwind/northwind.svc/, puis sélectionnez Suivant.

    Capture d’écran de la source de données OData où vous entrez l’URL.

  5. Sélectionnez les tables Commandes et Clients, puis cliquez sur Créer.

    Capture d’écran du navigateur Power Query avec les tables Clients et Commandes mises en évidence.

Vous pouvez en savoir plus sur l’expérience et les fonctionnalités d’obtention de données dans la vue d’ensemble de l’obtention des données.

Appliquer des transformations et publier

Vous avez chargé vos données dans votre premier dataflow. Félicitations ! Maintenant, il est temps d’appliquer quelques transformations pour intégrer ces données dans la forme dont nous avons besoin.

Vous transformez les données dans l’éditeur Power Query. Vous trouverez une vue d’ensemble détaillée de l’éditeur Power Query sur l’interface utilisateur power Query, mais cette section vous guide dans les étapes de base :

  1. Vérifiez que les outils de profilage des données sont activés. Accédez à d’accueil>Options>Options globales, puis sélectionnez toutes les options sous Profil de colonne.

    Capture d’écran des options globales avec les sélections de Profil de colonne mises en évidence.

    Veillez également à activer la vue diagramme à l’aide des configurations de disposition sous l’onglet Affichage dans le ruban de l’éditeur Power Query, ou en sélectionnant l’icône d’affichage de diagramme en bas à droite de la fenêtre Power Query.

    Capture d’écran de l’aspect général de l’affichage des diagrammes dans Power Query.

  2. Dans la table Commandes, calculez le nombre total de commandes par client : sélectionnez la colonne CustomerID dans l’aperçu des données, puis sélectionnez Regrouper par sous l’onglet Transformation du ruban.

    Capture d’écran montrant la table Commandes sélectionnée et l’option Regrouper par mise en évidence dans l’onglet Transformer.

  3. Vous effectuez un compte des lignes en tant qu’agrégation dans Regrouper par. Vous pouvez en savoir plus sur les fonctionnalités group by dans le regroupement ou la synthèse des lignes.

    Capture d’écran de Regrouper par, avec l’opération Compter les lignes sélectionnée.

  4. Après avoir groupé les données dans la table Commandes, nous obtenons une table avec deux colonnes : CustomerID et Compte.

    Capture d’écran de la table à deux colonnes.

  5. Ensuite, vous souhaitez combiner des données de la table Customers avec le nombre de commandes par client : sélectionnez la requête Clients dans la vue diagramme et utilisez le menu « ⋮ » pour accéder aux requêtes de fusion en tant que nouvelle transformation.

    Capture d’écran de l’éditeur de flux de données, avec les ellipses verticales de la table Clients et l’option Fusionner les requêtes en tant que nouvelles mise en évidence.

  6. Configurez l’opération de fusion en sélectionnant CustomerID comme colonne correspondante dans les deux tables. Sélectionnez ensuite Ok.

    Capture d’écran de la fenêtre Fusionner.

  7. Il existe maintenant une nouvelle requête avec toutes les colonnes de la table Customers et une colonne avec des données imbriquées de la table Orders.

    Capture d’écran de l’éditeur de flux de données avec Fusionner la requête ajouté à droite des tables Clients et Commandes.

  8. Nous allons nous concentrer sur quelques colonnes du tableau Customers. Pour ce faire, activez l’affichage de schéma en sélectionnant le bouton d’affichage de schéma dans le coin inférieur droit de l’éditeur de dataflows.

    Capture d’écran de l’éditeur de flux de données avec le bouton de vue de schéma mis en évidence dans le coin inférieur droit.

  9. En mode Schéma, vous verrez toutes les colonnes de votre table. Sélectionnez CustomerID, CompanyName et Orders (2). Ensuite, accédez à l’onglet Outils de schéma , sélectionnez Supprimer les colonnes, puis sélectionnez Supprimer d’autres colonnes. Cela conserve uniquement les colonnes souhaitées.

    Capture d’écran de la vue de schéma montrant tous les noms de colonnes disponibles, avec les colonnes CustomerID, CompanyName et Orders (2) mises en évidence.

    Capture d’écran du menu des outils de schéma avec l’option Supprimer d’autres colonnes mises en évidence.

  10. La colonne Orders (2) contient des détails supplémentaires de l’étape de fusion. Pour afficher et utiliser ces données, sélectionnez le bouton Afficher la vue données dans le coin inférieur droit, en regard de l’affichage du schéma. Ensuite, dans l'en-tête de la colonne Orders (2), sélectionnez l'icône Développer la colonne et choisissez la colonne Count. Cela ajoute le nombre de commandes pour chaque client à votre table.

    Capture d’écran pour l’utilisation de la vue de données.

  11. Nous allons maintenant classer vos clients en fonction du nombre de commandes qu’ils ont effectuées. Sélectionnez la colonne Count , puis accédez à l’onglet Ajouter une colonne, puis sélectionnez Colonne De classement. Cela ajoute une nouvelle colonne montrant le classement de chaque client en fonction de son nombre de commandes.

    Capture d’écran de l’éditeur de flux de données avec la colonne Count sélectionnée.

  12. Conservez les paramètres par défaut dans Colonne de rang. Sélectionnez ensuite OK pour appliquer cette transformation.

    Capture d’écran de la fenêtre Rang avec tous les paramètres par défaut affichés.

  13. À présent, renommez la requête obtenue en Clients classés à l’aide du volet Paramètres de la requête sur le côté droit de l’écran.

    Capture d’écran de l’éditeur de flux de données avec le nom Clients classés mis en évidence sous les propriétés des paramètres de la requête.

  14. Vous êtes prêt à définir l’emplacement de vos données. Dans le volet Paramètres de requête , faites défiler vers le bas et sélectionnez Choisir la destination des données.

    Capture d’écran de l’éditeur de flux de données avec l’emplacement de la sélection de destination des données mis en évidence.

  15. Vous pouvez envoyer vos résultats à un "lakehouse" si vous en avez un, ou ignorer cette étape sinon. Ici, vous pouvez choisir le lakehouse et la table que vous souhaitez utiliser pour vos données, et décider si vous souhaitez ajouter de nouvelles données (Append) ou remplacer celles qui s'y trouvent (Remplacer).

    Capture d'écran de la fenêtre de connexion à la destination des données avec Lakehouse sélectionné.

    Capture d'écran de la fenêtre Choisir les paramètres de la destination.

  16. Votre flux de données est maintenant prêt à être publié. Passez en revue les requêtes dans la vue des diagrammes, puis sélectionnez Publier.

    Capture d’écran de l’éditeur de flux de données avec le bouton Publier dans le coin inférieur droit mis en évidence.

    Sélectionnez Publier dans le coin inférieur droit pour enregistrer votre dataflow. Vous revenez à votre espace de travail, où une icône spinner en regard de votre nom de flux de données affiche sa publication. Lorsque le spinner disparaît, votre dataflow est prêt à s’actualiser !

    Important

    La première fois que vous créez un Dataflow Gen2 dans un espace de travail, Fabric configure certains éléments d’arrière-plan (Lakehouse et Warehouse) qui aident votre flux de données à s’exécuter. Ces éléments sont partagés par tous les flux de données dans l’espace de travail et vous ne devez pas les supprimer. Ils ne sont pas destinés à être utilisés directement et ne sont généralement pas visibles dans votre espace de travail, mais vous pouvez les voir dans d’autres endroits tels que Notebooks ou l’analytique SQL. Recherchez les noms qui commencent par DataflowsStaging pour les repérer.

  17. Dans votre espace de travail, sélectionnez l’icône Planifier l’actualisation.

    Capture d’écran de l’espace de travail avec l’icône Planifier l’actualisation mise en évidence.

  18. Activez l’actualisation planifiée, sélectionnez Ajouter un autre horaire, puis configurez l’actualisation comme illustré dans la capture d’écran suivante.

    Capture d'écran montrant comment sélectionner un autre horaire.

Nettoyer les ressources

Si vous ne prévoyez pas de continuer à utiliser ce flux de données, supprimez-le en effectuant les étapes suivantes :

  1. Accédez à votre espace de travail Microsoft Fabric.

    Capture d’écran de la fenêtre Espaces de travail à partir de laquelle vous accédez à votre espace de travail.

  2. Sélectionnez les ellipses verticales en regard du nom de votre flux de données, puis sélectionnez Supprimer.

    Capture d’écran avec les ellipses verticales et l’option supprimer dans le menu déroulant mis en évidence.

  3. Sélectionnez Supprimer pour confirmer la suppression de votre flux de données.

    Capture d’écran de la fenêtre Supprimer le flux de données, avec le bouton Supprimer mis en évidence.

Contenu connexe

Le flux de données de cet exemple vous montre comment charger et transformer des données dans Flux de données Gen2. Vous avez appris à :

  • Créer un Flux de données Gen2.
  • Transformer les données.
  • Configurez les paramètres de destination pour les données transformées.
  • Exécutez et planifiez votre pipeline de données.

Passez à l’article suivant pour découvrir comment créer un pipeline de données.

Démarrage rapide : Créer votre premier pipeline de données pour copier des données.