Automatiser le chargement csv SDS avec Power Automate

Avec School Data Sync (SDS) et Power Automate, vous pouvez synchroniser automatiquement vos fichiers CSV SIS/SMS exportés localement et maintenir à jour vos données Microsoft 365. Plus de modifications manuelles ou de chargements csv manuels via l’interface utilisateur SDS pour la session universitaire active. Offre les avantages suivants :

• Facilite la gestion et la surveillance des chargements de fichiers CSV locaux.
• Maintient les utilisateurs et les classes Microsoft 365 à jour en fonction des modifications de SIS/SMS plutôt que des modifications manuelles apportées par les enseignants ou les administrateurs.
• Gérez l’intégralité du processus de chargement via l’interface utilisateur de Power Automate dans le cloud, ce qui est plus simple à utiliser que les scripts PowerShell.
• Toute la surveillance et la gestion de la solution se produisent dans Microsoft 365.
• Prise en charge du système d’exploitation serveur pour une meilleure fiabilité et une passerelle de données locale pour le chargement de fichiers locaux.

Vue d’ensemble

Commencez par installer La configuration de l’emplacement du fichier CSV, qui inclut l’installation d’une passerelle de données locale, qui doit prendre environ 5 minutes. Ensuite, vous allez configurer Power Automate Flow pour utiliser le modèle School Data Sync qui se connecte à la passerelle, et utiliser le connecteur SDS pour envoyer (push) des fichiers dans SDS à des fins de traitement.

Importante

N’oubliez pas de créer un compte de service local sur l’ordinateur sur lequel la passerelle est installée. Vous trouverez des instructions ici. Cela est requis pour la partie Système de fichiers de la création du flux.

Configuration requise

Reportez-vous à Installer une passerelle de données locale pour obtenir la liste complète des conditions requises et en cas de problème d’installation.

Configuration minimale requise

• .NET Framework 4.6 (version de passerelle d’août 2019 et versions antérieures)
• .NET Framework 4.7.2 (version de la passerelle de septembre 2019 et versions ultérieures)
• Une version 64 bits de Windows 7 ou une version 64 bits de Windows Server 2008 R (ou version ultérieure)

Recommandé

• Un processeur à 8 cœurs
• 8 Go de mémoire
• Une version 64 bits de Windows Server 2012 R2 ou version ultérieure
• Stockage SSD (Solid State Drive) pour le spoulage

Remarques importantes

• Les passerelles ne sont pas prises en charge sur les installations Server Core.
• L’utilisateur qui installe la passerelle doit être l’administrateur de la passerelle.
• La passerelle ne peut pas être installée sur un contrôleur de domaine.
• Si vous envisagez d’utiliser l’authentification Windows, veillez à installer la passerelle sur un ordinateur membre du même environnement Active Directory que les sources de données.
• Vous ne devez pas installer une passerelle sur un ordinateur, comme un ordinateur portable qui peut être éteint ou déconnecté d’Internet. La passerelle ne peut pas s’exécuter dans l’une de ces circonstances.
• Si une passerelle utilise un réseau sans fil, ses performances peuvent en pâtir.
• Vous pouvez installer jusqu’à deux passerelles sur un seul ordinateur : l’une s’exécutant en mode personnel et l’autre en mode standard. Vous ne pouvez pas avoir plusieurs passerelles s’exécutant dans le même mode sur le même ordinateur.

Ports

La passerelle crée une connexion sortante vers Azure Service Bus. Il communique sur les ports sortants : TCP 80, 443 (par défaut), 5671, 5672, 9350 à 9354. La passerelle ne nécessite pas de ports d’entrée. Si vous limitez les ports sortants sur votre serveur, vous devez vous assurer que ces ports sortants sont ouverts.

Configurer l’emplacement du fichier CSV

Vérifier la région de votre environnement Power Apps

1. Connectez-vous au Centre d’administration Power Platform avec votre compte d’administrateur général.

2. Accédez à Environnements et vérifiez la région de l’environnement que vous utilisez. La région est nécessaire pour vous assurer que vous installez la passerelle de données locale pour utiliser la même région.

   

Télécharger la passerelle de données locale

1. Téléchargez, enregistrez et exécutez le programme d’installation de la passerelle sur un ordinateur local.

2. Acceptez le chemin d’installation par défaut ou spécifiez l’emplacement sur votre ordinateur où vous souhaitez installer la passerelle.

3. Passez en revue et acceptez les conditions d’utilisation et la déclaration de confidentialité, puis choisissez Installer.

   

4. Une fois la passerelle installée, fournissez votre compte d’administrateur général, puis choisissez Se connecter.

   

5. Choisissez Inscrire une nouvelle passerelle sur cet ordinateur> Suivant, qui inscrit votre installation de passerelle auprès du service cloud de passerelle.

   

6. Renseignez les informations demandées pour l’installation de votre passerelle :

   • Nom souhaité pour votre installation
   • La clé de récupération que vous souhaitez créer, qui doit comporter au moins huit caractères

   Importante

   Enregistrez et conservez votre clé de récupération dans un endroit sûr. Vous avez besoin de cette clé lorsque vous modifiez l’emplacement de la passerelle, ou lorsque vous migrez, récupérez ou prenez le contrôle d’une passerelle existante.

7. Sélectionnez Configurer.

   

8. Dans l’écran suivant, ne modifiez pas la région recommandée sous Sélectionner une région , sauf si vous savez avec certitude que vous devez modifier la région. Reportez-vous à la région de l’environnement Power Apps dans Vérifier la région de votre environnement Power Apps pour vous assurer que la région sélectionnée est identique. Sélectionnez ensuite Terminé.

   

9. Une fois la page de confirmation affichée, choisissez Fermer. Le programme d’installation confirme que votre passerelle est désormais en ligne et prête à être utilisée.

   

   Remarque

   Vous n’avez pas besoin de sélectionner sur le lien qui indique Créer une passerelle dans Azure. Pour plus de contexte, cet article explique le fonctionnement de la passerelle de données.

Créer un compte de service local

1. Accédez à Gestion de l’ordinateur.

2. Double-cliquez sur Utilisateurs et groupes locaux.

3. Double-cliquez sur Utilisateurs.

4. Cliquez avec le bouton droit dans le volet central pour Ajouter un nouvel utilisateur.

5. Entrez un nom d’utilisateur tel que SDSServiceAccount et enregistrez le nom et le mot de passe que vous choisissez, car vous devez l’utiliser à nouveau.

6. Décochez l’option « L’utilisateur doit modifier le mot de passe lors de la prochaine connexion ».

7. Facultatif : cochez l’option « Le mot de passe n’expire jamais ».

8. Sélectionnez Créer.

   

Créer un dossier pour vos fichiers CSV

Configurez l’emplacement du dossier où l’exportation de vos fichiers CSV doit exister.

1. Ouvrez l’Explorateur de fichiers.
2. Accédez à votre lecteur C :\.
3. Sélectionnez avec le bouton droit et sélectionnez Nouveau>dossier.
4. Entrez le nom du dossier. Dans cet exemple, nous créons le dossier nommé « Fichiers CSV ».

Accorder à votre compte de service local des autorisations complètes sur le dossier CSV

1. Sélectionnez avec le bouton droit sur le dossier que vous avez créé à l’étape 3, puis accédez à Propriétés.

2. Accédez à l’onglet Sécurité .

3. Sélectionnez Modifier.

   

4. Sélectionnez Ajouter.

5. Définissez l’option Emplacement sur votre ordinateur local. Il s’agit de la première option de la liste lorsque vous sélectionnez Emplacements.

6. Tapez le nom de SDSServiceAccount (que vous avez créé à l’étape 2, numéro 5) dans le champ noms des objets (troisième champ), puis sélectionnez Vérifier les noms.

7. Sélectionnez OK.

   

8. Vérifiez que le contrôle total est accordé au compte de service. Sélectionnez Appliquer.

9. Sélectionnez OK.

   

Copier vos fichiers CSV dans le dossier

1. Copiez la dernière extraction de vos fichiers CSV dans le dossier .

   

   Attention

   Assurez-vous que vous avez uniquement des fichiers CSV dans ce dossier.

Configurer Power Automate Flow

Vérifiez que l’application Power Automate est activée

1. Lancez votre navigateur.
2. Accédez à https://admin.microsoft.com et connectez-vous avec votre compte d’administrateur général.
3. Sélectionnez Utilisateurs, puis Utilisateurs actifs.
4. Recherchez votre compte d’administrateur dans la zone « Rechercher des utilisateurs ».
5. Sélectionnez sur votre compte.
6. Sélectionnez Licence et applications.
7. Sous Applications, vérifiez que « Power Automate pour Office 365 » est activé. Si ce n’est pas le cas, sélectionnez Enregistrer.

Importante

Le connecteur de système de fichiers ne peut être configuré ou modifié qu’à partir du processus de création du modèle. Si des modifications sont nécessaires au système de fichiers ; y compris le nom d’utilisateur, le mot de passe ou l’emplacement du dossier, vous devez recréer entièrement le flux.

Configurer votre modèle

1. Lancez votre navigateur.

2. Accédez à https://make.powerautomate.com.

3. Vérifiez que vous êtes connecté avec votre compte d’administrateur général.

   Attention

   Votre compte doit être le même que celui que vous avez utilisé pour configurer la passerelle en activant la configuration pour Configurer le fichier CSV loacaiton.

4. Accédez aux modèles, sur le côté gauche.

   

5. Dans l’invite de recherche Modèles, recherchez School Data Sync. Sélectionnez Automatiser le chargement CSV school Data Sync.

   Attention

   Les éléments suivants sont pour SDS (classique), ne sélectionnez pas ou n’utilisez pas avec la nouvelle expérience SDS :

   Automatiser les fichiers CSV chargés dans votre profil de synchronisation de données scolaires (classique)

   Erreurs d’envoi d’e-mail sur School Data Sync (classique)

   School Data Sync (classique) via SFTP

   

   

6. Sélectionnez Créer pour le connecteur système de fichiers. Vous êtes invité à configurer un nouveau connecteur de système de fichiers et à utiliser la passerelle de données et les informations d’identification de connexion au compte de service local pour accéder à l’emplacement du dossier de fichiers CSV.

   Attention

   Si vous disposez déjà d’un système de fichiers, vous devez cliquer sur les points de suspension et choisir de créer un connecteur.

   

7. Nommez la connexion. Il est recommandé de lui attribuer un nom lié à sa fonction. Dans notre exemple, SDS CSV File Automation.

8. Dans le dossier racine, entrez le chemin d’accès à votre dossier de fichiers CSV créé précédemment. Dans notre exemple, « C :\CSV_Files ».

9. Le type d’authentification doit être défini sur Windows par défaut.

10. Nom d’utilisateur est le nom d’utilisateur complet du compte de service créé précédemment, y compris le nom de l’ordinateur. Dans notre exemple, DESKTOP-SD85O7N\SDSServiceAccount.

11. Entrez le mot de passe de ce compte de service local.

12. Sélectionnez la passerelle qui a été configurée précédemment.

    Conseil

    Si vous ne voyez pas le Gatway qui a été configuré précédemment, suivez les étapes de résolution des problèmes de passerelle de données locale manquantes.

13. Sélectionnez Créer.

    

14. Sélectionnez Continuer pour commencer le processus de création/personnalisation du flux.

Obtenir la synchronisation des données scolaires | Connecter une source de données | ID de flux

1. Dans un onglet distinct, accédez au portail SDS à l’adresse https://sds.microsoft.com.

2. Accédez à Synchroniser | Configuraiton | Onglet Connecter les données. Accédez à la section de la configuration source correspondante qui correspond aux extraits de données CSV qui doivent être chargés.

   • Si vous devez créer une configuration de données Connect correspondante pour votre source dans SDS, suivez les instructions appropriées en fonction du format CSV que vous utilisez. Cette opération doit être effectuée pour terminer la configuration de votre flux Power Automate.
     • Connecter des données avec SDS v2.1 CSV
     • Connecter des données avec SDS v1 CSV

3. En bas de la configuration de données Connect correspondante pour votre source, recherchez l’ID, qui est représenté sous la forme d’un GUID. Copiez-le afin qu’il puisse être utilisé ultérieurement lors de la configuration du flux Power Automate.

   

Créer et configurer une application

Importante

Vous avez besoin d’un compte Azure avec un abonnement actif. Si vous n’avez pas d’abonnement Azure, vous pouvez configurer un abonnement gratuit ici ou consulter la liste actuelle des offres Azure.

Dans un onglet distinct, suivez les étapes pour :

1. Inscrire une application

2. Générer une clé secrète client d’application

3. Accorder des autorisations d’application à l’application

   • IndustryData-InboundFlow.ReadWrite.All
   • IndustryData-DataConnector.Upload

4. Accorder le consentement de l’administrateur

   Remarque

   Pour plus d’informations, accédez à Configurer l’application cliente .

Configurer Power Automate Flow

1. Revenez à l’onglet Power Automate pour continuer là où nous nous sommes arrêtés.

2. Pour commencer à configurer le flux, sélectionnez Continuer.

3. Si vous le souhaitez, modifiez la « Fréquence de périodicité » pour l’heure spécifique de la journée et la fréquence à laquelle vous souhaitez que la synchronisation s’exécute.

   

   Conseil

   Il est recommandé de laisser suffisamment de temps pour que l’exportation et la copie se terminent dans le dossier CSV avant l’exécution de la fréquence de périodicité définie.

4. Entrez les valeurs ID client et Clé secrète client dans Obtenir l’ID client et la clé secrète client.

   • Entrez l’ID client à l’étape Clientid .
   • Entrez la clé secrète client à l’étape Clé secrète client .

   

5. Entrez votre TenandId.

6. Entrez la valeur Id à partir des valeurs de Get the School Data Sync | Connecter une source de données | ID de flux

   

7. Entrez le chemin complet du fichier, créé lors de la configuration De créer un dossier pour vos fichiers CSV dans l’invite Dossier du bloc « Lister les fichiers dans le dossier » qui se trouve dans la section « Charger des fichiers ». Pour vérifier que la connexion est correcte, vous pouvez sélectionner l’image dossier à la fin de la zone, puis la flèche. Ne doit contenir que le texte « Aucun élément ».

   

8. Sélectionnez Enregistrer, puis testez le connecteur en sélectionnant Tester en haut à droite de la page. Choisissez « Je vais effectuer l’action de déclencheur », puis enregistrez et testez. Enfin, confirmez en sélectionnant « Exécuter le flux » pour tester votre flux.

9. Le flux doit s’exécuter et recevoir toutes les coches vertes indiquant que tout a réussi. En cas de problème, contactez le support SDS ou votre responsable de déploiement.

   Remarque

   Le modèle Power Automate charge uniquement les fichiers sur SDS pour les inclure dans la prochaine exécution de synchronisation. Les exécutions de synchronisation sont généralement planifiées toutes les 12 heures. Veuillez vérifier SDS | Tableau de bord d’accueil ou synchronisation | Exécutez pour vérifier que le processus de validation et de synchronisation s’est correctement terminé pour l’exécution de synchronisation suivante après le chargement automatisé.