Notes
L’accès à cette page nécessite une autorisation. Vous pouvez essayer de vous connecter ou de modifier des répertoires.
L’accès à cette page nécessite une autorisation. Vous pouvez essayer de modifier des répertoires.
Les expériences d’ingénierie des données et de science des données Microsoft Fabric fonctionnent sur une plateforme de calcul Spark entièrement managée. Cette plateforme est conçue pour offrir une vitesse et une efficacité inégalées. Il inclut des pools de démarrage et des pools personnalisés.
Un environnement Fabric contient une collection de configurations, y compris les propriétés de calcul Spark, que vous pouvez utiliser pour configurer la session Spark une fois qu’elles sont attachées aux blocs-notes et aux travaux Spark. Avec un environnement, vous disposez d’un moyen flexible de personnaliser les configurations de calcul pour l’exécution de vos travaux Spark.
Configurer les paramètres
En tant qu’administrateur d’espace de travail, vous pouvez activer ou désactiver les personnalisations de calcul.
Dans le volet Paramètres de l’espace de travail , sélectionnez la section Ingénierie/Science des données .
Sous l’onglet Pool, passez le commutateur Personnaliser les configurations de calcul pour les éléments sur Activé.
Vous pouvez également déléguer des membres et des contributeurs pour modifier les configurations de calcul au niveau de session par défaut dans un environnement Fabric en activant ce paramètre.
Si vous désactivez cette option dans le volet Paramètres de l’espace de travail , la section Calcul de l’environnement est désactivée. Les configurations de calcul du pool par défaut pour l’espace de travail sont utilisées pour exécuter des travaux Spark.
Personnaliser les propriétés de calcul au niveau de la session dans un environnement
En tant qu’utilisateur, vous pouvez sélectionner un pool pour l’environnement dans la liste des pools disponibles dans l’espace de travail Fabric. L’administrateur de l’espace de travail Fabric crée le pool de démarrage par défaut et les pools personnalisés.
Après avoir sélectionné un pool dans la section Calcul , vous pouvez régler les cœurs et la mémoire des exécuteurs dans les limites des tailles et limites du nœud du pool sélectionné. Pour plus d’informations sur les tailles de calcul Spark et leurs cœurs ou options de mémoire, consultez Calcul Spark dans Fabric. Utilisez la section Calcul pour configurer les propriétés au niveau de la session Spark pour personnaliser la mémoire et les cœurs des exécuteurs en fonction des exigences de charge de travail. Les propriétés Spark définies via spark.conf.set pour paramétrer le niveau applicatif ne sont pas liées aux variables d’environnement.
Par exemple, imaginons que vous souhaitiez sélectionner un pool personnalisé avec une taille importante de nœud, soit 16 vCores Spark, comme pool d'environnement.
Dans la section Calcul, sous Pool d’environnements, utilisez la liste déroulante noyau du pilote Spark pour choisir 4, 8 ou 16, en fonction de vos besoins pour votre tâche.
Pour allouer de la mémoire aux pilotes et exécuteurs, sous mémoire de l’exécuteur Spark, sélectionnez 28 g, 56 g ou 112 g. Tous se trouvent dans les limites d'une capacité mémoire de nœud importante.
