Aperçus de session de démarrage pour l’ingénierie des données Fabric

S’applique à :✅ Ingénierie des données fabric et science des données

Le démarrage rapide de session est essentiel pour l’analytique interactive. Les pools de démarrage fabric sont conçus pour fournir des sessions Spark en environ 5 secondes par défaut. Toutefois, lorsque cette cible n’est pas atteinte, il se peut que vous ayez peu de visibilité sur la raison.

Les analyses de début de session comblent cet écart en rendant l’acquisition de session transparente, déboguable et exploitable.

Cet article vous aide à comprendre les points suivants :

  • Pourquoi les sessions ne démarrent pas toujours en 5 secondes
  • Quels aperçus sur le démarrage de session sont mis en avant dans le produit
  • Comment utiliser l’affichage des détails de session pour diagnostiquer les retards

Pourquoi les sessions ne démarrent pas toujours en 5 secondes

Dans la pratique, les retards de démarrage de session sont presque toujours pilotés par les configurations côté utilisateur, et non par les régressions de plateforme. Les causes courantes sont les suivantes :

  • Configurations de calcul personnalisées qui empêchent la réutilisation des pools de démarrage prédéfinis.
  • Bibliothèques ou dépendances d’environnement préinstallées qui nécessitent une personnalisation du cluster.
  • Mode de publication de la bibliothèque Environnements Fabric : si l’environnement attaché utilise le mode plein, l’instantané de la bibliothèque se déploie au démarrage de session (généralement 1 à 3 minutes). Si l’environnement utilise le mode Rapide, les bibliothèques s’installent lorsque la première cellule de code s’exécute, ce qui ajoute également l’heure de démarrage.
  • Réseaux virtuels gérés ou réseaux privés qui forcent l'approvisionnement de clusters isolés.
  • Une demande régionale élevée inattendue provoquant une bascule vers des clusters à la demande.

Quels aperçus fournit le démarrage de session

Jusqu’à présent, les utilisateurs pouvaient voir qu’une session était « en cours de démarrage », mais pas ce qui se passait sous le capot.

Avec cette fonctionnalité, Fabric présente des raisons claires et explicites pour le comportement de démarrage de session directement dans l’expérience produit :

  • Indique si la session a été servie à partir d’un pool de démarrage ou d’un cluster à la demande.
  • La raison exacte pour laquelle une session de chemin d’accès rapide n’a pas pu être utilisée( par exemple, les bibliothèques, la mise en réseau ou les configurations personnalisées).
  • Indique si les bibliothèques d’environnement ont été appliquées via le mode rapide (installé au démarrage de session) ou le mode complet (déployé à partir d’un instantané prédéfini).
  • Où le temps a été utilisé pendant l’acquisition de la session.

Utiliser l’affichage détails de la session pour diagnostiquer les retards

Pour passer en revue les détails de démarrage de session pour un bloc-notes :

  1. Ouvrez votre bloc-notes dans l’espace de travail Fabric.

  2. Accédez au volet d’état de session ou de surveillance du bloc-notes.

  3. Sélectionnez Détails de session pour la session active ou récente.

  4. Passez en revue la raison du retard et la source de session (pool de démarrage ou à la demande).

Cela permet de déterminer immédiatement si le délai était :

  • Attendu en raison de choix de configuration.
  • Lié aux bibliothèques ou à la mise en réseau : signaux actionnables pour optimiser la configuration de l’environnement. Par exemple, si la raison du délai affiche le déploiement d’un instantané en mode complet, vous pouvez réduire le temps de démarrage en attachant un pool dynamique personnalisé. Si l’installation de la bibliothèque en mode rapide a provoqué le retard, envisagez de déplacer les dépendances stables en mode plein.

Conseil / Astuce

Le dossier Ressources du bloc-notes et les installations de bibliothèque inline (par exemple %pip install) ne sont pas affectés par la publication de l’environnement. Ils s’installent pendant la session active et n’apparaissent pas comme raisons de retard liées à l'environnement dans les analyses de session.

Conseil / Astuce

Si les détails de la session indiquent qu’un pool de démarrage n’a pas pu être utilisé en raison des dépendances de bibliothèque, envisagez de déplacer rarement les bibliothèques dans un environnement Fabric publié pour éviter la personnalisation répétée du cluster au démarrage de chaque session.