Comment surveiller la disponibilité des clusters avec les journaux Azure Monitor et Ambari
Les clusters HDInsight incluent l’intégration des journaux Azure Monitor pour obtenir des mesures et des journaux interrogeables, ainsi que des alertes configurables. Cet article explique comment utiliser Azure Monitor pour surveiller vos clusters.
Intégration de Journaux Azure Monitor
Les journaux Azure Monitor permettent de collecter et d’agréger au même endroit des données générées par plusieurs sources, comme les clusters HDInsight, pour offrir une expérience de supervision unifiée.
Vous aurez besoin d’un espace de travail Log Analytics pour stocker les données collectées. Si vous n’en avez pas, créez-en un en suivant les instructions données ici : Créer un espace de travail Log Analytics dans le portail Azure.
Activer l’intégration des journaux Azure Monitor HDInsight
Dans la page des ressources du cluster HDInsight du portail, sélectionnez Azure Monitor. Ensuite, sélectionnez Activer, puis votre espace de travail Log Analytics dans la liste déroulante.
Par défaut, cela installe l’agent OMS sur tous les nœuds de cluster hormis pour les nœuds de périphérie. Comme aucun agent OMS n’est installé sur les nœuds de périphérie de cluster, il n’y a pas de télémétrie sur les nœuds de périphérie dans Log Analytics par défaut.
Interroger les tables de métriques et de journaux
Une fois que l’intégration des journaux Azure Monitor est activée (cela peut prendre plusieurs minutes), accédez à votre ressource Espace de travail Log Analytics et sélectionnez Journaux.
Les journaux listent des exemples de requêtes, comme ci-dessous :
| Nom de la requête | Description |
|---|---|
| Computers availability today (Disponibilité des ordinateurs aujourd’hui) | Suit le nombre d’ordinateurs envoyant des journaux, heure par heure |
| List heartbeats (Répertorier les pulsations) | Répertorie toutes les pulsations d’ordinateur à partir de la dernière heure |
| Last heartbeat of each computer (Dernière pulsation de chaque ordinateur) | Indique la dernière pulsation envoyée par chaque ordinateur |
| Unavailable computers (Ordinateurs non disponibles) | Répertorie tous les ordinateurs connus qui n’ont pas envoyé de pulsation au cours des 5 dernières heures |
| Availability rate (Taux de disponibilité) | Calcule le taux de disponibilité de chaque ordinateur connecté |
Par exemple, exécutez l’exemple de requête Availability rate (Taux de disponibilité) en sélectionnant Exécuter pour cette requête, comme illustré dans la capture d’écran ci-dessus. Vous pourrez ainsi connaître le taux de disponibilité, exprimé en pourcentage, de chaque nœud de votre cluster. Si vous avez activé plusieurs clusters HDInsight pour l’envoi de métriques vers le même espace de travail Log Analytics, vous pouvez voir le taux de disponibilité de tous les nœuds (hormis les nœuds de périphérie) de ces clusters.
Remarque
Le taux de disponibilité étant mesuré sur une période de 24 heures, votre cluster devra s’exécuter pendant au moins 24 heures avant de pouvoir consulter le taux de disponibilité précis.
Vous pouvez épingler ce tableau à un tableau de bord partagé en cliquant sur Épingler dans le coin supérieur droit. Si vous n’avez pas de tableau de bord partagé accessible en écriture, vous pouvez voir comment en créer un ici : Créer et partager des tableaux de bord dans le portail Azure.
Alertes Azure Monitor
Vous pouvez également configurer des alertes Azure Monitor qui se déclencheront lorsque la valeur d’une métrique ou les résultats d’une requête respectent certaines conditions. Par exemple, nous allons créer une alerte pour envoyer un e-mail quand un ou plusieurs nœuds n’ont envoyé aucune pulsation depuis cinq heures (ils sont alors considérés comme indisponibles).
Dans Journaux, exécutez l’exemple de requête Unavailable computers (Ordinateurs non disponibles) en sélectionnant Exécuter pour cette requête, comme illustré ci-dessous.
Si tous les nœuds sont disponibles, cette requête ne doit retourner aucun résultat pour l’instant. Cliquez sur Nouvelle règle d’alerte pour commencer à configurer votre alerte pour cette requête.
Trois composants constituent une alerte : la ressource pour laquelle créer la règle (ici, l’espace de travail Log Analytics), la condition pour déclencher l’alerte et les groupes d’actions qui déterminent le comportement prévu au moment du déclenchement de l’alerte. Cliquez sur le titre de la condition, comme illustré ci-dessous, pour terminer la configuration de la logique de signal.
La page Configurer la logique du signal s’ouvre.
Définissez la section Logique d’alerte comme suit :
Basé sur : Nombre de résultats, Condition : Supérieur à, Seuil : 0.
Étant donné que cette requête renvoie uniquement les nœuds non disponibles comme résultats, si le nombre de résultats est toujours supérieur à 0, l’alerte doit se déclencher.
Dans la section Évaluées sur la base de, définissez la période et la fréquence selon la fréquence à laquelle vous souhaitez rechercher les nœuds non disponibles.
Pour les besoins de cette alerte, vous devez vérifier que la période est identique à la fréquence. Vous trouverez plus d’informations sur la période, la fréquence et d’autres paramètres d’alerte ici.
Sélectionnez Terminé lorsque vous avez terminé de configurer la logique du signal.
Si vous n’avez pas de groupe d’actions existant, cliquez sur Créer nouveau sous la section Groupes d’actions.
Cette opération ouvre Ajouter un groupe d’actions. Choisissez un nom de groupe d’actions, un nom court, un abonnement et un groupe de ressources. Dans la section Actions, choisissez un nom d’action et sélectionnez E-mail/SMS/Push/Voix comme type d’action.
Notes
Plusieurs autres actions peuvent être déclenchées par une alerte, par exemple Fonction Azure, LogicApp, Webhook, ITSM et Runbook Automation. En savoir plus.
La page E-mail/SMS/Push/Voix s’ouvre. Choisissez un nom de destinataire, cochez la case E-mail, puis tapez une adresse de messagerie à laquelle vous souhaitez envoyer l’alerte. Sélectionnez OK dans Email/SMS/Push/Voix, puis dans Ajouter un groupe d’actions pour terminer la configuration de votre groupe d’actions.
Une fois ces panneaux fermés, vous devez voir votre groupe d’actions répertorié sous la section Groupes d’actions. Pour finir, complétez la section Détails de l’alerte en tapant un nom de règle d’alerte et une description et en choisissant une gravité. Cliquez sur Créer une règle d’alerte pour terminer.
Conseil
La possibilité de spécifier une gravité est très utile, notamment lorsque vous créez plusieurs alertes. Par exemple, vous pouvez créer une alerte pour déclencher un avertissement (gravité 1) si un seul nœud principal tombe en panne et une autre alerte de type critique (gravité 1) dans le cas peu probable où les deux nœuds principaux tomberaient en panne.
Lorsque la condition de cette alerte est remplie, l’alerte se déclenche et vous recevez un e-mail contenant les détails de l’alerte comme suit :
Vous pouvez également voir toutes les alertes qui ont été déclenchées, regroupées par gravité, en accédant à Alertes dans votre espace de travail Log Analytics.
Lorsque vous sélectionnez un groupe de gravité (par exemple, Gravité 1, comme illustré ci-dessus), cela affiche les enregistrements de toutes les alertes de cette gravité qui ont été déclenchées, comme ci-dessous :
