Optimiser les clusters à l’aide d’Apache Ambari dans Azure HDInsight
HDInsight fournit des clusters Apache Hadoop pour les applications de traitement de données à grande échelle. La gestion, la surveillance et l’optimisation de ces clusters complexes à nœuds multiples peuvent être difficiles. Apache Ambari est une interface web qui permet de gérer et de superviser les clusters Linux HDInsight.
Pour une présentation de l’interface utilisateur web d’Ambari, voir Gérer des clusters HDInsight avec l’interface utilisateur web d’Apache Ambari.
Connectez-vous à Ambari sur https://CLUSTERNAME.azurehdidnsight.net avec les informations d’identification du cluster. L’écran initial affiche un tableau de bord de présentation.
L’interface utilisateur Web d’Ambari permet de gérer les hôtes, les services, les alertes, les configurations et les vues. Ambari ne peut être utilisé pour créer un cluster HDInsight, ni mettre à niveau des services. De même, il ne peut gérer les piles et versions, mettre hors service ou réactiver des hôtes, ou ajouter des services au cluster.
Gérer la configuration de votre cluster
Les paramètres de configuration permettent de paramétrer un service particulier. Pour modifier les paramètres de configuration d’un service, sélectionnez le service dans la barre latérale Services (à gauche). Accédez ensuite à l’onglet Configurations dans la page de détails du service.
Modifier la taille du tas Java NameNode
La taille du tas Java NameNode dépend de nombreux facteurs tels que la charge du cluster, de même que le nombre de fichiers et le nombre de blocs. La taille par défaut de 1 Go fonctionne bien pour la plupart des clusters, mais certaines charges de travail peuvent nécessiter plus ou moins de mémoire.
Pour modifier la taille du tas Java NameNode :
Sélectionnez HDFS (HDFS) dans la barre latérale Services (Services) et accédez à l’onglet Configs (Configurations) .
Recherchez le paramètre NameNode Java heap size (Taille du tas Java NameNode) . Vous pouvez également utiliser la zone de texte Filter (Filtrer) pour saisir et trouver un paramètre. Sélectionnez l’icône de crayon en regard du nom de paramètre.
Tapez la nouvelle valeur dans la zone de texte, puis appuyez sur Entrée pour enregistrer la modification.
La taille du tas Java NameNode passe de 2 Go à 1 Go.
Enregistrez vos modifications en cliquant sur le bouton Save (Enregistrer) vert en haut de l’écran de configuration.
