Optimización de clústeres con Apache Ambari en Azure HDInsight

HDInsight proporciona clústeres de Apache Hadoop para aplicaciones de procesamiento de datos a gran escala. La administración, la supervisión y la optimización de estos clústeres complejos de varios nodos pueden ser un desafío. Apache Ambari es una interfaz web para administrar y supervisar clústeres de HDInsight Linux.

Para una introducción al uso de la interfaz de usuario web de Ambari, consulte Administración de clústeres de HDInsight con la interfaz de usuario web de Apache Ambari.

Inicie sesión en Ambari en https://CLUSTERNAME.azurehdidnsight.net con las credenciales del clúster. La pantalla inicial muestra un panel de información general.

Apache Ambari user dashboard displayed.

La interfaz de usuario web de Ambari se usa para administrar hosts, servicios, alertas, configuraciones y vistas. Ambari no se puede usar para crear un clúster de HDInsight o actualizar los servicios. Tampoco puede administrar pilas y versiones, retirar o dar de alta hosts o agregar servicios al clúster.

Administrar la configuración del clúster

Las opciones de configuración ayudan a optimizar un servicio determinado. Para modificar los valores de configuración de un servicio, seleccione el servicio en la barra lateral de Servicios (a la izquierda). A continuación, vaya a la pestaña Configs (Configuraciones) de la página de detalles del servicio.

Apache Ambari Services sidebar.

Modificar el tamaño del montón de Java NameNode

El tamaño del montón de Java NameNode depende de muchos factores tales como la carga en el clúster. También del número de archivos y el número de bloques. El tamaño predeterminado de 1 GB funciona bien con la mayoría de los clústeres, aunque algunas cargas de trabajo pueden requerir más o menos memoria.

Para modificar el tamaño del montón de Java NameNode:

  1. Seleccione HDFS de la barra lateral Servicios y navegue hasta la pestaña Configs (Configuraciones).

    Apache Ambari HDFS configuration.

  2. Busque el valor NameNode Java heap size (Tamaño del montón de Java NameNode). También puede usar el cuadro de texto de filtro para escribir y buscar un valor determinado. Seleccione el icono de lápiz junto al nombre del valor.

    Apache Ambari NameNode Java heap size.

  3. Escriba el nuevo valor en el cuadro de texto y, a continuación, presione ENTRAR para guardar el cambio.

    Ambari Edit NameNode Java heap size1.

  4. El tamaño del montón de Java NameNode ha cambiado de 1 GB a 2 GB.

    Edited NameNode Java heap size2.

  5. Para guardar los cambios, haga clic en el botón Guardar verde de la parte superior de la pantalla de configuración.

    `Apache Ambari save configurations`.

Pasos siguientes