Fürtök optimalizálása az Apache Ambarival az Azure HDInsightban

A HDInsight Apache Hadoop-fürtöket biztosít nagy léptékű adatfeldolgozási alkalmazásokhoz. Ezen összetett többcsomópontos fürtök kezelése, monitorozása és optimalizálása kihívást jelenthet. Az Apache Ambari egy webes felület a HDInsight Linux-fürtök kezeléséhez és monitorozásához.

Az Ambari webes felhasználói felületének használatának bemutatása: HDInsight-fürtök kezelése az Apache Ambari webes felhasználói felület használatával

Jelentkezzen be az Ambariba https://CLUSTERNAME.azurehdidnsight.net a fürt hitelesítő adataival. A kezdeti képernyőn megjelenik egy áttekintő irányítópult.

Apache Ambari user dashboard displayed.

Az Ambari webes felhasználói felülete gazdagépek, szolgáltatások, riasztások, konfigurációk és nézetek kezelésére szolgál. Az Ambari nem használható HDInsight-fürt létrehozására vagy szolgáltatások frissítésére. A veremeket és verziókat, a leszerelési vagy újrabontási gazdagépeket sem kezelheti, és nem adhat hozzá szolgáltatásokat a fürthöz.

A fürt konfigurációjának kezelése

A konfigurációs beállítások segítenek egy adott szolgáltatás hangolásában. A szolgáltatás konfigurációs beállításainak módosításához válassza ki a szolgáltatást a Szolgáltatások oldalsávon (a bal oldalon). Ezután lépjen a Konfigurációk lapra a szolgáltatás részletei lapon.

Apache Ambari Services sidebar.

NameNode Java-halom méretének módosítása

A NameNode Java halommérete számos tényezőtől függ, például a fürt terhelésétől. Emellett a fájlok száma és a blokkok száma is. Az alapértelmezett 1 GB-os méret a legtöbb fürt esetében jól működik, bár egyes számítási feladatokhoz több vagy kevesebb memória szükséges.

A NameNode Java halomméretének módosítása:

  1. Válassza a HDFS-t a Szolgáltatások oldalsávon, és lépjen a Konfigurációk lapra.

    Apache Ambari HDFS configuration.

  2. Keresse meg a NameNode Java halomméret beállítását. A szűrő szövegmezővel is beírhat és megkereshet egy adott beállítást. Válassza a toll ikont a beállítás neve mellett.

    Apache Ambari NameNode Java heap size.

  3. Írja be az új értéket a szövegmezőbe, majd a módosítás mentéséhez nyomja le az Enter billentyűt .

    Ambari Edit NameNode Java heap size1.

  4. A NameNode Java halommérete 2 GB-ról 1 GB-ra módosul.

    Edited NameNode Java heap size2.

  5. Mentse a módosításokat a konfigurációs képernyő tetején található zöld Mentés gombra kattintva.

    `Apache Ambari save configurations`.

Következő lépések