Azure HDInsight – dokumentáció

Az Azure HDInsight egy felügyelt Apache Hadoop-szolgáltatás, amellyel az Apache Spark, az Apache Hive, az Apache Kafka, az Apache HBase és még sok más futtatható a felhőben.

A HDInsight bemutatása

Áttekintés

• Mi az az Azure HDInsight?
• A HDInsight OSS összetevői és verziói

Első lépések

• Elemzési megoldások létrehozása az Azure HDInsight segítségével
• HDInsight-fürtök létrehozása
• Monitorozás a HDInsighttal
• Fürtök méretezése költségcsökkentés céljából
• A HDInsight biztonsági áttekintése

Apache Spark

Első lépések

• Mi az az Apache Spark?
• Spark-fürtök létrehozása és a Spark futtatása a Jupyterben
• Adatok betöltése és Spark-lekérdezések futtatása

Útmutató

• Spark-függőségek kezelése
• Spark-feladatok optimalizálása

Apache Hadoop

Első lépések

• Mi az az Apache Hadoop?
• Hadoop-fürtök létrehozása és Hive-lekérdezések futtatása
• Map Reduce-minták futtatása

Útmutató

• Hadoop-fürtök monitorozása és kezelése
• JDBC-/ODBC-illesztő használata

Integráció

Útmutató

• Spark/Hive – A Spark és a Hive csatlakoztatása a Hive Warehouse összekötővel
• Spark/Kafka – Apache Spark strukturált streamelés az Apache Kafkával
• Spark/HBase – Az Apache HBase lekérdezése az Apache Sparkkal
• Igény szerinti fürtök létrehozása az ADF használatával

Fogalom

• A megfelelő virtuálisgép-méret kiválasztása
• A HDInsight által támogatott virtuálisgép-típusok
• Tárolási lehetőségek összehasonlítása

Apache Kafka

Első lépések

• Mi az az Apache Kafka?
• Kafka-fürtök létrehozása és Kafka-témakörök kezelése
• Előállítói és fogyasztói API-k használata

Útmutató

• A Kafka REST proxy használata
• Kafka TLS-titkosítás és -hitelesítés

Interaktív lekérdezés

Első lépések

• Mi az az interaktív lekérdezés?
• Repülőjárat-adatok elemzése az Apache Hive-val

Útmutató

• Fürtméretezési útmutató
• Hive-csatlakozás Power BI-jal

Alkalmasság vállalati használatra

Első lépések

• A HDInsight biztonsági áttekintése
• Virtuális hálózat megtervezése
• Hadoop az Active Directoryn: Enterprise Security Package
• Helyszíni fürtök migrálása a felhőbe

Apache HBase

Első lépések

• Mi az az Apache HBase?
• A HBase használata az Azure HDInsightban
• Az HBase lekérdezése az Apache Phoenix használatával

Útmutató

• Gyorsított írási műveletek engedélyezése a HBase-hez
• Az Apache Phoenix ajánlott eljárásai