Azure HDInsight-Dokumentation

Azure HDInsight ist ein verwalteter Apache Hadoop-Dienst, über den Sie Apache Spark, Apache Hive, Apache Kafka, Apache HBase und mehr in der Cloud ausführen können.

Informationen zu HDInsight

Überblick

• Worum handelt es sich bei Azure HDInsight?
• HDInsight-OSS-Komponenten und -Versionen

Erste Schritte

• Erstellen von Analyselösungen mit Azure HDInsight
• Erstellen von HDInsight-Clustern
• Überwachen mit HDInsight
• Skalieren von Clustern zur Kostensenkung
• Übersicht über HDInsight-Sicherheit

Apache Spark

Erste Schritte

• Was ist Apache Spark?
• Erstellen von Spark-Clustern und Ausführen von Spark in Jupyter
• Laden von Daten und Ausführen von Spark-Abfragen

Schrittanleitung

• Verwalten von Spark-Abhängigkeiten
• Optimieren von Spark-Aufträgen

Apache Hadoop

Erste Schritte

• Was ist Apache Hadoop?
• Erstellen von Hadoop-Clustern und Ausführen von Hive-Abfragen
• Ausführen von Map Reduce-Beispielen

Schrittanleitung

• Überwachen und Verwalten von Hadoop-Clustern
• Verwenden eines JDBC-/ODBC-Treibers

Integration

Schrittanleitung

• Spark/Hive: Verbinden von Spark und Hive mit Hive Warehouse Connector
• Spark/Kafka: Strukturiertes Apache Spark-Streaming mit Apache Kafka
• Spark/HBase: Abfragen von Apache HBase mit Apache Spark
• Erstellen bedarfsgesteuerter Cluster mithilfe von ADF

Konzept

• Auswählen der richtigen VM-Größe
• Von HDInsight unterstützte VM-Typen
• Vergleichen von Speicheroptionen

Apache Kafka

Erste Schritte

• Was ist Apache Kafka?
• Erstellen von Kafka-Clustern und Verwalten von Kafka-Themen
• Verwenden von Producer- und Consumer-APIs

Schrittanleitung

• Verwenden eines Kafka-REST-Proxys
• TLS-Verschlüsselung und -Authentifizierung für Kafka

Interaktive Abfrage

Erste Schritte

• Was ist Interactive Query?
• Analysieren von Flugdaten mit Apache Hive

Schrittanleitung

• Leitfaden zur Clustergrößenanpassung
• Verbinden von Hive mit Power BI

Unternehmensfähigkeit

Erste Schritte

• Übersicht über HDInsight-Sicherheit
• Planen eines virtuellen Netzwerks
• Hadoop in Active Directory: Enterprise-Sicherheitspaket
• Migrieren von lokalen Clustern zur Cloud

Apache HBase

Erste Schritte

• Was ist Apache HBase?
• Verwenden von HBase in Azure HDInsight
• Abfragen von HBase mit Apache Phoenix

Schrittanleitung

• Aktivieren beschleunigter Schreibvorgänge für HBase
• Bewährte Methoden für Apache Phoenix