Azure HDInsight 설명서

Azure HDInsight는 클라우드에서 Apache Spark, Apache Hive, Apache Kafka, Apache HBase 등을 실행할 수 있는 관리형 Apache Hadoop 서비스입니다.

HDInsight 정보

개요

• Azure HDInsight란?
• HDInsight OSS 구성 요소 및 버전

시작하기

• Azure HDInsight를 사용하여 분석 솔루션 빌드
• HDInsight 클러스터 만들기
• HDInsight를 통한 모니터링
• 클러스터 크기를 조정하여 비용 절감
• HDInsight 보안 개요

Apache Spark

시작하기

• Apache Spark란?
• Spark 클러스터 만들기 및 Jupyter에서 Spark 실행
• 데이터 로드 및 Spark 쿼리 실행

방법 가이드

• Spark 종속성 관리
• Spark 작업 최적화

Apache Hadoop

시작하기

• Apache Hadoop이란?
• Hadoop 클러스터 만들기 및 Hive 쿼리 실행
• Map Reduce 샘플 실행

방법 가이드

• Hadoop 클러스터 모니터링 및 관리
• JDBC/ODBC 드라이버 사용

통합

방법 가이드

• Spark/Hive - Hive 웨어하우스 커넥터를 사용하여 Spark 및 Hive 연결
• Spark/Kafka - Apache Kafka를 사용하여 Apache Spark 구조 스트리밍
• Spark/HBase - Apache Spark를 사용하여 Apache HBase 쿼리
• ADF를 사용하여 주문형 클러스터 만들기

개념

• 올바른 VM 크기 선택
• HDInsight 지원 VM 유형
• 스토리지 옵션 비교

Apache Kafka

시작하기

• Apache Kafka란?
• Kafka 클러스터 만들기 및 Kafka 토픽 관리
• 생산자 및 소비자 API 사용

방법 가이드

• Kafka REST 프록시 사용
• Kafka TLS 인증 및 암호화

대화형 쿼리

시작하기

• 대화형 쿼리란?
• Apache Hive를 사용하여 비행 데이터 분석

방법 가이드

• 클러스터 크기 조정 가이드
• Power BI와 Hive 연결

엔터프라이즈 준비

시작하기

• HDInsight 보안 개요
• 가상 네트워크 계획
• Active Directory의 Hadoop: Enterprise Security Package
• 온-프레미스 클러스터를 클라우드로 마이그레이션

Apache HBase

시작하기

• Apache HBase란?
• Azure HDInsight에서 HBase 사용
• Apache Phoenix를 사용하여 HBase 쿼리

방법 가이드

• HBase에 대해 가속 쓰기 사용
• Apache Phoenix 모범 사례