Azure Stream Analytics 설명서

Azure Stream Analytics는 인사이트를 얻거나, 보고서를 빌드하거나, 경고 및 작업을 트리거하는 데 사용할 수 있는 데이터의 빠른 이동 스트림을 분석하고 처리하는 데 도움이 되도록 설계된 완전 관리형 실시간 분석 서비스입니다. 빠른 시작, 자습서 및 샘플을 통해 Azure Stream Analytics를 사용하는 방법을 알아보세요.

Azure Stream Analytics 정보

개요

• Azure Stream Analytics란?
• Azure Stream Analytics 솔루션 패턴

빠른 시작

• Azure Portal을 사용하여 작업 만들기

자습서

• Event Hubs 데이터를 Parquet 형식으로 캡처
• Data Lake Storage Gen2의 Delta 테이블에 쓰기
• 코드 편집기 없이 실시간으로 Power BI 대시보드 빌드
• 사기 전화 데이터 분석 및 결과 가시화

개념

• 스트리밍 분석 기술 선택
• 작업을 위한 개발 도구 선택

데이터 원본에 작업 연결

개요

• 입력 형식에 대해 알아보기

개념

• 스트림 입력 데이터
• 조회할 참조 데이터 조인

방법 가이드

• SQL Database의 참조 데이터 사용
• 입력 연결 문제 해결
• Event Hubs 이벤트에 대한 Apache Kafka 처리
• Azure Event Hubs에서 데이터 처리

출력 싱크로 데이터 보내기

개요

• 출력 형식에 대해 알아보기

개념

• Azure Cosmos DB로 출력
• Azure SQL Database로 출력
• 사용자 지정 Blob 출력 분할
• 출력 오류 처리 정책

방법 가이드

• 출력 연결 문제 해결

작업 모니터링 및 문제 해결

개념

• Stream Analytics 작업 메트릭
• 작업 메트릭에 대한 Stream Analytics 차원

방법 가이드

• Azure Portal을 사용하여 작업 모니터링 및 관리
• Visual Studio에서 작업 모니터링 및 관리
• 작업 메트릭 및 차원을 사용하여 작업 성과 분석
• Visual Studio Code에서 작업 다이어그램을 사용하여 로컬로 쿼리 디버그
• 리소스 로그를 사용하여 문제 해결
• 작업 다이어그램을 사용하여 디버그
• 데이터 오류 문제 해결

임시 개념 검토

개념

• 일반적인 쿼리 패턴
• Stream Analytics의 시간 처리 이해
• 내부 검사점 및 재생

Stream Analytics 쿼리로 데이터 변환

개념

• 창 작업 함수 소개
• 지리 공간적 함수 소개
• JSON 및 Avro 데이터 구문 분석

방법 가이드

• 쿼리 논리 문제 해결
• JavaScript 사용자 정의 집계 작성
• IoT Edge 작업에 대한 .NET 사용자 정의 함수 개발

자습서

• JavaScript 사용자 정의 함수 실행
• Stream Analytics Edge 작업에서 C# 사용자 정의 함수 실행

기계 학습을 통한 분석

방법 가이드

• 기계 학습을 사용하여 변칙 검색
• Machine Learning Studio(클래식)로 감정 분석 수행
• Machine Learning Studio(클래식) 기능으로 작업 확장

개발자 도구를 사용하여 작업 생성 및 관리

방법 가이드

• Visual Studio Code로 작업 살펴보기
• Visual Studio Code의 샘플 데이터를 사용하여 쿼리 테스트
• Visual Studio용 도구 설치
• Visual Studio의 샘플 데이터를 사용하여 쿼리 테스트
• Visual Studio의 라이브 데이터를 사용하여 쿼리 테스트
• Visual Studio에서 작업 보기
• Visual Studio에서 IoT Edge 작업 개발

video

• Visual Studio Code로 작성, 관리 및 테스트

Stream Analytics 자습서 및 솔루션 사용해 보기

자습서

• 실시간 사기 감지
• Azure 함수 트리거

방법 가이드

• 지오펜싱 및 지리 공간적 집계를 통한 솔루션 빌드
• IoT Edge에서 작업 실행
• 감정 분석 솔루션 빌드
• IoT 솔루션 빌드
• 자주 발생하는 거래 시뮬레이션
• 조정 가능한 규칙 임계값에 따른 경고

Stream Analytics 작업 배포

방법 가이드

• Visual Studio Code를 사용하여 CI/CD 파이프라인 설정
• Visual Studio를 사용하여 CI/CD 파이프라인 설정
• REST API를 사용하여 IoT Edge 작업에 대한 CI/CD 설정

Stream Analytics 작업 크기 조정

방법 가이드

• 스트리밍 단위로 크기 조정
• 쿼리 병렬화로 크기 조정
• 작업 크기를 조정하여 처리량 늘리기
• 재분할을 통한 처리 최적화