Azure Data Explorer는 대용량 데이터를 거의 실시간으로 쉽게 분석할 수 있는 완전 관리형 고성능 빅 데이터 분석 플랫폼입니다. Azure Data Explorer는 다른 Azure 제품과 함께 사용하여 다양한 사용 사례에 대한 엔드투엔드 솔루션을 만들 수 있습니다.
Azure 아키텍처 센터를 사용하여 요구 사항에 적합한 아키텍처를 찾습니다. Azure 아키텍처 센터는 아키텍처를 구축하기 위한 재사용 가능한 패턴과 Azure 서비스를 가장 잘 사용하는 방법에 대한 결정을 내리는 데 도움이 되는 샘플 고객 사례를 제공합니다.
이 문서에서는 Azure Data Explorer를 포함하는 모든 아키텍처를 참조합니다.
Azure Data Explorer를 사용하는 빅 데이터 분석
Azure Data Explorer는 근 실시간 분석 및 최신 데이터 웨어하우징 사용 사례에서 작동합니다.
Azure Data Explorer 모니터링
엔터프라이즈 에코시스템 내에서 다양한 원본, 온-프레미스 또는 모든 클라우드에서 스트리밍 및 일괄 처리된 로그를 수집하기 위해 Microsoft Sentinel 및 Azure Monitor와 통합된 하이브리드 엔드투엔드 모니터링 솔루션입니다.
Azure Data Explorer 대화형 분석
Azure Data Explorer를 사용한 대화형 분석을 통해 소량에서 대량의 데이터에 대해 즉석에서 대화형으로 빠른 쿼리로 데이터를 탐색할 수 있습니다. 이 데이터 탐색은 기본 Azure Data Explorer 도구 또는 선택한 대체 도구를 사용하여 수행할 수 있습니다. 이 솔루션은 Azure Data Explorer와 나머지 데이터 플랫폼 에코시스템의 통합에 중점을 둡니다.
Azure Data Explorer를 사용한 IoT 분석
IoT 디바이스, 센서, 연결된 건물 및 차량 등에서 빠르게 흐르는 대용량 스트리밍 데이터에 대한 거의 실시간 분석. Azure Cosmos DB 및 Azure Data Explorer를 사용하여 운영 및 분석 워크로드를 모두 처리하기 위해 Azure Data Explorer를 다른 IoT 서비스와 통합하는 데 중점을 둡니다.
지리 공간적 데이터 처리 및 분석
분석에 사용할 수 있는 대용량 지리 공간적 데이터를 만들기 위한 솔루션입니다. 이 접근 방식은 고급 분석 참조 아키텍처를 기반으로 하며 다음 Azure 서비스를 사용합니다.
- GIS Spark 라이브러리가 포함된 Azure Databricks는 데이터를 처리합니다.
- Azure Database for PostgreSQL은 사용자가 API를 통해 요청하는 데이터를 쿼리합니다.
- Azure Data Explorer는 빠른 탐색 쿼리를 실행합니다.
- Azure Maps는 웹 애플리케이션에서 지리 공간적 데이터의 시각적 개체를 만듭니다.
- Power BI의 Azure Maps Power BI 시각적 기능은 사용자 지정 보고서를 제공합니다.
Azure Data Explorer를 사용한 장기 보안 로그 보존
보안 로그의 장기 보존을 위한 솔루션입니다. 아키텍처의 핵심은 Azure Data Explorer입니다. 이 서비스는 최소한의 비용으로 보안 데이터에 대한 스토리지를 제공하지만 해당 데이터를 쿼리할 수 있는 형식으로 유지합니다. 기타 주요 구성 요소는 다음과 같습니다.
- 다음 기능에 대한 엔드포인트용 Microsoft Defender 및 Microsoft Sentinel:
- 포괄적인 엔드포인트 보안
- SIEM(보안 정보 및 이벤트 관리)
- SOAR(보안 오케스트레이션 자동화 응답)
- Sentinel 보안 로그의 단기 스토리지를 위한 Log Analytics.
Content Delivery Network 분석
실시간에 가까운 분석 대시보드를 구축하기 위한 대용량 CDN(콘텐츠 배달 네트워크) 로그에 대한 낮은 대기 시간의 높은 처리량 수집.
이 솔루션은 다음 서비스도 사용합니다.
- Azure Data Lake Storage
- Logic Apps
- 대시보드
테스트 차량에 대한 데이터 분석
자동차 OEM에는 시험 사용을 수행하고 R&D 엔지니어에게 시험 사용 진단 데이터를 가져오는 시간을 최소화하는 솔루션이 필요합니다.
이 예제 워크로드는 원격 분석 및 일괄 테스트 드라이브 데이터 수집 시나리오와 관련이 있습니다. 워크로드는 진단 데이터를 처리하는 데이터 플랫폼과 시각화 및 보고용 커넥터에 중점을 둡니다.
이 솔루션은 다음 서비스도 사용합니다.
- Azure IoT Hub
- Azure Blob Storage
- Azure Event Hubs
- Azure Functions
- Azure Managed Grafana
- Azure App Service
- Azure Maps
- Azure API Management
- Power BI