Идеи решения
В этой статье описывается идея решения. Ваш архитектор облака может использовать это руководство, чтобы визуализировать основные компоненты для типичной реализации этой архитектуры. Используйте эту статью в качестве отправной точки для разработки хорошо спроектированного решения, которое соответствует конкретным требованиям рабочей нагрузки.
Эта идея решения демонстрирует низкую задержку, прием больших объемов журналов сеть доставки содержимого (CDN). Эти данные можно использовать для создания панелей мониторинга аналитики практически в режиме реального времени.
Архитектура
Скачайте файл Visio для этой архитектуры.
Поток данных
- сеть доставки содержимого поставщиков, таких как Verizon и быстрое прием огромных объемов журналов CDN в Azure Data Explorer, чтобы анализировать задержки, работоспособность и производительность ресурсов CDN.
- Большинство сценариев CDN приема данных через служба хранилища Azure (BLOB-объект или ADLS 2-го поколения), который использует Сетка событий Azure и активирует конвейер приема в Azure Data Explorer. Кроме того, вы можете массово получать данные с помощью средства LightIngest. Вы также можете непрерывно экспортировать данные в служба хранилища Azure в сжатом формате секционированного parquet и легко запрашивать эти данные, как описано в обзоре непрерывного экспорта данных.
- Azure Data Explorer позволяет легко использовать собственные операторы и функции для обработки, агрегирования и анализа данных временных рядов и журналов, а также предоставления аналитических сведений о скорости молнии. Вы можете создавать практически панели мониторинга аналитики в режиме реального времени с помощью панелей мониторинга Azure Data Explorer, Power BI или Grafana.
- Создание и планирование оповещений и уведомлений с помощью соединителя Azure Data Explorer для Azure Logic Apps.
Компоненты
- служба хранилища Azure соединитель Azure Data Explorer: непрерывная прием данных из служба хранилища Azure (хранилище BLOB-объектов и ADLSv2) с подпиской Сетка событий Azure для потоковой передачи этих уведомлений в Azure Data Explorer.
- Azure Data Explorer: быстрая, полностью управляемая и высокомасштабируемая служба аналитики данных для анализа больших объемов потоковой передачи данных из приложений, веб-сайтов, устройств Интернета вещей и т. д.
- Панели мониторинга Azure Data Explorer: собственный экспорт запросов Kusto, которые были изучены в пользовательском веб-интерфейсе, в оптимизированные панели мониторинга.
- Соединитель Azure Data Explorer Для Azure Logic Apps: выполнение запросов и команд Kusto автоматически в рамках запланированной или триггерной задачи.
Подробности сценария
Это решение можно использовать для приема больших объемов журналов CDN для создания панелей мониторинга аналитики в режиме реального времени.
Потенциальные варианты использования
- Служба Log Analytics
- Аналитика временных рядов
- IoT
- Аналитика с общим назначением
Соавторы
Эта статья поддерживается корпорацией Майкрософт. Первоначально он был написан следующими участниками.
Автор субъекта:
- Орнат Сподек | Старший диспетчер содержимого
Следующие шаги
Дополнительные сведения см . в документации по Azure Data Explorer.