Версии Azure HDInsight
HDInsight объединяет компоненты с открытым исходным кодом и платформу HDInsight в пакет, развернутый в кластере. Дополнительные сведения см. в статье о принципе работы управления версиями HDInsight.
Поддерживаемые версии HDInsight
В этой таблице перечислены версии HDInsight, доступные на портале Azure и через другие методы развертывания, например PowerShell, CLI и пакет SDK для .NET.
| Версия HDInsight | ОС виртуальной машины | Дата запуска в производство | Тип поддержки | Дата прекращения поддержки | Дата прекращения поддержки | Высокая доступность |
|---|---|---|---|---|---|---|
| HDInsight 5.1 | Ubuntu 18.0.4 LTS | 1 ноября 2023 г. | Стандартные | Не объявлено | Не объявлено | Да |
| HDInsight 5.0 | Ubuntu 18.0.4 LTS | 11 марта 2022 г. | Базовая | 31 марта 2025 г. | 31 марта 2025 г. | Да |
| HDInsight 4.0 | Ubuntu 18.0.4 LTS | 24 сентября 2018 г. | Базовая | 31 марта 2025 г. | 31 марта 2025 г. | Да |
Прекращение поддержки означает, что корпорация Майкрософт больше не будет предоставлять поддержку для конкретной версии HDInsight. Возможно, вы не сможете создавать кластеры из портал Azure.
Выход на пенсию означает, что существующие кластеры версии HDInsight продолжают работать как есть. Вы не можете создавать новые кластеры этой версии с помощью каких-либо средств, включая интерфейс командной строки и пакеты SDK. Другие функции плоскости управления, такие как масштабирование вручную и автомасштабирование, не гарантируется, что они будут работать после выхода на пенсию. Поддержка версий, использование которых прекращено, также не осуществляется.
Версии Spark, поддерживаемые в Azure HDInsight
Azure HDInsight поддерживает следующие версии Apache Spark.
| Версии HDInsight | Версия Apache Spark в HDInsight | Дата запуска в производство | Этап выпуска | Дата окончания срока действия объявления | Завершение стандартной поддержки | Завершение базовой поддержки |
|---|---|---|---|---|---|---|
| 4.0 | 2.4 | 8 июля 2019 г. | Конец жизни объявил (EOLA) | 10 февраля 2023 г. | 10 августа 2023 г. | 10 февраля 2024 г. |
| 5,0 | 3.1 | 11 марта 2022 г. | Общая доступность | 28 марта 2024 г. | 28 марта 2024 г. | 31 марта 2025 г. |
| 5.1 | 3,3 | 1 ноября 2023 г. | Общая доступность | - | - | - |
Варианты поддержки для версий HDInsight
Поддержка, определяемая как период времени, поддерживаемый службой клиентов и поддержкой Microsoft HDInsight. В HDInsight предлагается два типа поддержки:
- Поддержка уровня "Стандартный"
- Поддержка Basic
Для версий EOL:
| Действие | До июля 2024 г. | После июля 2024 г. | После сентября 2024 г. |
|---|---|---|---|
| Использование существующего кластера без поддержки | Да | Да | Да |
| Создание кластера | Да | Да | Нет |
| Увеличение и уменьшение масштаба кластера | Да | Да | Нет |
| Устранение неполадок со средой выполнения | No | No | No |
| Анализ первопричин | No | No | No |
| Настройка производительности | No | No | No |
| Помощь в подключении | No | No | No |
| Основные проблемы и обновления Spark | No | No | No |
| Обновления безопасности и CVE | No | No | No |
Поддержка Standard
Стандартная поддержка предоставляет обновления и поддержку для кластеров HDInsight. Корпорация Майкрософт рекомендует создавать решения на основе последней полностью поддерживаемой версии.
Поддержка уровня "Стандартный" включает в себя
- Возможность создавать запросы на поддержку кластера.
- Поддержка решений по устранению неполадок, созданных на основе кластеров.
- запросы на перезапуск служб или узлов.
- анализ первопричин по запросам на поддержку;
- анализ первопричин или исправлений для повышения производительности заданий или запросов;
- анализ первопричин или поиск исправлений для улучшений изменений, инициированных клиентом, в например, для изменения конфигураций служб или решения проблем, вызванных действиями пользовательского скрипта;
- обновления продуктов для критически важных исправлений безопасности до выхода версии из обслуживания;
- обновления продуктов с заданной областью для поставщика ресурсов HDInsight;
- Выборочные исправления или изменения в образах HDInsight или версиях компонентов программного обеспечения с открытым кодом (OSS).
Поддержка Basic
Поддержка Basic предоставляет ограниченное обслуживания для поставщика ресурсов HDInsight. Образы HDInsight и компоненты ПО с открытым кодом (OSS) не будут обслуживаться. Исправление критически важных исправлений безопасности в кластерах HDInsight.
Поддержка Basic включает в себя
- Продолжающееся использование существующих кластеров.
- Возможность для существующих клиентов HDInsight создавать новые кластеры в той же версии.
- Возможность масштабирования кластеров вверх и вниз с помощью автомасштабирования или ручного масштабирования.
- обновления продуктов с заданной областью для поставщика ресурсов HDInsight;
- обновления продуктов для критически важных исправлений безопасности до выхода версии из обслуживания;
- Возможность создавать запросы на поддержку кластера.
- запросы на перезапуск служб или узлов.
Поддержка Basic не включает
- Исправление или изменение образов HDInsight или версий компонентов программного обеспечения с открытым кодом (OSS).
- Поддержка решений по устранению неполадок, созданных на основе версии кластера.
- добавление новых функций или возможностей;
- поддержка рекомендаций или специальных запросов;
- анализ первопричин по запросам на поддержку;
- анализ первопричин или исправлений для повышения производительности заданий или запросов;
- анализ первопричин или поиск исправлений для улучшений изменений, инициированных клиентом, в например, для изменения конфигураций служб или решения проблем, вызванных действиями пользовательского скрипта;
Корпорация Майкрософт не рекомендует создавать конвейеры аналитики или решения на основе кластеров с поддержкой Basic. Рекомендуется перенести существующие кластеры в последнюю полностью поддерживаемую версию.
Руководства по переходу с версии HDInsight 3.6 на версию 4.0
- Перенос рабочих нагрузок Hive из Azure HDInsight 3.6 в HDInsight 4.0
- Перенос рабочих нагрузок Apache Kafka в Azure HDInsight 4.0
- Перенос кластера Apache HBase в новую версию
Заметки о выпуске
Дополнительные заметки о выпусках последних версий HDInsight см. здесь.
Особенности управления версиями
- После развертывания кластера с изображением этот кластер не может автоматически обновиться до более новой версии образа. При создании новых кластеров развертывается последняя версия образа.
- При переходе на новые версии HDInsight клиентам следует тестировать и проверять правильность работы приложений.
- HDInsight оставляет за собой право изменить версию по умолчанию без предварительного уведомления. Если используется зависимость версии, укажите версию HDInsight при создании кластеров.
- HDInsight может удалить версию компонента OSS перед выходом из эксплуатации версии HDInsight.