Версии Azure HDInsight

  • Статья

HDInsight объединяет компоненты с открытым исходным кодом и платформу HDInsight в пакет, развернутый в кластере. Дополнительные сведения см. в статье о принципе работы управления версиями HDInsight.

Поддерживаемые версии HDInsight

В этой таблице перечислены версии HDInsight, доступные на портале Azure и через другие методы развертывания, например PowerShell, CLI и пакет SDK для .NET.

Версия HDInsight ОС виртуальной машины Дата запуска в производство Тип поддержки Дата прекращения поддержки Дата прекращения поддержки Высокая доступность
HDInsight 5.1 Ubuntu 18.0.4 LTS 1 ноября 2023 г. Стандартные Не объявлено Не объявлено Да
HDInsight 5.0 Ubuntu 18.0.4 LTS 11 марта 2022 г. Базовая 31 марта 2025 г. 31 марта 2025 г. Да
HDInsight 4.0 Ubuntu 18.0.4 LTS 24 сентября 2018 г. Базовая 31 марта 2025 г. 31 марта 2025 г. Да

Прекращение поддержки означает, что корпорация Майкрософт больше не будет предоставлять поддержку для конкретной версии HDInsight. Возможно, вы не сможете создавать кластеры из портал Azure.

Прекращение использования означает, что существующие кластеры с этой версией HDInsight продолжат работу обычным образом. Вы не можете создавать новые кластеры этой версии с помощью каких-либо средств, включая интерфейс командной строки и пакеты SDK. Другие функции плоскости управления, такие как масштабирование вручную и автомасштабирование, не гарантируется, что они будут работать после выхода на пенсию. Поддержка версий, использование которых прекращено, также не осуществляется.

Версии Spark, поддерживаемые в Azure HDInsight

Azure HDInsight поддерживает следующие версии Apache Spark.

Версии HDInsight Версия Apache Spark в HDInsight Дата запуска в производство Этап выпуска Дата окончания срока действия объявления Завершение стандартной поддержки Завершение базовой поддержки
4.0 2.4 8 июля 2019 г. Конец жизни объявил (EOLA) 10 февраля 2023 г. 10 августа 2023 г. 10 февраля 2024 г.
5,0 3.1 11 марта 2022 г. Общая доступность 28 марта 2024 г. 28 марта 2024 г. 31 марта 2025 г.
5.1 3,3 1 ноября 2023 г. Общая доступность - - -

Варианты поддержки для версий HDInsight

Поддержка, определяемая как период времени, поддерживаемый службой клиентов и поддержкой Microsoft HDInsight. В HDInsight предлагается два типа поддержки:

  • Поддержка уровня "Стандартный"
  • Поддержка Basic

Поддержка Standard

Стандартная поддержка предоставляет обновления и поддержку для кластеров HDInsight. Корпорация Майкрософт рекомендует создавать решения на основе последней полностью поддерживаемой версии.

Поддержка уровня "Стандартный" включает в себя

  • Возможность создавать запросы на поддержку кластера.
  • Поддержка решений по устранению неполадок, созданных на основе кластеров.
  • запросы на перезапуск служб или узлов.
  • анализ первопричин по запросам на поддержку;
  • анализ первопричин или исправлений для повышения производительности заданий или запросов;
  • анализ первопричин или поиск исправлений для улучшений изменений, инициированных клиентом, в например, для изменения конфигураций служб или решения проблем, вызванных действиями пользовательского скрипта;
  • обновления продуктов для критически важных исправлений безопасности до выхода версии из обслуживания;
  • обновления продуктов с заданной областью для поставщика ресурсов HDInsight;
  • Выборочные исправления или изменения в образах HDInsight или версиях компонентов программного обеспечения с открытым кодом (OSS).

Поддержка Basic

Поддержка Basic предоставляет ограниченное обслуживания для поставщика ресурсов HDInsight. Образы HDInsight и компоненты ПО с открытым кодом (OSS) не будут обслуживаться. Исправление критически важных исправлений безопасности в кластерах HDInsight.

Поддержка Basic включает в себя

  • Продолжающееся использование существующих кластеров.
  • Возможность для существующих клиентов HDInsight создавать новые кластеры в той же версии.
  • Возможность масштабирования кластеров вверх и вниз с помощью автомасштабирования или ручного масштабирования.
  • обновления продуктов с заданной областью для поставщика ресурсов HDInsight;
  • обновления продуктов для критически важных исправлений безопасности до выхода версии из обслуживания;
  • Возможность создавать запросы на поддержку кластера.
  • запросы на перезапуск служб или узлов.

Поддержка Basic не включает

  • Исправление или изменение образов HDInsight или версий компонентов программного обеспечения с открытым кодом (OSS).
  • Поддержка решений по устранению неполадок, созданных на основе версии кластера.
  • добавление новых функций или возможностей;
  • поддержка рекомендаций или специальных запросов;
  • анализ первопричин по запросам на поддержку;
  • анализ первопричин или исправлений для повышения производительности заданий или запросов;
  • анализ первопричин или поиск исправлений для улучшений изменений, инициированных клиентом, в например, для изменения конфигураций служб или решения проблем, вызванных действиями пользовательского скрипта;

Корпорация Майкрософт не рекомендует создавать конвейеры аналитики или решения на основе кластеров с поддержкой Basic. Рекомендуется перенести существующие кластеры в последнюю полностью поддерживаемую версию.

Руководства по переходу с версии HDInsight 3.6 на версию 4.0

Заметки о выпуске

Дополнительные заметки о выпусках последних версий HDInsight см. здесь.

Особенности управления версиями

  • После развертывания кластера с изображением этот кластер не может автоматически обновиться до более новой версии образа. При создании новых кластеров развертывается последняя версия образа.
  • При переходе на новые версии HDInsight клиентам следует тестировать и проверять правильность работы приложений.
  • HDInsight оставляет за собой право изменить версию по умолчанию без предварительного уведомления. Если используется зависимость версии, укажите версию HDInsight при создании кластеров.
  • HDInsight может удалить версию компонента OSS перед выходом из эксплуатации версии HDInsight.

Следующие шаги