Поделиться через

Заметки о выпуске в Azure HDInsight в AKS в архивных заметках о выпуске

  • Статья

Azure HDInsight в AKS является одной из самых популярных служб среди корпоративных клиентов для аналитики с открытым кодом в Azure. Если вы хотите подписаться на заметки о выпуске, перейдите в этот репозиторий GitHub.

Дата выпуска: 05 февраля 2024 г.

Этот выпуск применяется к следующему

  • Версия пула кластеров: 1.1
  • Версия кластера: 1.1.0
  • ВЕРСИЯ AKS: 1.27

Совет

Чтобы создать новый кластер HDInsight в КЛАСТЕРе AKS в версии 1.1.0, необходимо создать новый пул кластеров с версией 1.1.

Новые возможности

  • Удостоверение рабочей нагрузки поддерживается по умолчанию для пулов кластеров в версии 1.1
  • Кластеры Trino поддерживают Trino 426 с выпуска 1.1.0
    • HDInsight в AKS теперь включает все изменения до Trino 426 с несколькими заметными улучшениями, предоставляемыми сообществом. Дополнительные сведения о Trino см. здесь.
  • Фигура кластера Trino теперь поддерживает автомасштабирование на основе нагрузки с выпуска 1.1.0
    • Trino в HDInsight в AKS теперь поддерживает автомасштабирование на основе нагрузки, что делает кластер более экономичным. Дополнительные сведения см. здесь.
  • Фигура кластера Trino добавляет упрощенную конфигурацию хранилища метаданных hive и каталогов
    • HDInsight в AKS упрощает внешнюю конфигурацию хранилища метаданных Hive для кластера Trino. Теперь можно указать внешнее хранилище метаданных в config.properties и включить его для каждого каталога с одним параметром. Дополнительные сведения о усовершенствованиях см. здесь.
  • Фигура кластера Trino добавляет сегментированные соединители SQL
  • Кластеры Flink теперь поддерживают Flink 1.17.0 из HDInsight в выпуске AKS 1.1.0
    • HDInsight в AKS теперь поддерживает выпуск Flink 1.17.0 с значительными улучшениями в проверка точках, диаграмме пламени уровня подзадач, выравнивания водяного знака. Дополнительные сведения о выпуске Flink 1.17 здесь
  • Теперь шлюз Flink SQL поддерживается из HDInsight в выпуске AKS 1.1.0 с кластерами сеансов Flink

Исправления ошибок и CVEs

  • Этот выпуск включает несколько критически важных исправлений CVE на платформе и открытый код компонентов.
  • Фигура кластера Trino исключает системные таблицы из кэширования автоматически
  • Фигура кластера Trino улучшает обработку часовых поясов Power BI

Известные проблемы

  • Ограничение удостоверения рабочей нагрузки:
    • При переходе на удостоверение рабочей нагрузки существует известное ограничение . Это связано с характером операций FIC с учетом разрешений. Пользователи не могут выполнить удаление кластера, удалив группу ресурсов. Запросы на удаление кластера должны активироваться приложением/ пользователем или субъектом с разрешениями FIC/delete. В случае сбоя удаления FIC удаление кластера высокого уровня также завершится ошибкой.

Новые регионы

  • Восточная Азия

Версия операционной системы

  • Mariner OS 2.0

Версии рабочей нагрузки

Рабочая нагрузка Версия
Трино 426
Flink 1.17.0
Apache Spark 3.3.1

Поддерживаемые версии Java и Scala

Рабочая нагрузка Java Scala
Трино Открытие JDK 17.0.7 - 
Flink Открытие JDK 11.0.21 2.12.7
Spark Открытие JDK 1.8.0_345 2.12.15

Предварительная версия доступна в следующих регионах.

Если у вас есть дополнительные вопросы, обратитесь в службу поддержки Azure или перейдите на страницу параметров поддержки. Если у вас есть отзывы о продукте, напишите нам на aka.ms/askhdinsight.

Следующие шаги

Дата выпуска: 13 декабря 2023 г.

Этот выпуск исправлений применяется к следующему

  • Версия пула кластеров: 1.0
  • Версия кластера: 1.0.6

Известные проблемы

  • Поддержка пользовательского интерфейса безопасных клиентов

    • В этом выпуске устранена проблема, из-за которой url-адреса веб-адресов компонента открытый код для HDInsight в кластерах AKS недоступны. Чтобы применить это исправление, обратитесь к поддержка Azure, чтобы включить это в подписке или клиенте.

    Как применить исправление

    • Повторное создание кластера
      • Чтобы применить это исправление, существующие пользователи должны повторно создать кластер в существующем пуле кластеров.

Версия операционной системы

  • Mariner OS 2.0

Версии рабочей нагрузки

Рабочая нагрузка Версия
Трино 410
Flink 1.16
Apache Spark 3.3.1

Поддерживаемые версии Java и Scala

Рабочая нагрузка Java Scala
Трино Открытие JDK 17.0.7 - 
Flink Открытие JDK 11.0.21 2.12.7
Spark Открытие JDK 1.8.0_345 2.12.15

Предварительная версия доступна в следующих регионах.

Если у вас есть дополнительные вопросы, обратитесь в службу поддержки Azure или перейдите на страницу параметров поддержки.