Share via

Viktig information om Azure HDInsight på AKS-arkiverad

  • Artikel

Azure HDInsight på AKS är en av de mest populära tjänsterna bland företagskunder för analys med öppen källkod i Azure. Om du vill prenumerera på viktig information kan du titta på versioner på den här GitHub-lagringsplatsen.

Utgivningsdatum: 05 februari 2024

Den här versionen gäller för följande

  • Klusterpoolversion: 1.1
  • Klusterversion: 1.1.0
  • AKS-version: 1.27

Dricks

Om du vill skapa en ny HDInsight på AKS-klustret på 1.1.0 måste du skapa en ny klusterpool med version 1.1

Nya funktioner

  • Arbetsbelastningsidentitet stöds som standard för klusterpooler på 1.1
  • Trino-kluster stöder Trino 426 från 1.1.0-versionen
    • HDInsight på AKS innehåller nu alla ändringar upp till Trino 426 med flera viktiga förbättringar som tillhandahålls av communityn. Läs mer om Trino här.
  • Trino-klusterformen har nu stöd för belastningsbaserad autoskalning från 1.1.0-versionen
    • Trino på HDInsight på AKS har nu stöd för belastningsbaserad autoskalning, vilket gör klustret mer kostnadseffektivt. Läs mer om den här.
  • Trino-klusterform lägger till förenklad konfiguration av hive-metaarkiv och kataloger
    • HDInsight på AKS har förenklat konfigurationen av externa Hive-metaarkiv för Trino-kluster. Du kan nu ange externt metaarkiv i config.properties och aktivera det för varje katalog med en enda parameter. Läs mer om förbättringar här.
  • Trino-klusterform lägger till shardad SQL-anslutning
  • Flink-kluster har nu stöd för Flink 1.17.0 från HDInsight i AKS 1.1.0-versionen
    • HDInsight på AKS har nu stöd för Flink 1.17.0-versionen, med betydande förbättringar av kontrollpunkter, lågdiagram på undernivå, vattenstämpeljusteringar. Läs mer om Flink 1.17-versionen här
  • Flink SQL Gateway stöds nu från HDInsight i AKS 1.1.0-versionen med Flink-sessionskluster

Felkorrigeringar och CV:er

  • Den här versionen innehåller flera viktiga CVE-korrigeringar på plattformen och öppen källkod komponenter.
  • Trino-klusterform utesluter systemtabeller från cachelagring automatiskt
  • Trino-klusterformen förbättrar hanteringen av Tidsstämpel för Power BI

Kända problem

  • Identitetsbegränsning för arbetsbelastning:
    • Det finns en känd begränsning när du övergår till arbetsbelastningsidentitet. Detta beror på FIC-åtgärdernas behörighetskänsliga karaktär. Användare kan inte ta bort ett kluster genom att ta bort resursgruppen. Begäranden om borttagning av kluster måste utlösas av programmet/användaren/huvudkontot med FIC-/borttagningsbehörigheter. Om FIC-borttagningen misslyckas misslyckas även borttagningen av högnivåkluster.

Nya regioner

  • Asien, östra

Operativsystemversion

  • Mariner OS 2.0

Arbetsbelastningsversioner

Arbetsbelastning Version
Trino 426
Flink 1.17.0
Apache Spark 3.3.1

Java- och Scala-versioner som stöds

Arbetsbelastning Java Scala
Trino Öppna JDK 17.0.7 - 
Flink Öppna JDK 11.0.21 2.12.7
Spark Öppna JDK 1.8.0_345 2.12.15

Förhandsversionen är tillgänglig i följande regioner.

Om du har fler frågor kan du kontakta Azure Support eller gå till sidan Supportalternativ . Om du har produktspecifik feedback kan du skriva till oss på aka.ms/askhdinsight.

Nästa steg

Utgivningsdatum: 13 december 2023

Den här snabbkorrigeringsversionen gäller för följande

  • Klusterpoolversion: 1.0
  • Klusterversion: 1.0.6

Kända problem

  • Stöd för säkert klientgränssnitt

    • Den här versionen löser ett problem där webb-URL:erna för öppen källkod-komponenten för HDInsight på AKS-kluster inte var tillgängliga. Om du vill använda den här korrigeringen kontaktar du Azure-supporten för att aktivera detta i din prenumeration/klientorganisation.

    Så här använder du snabbkorrigeringen

    • Återskapa klustret
      • För att tillämpa den här snabbkorrigeringen måste befintliga användare återskapa sitt kluster i en befintlig klusterpool.

Operativsystemversion

  • Mariner OS 2.0

Arbetsbelastningsversioner

Arbetsbelastning Version
Trino 410
Flink 1.16
Apache Spark 3.3.1

Java- och Scala-versioner som stöds

Arbetsbelastning Java Scala
Trino Öppna JDK 17.0.7 - 
Flink Öppna JDK 11.0.21 2.12.7
Spark Öppna JDK 1.8.0_345 2.12.15

Förhandsversionen är tillgänglig i följande regioner.

Om du har fler frågor kan du kontakta Azure Support eller gå till sidan Supportalternativ .