Compartir a través de

Notas de la versión archivadas de Azure HDInsight en AKS

  • Artículo

Azure HDInsight en ASK es uno de los servicios más populares entre los clientes de empresa para el análisis de código abierto en Azure. Si quiere suscribirse a las notas de la versión, vea las versiones de este repositorio de GitHub.

Fecha de publicación: 05 de febrero de 2024

Esta versión se aplica a lo siguiente

  • Versión del grupo de clústeres: 1.1
  • Versión del clúster: 1.1.0
  • Versión de AKS: 1.27

Sugerencia

Para crear un nuevo clúster de HDInsight en AKS en la versión 1.1.0, debe crear un nuevo grupo de clústeres con la versión 1.1

Nuevas características

  • La identidad de carga de trabajo se admite de manera predeterminada para los grupos de clústeres en la versión 1.1
  • Los clústeres de Trino admiten Trino 426 desde la versión 1.1.0
    • HDInsight en AKS ahora incluye todos los cambios hasta Trino 426 con varias mejoras importantes proporcionadas por la comunidad. Obtenga más información sobre Trino aquí.
  • La forma del clúster de Trino ahora admite la escalabilidad automática basada en carga de la versión 1.1.0
    • Trino en HDInsight en AKS ahora admite la escalabilidad automática basada en carga, lo que hace que el clúster sea más rentable. Obtenga más información al respecto aquí.
  • La forma del clúster de Trino agrega una configuración simplificada de metastore y catálogos de Hive
    • HDInsight en AKS ha simplificado la configuración externa de metastore de Hive para el clúster de Trino. Ahora puede especificar metastore externo en config.properties y habilitarlo para cada catálogo con un solo parámetro. Obtenga más información sobre las mejoras aquí.
  • La forma del clúster de Trino agrega un conector sql particionado
  • Los clústeres de Flink ahora admiten Flink 1.17.0 desde HDInsight en la versión de AKS 1.1.0
    • HDInsight en AKS ahora admite la versión Flink 1.17.0, con mejoras significativas en los puntos de control, gráfico de llamas de nivel de subtarea, alineación de marca de agua. Obtenga más información sobre la versión de Flink 1.17 aquí
  • Flink Puerta de enlace SQL ahora es compatible con HDInsight en la versión de AKS 1.1.0 con clústeres de sesión de Flink

Correcciones de errores y CV

  • Esta versión incluye varias correcciones de CVE críticas en toda la plataforma y componentes de código abierto.
  • La forma del clúster de Trino excluye automáticamente el almacenamiento en caché de tablas del sistema
  • La forma del clúster de Trino mejora el control de zonas horarias de la marca de tiempo de Power BI

Problemas conocidos

  • Limitación de identidad de carga de trabajo:
    • Hay una limitación conocida al realizar la transición a la identidad de la carga de trabajo. Esto se debe a la naturaleza confidencial del permiso de las operaciones FIC. Los usuarios no pueden realizar la eliminación de un clúster mediante la eliminación del grupo de recursos. Las solicitudes de eliminación de clústeres deben desencadenarse mediante la aplicación, el usuario o la entidad de seguridad con permisos FIC/delete. En caso de que se produzca un error en la eliminación de FIC, también se producirá un error en la eliminación del clúster de alto nivel.

Regiones nuevas

  • Este de Asia

Versión del sistema operativo

  • Sistema operativo Mariner 2.0

Versiones de carga de trabajo

Carga de trabajo Versión
Trino 426
Flink 1.17.0
Spark de Apache 3.3.1

Versiones de Java y Scala admitidas

Carga de trabajo Java Scala
Trino Abra JDK 17.0.7 - 
Flink Abra JDK 11.0.21 2.12.7
Spark Abra JDK 1.8.0_345 2.12.15

La versión preliminar pública está disponible en las siguientes regiones.

Si tiene más preguntas, póngase en contacto con el equipo de Soporte técnico de Azure o consulte la página Opciones de soporte técnico. Si tiene comentarios específicos del producto, escríbanos en aka.ms/askhdinsight.

Pasos siguientes

Fecha de publicación: 13 de diciembre de 2023

Esta versión de revisión se aplica a lo siguiente

  • Versión del grupo de clústeres: 1.0
  • Versión del clúster: 1.0.6

Problemas conocidos

  • Compatibilidad con interfaz de usuario de inquilinos segura

    • Esta versión soluciona un problema por el que las URL web de componente de código abierto para los clústeres de HDInsight en AKS no eran accesibles. Para aplicar esta corrección, póngase en contacto con el soporte técnico de Azure para habilitarlo en su suscripción o inquilino.

    Cómo aplicar la revisión

    • Nueva creación del clúster
      • Para aplicar esta revisión, los usuarios existentes deben volver a crear su clúster en un grupo de clústeres existente.

Versión del sistema operativo

  • Sistema operativo Mariner 2.0

Versiones de carga de trabajo

Carga de trabajo Versión
Trino 410
Flink 1.16
Spark de Apache 3.3.1

Versiones de Java y Scala admitidas

Carga de trabajo Java Scala
Trino Abra JDK 17.0.7 - 
Flink Abra JDK 11.0.21 2.12.7
Spark Abra JDK 1.8.0_345 2.12.15

La versión preliminar pública está disponible en las siguientes regiones.

Si tiene más preguntas, póngase en contacto con el equipo de Soporte técnico de Azure o consulte la página Opciones de soporte técnico.