共用方式為


AKS 上的 Azure HDInsight 發行備註

注意

AKS 上的 Azure HDInsight 將於 2025 年 1 月 31 日退場。 請於 2025 年 1 月 31 日之前,將工作負載移轉至 Microsoft Fabric 或對等的 Azure 產品,以免工作負載突然終止。 訂用帳戶中剩餘的叢集將會停止,並會從主機移除。

在淘汰日期之前,只有基本支援可用。

重要

此功能目前為預覽功能。 Microsoft Azure 預覽版增補使用規定包含適用於 Azure 功能 (搶鮮版 (Beta)、預覽版,或尚未正式發行的版本) 的更多法律條款。 若需此特定預覽版的相關資訊,請參閱 Azure HDInsight on AKS 預覽版資訊。 如有問題或功能建議,請在 AskHDInsight 上提交要求並附上詳細資料,並且在 Azure HDInsight 社群上追蹤我們以獲得更多更新資訊。

本文提供有關最新 AKS 上 Azure HDInsight 版本更新的資訊。 如需有關較早版本的詳細資訊,請參閱 AKS 上 Azure HDInsight 封存的發行備註。 如果您要訂閱版本資訊,請在此 GitHub 存放庫上觀看發行版本。

摘要

HDInsight on AKS 是一項新式、可靠、安全且完全受控的平台即服務 (PaaS),可在 Azure Kubernetes Service (AKS) 上執行。 HDInsight on AKS 可讓您部署熱門的開放原始碼分析工作負載,例如 Apache Spark™、Apache Flink®️ 和 Trino,沒有管理及監視容器的負擔。

您可以建置端對端的 PB 級別巨量資料應用程式,其涵蓋功能從透過 Apache Flink 進行串流、使用 Apache Spark 進行資料工程和機器學習,以及到 Trino 的強大查詢引擎。

所有這些功能結合 HDInsight on AKS 開發人員傾力的關注,使具備深厚技術專業知識的企業和數位原民能夠建置及操作符合其需求的應用程式。 HDInsight on AKS 可讓開發人員存取開放原始碼軟體所提供的所有豐富組態,所具備的擴充性可順暢地包含其他生態系統的供應項目。 此供應項目使開發人員能夠測試及調整其應用程式,以最佳成本擷取最佳效能。

注意

若要了解 AKS 上的 HDInsight 版本設定與支援,請參閱版本設定結構描述

如需目前在此版本公開預覽中功能的所有詳細資料,請參閱新功能頁面。

重要

AKS 上的 HDInsight 使用涉及逐步區域部署的安全部署做法。 最多可能需要 10 個工作天,才能在所有區域中使用新發行或新版本。

版本資訊

發行日期:2024 年 9 月 5 日

此版本適用於下列項目

  • 叢集集區版本:1.2
  • 叢集版本:1.2.1
  • AKS 版本:1.27

已更新

最新的 API 版本發行如下所示。

https://github.com/Azure/azure-rest-api-specs/blob/main/specification/hdinsight/resource-manager/Microsoft.HDInsight/HDInsightOnAks/preview/2024-05-01-preview/hdinsight.json.

重要

若要利用所有這些最新功能,您需要建立一個版本為 1.2 的新叢集集區,以及一個版本為 1.2.1 的新叢集

已知問題

  • 工作負載身分識別限制:
    • 轉換至工作負載身分識別時有已知的限制。 此限制是由於 FIC 作業的權限敏感性本質所造成的。 使用者無法透過刪除資源群組來執行叢集刪除。 叢集刪除要求必須由具有 FIC/刪除權限的應用程式/使用者/主體進行觸發。 如果 FIC 刪除失敗,則高階叢集刪除也會失敗。
    • 使用者指派的受控身分識別 (UAMI) 支援 – 每個 UAMI 有 20 個 FIC 的限制。 您只能在一個身分識別上建立 20 個同盟認證。 在 AKS 叢集上的 HDInsight 中,FIC (同盟身分識別認證) 和 SA 具有一對一的對應,而且只能針對 MSI 建立 20 個 SA。 如果您想要建立更多的叢集,則需要提供不同的 MSI 來克服此限制。
    • 目前,在這些區域中所建立的使用者指派的受控身分識別上不支援建立同盟身分識別認證

作業系統版本

  • Mariner OS 2.0

工作負載版本

工作負載 版本
Trino 440
Flink 1.17.0
Apache Spark 3.4

支援的 Java 和 Scala 版本

工作負載 Java Scala
Trino Open JDK 21.0.2
Flink Open JDK 11.0.21 2.12.7
Spark Open JDK 1.8.0_345 2.12.15

下列區域中提供預覽功能。

如果您有更多問題,請連絡 Azure 支援,或參閱 [支援選項] 頁面。 如果您有產品特定的意見反應,請在 aka.ms/askhdinsight 上向我們反映。

下一步