Introduzione a HDInsight su AKS (anteprima)

Articolo
09/20/2024

Nota

Azure HDInsight su AKS verrà ritirato il 31 gennaio 2025. Prima del 31 gennaio 2025, sarà necessario eseguire la migrazione dei carichi di lavoro a Microsoft Fabric o a un prodotto Azure equivalente per evitare interruzioni improvvise dei carichi di lavoro. I cluster rimanenti nella sottoscrizione verranno arrestati e rimossi dall’host.

Solo il supporto di base sarà disponibile fino alla data di ritiro.

Importante

Questa funzionalità è attualmente disponibile solo in anteprima. Le Condizioni per l'utilizzo supplementari per le anteprime di Microsoft Azure includono termini legali aggiuntivi che si applicano a funzionalità di Azure in versione beta, in anteprima o in altro modo non ancora disponibili a livello generale. Per informazioni su questa anteprima specifica, vedere Informazioni sull'anteprima di Azure HDInsight nel servizio Azure Kubernetes. Per domande o suggerimenti sulle funzionalità, inviare una richiesta in AskHDInsight con i dettagli e seguire Microsoft per altri aggiornamenti nella Community di Azure HDInsight.

HDInsight nel servizio Azure Kubernetes è una piattaforma distribuita come servizio (PaaS) moderna, affidabile, sicura e completamente gestita che viene eseguita nel servizio Azure Kubernetes. HDInsight su AKS consente di distribuire carichi di lavoro open source comuni di Analytics come Apache Spark™, Apache Flink®️ e Trino senza sovraccarico di gestione e monitoraggio dei contenitori.

È possibile creare applicazioni Big Data end-to-end su scala petabyte in streaming tramite Apache Flink, progettazione dei dati e Machine Learning usando Apache Spark e il potente motore di query di Trino.

Tutte queste funzionalità, combinate con HDInsight sul servizio Azure Kubernetes, consentono alle aziende e ai nativi digitali di creare e gestire applicazioni adatte alle proprie esigenze. HDInsight nel servizio Azure Kubernetes consente agli sviluppatori di accedere a tutte le configurazioni avanzate fornite dal software open source e all'estendibilità per includere facilmente altre offerte di ecosistema. Questa offerta consente agli sviluppatori di testare e ottimizzare le applicazioni per estrarre le migliori prestazioni a un costo ottimale.

HDInsight su AKS si integra con l'intero ecosistema di Azure, riducendo i cicli di implementazione e migliorando il tempo necessario per realizzare valore.

Architettura tecnica

HDInsight nel servizio Azure Kubernetes introduce il concetto di pool di cluster e cluster, che consentono di realizzare il valore completo di Data LakeHouse. I pool di cluster consentono di usare più carichi di lavoro di calcolo in un singolo data lake, eliminando così il sovraccarico della gestione della rete e della pianificazione delle risorse.

I pool di cluster sono un raggruppamento logico di cluster che consente di creare un'interoperabilità solida tra più tipi di cluster e permette alle aziende di avere i cluster nella stessa rete virtuale. I pool di cluster offrono accesso rapido e conveniente a tutti i tipi di cluster creati su richiesta e su larga scala. Un pool di cluster corrisponde a un cluster nell'infrastruttura del servizio Azure Kubernetes.
I cluster sono carichi di lavoro di calcolo individuali, come Apache Spark, Apache Flink e Trino, che possono essere creati rapidamente in pochi minuti con configurazioni preimpostate.

È possibile creare il pool con un singolo cluster o una combinazione di tipi di cluster in base alle necessità e configurare le opzioni seguenti:

Storage
Rete
Registrazione
Monitoraggio

Il diagramma seguente illustra l'architettura tecnica logica dei componenti installati in un pool di cluster predefinito. I cluster sono isolati usando spazi dei nomi nei cluster del servizio Azure Kubernetes.

Piattaforma di calcolo nativa del cloud modernizzata

La versione più recente di HDInsight viene orchestrata con il servizio Azure Kubernetes, che consente alla piattaforma di essere più affidabile e agli utenti di gestire in modo efficace i cluster. Il provisioning di cluster in HDInsight su AKS è veloce e affidabile, semplificando la gestione dei cluster e l'esecuzione degli aggiornamenti sul posto. Con vaste scelte di SKU e modelli di sottoscrizione flessibili, la modernizzazione di data lakehouse con un'infrastruttura open source, nativa del cloud e scalabile in HDinsight su AKS può soddisfare tutte le esigenze di analisi.

Diagramma che mostra il modo in cui HDInsight su AKS viene modernizzato nella piattaforma di calcolo nativa del cloud.

Le funzionalità principali includono:

Creazione e ridimensionamento rapidi del cluster.
Facilità di manutenzione e aggiornamenti periodici della sicurezza.
Resilienza dei cluster basata sul servizio Azure Kubernetes moderno nativo del cloud.
Supporto nativo per l'autenticazione moderna con OAuth e Microsoft Entra ID.
Integrazione approfondita con servizi di Azure: Azure Data Factory (ADF), Power BI, Monitoraggio di Azure.

Connettività a HDInsight

HDInsight su AKS può connettersi facilmente con HDInsight. È possibile sfruttare i vantaggi dell'uso dei tipi di cluster necessari in un modello ibrido. Interagire con i tipi di cluster di HDInsight usando lo stesso archivio e lo stesso metastore in entrambe le offerte.

HDInsight offre un fattore di forma Apache Kafka®, Apache HBase® e altri carichi di lavoro di analisi in PaaS (Platform as a Service).

Diagramma che mostra i concetti di connettività.

Sono supportati gli scenari indicati di seguito:

Connessione di Apache Flink ad Apache HBase
Connessione di Apache Flink ad Apache Kafka
Connessione di Apache Spark ad Apache HBase
Connessione di Apache Spark ad Apache Kafka

Architettura di sicurezza

HDInsight su AKS è sicuro per impostazione predefinita. Consente alle aziende di proteggere gli asset di dati aziendali con Rete virtuale di Azure, crittografia e integrazione con Microsoft Entra ID. Soddisfa anche gli standard di conformità di settore e enti pubblici più diffusi che rispettano gli standard di Azure. Con oltre 30 certificazioni che consentono di proteggere i dati insieme ad aggiornamenti periodici, notifiche di Advisor per l'integrità dei servizi, analisi dell'integrità dei servizi, oltre agli standard di sicurezza di Azure migliori. HDInsight su AKS offre diversi metodi per soddisfare le esigenze di sicurezza aziendali per impostazione predefinita. Per altre informazioni, vedere Sicurezza di HDInsight su AKS.

Diagramma che mostra il concetto di sicurezza.

Disponibilità dell'area (anteprima pubblica)

Asia/Pacifico

Australia orientale
India centrale
Asia orientale
Giappone orientale
Corea centrale
Asia sud-orientale

Europa

Francia centrale
Europa settentrionale
Norvegia orientale
Svizzera settentrionale
Regno Unito meridionale
Europa occidentale

Americhe

Brasile meridionale
Canada centrale
Stati Uniti centrali
Stati Uniti orientali
Stati Uniti orientali 2
Stati Uniti orientali 2 EUAP
Stati Uniti centro-meridionali
Stati Uniti occidentali
West US 2
Stati Uniti occidentali 3