Informacje o wersji usługi Azure HDInsight w usłudze AKS

Artykuł
04/08/2024

Ten artykuł zawiera informacje o najnowszych aktualizacjach wersji usługi Azure HDInsight w usłudze AKS. Aby uzyskać informacje na temat wcześniejszych wersji, zobacz Informacje o zarchiwizowanej wersji usługi Azure HDInsight w usłudze AKS. Jeśli chcesz subskrybować informacje o wersji, obejrzyj wydania w tym repozytorium GitHub.

Podsumowanie

Usługa HDInsight w usłudze AKS to nowoczesna, niezawodna, bezpieczna i w pełni zarządzana platforma jako usługa (PaaS) działająca w usłudze Azure Kubernetes Service (AKS). Usługa HDInsight w usłudze AKS umożliwia wdrażanie popularnych obciążeń analizy typu open source, takich jak Apache Spark™, Apache Flink®️ i Trino, bez konieczności wprowadzania obciążeń związanych z zarządzaniem kontenerami i ich monitorowaniem.

Możesz tworzyć kompleksowe, petabajtowe aplikacje danych big data obejmujące przesyłanie strumieniowe za pośrednictwem platformy Apache Flink, inżynierii danych i uczenia maszynowego przy użyciu zaawansowanego aparatu zapytań platformy Apache Spark i trino.

Wszystkie te możliwości połączone z usługą HDInsight w silnym centrum deweloperów usługi AKS umożliwiają przedsiębiorstwom i cyfrowym natywnym osobom z głęboką wiedzą techniczną tworzenie i obsługę aplikacji, które są odpowiednie dla ich potrzeb. Usługa HDInsight w usłudze AKS umożliwia deweloperom dostęp do wszystkich zaawansowanych konfiguracji udostępnianych przez oprogramowanie typu open source oraz rozszerzalność, aby bezproblemowo obejmować inne oferty ekosystemów. Ta oferta umożliwia deweloperom testowanie i dostrajanie swoich aplikacji w celu uzyskania najlepszej wydajności przy optymalnym koszcie.

Uwaga

Aby dowiedzieć się więcej na temat usługi HDInsight w zakresie obsługi wersji i obsługi usługi AKS, zapoznaj się ze schematem przechowywania wersji.

Aby uzyskać szczegółowe informacje o funkcjach aktualnie dostępnych w publicznej wersji zapoznawczej dla tej wersji, możesz zapoznać się ze stroną Co nowego .

Ważne

Usługa HDInsight w usłudze AKS korzysta z bezpiecznych rozwiązań wdrażania, które obejmują stopniowe wdrażanie regionów. Udostępnienie nowej wersji we wszystkich regionach może potrwać do 10 dni roboczych.

Informacje o wersji

Data wydania: 20 marca 2024 r.

Ta wersja ma zastosowanie do następujących elementów

Wersja puli klastrów: 1.1
Wersja klastra: 1.1.1
Wersja usługi AKS: 1.27

Nowe funkcje

Klaster trybu aplikacji Apache Flink

Klastry trybu aplikacji są przeznaczone do obsługi dedykowanych zasobów dla dużych i długotrwałych zadań. Jeśli masz zadania intensywnie korzystające z zasobów lub obszerne przetwarzanie danych, możesz użyć klastra trybu aplikacji. Ten tryb umożliwia przydzielanie dedykowanych zasobów dla określonych aplikacji Apache Flink, zapewniając, że mają niezbędną moc obliczeniową i pamięć do efektywnego obsługi dużych obciążeń.

Aby uzyskać więcej informacji, zobacz Klaster trybu aplikacji Apache Flink w usłudze HDInsight w usłudze AKS.

Klastry prywatne dla usługi HDInsight w usłudze AKS

Dzięki klastrom prywatnym i ustawiom klastra wychodzącego można teraz kontrolować ruch przychodzący i wychodzący z usługi HDInsight w pulach klastrów i klastrach usługi AKS.

Użyj usługi Azure Firewall lub sieciowych grup zabezpieczeń, aby kontrolować ruch wychodzący, jeśli zdecydujesz się na korzystanie z puli klastrów wychodzących z modułem równoważenia obciążenia.
Użyj puli klastrów wychodzących z routingiem zdefiniowanym przez użytkownika, aby kontrolować ruch wychodzący na poziomie podsieci.
Użyj funkcji klastra prywatnej usługi AKS — aby upewnić się, że płaszczyzna sterowania usługi AKS lub serwer interfejsu API ma wewnętrzne adresy IP. Ruch sieciowy między płaszczyzną sterowania usługi AKS/ serwerem interfejsu API i usługą HDInsight w pulach węzłów usługi AKS (klastry) pozostaje tylko w sieci prywatnej.
Unikaj tworzenia publicznych adresów IP dla klastra. Użyj funkcji prywatnego ruchu przychodzącego w klastrach.

Aby uzyskać więcej informacji, zobacz Kontrolowanie ruchu sieciowego z usługi HDInsight w pulach klastrów i klastrach usługi AKS.

Uaktualnienie w miejscu

Uaktualnij klastry i pule klastrów przy użyciu najnowszych aktualizacji oprogramowania. Oznacza to, że można korzystać z najnowszych poprawek pakietu klastra, aktualizacji zabezpieczeń i poprawek usługi AKS bez ponownego tworzenia klastrów. Aby uzyskać więcej informacji, zobacz Uaktualnianie usługi HDInsight w klastrach usługi AKS i pulach klastrów.

Ważne

Aby skorzystać ze wszystkich tych najnowszych funkcji, musisz utworzyć nową pulę klastrów z wersją 1.1 i klastrem w wersji 1.1.1.

Znane problemy

Ograniczenie tożsamości obciążenia:
- Istnieje znane ograniczenie podczas przechodzenia do tożsamości obciążenia. To ograniczenie jest spowodowane wrażliwym na uprawnienia charakter operacji FIC. Użytkownicy nie mogą usunąć klastra, usuwając grupę zasobów. Żądania usunięcia klastra muszą być wyzwalane przez aplikację/użytkownika/podmiot z uprawnieniami FIC/delete. W przypadku niepowodzenia usunięcia FIC usuwanie klastra wysokiego poziomu również kończy się niepowodzeniem.
- Obsługa tożsamości zarządzanych przypisanych przez użytkownika (UAMI) — istnieje limit 20 kart FICs na interfejs użytkownika. W tożsamości można utworzyć tylko 20 poświadczeń federacyjnych. W usłudze HDInsight w klastrze usługi AKS FIC (federacyjne poświadczenia tożsamości) i sa mają mapowanie jeden do jednego i można utworzyć tylko 20 skojarzeń z tożsamością usługi zarządzanej. Jeśli chcesz utworzyć więcej klastrów, musisz podać różne msI w celu rozwiązania tego ograniczenia.
- Tworzenie poświadczeń tożsamości federacyjnej nie jest obecnie obsługiwane w przypadku tożsamości zarządzanych przypisanych przez użytkownika utworzonych w tych regionach

Wersja systemu operacyjnego

Mariner OS 2.0

Wersje obciążeń

Obciążenie	Wersja
Trino	426
Migaj	1.17.0
Apache Spark	3.3.1

Obsługiwane wersje języków Java i Scala

Obciążenie	Java	Scala
Trino	Otwórz zestaw JDK 17.0.7	-
Migaj	Otwórz zestaw JDK 11.0.21	2.12.7
platforma Spark	Otwórz zestaw JDK 1.8.0_345	2.12.15

Wersja zapoznawcza jest dostępna w następujących regionach.

Jeśli masz więcej pytań, skontaktuj się z pomocą techniczną platformy Azure lub zapoznaj się ze stroną Opcje pomocy technicznej. Jeśli masz opinię dotyczącą produktu, napisz na aka.ms/askhdinsight.

Udostępnij za pośrednictwem