Udostępnij za pośrednictwem


Konfigurowanie punktów końcowych przepływu danych dla usługi Azure Data Lake Storage Gen2

Ważne

Ta strona zawiera instrukcje dotyczące zarządzania składnikami operacji usługi Azure IoT przy użyciu manifestów wdrażania platformy Kubernetes, które są w wersji zapoznawczej. Ta funkcja jest udostępniana z kilkoma ograniczeniami i nie powinna być używana w przypadku obciążeń produkcyjnych.

Zapoznaj się z dodatkowymi warunkami użytkowania dla wersji zapoznawczych platformy Microsoft Azure , aby zapoznać się z postanowieniami prawnymi dotyczącymi funkcji platformy Azure, które są w wersji beta, wersji zapoznawczej lub w inny sposób nie zostały jeszcze wydane w wersji ogólnodostępnej.

Wysyłanie danych do usługi Azure Data Lake Storage Gen2 w operacjach usługi Azure IoT przez skonfigurowanie punktu końcowego przepływu danych. Ta konfiguracja umożliwia określenie docelowego punktu końcowego, metody uwierzytelniania, tabeli i innych ustawień.

Wymagania wstępne

Przypisywanie uprawnień do tożsamości zarządzanej

Aby skonfigurować punkt końcowy przepływu danych dla usługi Azure Data Lake Storage Gen2, użyj tożsamości zarządzanej przypisanej przez użytkownika lub przypisanej przez system. Takie podejście jest bezpieczne i eliminuje konieczność ręcznego zarządzania poświadczeniami.

Po utworzeniu usługi Azure Data Lake Storage Gen2 musisz przypisać rolę do tożsamości zarządzanej Azure IoT Operations, która udziela uprawnień do zapisu na koncie przechowywania.

Jeśli używasz tożsamości zarządzanej przypisanej przez system, w portalu Azure przejdź do instancji operacyjnej Azure IoT i wybierz pozycję Przegląd. Skopiuj nazwę rozszerzenia wymienionego po rozszerzeniu Usługi Azure IoT Operations Arc. Na przykład azure-iot-operations-xxxx7. Tożsamość zarządzaną przypisaną przez system można znaleźć, używając tej samej nazwy rozszerzenia Azure IoT Operations Arc.

Następnie przejdź do konta usługi Azure Storage >Zarządzanie dostępem (IAM)>Dodaj przydział roli.

  1. Na karcie Rola wybierz odpowiednią rolę, taką jak Storage Blob Data Contributor. Dzięki temu tożsamość zarządzana ma niezbędne uprawnienia do zapisu w kontenerach blob Azure Storage. Aby dowiedzieć się więcej, zobacz Autoryzowanie dostępu do obiektów blob przy użyciu identyfikatora Entra firmy Microsoft.
  2. Na karcie Członkowie :
    1. Jeśli używasz tożsamości zarządzanej przypisanej przez system, w polu Przypisz dostęp do wybierz pozycję Użytkownik, grupa lub jednostka usługi, a następnie wybierz pozycję + Wybierz członków i wyszukaj nazwę rozszerzenia Azure IoT Operations Arc.
    2. Jeśli używasz tożsamości zarządzanej przypisanej przez użytkownika, w obszarze Przypisz dostęp wybierz pozycję Tożsamość zarządzana, a następnie wybierz + Wybierz członków i wyszukaj tożsamość zarządzaną przypisaną przez użytkownika skonfigurowaną dla połączeń z chmurą.

Tworzenie punktu końcowego przepływu danych dla usługi Azure Data Lake Storage Gen2

  1. W portalu operacje IoT wybierz kartę Punkty końcowe przepływu danych .

  2. W obszarze Tworzenie nowego punktu końcowego przepływu danych wybierz pozycję Azure Data Lake Storage (druga generacja)>Nowy.

    Zrzut ekranu przedstawiający sposób tworzenia nowego punktu końcowego przepływu danych usługi ADLS w wersji 2 przy użyciu środowiska operacji.

  3. Wprowadź następujące ustawienia punktu końcowego:

    Ustawienie opis
    Nazwa/nazwisko Nazwa punktu końcowego przepływu danych.
    Gospodarz Nazwa hosta punktu końcowego usługi Azure Data Lake Storage Gen2 w formacie <account>.blob.core.windows.net. Zastąp symbol zastępczy konta nazwą konta punktu końcowego.
    Metoda uwierzytelniania Metoda używana do uwierzytelniania. Zalecamy wybranie tożsamości zarządzanej przypisanej przez system lub tożsamości zarządzanej przypisanej przez użytkownika.
    Identyfikator klienta Identyfikator klienta tożsamości zarządzanej przypisanej przez użytkownika. Wymagane w przypadku korzystania z tożsamości zarządzanej przypisanej przez użytkownika.
    Identyfikator dzierżawy Identyfikator dzierżawy tożsamości zarządzanej, przypisanej przez użytkownika. Wymagane w przypadku korzystania z tożsamości zarządzanej przypisanej przez użytkownika.
    Nazwa zsynchronizowanego wpisu tajnego Nazwa referencyjna tajemnicy w ustawieniach punktu końcowego przepływu danych oraz w klastrze Kubernetes. Wymagane w przypadku korzystania z tokenu dostępu.
    Nazwa tajnego tokenu dostępu Nazwa sekretu Kubernetes zawierającego token SAS. Wymagane w przypadku korzystania z tokenu dostępu.
  4. Wybierz Zastosuj, aby skonfigurować punkt końcowy.

Korzystanie z uwierzytelniania tokenu dostępu

Wykonaj kroki opisane w sekcji token dostępu, aby uzyskać token SAS dla konta magazynowego i zapisać go w tajnym zasobie Kubernetes.

Następnie utwórz zasób DataflowEndpoint i określ metodę uwierzytelniania tokenu dostępu. W tym miejscu zastąp <SAS_SECRET_NAME> nazwą sekretu zawierającego token SAS i inne wartości symboli zastępczych.

Zobacz sekcję tokenu dostępu, aby uzyskać instrukcje tworzenia sekretu w interfejsie użytkownika platformy operacyjnej.

Dostępne metody uwierzytelniania

Następujące metody uwierzytelniania są dostępne dla punktów końcowych usługi Azure Data Lake Storage Gen2.

Tożsamość zarządzana przypisana przez system

Przed skonfigurowaniem punktu końcowego przepływu danych przypisz rolę do tożsamości zarządzanej usługi Azure IoT Operations, która udziela uprawnień do zapisu na koncie magazynowania.

  1. W portalu Azure przejdź do instancji operacji Azure IoT i wybierz pozycję Przegląd.
  2. Skopiuj nazwę rozszerzenia wymienionego po rozszerzeniu Usługi Azure IoT Operations Arc. Na przykład azure-iot-operations-xxxx7.
  3. Przejdź do zasobu w chmurze, któremu musisz nadać uprawnienia. Na przykład przejdź do konta usługi Azure Storage >Kontrola dostępu (IAM)>Dodaj przypisanie roli.
  4. Na karcie Rola wybierz odpowiednią rolę.
  5. Na karcie Członkowie w polu Przypisz dostęp do wybierz opcję Użytkownik, grupa lub jednostka usługi , a następnie wybierz pozycję + Wybierz członków i wyszukaj tożsamość zarządzaną operacji usługi Azure IoT Operations. Na przykład azure-iot-operations-xxxx7.

Następnie skonfiguruj punkt końcowy przepływu danych przy użyciu ustawień tożsamości zarządzanej przypisanej przez system.

Na stronie ustawienia punktu końcowego przepływu danych środowiska operacji wybierz kartę Podstawowa, a następnie wybierz pozycję Metoda> uwierzytelnianiaPrzypisana tożsamość zarządzana przez system.

W większości przypadków nie trzeba określać odbiorców usług. Nieokreślenie odbiorców tworzy tożsamość zarządzaną z domyślną grupą odbiorców przypisaną do konta magazynowego.

Jeśli musisz zastąpić domyślną grupę odbiorców tożsamości zarządzanej przydzieloną przez system, możesz określić ustawienie audience.

W większości przypadków nie trzeba określać odbiorców usług. Nieokreślenie odbiorców tworzy tożsamość zarządzaną z domyślną grupą odbiorców przypisaną do konta magazynowego.

Tożsamość zarządzana przypisana przez użytkownika

Aby użyć tożsamości zarządzanej przypisanej przez użytkownika do uwierzytelniania, należy najpierw wdrożyć operacje usługi Azure IoT z włączonymi bezpiecznymi ustawieniami. Następnie należy skonfigurować tożsamość zarządzaną przypisaną przez użytkownika dla połączeń w chmurze. Aby dowiedzieć się więcej, zobacz Włączanie bezpiecznych ustawień we wdrożeniu operacji usługi Azure IoT.

Przed skonfigurowaniem punktu końcowego przepływu danych przypisz rolę do tożsamości zarządzanej przypisanej przez użytkownika, która zapewnia uprawnienia do zapisu na koncie usługi przechowywania.

  1. W portalu Azure przejdź do zasobu w chmurze, któremu musisz nadać uprawnienia. Na przykład przejdź do konta usługi Azure Storage >Kontrola dostępu (IAM)>Dodaj przypisanie roli.
  2. Na karcie Rola wybierz odpowiednią rolę.
  3. Na karcie Członkowie w polu Przypisz dostęp do wybierz opcję Tożsamość zarządzana , a następnie wybierz pozycję + Wybierz członków i wyszukaj tożsamość zarządzaną przypisaną przez użytkownika.

Następnie skonfiguruj punkt końcowy przepływu danych przy użyciu ustawień tożsamości zarządzanej przypisanej przez użytkownika.

Na stronie ustawienia punktu końcowego przepływu danych środowiska operacji wybierz kartę Podstawowa, a następnie wybierz pozycję Metoda> uwierzytelnianiaTożsamość zarządzana przypisana przez użytkownika.

Wprowadź identyfikator klienta tożsamości zarządzanej nadanej przez użytkownika oraz identyfikator dzierżawy w odpowiednich polach.

W tym miejscu zakres jest opcjonalny i domyślnie ma wartość https://storage.azure.com/.default. Jeśli musisz zastąpić zakres domyślny, określ scope ustawienie za pośrednictwem manifestu Bicep lub Kubernetes.

Token dostępu

Użycie tokenu dostępu jest alternatywną metodą uwierzytelniania. Ta metoda wymaga utworzenia tajemnicy Kubernetes z tokenem SAS i odwołania się do tej tajemnicy w zasobie DataflowEndpoint.

Uzyskaj token SAS dla konta usługi Azure Data Lake Storage Gen2 (ADLSv2). Na przykład użyj portalu Azure, aby przejść do swojego konta magazynowania. W menu po lewej stronie wybierz pozycję Zabezpieczenia i sieć>Sygnatura dostępu współdzielonego. Użyj poniższej tabeli, aby ustawić wymagane uprawnienia.

Parametr Włączone ustawienie
Dozwolone usługi Blob
Dozwolone typy zasobów Obiekt, kontener
Dozwolone uprawnienia Odczyt, zapis, usuwanie, lista, tworzenie

Aby zwiększyć bezpieczeństwo i postępować zgodnie z zasadą najniższych uprawnień, możesz wygenerować token SAS dla określonego kontenera. Aby zapobiec błędom uwierzytelniania, upewnij się, że kontener określony w tokenie SAS jest zgodny z ustawieniem docelowym przepływu danych w konfiguracji.

Ważne

Aby używać internetowego interfejsu użytkownika do zarządzania tajnymi danymi, operacje Azure IoT muszą być najpierw włączone z bezpiecznymi ustawieniami poprzez skonfigurowanie usługi Azure Key Vault i włączenie tożsamości obciążeń. Aby dowiedzieć się więcej, zobacz Włączanie bezpiecznych ustawień we wdrożeniu operacji usługi Azure IoT.

Na stronie ustawień punktu końcowego przepływu danych środowiska operacji wybierz kartę Podstawowa, a następnie wybierz metodę uwierzytelniania>Token dostępu.

W tym miejscu, pod Zsynchronizowany sekret, wprowadź nazwę sekretu. Ta nazwa służy do odwołowania się do wpisu tajnego w ustawieniach punktu końcowego przepływu danych i jest nazwą wpisu tajnego przechowywanego w klastrze Kubernetes.

Następnie w obszarze Nazwa wpisu tajnego tokenu dostępu wybierz pozycję Dodaj odwołanie , aby dodać wpis tajny z usługi Azure Key Vault. Na następnej stronie wybierz wpis tajny z usługi Azure Key Vault z pozycją Dodaj z usługi Azure Key Vault lub Utwórz nowy wpis tajny.

W przypadku wybrania pozycji Utwórz nowy wprowadź następujące ustawienia:

Ustawienie opis
Tajna nazwa Nazwa tajemnicy w usłudze Azure Key Vault. Wybierz nazwę, która jest łatwa do zapamiętania, aby później wybrać sekret z listy.
Tajna wartość Token SAS w formacie 'sv=2022-11-02&ss=b&srt=c&sp=rwdlax&se=2023-07-22T05:47:40Z&st=2023-07-21T21:47:40Z&spr=https&sig=<signature>'.
Ustawianie daty aktywacji Jeśli jest włączona, data, kiedy tajemnica stanie się aktywna.
Ustawianie daty wygaśnięcia Jeśli jest włączone, data wygaśnięcia sekretu.

Aby dowiedzieć się więcej na temat wpisów tajnych, zobacz Tworzenie wpisów tajnych i zarządzanie nimi w operacjach usługi Azure IoT.

Ustawienia zaawansowane

Możesz ustawić zaawansowane ustawienia punktu końcowego usługi Azure Data Lake Storage Gen2, takie jak opóźnienie wsadowe i liczba komunikatów.

batching Użyj ustawień, aby skonfigurować maksymalną liczbę komunikatów i maksymalne opóźnienie przed wysłaniem komunikatów do miejsca docelowego. To ustawienie jest przydatne, gdy chcesz zoptymalizować przepustowość sieci i zmniejszyć liczbę żądań do miejsca docelowego.

Pole opis Wymagane
latencySeconds Maksymalna liczba sekund oczekiwania przed wysłaniem komunikatów do miejsca docelowego. Wartość domyślna to 60 sekund. Nie.
maxMessages Maksymalna liczba komunikatów do wysłania do miejsca docelowego. Wartość domyślna to 100000 komunikatów. Nie.

Aby na przykład skonfigurować maksymalną liczbę komunikatów do 1000 i maksymalne opóźnienie do 100 sekund, użyj następujących ustawień:

W środowisku operacji wybierz kartę Zaawansowane dla punktu końcowego przepływu danych.

Zrzut ekranu przedstawiający używanie doświadczenia operacyjnego do konfiguracji ustawień zaawansowanych usługi ADLS w wersji 2.

Następne kroki