Używanie usługi Azure Data Factory do pozyskiwania danych do produktu Azure Operator Szczegółowe informacje Data Product

W tym artykule opisano sposób konfigurowania usługi Azure Data Factory w celu zapisywania danych w produkcie Data Product Szczegółowe informacje operatora platformy Azure. Aby uzyskać więcej informacji na temat usługi Azure Data Factory, zobacz Co to jest usługa Azure Data Factory.

Ostrzeżenie

Produkty danych nie obsługują linków prywatnych. Nie można skonfigurować łącza prywatnego między produktem danych a usługą Azure Data Factory.

Wymagania wstępne

Tworzenie połączonej usługi Key Vault

Aby połączyć usługę Azure Data Factory z inną usługą platformy Azure, musisz utworzyć połączoną usługę. Najpierw utwórz połączoną usługę w celu połączenia usługi Azure Data Factory z magazynem kluczy produktu danych.

  1. W witrynie Azure Portal znajdź zasób usługi Azure Data Factory.
  2. W okienku Przegląd uruchom studio usługi Azure Data Factory.
  3. Przejdź do widoku Zarządzanie, a następnie znajdź Połączenie ions i wybierz pozycję Połączone usługi.
  4. Utwórz nową połączoną usługę przy użyciu przycisku Nowy .
    1. Wybierz typ usługi Azure Key Vault.
    2. Ustaw element docelowy na magazyn kluczy produktu danych (magazyn kluczy znajduje się w grupie zasobów o nazwie rozpoczynającej się od <data-product-name>-HostedResources- i ma nazwę aoi-<uid>-kv).
    3. Ustaw metodę uwierzytelniania na tożsamość zarządzaną przypisaną przez system.
  5. Udziel uprawnień usługi Azure Data Factory dla zasobu usługi Key Vault.
    1. Przejdź do magazynu kluczy produktu danych w witrynie Azure Portal.
    2. W okienku Kontrola dostępu (Zarządzanie dostępem i tożsamościami) dodaj nowe przypisanie roli.
    3. Nadaj tożsamości zarządzanej usługi Data Factory (ma taką samą nazwę jak zasób usługi Data Factory) rolę "Użytkownik wpisów tajnych usługi Key Vault".

Tworzenie połączonej usługi Blob Storage

Produkty danych uwidacznia punkt końcowy usługi Blob Storage na potrzeby pozyskiwania danych. Użyj nowo utworzonej połączonej usługi Key Vault, aby połączyć usługę Azure Data Factory z punktem końcowym pozyskiwania produktu danych.

  1. W witrynie Azure Portal znajdź zasób usługi Azure Data Factory.
  2. W okienku Przegląd uruchom studio usługi Azure Data Factory.
  3. Przejdź do widoku Zarządzanie, a następnie znajdź Połączenie ions i wybierz pozycję Połączone usługi.
  4. Utwórz nową połączoną usługę przy użyciu przycisku Nowy .
    1. Wybierz typ usługi Azure Blob Storage.
    2. Ustaw typ uwierzytelniania na identyfikator URI sygnatury dostępu współdzielonego.
    3. Wybierz usługę Azure Key Vault jako źródło.
    4. Wybierz połączoną usługę Key Vault utworzoną w sekcji Tworzenie połączonej usługi magazynu kluczy.
    5. Ustaw nazwę wpisu tajnego na input-storage-sas.
    6. Pozostaw wersję wpisu tajnego jako wartość domyślną ('Najnowsza wersja').

Teraz usługa Data Factory jest połączona z punktem końcowym pozyskiwania danych produktu.

Tworzenie zestawów danych usługi Blob Storage

Aby użyć elementu Data Product jako ujścia dla potoku usługi Data Factory, musisz utworzyć zestaw danych ujścia.

  1. W witrynie Azure Portal znajdź zasób usługi Azure Data Factory.
  2. W okienku Przegląd uruchom studio usługi Azure Data Factory.
  3. Przejdź do widoku Autor —> Dodaj zasób —> Zestaw danych.
  4. Utwórz nowy zestaw danych usługi Azure Blob Storage.
    1. Wybierz typ danych wyjściowych.
    2. Ustaw połączoną usługę na połączoną usługę pozyskiwania danych utworzoną w sekcji Tworzenie połączonej usługi magazynu obiektów blob.
    3. Ustaw nazwę kontenera na nazwę typu danych, z którą jest skojarzony zestaw danych.
      • Te informacje można znaleźć w sekcji Wymagana konfiguracja pozyskiwania w dokumentacji produktu danych.
      • Na przykład zobacz Wymagana konfiguracja pozyskiwania dla produktu Monitorowanie — produkt danych MCC.
    4. Upewnij się, że ścieżka folderu zawiera co najmniej jeden katalog; pliki skopiowane do katalogu głównego kontenera nie będą poprawnie pozyskiwane.
    5. Ustaw inne pola odpowiednio dla danych.
  5. Postępuj zgodnie z dokumentacją usługi Azure Data Factory (na przykład Tworzenie potoku za pomocą interfejsu użytkownika), aby utworzyć potok z tym nowym zestawem danych jako ujściem.

Powtórz ten krok dla wszystkich wymaganych zestawów danych.

Ważne

Produkt danych może używać prefiksu folderu lub prefiksu nazwy pliku (można go ustawić jako część potoku , na przykład w działaniu kopiowania), aby określić sposób przetwarzania pozyskanego pliku. Aby uzyskać wymagania dotyczące produktu danych dla prefiksów folderów lub prefiksów nazw plików, zobacz sekcję Wymagana konfiguracja pozyskiwania w dokumentacji produktu danych. Na przykład zobacz Wymagana konfiguracja pozyskiwania dla produktu Monitorowanie — produkt danych MCC.

Tworzenie potoków danych

Usługa Azure Data Factory jest teraz skonfigurowana do nawiązywania połączenia z produktem danych. Aby pozyskiwać dane przy użyciu tej konfiguracji, należy postępować zgodnie z dokumentacją usługi Data Factory.

  1. Skonfiguruj połączenie w usłudze Azure Data Factory z usługą zawierającą dane źródłowe.
  2. Skonfiguruj potoki w usłudze Azure Data Factory , aby skopiować dane ze źródła do produktu danych przy użyciu zestawów danych utworzonych w ostatnim kroku.

Instrukcje: