Aan de slag met Azure Data Factory

Van toepassing op: Azure Data Factory Azure Synapse Analytics

Tip

Data Factory in Microsoft Fabric is de volgende generatie van Azure Data Factory, met een eenvoudigere architectuur, ingebouwde AI en nieuwe functies. Als u nieuw bent in gegevensintegratie, begint u met Fabric Data Factory. Bestaande ADF-workloads kunnen upgraden naar Fabric om toegang te krijgen tot nieuwe mogelijkheden voor gegevenswetenschap, realtime analyses en rapportage.

Welkom bij Azure Data Factory! Dit artikel helpt u bij het maken van uw eerste datafabriek en gegevenspijplijn binnen vijf minuten.

De Azure Resource Manager sjabloon (ARM-sjabloon) in dit artikel maakt en configureert alles wat u nodig hebt. Vervolgens kunt u naar uw demogegevensfactory gaan en de pijplijn activeren. Hiermee worden enkele voorbeeldgegevens van de ene Azure Blob Storage map naar de andere verplaatst.

Vereiste voorwaarden

Als u geen Azure-abonnement hebt, maakt u een vrij account voordat u begint.

Video samenvatting

De volgende video bevat een overzicht van het voorbeeld in dit artikel:

Stap 1: Gebruik de demo om resources te maken

In dit demoscenario gebruik je de kopieeractiviteit in een datafabriek om een blob met een naam moviesDB2.csv te kopiëren van een invoermap in Azure Blob Storage naar een uitvoermap. In een realistisch scenario kan deze kopieeroperatie plaatsvinden tussen een van de vele ondersteunde databronnen en -sinks die beschikbaar zijn in Azure Data Factory. Het kan ook transformaties in de gegevens omvatten.

  1. Selecteer de volgende knop.

    Probeer je eerste data factory-demo

    Als u de knop selecteert, worden de volgende Azure resources gemaakt:

    • Een Azure Data Factory-account
    • Een data factory die een pijplijn met één kopieeractiviteit bevat
    • Een Azure Blob Storage-account met moviesDB2.csv geüpload naar een invoermap als bron
    • Een gekoppelde service om de data factory te verbinden met Blob Storage
  2. U wordt omgeleid naar de configuratiepagina om de sjabloon te implementeren. Op deze pagina:

    1. Voor Resource group, selecteer Nieuw maken om een resourcegroep te maken. U kunt alle andere waarden met hun standaardwaarden behouden.

    2. Selecteer Beoordelen en maken en klik daarna op Maken om de bronnen te implementeren.

    Schermopname van de pagina voor het implementeren van een sjabloon voor het maken van resources.

Notitie

Je moet een rol toewijzen aan een beheerde identiteit wanneer je de template uitrolt. Deze stap vereist de rol Owner, User Access Administrator of Managed Identity Operator.

Alle resources in deze demo worden gemaakt in de nieuwe resourcegroep, zodat u ze later eenvoudig kunt opschonen.

Stap 2: Geïmplementeerde resources controleren

  1. Selecteer Naar de resourcegroep gaan in het bericht waarin de implementatie is voltooid.

    Schermafbeelding van de Azure-portalpagina die succesvolle implementatie van de demosjabloon laat zien.

  2. De resourcegroep omvat de nieuwe datafactory, Blob Storage-account en beheerde identiteit die door de implementatie is aangemaakt. Selecteer de gegevensfabriek in de resourcegroep om deze weer te geven.

    Schermopname van de inhoud van de resourcegroep die voor de demo is gemaakt, met de data factory gemarkeerd.

  3. Selecteer de knop Studio starten .

    Schermopname van de Azure-portal met details voor de zojuist gemaakte gegevensfactory, met de knop voor het openen van Azure Data Factory Studio gemarkeerd.

  4. In Azure Data Factory Studio:

    1. Selecteer het tabblad Auteurtabblad Auteur.
    2. Selecteer de pijplijn die door de sjabloon is gemaakt.
    3. Controleer de brongegevens door Openen te selecteren.

    Schermafbeelding van Azure Data Factory Studio met de pijplijn die is gemaakt door de template.

  5. Selecteer Bladeren in de brongegevensset om het invoerbestand weer te geven dat is gemaakt voor de demo.

    Schermopname van de brongegevensset, met de knop Bladeren gemarkeerd.

    Let op het moviesDB2.csv bestand, dat al in de invoermap is geüpload.

    Schermopname van de inhoud van de invoermap, met het invoerbestand dat in de demo wordt gebruikt.

Stap 3: Start de demo-pipeline om te draaien

  1. Selecteer Trigger toevoegen en selecteer Nu Activeren.

    Schermopname van de knop voor het activeren van de demo-pijplijn die moet worden uitgevoerd.

  2. Selecteer OK in het rechterdeelvenster onder Pijplijnuitvoering.

De pijplijn bewaken

  1. Selecteer het tabblad MonitorMonitor-tabblad. Dit tabblad biedt een overzicht van uw pijplijnuitvoeringen, waaronder de begintijd en status.

    Schermopname van het tabblad voor het bewaken van pijplijnuitvoeringen in een datafabriek.

  2. In deze quickstart heeft de pijplijn slechts één activiteitstype: Gegevens kopiëren. Selecteer de naam van de pijplijn om de details van de uitvoeringsresultaten van de kopieeractiviteit weer te geven.

    Schermopname van de resultaten van de uitvoering van een kopieeractiviteit op het tabblad voor het monitoren van een data factory.

  3. Selecteer het pictogram Details om het gedetailleerde kopieerproces weer te geven. In de resultaten zijn de Data read en Data written groottes hetzelfde, en de activiteit heeft één bestand gelezen en geschreven. Deze informatie bewijst dat Azure Data Factory alle gegevens succesvol naar de bestemming heeft gekopieerd.

    Schermopname van gedetailleerde uitvoeringsresultaten voor een kopieeractiviteit.

De hulpbronnen opschonen

U kunt op twee manieren alle resources opschonen die u in dit artikel hebt gemaakt:

  • U kunt de hele Azure resourcegroep verwijderen, inclusief alle resources die erin zijn gemaakt.

  • Als u bepaalde resources intact wilt houden, gaat u naar de resourcegroep en verwijdert u alleen de specifieke resources die u wilt verwijderen.

    Als u deze sjabloon bijvoorbeeld gebruikt om een data factory te maken voor gebruik in een andere zelfstudie, kunt u de andere resources verwijderen, maar alleen de data factory behouden.

In dit artikel hebt u een Data Factory gemaakt met een pijplijn die een kopieeractiviteit bevatte. Ga verder met het volgende artikel en de volgende trainingsmodule voor meer informatie over Azure Data Factory: