Dela via

Omvandla Dataverse-data till från CSV till Parquet med en pipelinemall

När du har exporterat data från Microsoft Dataverse till Azure Data Lake Storage Gen2 med Azure Synapse Link for Dataverse kan du använda Azure Data Factory för att skapa en pipeline som kopierar data från datakällan till Azure SQL.

Anteckning

Azure Synapse Link for Dataverse hette tidigare Exportera till datasjö. Tjänsten ändrades till i maj 2021 och kommer även i fortsättningen att exportera data till Azure Data Lake och Azure Synapse Analytics.

Den här artikeln visar hur man utför följande uppgifter:

  1. Skapa en pipeline från en Microsoft-mall.

  2. Konfigurera mallen.

  3. Köra pipelinen.

Förutsättningar

I det här avsnittet beskrivs de krav som krävs för att omvandla Dataverse-data till från CSV till Parquet.

  • Azure-roller. Det användarkonto som används för att logga in på Azure måste vara medlem i rollen deltagare eller ägare, eller en administratör av Azure-prenumerationen. Du kan visa de behörigheter du har i prenumerationen genom att gå till Azure Portal, välja ditt användarnamn i det övre högra hörnet, välja ... och sedan välja Mina behörigheter. Om du har tillgång till flera prenumerationer väljer du den aktuella prenumerationen. Om du vill skapa och hantera underordnade resurser för Data Factory i Azure-portalen—inklusive datauppsättningar, länkade tjänster, pipelines, utlösare och integreringskörningar—måste du tillhöra rollen Data Factory-deltagare i resursgruppsnivån eller högre.

  • Azure Synapse Link for Dataverse. I den här guiden förutsätts det att du redan har exporterat Dataverse-data via Azure Synapse Link for Dataverse. I det här exemplet exporteras data i kontotabellen till datasjön.

  • Azure Data Factory. I den här guiden förutsätts det att du redan har skapat en Data Factory under samma prenumeration och resursgrupp som det lagringskonto som innehåller exporterade Dataverse data.

Omvandla Dataverse-data till från CSV till Parquet med en pipelinemall

  1. Öppna Azure Data Factory och välj den Data Factory som finns i samma prenumerations- och resursgrupp som lagringskontot som innehåller din exporterade Dataverse data. Välj sedan Författare på den vänstra panelen.

  2. Välj + > Pipeline > Mallgalleri.

  3. Sök efter och välj mallen Omvandla Dataverse data från CSV till Parquet som skapats av Microsoft.

    Pipelinemall Parquet

  4. Mata in Azure Data Lake Storage Gen2-konto som innehåller exporterade Dataverse för den första posten och destination Azure Data Lake Storage Gen2-konto där Parquet-filerna kommer att skapas för den andra posten. Välj Använd denna mall.

    Konfigurera mall-Parquet

  5. Välj fliken Inställningar för dataflöden och ersätt värdena för ContainerName och TableName.

    Konfigurera Parquet-inställningar

  6. Välj fliken Parameter för dataflöden och ersätt värdena för ContainerName och TableName.

    Konfigurera Parquet-parametrar

  7. Navigera till pipelinen och kör den. Alternativt kan du lägga till utlösare för att omvandla data vid specifika tidsintervall.

Se även

Azure Synapse Link for Dataverse

Anteckning

Kan du berätta om dina inställningar för dokumentationsspråk? Svara i en kort undersökning. (observera att undersökningen är på engelska)

Undersökningen tar ungefär sju minuter. Inga personuppgifter samlas in (sekretesspolicy).