Delen via

Voorbeelden van query folding

Dit artikel bevat enkele voorbeeldscenario's voor elk van de drie mogelijke resultaten voor het vouwen van query's. Het bevat ook enkele suggesties voor het optimaal profiteren van het query folding-mechanisme en het effect dat het kan hebben in uw query's.

Het scenario

Stel dat u een scenario hebt waarin u, met behulp van de Wide World Importers-database voor Azure Synapse Analytics SQL-database, een query maakt in Power Query die verbinding maakt met de fact_Sale tabel en de laatste 10 verkopen met alleen de volgende velden ophaalt:

  • Verkoopsleutel
  • Klantsleutel
  • Factuurdatumsleutel
  • Description
  • Hoeveelheid

Opmerking

Voor demonstratiedoeleinden gebruikt dit artikel de database die wordt beschreven in de zelfstudie over het laden van de Wide World Importers-database in Azure Synapse Analytics. Het belangrijkste verschil in dit artikel is dat de fact_Sale tabel alleen gegevens bevat voor het jaar 2000, met in totaal 3.644.356 rijen.

Hoewel de resultaten mogelijk niet exact overeenkomen met de resultaten die u krijgt door de zelfstudie uit de documentatie van Azure Synapse Analytics te volgen, is het doel van dit artikel om de belangrijkste concepten en de impact van query folding op uw query's te demonstreren.

Schermopname van de voorbeelduitvoertabel die is afgeleid van de fact_Sale tabel van de Azure Synapse Analytics-database Wide World Importers.

In dit artikel worden drie manieren beschreven om dezelfde uitvoer te bereiken met verschillende niveaus van query folding:

  • Geen query folding
  • Gedeeltelijke query folding
  • Volledige query folding

Geen voorbeeld van het vouwen van query's

Belangrijk

Query's die alleen afhankelijk zijn van niet-gestructureerde gegevensbronnen of die geen rekenengine hebben, zoals CSV- of Excel-bestanden, hebben geen mogelijkheden voor het vouwen van query's. Dit betekent dat Power Query alle vereiste gegevenstransformaties evalueert met behulp van de Power Query-engine.

Nadat u verbinding hebt gemaakt met uw database en naar de fact_Sale tabel navigeert, selecteert u de transformatie Onderste rijen behouden in de groep Rijen verminderen van het tabblad Start .

Schermopname van de transformatie Onderste rijen behouden in de groep Rijen verkleinen van het tabblad Start.

Nadat u deze transformatie hebt geselecteerd, wordt er een nieuw dialoogvenster weergegeven. In dit nieuwe dialoogvenster kunt u het aantal rijen invoeren dat u wilt behouden. Voer voor dit geval de waarde 10 in en selecteer VERVOLGENS OK.

Schermopname van het deelvenster Onderste rijen behouden waarin u de waarde 10 invoert in het dialoogvenster Onderste rijen behouden.

Aanbeveling

Voor dit geval levert het uitvoeren van deze bewerking het resultaat van de laatste tien verkopen op. In de meeste scenario's wordt u aangeraden een explicietere logica op te geven waarmee wordt gedefinieerd welke rijen als laatste worden beschouwd door een sorteerbewerking toe te passen op de tabel.

Selecteer vervolgens de transformatie Kolommen kiezen in de groep Kolommen beheren van het tabblad Start . Vervolgens kunt u de kolommen selecteren die u uit de tabel wilt bewaren en de rest verwijderen.

Schermopname van het lint Start waarin u de transformatie Kolommen kiezen kiest voor het voorbeeld van het niet vouwen van query's.

Tot slot selecteert u in het dialoogvenster Kolommen kiezen het Sale Key, Customer Key, Invoice Date Keyen DescriptionQuantity de kolommen en selecteert u OK.

Schermopname van het deelvenster Kolommen kiezen waarin u de kolommen Verkoopsleutel, Klantsleutel, Factuurdatumsleutel, Beschrijving en Hoeveelheid selecteert.

Het volgende codevoorbeeld is het volledige M-script voor de query die u hebt gemaakt:

let
    Source = Sql.Database(ServerName, DatabaseName),
    Navigation = Source{[Schema = "wwi", Item = "fact_Sale"]}[Data],
    #"Kept bottom rows" = Table.LastN(Navigation, 10),
    #"Choose columns" = Table.SelectColumns(
        #"Kept bottom rows",
        {"Sale Key", "Customer Key", "Invoice Date Key", "Description", "Quantity"}
    )
in
    #"Choose columns""

Geen query folding: Inzicht in de query-evaluatie

Onder Toegepaste stappen in de Power Query-editor ziet u dat de indicatoren voor het vouwen van query's voor onderste rijen behouden en Kolommen kiezen zijn gemarkeerd als stappen die buiten de gegevensbron worden geëvalueerd of, met andere woorden, door de Power Query-engine.

Deelvenster Toegepaste stappen voor de query, met de indicatoren voor het vouwen van query's, die de stappen Behouden onderste rijen en Verwijderde andere kolommen tonen.

U kunt met de rechtermuisknop op de laatste stap van uw query klikken, de query kiezen met de naam Kolommen kiezen en de optie selecteren waarmee het queryplan weergeven wordt gelezen. Het doel van het queryplan is om u een gedetailleerd overzicht te geven van hoe uw query wordt uitgevoerd. Ga naar Het queryplan voor meer informatie over deze functie.

Schermopname van het queryplan voor de gemaakte query met meerdere knooppunten, waarvan twee zich in een rechthoek bevinden die de knooppunten vertegenwoordigt die worden geëvalueerd door de Power Query-engine.

Elk vak in de vorige afbeelding wordt een knooppunt genoemd. Een knooppunt vertegenwoordigt de uitsplitsing van de bewerking om aan deze query te voldoen. Knooppunten die gegevensbronnen vertegenwoordigen, zoals SQL Server in het vorige voorbeeld en het Value.NativeQuery knooppunt, vertegenwoordigen welk deel van de query wordt offload naar de gegevensbron. De rest van de knooppunten, in dit geval Table.LastN en Table.SelectColumns gemarkeerd in de rechthoek in de vorige afbeelding, worden geëvalueerd door de Power Query-engine. Deze twee knooppunten vertegenwoordigen de twee transformaties die u hebt toegevoegd, Onderste rijen behouden en Kolommen kiezen. De rest van de knooppunten vertegenwoordigen bewerkingen die plaatsvinden op gegevensbronniveau.

Als u de exacte aanvraag wilt zien die naar uw gegevensbron wordt verzonden, selecteert u Details weergeven in het Value.NativeQuery knooppunt.

Schermopname van de SQL-instructie in Value.NativeQuery die een aanvraag vertegenwoordigt van alle velden en records uit de tabel 'fact_Sale' in de database.

Deze gegevensbronaanvraag bevindt zich in de systeemeigen taal van uw gegevensbron. In dit geval is deze taal SQL en deze instructie vertegenwoordigt een aanvraag voor alle rijen en velden uit de fact_Sale tabel.

Door deze gegevensbronaanvraag te raadplegen, krijgt u meer inzicht in het verhaal dat het queryplan probeert over te brengen:

  • Sql.Database: Dit knooppunt vertegenwoordigt de toegang tot de gegevensbron. Maakt verbinding met de database en verzendt metagegevensaanvragen om inzicht te hebben in de mogelijkheden ervan.
  • Value.NativeQuery: Vertegenwoordigt de aanvraag die is gegenereerd door Power Query om aan de query te voldoen. Power Query verzendt de gegevensaanvragen in een systeemeigen SQL-instructie naar de gegevensbron. In dit geval vertegenwoordigt dit alle records en velden (kolommen) uit de fact_Sale tabel. Voor dit scenario is dit niet wenselijk, omdat de tabel miljoenen rijen bevat en de interesse alleen in de laatste 10 valt.
  • Table.LastN: Zodra Power Query alle records uit de fact_Sale tabel ontvangt, wordt de Power Query-engine gebruikt om de tabel te filteren en alleen de laatste tien rijen te bewaren.
  • Table.SelectColumns: Power Query maakt gebruik van de uitvoer van het Table.LastN knooppunt en past een nieuwe transformatie toe, Table.SelectColumnswaarmee de specifieke kolommen worden geselecteerd die u uit een tabel wilt bewaren.

Voor de evaluatie moest deze query alle rijen en velden uit de fact_Sale tabel downloaden. Deze query duurde gemiddeld 6 minuten en 1 seconde om te worden verwerkt in een standaardexemplaren van Power BI-gegevensstromen (die rekening hield met de evaluatie en het laden van gegevens naar gegevensstromen).

Voorbeeld van gedeeltelijke query-samenvouwing

Nadat u verbinding hebt gemaakt met de database en naar de fact_Sale tabel navigeert, selecteert u eerst de kolommen die u uit de tabel wilt bewaren. Selecteer de transformatie Kolommen kiezen in de groep Kolommen beheren op het tabblad Start . Met deze transformatie kunt u expliciet de kolommen selecteren die u uit de tabel wilt bewaren en de rest verwijderen.

Schermopname van het Home-lint waar u de transformatie 'Kolommen kiezen' selecteert voor het voorbeeld van gedeeltelijk vouwen van query's.

Selecteer in het dialoogvenster Kolommen kiezen de Sale Keykolommen , , Customer Keyen Invoice Date KeyDescriptionQuantity kolommen en selecteer vervolgens OK.

Schermopname van het deelvenster Kolommen kiezen waarin u de kolommen Verkoopsleutel, Klantsleutel, Factuurdatumsleutel, Beschrijving en Hoeveelheid selecteert voor het gedeeltelijke voorbeeld van het vouwen van query's.

U maakt nu een logica waarmee u de tabel sorteert zodat de laatste verkoop onderaan de tabel staat. Selecteer de Sale Key kolom, de primaire sleutel en incrementele reeks of index van de tabel. Sorteer de tabel met alleen dit veld in oplopende volgorde vanuit het contextmenu voor de kolom.

Schermopname van het contextmenu waarin u het veld Verkoopsleutel van de tabel in oplopende volgorde sorteert.

Selecteer vervolgens het contextmenu van de tabel en kies de transformatie onderste rijen behouden.

Schermopname van het contextmenu van de tabel waarin u de optie Onderste rijen behouden selecteert.

Voer in Onderste rijen behouden de waarde 10 in en selecteer VERVOLGENS OK.

Schermopname van het dialoogvenster Onderste rijen behouden met de waarde 10 die als invoerwaarde is ingevoerd om alleen de onderste 10 rijen van de tabel te behouden.

Het volgende codevoorbeeld is het volledige M-script voor de query die u hebt gemaakt:

let
    Source = Sql.Database(ServerName, DatabaseName),
    Navigation = Source{[Schema = "wwi", Item = "fact_Sale"]}[Data],
    #"Choose columns" = Table.SelectColumns(
        Navigation, 
        {"Sale Key", "Customer Key", "Invoice Date Key", "Description", "Quantity"}
    ),
    #"Sorted rows" = Table.Sort(#"Choose columns", {{"Sale Key", Order.Ascending}}),
    #"Kept bottom rows" = Table.LastN(#"Sorted rows", 10)
in
    #"Kept bottom rows"

Voorbeeld van gedeeltelijk vouwen van query's: Inzicht in de query-evaluatie

Als u het deelvenster met toegepaste stappen controleert, ziet u dat de indicatoren voor query folding aangeven dat de laatste transformatie die u hebt toegevoegd, Kept bottom rows is gemarkeerd als een stap die wordt geëvalueerd buiten de gegevensbron, of met andere woorden door de Power Query-engine.

Schermopname van het deelvenster Toegepaste stappen voor de query, met de query-vouwindicatoren die aangeven dat de stap

U kunt met de rechtermuisknop klikken op de laatste stap van uw query, de naam Kept bottom rowsen de optie Queryplan selecteren om beter te begrijpen hoe uw query kan worden geëvalueerd.

Schermopname van het queryplan met meerdere knooppunten waarin het knooppunt Table.LastN, dat in een rechthoek wordt weergegeven, een knooppunt is dat wordt geëvalueerd door de Power Query-engine en niet door de gegevensbron.

Elk vak in de vorige afbeelding wordt een knooppunt genoemd. Een knooppunt vertegenwoordigt elk proces dat moet worden uitgevoerd (van links naar rechts) om uw query te kunnen evalueren. Sommige van deze knooppunten kunnen worden geëvalueerd in uw gegevensbron, terwijl andere, zoals het knooppunt vertegenwoordigd door de stap Table.LastN, Behouden onderste rijen, worden geëvalueerd met behulp van de Power Query-engine.

Als u de exacte aanvraag wilt zien die naar uw gegevensbron wordt verzonden, selecteert u Details weergeven in het Value.NativeQuery knooppunt.

Schermopname van het queryplan waarin u Details weergeven kunt selecteren in Value.NativeQuery om de exacte aanvraag te zien.

Deze aanvraag bevindt zich in de systeemeigen taal van uw gegevensbron. In dit geval is die taal SQL en deze instructie vertegenwoordigt een aanvraag voor alle rijen, met alleen de aangevraagde velden uit de fact_Sale tabel die door het Sale Key veld zijn besteld.

Door deze gegevensbronaanvraag te raadplegen, krijgt u meer inzicht in het verhaal dat het volledige queryplan probeert over te brengen. De volgorde van de knooppunten is een opeenvolgend proces dat begint met het aanvragen van de gegevens uit uw gegevensbron:

  • Sql.Database: Maakt verbinding met de database en verzendt metagegevensaanvragen om inzicht te hebben in de mogelijkheden ervan.
  • Value.NativeQuery: Vertegenwoordigt de aanvraag die door Power Query wordt gegenereerd om de query te vervullen. Power Query verzendt de gegevensaanvragen in een systeemeigen SQL-instructie naar de gegevensbron. In dit geval vertegenwoordigt dit alle records, waarbij alleen de aangevraagde velden uit de fact_Sale tabel in de database in oplopende volgorde worden gesorteerd op het Sales Key veld.
  • Table.LastN: Zodra Power Query alle records uit de fact_Sale tabel ontvangt, wordt de Power Query-engine gebruikt om de tabel te filteren en alleen de laatste tien rijen te bewaren.

Voor de evaluatie moest deze query alle rijen en alleen de vereiste velden uit de fact_Sale tabel downloaden. Het duurde gemiddeld 3 minuten en 4 seconden om te worden verwerkt in een standaardexemplaren van Power BI-gegevensstromen (die rekening hield met de evaluatie en het laden van gegevens naar gegevensstromen).

Voorbeeld van het vouwen van volledige query's

Nadat u verbinding hebt gemaakt met de database en naar de fact_Sale tabel navigeert, selecteert u eerst de kolommen die u uit de tabel wilt bewaren. Selecteer de transformatie Kolommen kiezen in de groep Kolommen beheren op het tabblad Start . Met deze transformatie kunt u expliciet de kolommen selecteren die u uit de tabel wilt bewaren en de rest verwijderen.

Schermopname van de transformatie

Selecteer in Kolommen kiezen de Sale Key, Customer Key, , Invoice Date Keyen DescriptionQuantity kolommen en selecteer vervolgens OK.

Schermopname met de kolommen Verkoopsleutel, Klantsleutel, Factuurdatum, Beschrijving en Hoeveelheid geselecteerd voor het volledige voorbeeld van het vouwen van query's.

U creëert nu een logica die de tabel sorteert zodat de laatste verkoop bovenaan de tabel staat. Selecteer de Sale Key kolom, de primaire sleutel en incrementele reeks of index van de tabel. Sorteer de tabel alleen met behulp van dit veld in aflopende volgorde vanuit het contextmenu voor de kolom.

Schermopname van het contextmenu van het veld `Verkoopsleutel` met de optie Aflopend sorteren gemarkeerd.

Selecteer vervolgens het contextmenu van de tabel en kies de bovenste rijen behouden transform.

De optie Bovenste rijen in het contextmenu van de tabel behouden.

Voer in Bovenste rijen behouden de waarde 10 in en selecteer VERVOLGENS OK.

Schermopname van het dialoogvenster Bovenste rijen behouden met de waarde 10 die is ingevoerd als invoerwaarde om alleen de bovenste 10 rijen van de tabel te behouden.

Het volgende codevoorbeeld is het volledige M-script voor de query die u hebt gemaakt:

let
    Source = Sql.Database(ServerName, DatabaseName),
    Navigation = Source{[Schema = "wwi", Item = "fact_Sale"]}[Data],
    #"Choose columns" = Table.SelectColumns(
        Navigation, 
        {"Sale Key", "Customer Key", "Invoice Date Key", "Description", "Quantity"}
    ),
    #"Sorted rows" = Table.Sort(#"Choose columns", {{"Sale Key", Order.Descending}}),
    #"Kept top rows" = Table.FirstN(#"Sorted rows", 10)
in
    #"Kept top rows"

Volledig voorbeeld van het vouwen van query's: Inzicht in de query-evaluatie

Wanneer u het deelvenster met toegepaste stappen controleert, ziet u dat de indicaties voor queryvouw aangeven dat de transformaties die u hebt toegevoegd, Kolommen kiezen, Gesorteerde rijen en Bovenste rijen behouden, worden gemarkeerd als stappen die worden geëvalueerd in de gegevensbron.

Alle querystappen hebben het pictogram dat laat zien dat ze kunnen worden teruggevouwen naar de gegevensbron.

U kunt met de rechtermuisknop op de laatste stap van uw query klikken, de laatste met de naam Bewaarde bovenste rijen en de optie selecteren die het queryplan leest.

Schermopname van het queryplan met de inhoud van Value.NativeQuery.

Deze aanvraag bevindt zich in de systeemeigen taal van uw gegevensbron. In dit geval is deze taal SQL en deze instructie vertegenwoordigt een aanvraag voor alle rijen en velden uit de fact_Sale tabel.

Door deze gegevensbronquery te raadplegen, krijgt u meer inzicht in het verhaal dat het volledige queryplan probeert over te brengen:

  • Sql.Database: Maakt verbinding met de database en verzendt metagegevensaanvragen om inzicht te hebben in de mogelijkheden ervan.
  • Value.NativeQuery: Vertegenwoordigt de aanvraag die door Power Query wordt gegenereerd om de query te vervullen. Power Query verzendt de gegevensaanvragen in een systeemeigen SQL-instructie naar de gegevensbron. In dit geval vertegenwoordigt dit een aanvraag voor alleen de tien bovenste records van de fact_Sale tabel, met alleen de vereiste velden nadat ze in aflopende volgorde zijn gesorteerd met behulp van het Sale Key veld.

Opmerking

Er is geen component die kan worden gebruikt om de onderste rijen van een tabel in de T-SQL-taal te SELECTEREN, maar er is een TOP-component waarmee de bovenste rijen van een tabel worden opgehaald.

Voor de evaluatie downloadt deze query slechts 10 rijen, met alleen de velden die u in de fact_Sale tabel hebt aangevraagd. Deze query duurde gemiddeld 31 seconden om te worden verwerkt in een standaardexemplaren van Power BI-gegevensstromen (die rekening hield met de evaluatie en het laden van gegevens naar gegevensstromen).

Prestatievergelijking

Om beter inzicht te krijgen in het effect dat query folding heeft op deze query's, kunt u uw query's vernieuwen, de tijd vastleggen die het kost om elke query volledig te vernieuwen, en deze vergelijken. Ter vereenvoudiging biedt dit artikel de gemiddelde vernieuwtijdstippen die zijn vastgelegd met behulp van het verversingsmechanisme van Power BI-gegevensstromen, terwijl u verbinding maakt met een speciaal toegewezen Azure Synapse Analytics-omgeving met DW2000c als service level.

De vernieuwingstijd voor elke query is als volgt:

Example Etiket Tijd in seconden
Geen query folding Geen 361
Gedeeltelijke query folding Gedeeltelijk 184
Volledige query folding Volledig 31

Grafiek die de vernieuwingstijd van de query zonder vouwen vergelijkt met 361 seconden, de gedeeltelijke query folding met 184 seconden en de volledig gevouwen query met 31 seconden.

Het is vaak zo dat een query die volledig terugvouwt naar de gegevensbron, presteert beter dan vergelijkbare query's die niet volledig naar de gegevensbron worden teruggevouwen. Er kunnen veel redenen zijn waarom dit het geval is. Deze redenen variëren van de complexiteit van de transformaties die uw query uitvoert, tot de queryoptimalisaties die zijn geïmplementeerd in uw gegevensbron, zoals indexen en toegewezen computing en netwerkresources. Er zijn nog steeds twee specifieke belangrijke processen die query folding probeert te gebruiken om het effect dat beide processen hebben met Power Query te minimaliseren:

  • Gegevens tijdens overdracht
  • Transformaties die worden uitgevoerd door de Power Query-engine

In de volgende secties wordt het effect uitgelegd dat deze twee processen hebben in de eerder genoemde query's.

Gegevens tijdens overdracht

Wanneer een query wordt uitgevoerd, wordt geprobeerd de gegevens uit de gegevensbron op te halen als een van de eerste stappen. Welke gegevens worden opgehaald uit de gegevensbron, wordt gedefinieerd door het query folding-mechanisme. Dit mechanisme identificeert de stappen van de query die kunnen worden overgedragen aan de gegevensbron.

De volgende tabel bevat het aantal rijen dat is aangevraagd in de fact_Sale tabel van de database. De tabel bevat ook een korte beschrijving van de SQL-instructie die is verzonden om dergelijke gegevens op te vragen uit de gegevensbron.

Example Etiket Aangevraagde rijen Description
Geen query folding Geen 3644356 Aanvraag voor alle velden en alle records uit de fact_Sale tabel
Gedeeltelijke query folding Gedeeltelijk 3644356 Aanvraag voor alle records, maar alleen vereiste velden uit de fact_Sale tabel nadat deze zijn gesorteerd op het Sale Key veld
Volledige query folding Volledig 10 Alleen de vereiste velden aanvragen en de top 10 records van de fact_Sale-tabel, nadat deze records zijn gesorteerd op het Sale Key-veld in aflopende volgorde.

Grafiek met het aantal rijen dat uit de database is verzameld voor geen query folding, gedeeltelijke query folding en volledige query folding.

Wanneer u gegevens van een gegevensbron aanvraagt, moet de gegevensbron de resultaten voor de aanvraag berekenen en vervolgens de gegevens naar de aanvrager verzenden. Hoewel de rekencapaciteiten al zijn vermeld, kunnen de netwerkcapaciteiten die nodig zijn om de gegevens van de gegevensbron naar Power Query te verplaatsen, enige tijd in beslag nemen, afhankelijk van de omvang van de gegevens. Bovendien moet Power Query de gegevens effectief kunnen ontvangen en voorbereiden op de transformaties die lokaal plaatsvinden.

Voor de getoonde voorbeelden moest Power Query meer dan 3,6 miljoen rijen uit de gegevensbron opvragen voor de gevallen van geen query folding en gedeeltelijke query folding. Voor het volledige voorbeeld van het vouwen van query's heeft deze slechts 10 rijen aangevraagd. Voor de aangevraagde velden verzocht het voorbeeld zonder query folding om alle beschikbare velden uit de tabel. Zowel de gedeeltelijke als de volledige query folding-voorbeelden hebben alleen een aanvraag gedaan voor precies de velden die nodig waren.

Waarschuwing

U wordt aangeraden incrementele vernieuwingsoplossingen te implementeren die gebruikmaken van het vouwen van query's of tabellen met grote hoeveelheden gegevens. Verschillende productintegraties van Power Query implementeren time-outs om langlopende query's te beëindigen. Sommige gegevensbronnen implementeren ook time-outs voor langlopende sessies en proberen dure query's uit te voeren op hun servers. Meer informatie: Incrementeel vernieuwen gebruiken met gegevensstromen en incrementeel vernieuwen voor semantische modellen

Transformaties die worden uitgevoerd door de Power Query-engine

In dit artikel wordt uitgelegd hoe u het queryplan kunt gebruiken om beter te begrijpen hoe uw query kan worden geëvalueerd. In het queryplan ziet u de exacte knooppunten van de transformatiebewerkingen die door de Power Query-engine worden uitgevoerd.

In de volgende tabel ziet u de knooppunten uit de queryplannen van de vorige query's die door de Power Query-engine zouden zijn geëvalueerd.

Example Etiket Transformatieknooppunten van Power Query-engine
Geen query folding Geen Table.LastN, Table.SelectColumns
Gedeeltelijke query folding Gedeeltelijk Table.LastN
Volledige query folding Volledig —

Grafiek met de totale transformaties die worden uitgevoerd door de Power Query-engine voor geen query folding, gedeeltelijke query folding en volledige query folding.

Voor de voorbeelden die in dit artikel worden weergegeven, zijn voor het volledige voorbeeld van het vouwen van query's geen transformaties in de Power Query-engine vereist, omdat de vereiste uitvoertabel rechtstreeks afkomstig is van de gegevensbron. De andere twee query's hebben daarentegen enige berekeningen nodig bij de Power Query-engine. Vanwege de hoeveelheid gegevens die door deze twee query's moet worden verwerkt, duurt het proces voor deze voorbeelden langer dan het volledige voorbeeld van het vouwen van query's.

Transformaties kunnen worden gegroepeerd in de volgende categorieën:

Type of Operator Description
Afgelegen Operators die gegevensbronknooppunten zijn. De evaluatie van deze operators vindt plaats buiten Power Query.
streaming- Operators zijn pass-through-operators. Met een eenvoudig filter kunnen de Table.SelectRows resultaten bijvoorbeeld meestal worden gefilterd terwijl ze de operator passeren en hoeven niet alle rijen te verzamelen voordat u de gegevens verplaatst. Table.SelectColumns en Table.ReorderColumns zijn andere voorbeelden van dit soort operators.
volledige scan Operators die alle rijen moeten verzamelen voordat de gegevens naar de volgende operator in de keten kunnen gaan. Als u bijvoorbeeld gegevens wilt sorteren, moet Power Query alle gegevens verzamelen. Andere voorbeelden van volledige scanoperators zijn Table.Group, Table.NestedJoinen Table.Pivot.

Aanbeveling

Hoewel niet elke transformatie hetzelfde is vanuit het oogpunt van prestaties, is het meestal beter om minder transformaties te hebben.

Overwegingen en suggesties

  • Volg de aanbevolen procedures bij het maken van een nieuwe query, zoals aangegeven in best practices in Power Query.
  • Gebruik de indicatoren voor het vouwen van query's om te controleren welke stappen ervoor zorgen dat uw query niet kan worden gevouwen. Rangschik ze indien nodig om het vouwen te vergroten.
  • Gebruik het queryplan om te bepalen welke transformaties plaatsvinden in de Power Query-engine voor een bepaalde stap. Overweeg om uw bestaande query te wijzigen door de stappen opnieuw te rangschikken. Controleer vervolgens het queryplan van de laatste stap van uw query opnieuw en kijk of het queryplan er beter uitziet dan de vorige. Het nieuwe queryplan heeft bijvoorbeeld minder knooppunten dan de vorige en de meeste knooppunten zijn 'Streaming'-knooppunten en niet 'volledige scan'. Voor gegevensbronnen die ondersteuning bieden voor vouwen, vertegenwoordigen alle knooppunten in het queryplan anders dan Value.NativeQuery en gegevensbrontoegangsknooppunten transformaties die niet zijn gevouwen.
  • Indien beschikbaar, kunt u de optie Systeemeigen query weergeven (of Gegevensbronquery weergeven) gebruiken om ervoor te zorgen dat uw query kan worden teruggevouwen naar de gegevensbron. Als deze optie is uitgeschakeld voor uw stap en u een bron gebruikt die deze normaal gesproken inschakelt, hebt u een stap gemaakt die het vouwen van query's stopt. Als u een bron gebruikt die deze optie niet ondersteunt, kunt u vertrouwen op query folding-indicatoren en het queryplan.
  • Gebruik de hulpprogramma's voor querydiagnose om meer inzicht te krijgen in de aanvragen die naar uw gegevensbron worden verzonden wanneer de mogelijkheden voor het vouwen van query's beschikbaar zijn voor de connector.
  • Wanneer u gegevens uit het gebruik van meerdere connectors combineert, probeert Power Query zoveel mogelijk werk naar beide gegevensbronnen te pushen, terwijl wordt voldaan aan de privacyniveaus die zijn gedefinieerd voor elke gegevensbron.
  • Lees het artikel over privacyniveaus om te voorkomen dat uw query's een Data Privacy Firewall-fout veroorzaken.
  • Gebruik andere hulpprogramma's om query folding te controleren vanuit het perspectief van de aanvraag die door de gegevensbron is ontvangen. Op basis van het voorbeeld in dit artikel kunt u de Microsoft SQL Server Profiler gebruiken om de aanvragen te controleren die zijn verzonden door Power Query en ontvangen door microsoft SQL Server.
  • Als u een nieuwe stap toevoegt aan een volledig gevouwen query en de nieuwe stap ook wordt gevouwen, kan Power Query een nieuwe aanvraag verzenden naar de gegevensbron in plaats van een in de cache opgeslagen versie van het vorige resultaat te gebruiken. In de praktijk kan dit proces ertoe leiden dat schijnbaar eenvoudige bewerkingen op een kleine hoeveelheid gegevens langer duren om in de voorbeeldweergave te vernieuwen dan verwacht. Deze langere vernieuwing is het gevolg van het opnieuw opvragen van de gegevensbron in Power Query in plaats van een lokale kopie van de gegevens te bewerken.
  • Last updated on