Granska kolumner i Kopieringsjobb

I den här artikeln beskrivs funktionen för granskningskolumner i Kopieringsjobbet och hur du använder det.

Vad är granskningskolumner?

Granskningskolumner är ytterligare metadatakolumner som kopieringsjobbet automatiskt kan bifoga till varje rad som skrivs till destinationen. Dessa kolumner kommer inte från dina källdata – de genereras av plattformen för att beskriva själva dataförflyttningen.

När du aktiverar granskningskolumner i Kopieringsjobbet kan varje rad i måltabellen utökas med information som:

Granskningskolumn	Vad den fångar
Dataextraheringstid	Tidsstämpeln när raden extraherades från källan av en kopieringsjobbkörning.
Filväg	Källfilens sökväg som raden lästes från (gäller för filbaserade källor).
Arbetsplats-ID	Fabric-arbetsytans ID där kopieringsjobbet ligger.
Kopiera jobb-ID	Den unika identifieraren för kopieringsjobb-objektet.
Kopiera jobbkörnings-ID	Den unika identifieraren för den specifika exekveringen av kopieringsuppdraget.
Kopiera jobbnamn	Namnet på det kopieringsjobb som flyttade raden.
Nedre gräns	Det lägre gränsvärdet för det inkrementella fönstret för den aktuella körningen.
Övre gräns	Det övre gränsvärdet för det inkrementella intervallet för den aktuella körningen.
Skräddarsydd	Ett användardefinierat statiskt värde. Lägg till eventuella ytterligare kontexter som ditt team behöver, till exempel ett källservernamn.

När granskningskolumner är aktiverade kan du svara på följande frågor för valfri rad i måltabellen:

• När extraherades dessa data? Exakt tidsstämpel från när raden lästes från källan.
• Var kom den ifrån? Vilken filsökväg och vilket datalager.
• Vilket jobb flyttade det? Vilket kopieringsjobb från vilken arbetsyta och vilken specifik körning, med namn och ID.
• Vad är det inkrementella projektomfånget? Nedre och övre gränser anger exakt vilken del av data som en körning omfattar.

Ingen anpassad kod eller uttrycksredigering krävs. Lägg till så många granskningskolumner du vill, och varje rad i varje tabell som ditt kopieringsjobb skriver innehåller dessa metadata automatiskt.

Anmärkning

Alla anslutningsappar för kopieringsjobb stöder granskningskolumner utom Office 365 och Databricks Delta Lake.

Varför granskningskolumner spelar roll

Data härstamning på radnivå utan VVS

Data härkomst – att veta var data kom ifrån och hur de kom till sitt aktuella tillstånd – är ett grundläggande krav för alla seriösa dataplattformar. Traditionella metoder för släktspårning används vanligtvis på jobbnivå. Du vet att ett jobb kördes vid en viss tidpunkt och skrev till en specifik tabell. Vad du inte vet är vilka specifika rader som påverkades, när varje rad skrevs eller om en viss rad kom från den här körningen eller en tidigare körning.

Granskningskolumner stänger det här gapet genom att bädda in ursprungsmetadata direkt i data. Varje rad bär sin egen proveniens. Det här är härstamning på radnivå – och det är fundamentalt mer användbart än metadata på jobbnivå för felsökning, revision och datakvalitet.

Efterlevnad och regelrapportering

För organisationer i reglerade branscher – finansiella tjänster, sjukvård, försäkring och myndigheter – är det inte valfritt att kunna spåra data tillbaka till källan. Revisorerna måste besvara frågor som:

• "När uppdaterades den här kundposten senast i vårt analyssystem?"
• "Kan du bevisa att dessa finansiella transaktionsdata hämtades från erp-systemet för produktion?"
• Vilken dataöverföringsuppgift förde patientjournalen till informationslagret, och när?

Utan granskningskolumner kräver svar på dessa frågor korrelera externa övervakningsloggar med måltabellinnehåll – en manuell, felbenägen och tidskrävande process. Med revisionskolumner finns metadata tillsammans med data.

Datakvalitet och felsökning

När datakvalitetsproblem visas – duplicerade rader, inaktuella data eller saknade poster – är den första frågan alltid: när kom den här raden och var kom den ifrån? Revisionskolumner svarar på det direkt.

Utan granskningskolumner skulle du behöva göra korsreferenser med loggar för övervakning av arbetsytor, matcha tidsstämplar mot radantal och hoppas att korrelationen håller. Med granskningskolumner finns metadata precis där i tabellen.

Nedströmsanalys och färskhetsspårning

Granskningskolumner aktiverar en klass med nedströmsanalyser som annars skulle kräva anpassad teknik:

• Spårning av källfiler: Använd granskningskolumnen för filsökväg för att spåra alla rader tillbaka till den exakta källfilen.
• Inmatnings-SLA-övervakning: Jämför dataextraheringstiden med förväntade scheman för att identifiera fördröjningar i inmatningen.
• Inkrementell fönstergranskning: Använd den nedre och övre gränsen för att verifiera att varje inkrementell del bearbetades och att ingenting missades.

Hur man använder granskningskolumner

Att aktivera granskningskolumner i ett kopieringsjobb är enkelt och tar bara några få steg.

Steg 1: Skapa eller öppna ett kopieringsjobb

I din Fabric-arbetsyta börjar du med att skapa ett nytt kopieringsjobb eller öppna ett befintligt. Välj dina källtabeller som vanligt.

Steg 2: Lägg till granskningskolumner

Lägg till granskningskolumner när du har valt de källtabeller eller mappar som ska kopieras i installationsprogrammet Kopiera jobb. Hur du konfigurerar granskningskolumner beror på om källan är tabellbaserad eller filbaserad:

• Tabellbaserade källor: Granskningskolumner konfigureras per tabell. Varje tabell har en egen konfiguration, så varje tabell har sina egna granskningskolumner. Välj varje tabell individuellt i tabelllistan och definiera sedan granskningskolumnerna för den tabellen. Upprepa det här steget för varje tabell som du vill utöka med granskningskolumner.

• Filbaserade källor: Granskningskolumner konfigureras en gång och delas mellan alla filer. Du behöver bara definiera granskningskolumner en gång, och samma konfiguration gäller för varje fil som kopieras av kopieringsjobbet.

  

Steg 3: Kör kopieringsjobbet

Kör kopieringsjobbet. Varje rad som skrivs till måltabellen innehåller värden för granskningskolumner, till exempel extraheringstid, arbetsyte-ID, Kopiera jobbnamn, körnings-ID och eventuella anpassade metadata.

Steg 4: Sök i dina data och skapa rapporter

Öppna måltabellen och hämta uppgifter från granskningskolumnerna tillsammans med dina företagsdata för att få en fullständig översikt. Granskningskolumner är standardtabellfält, så de fungerar sömlöst med Power BI, KQL-frågor, notebook-filer eller andra verktyg.

Relaterat innehåll

• Vad är kopieringsjobb?
• Hur man skapar ett kopieringsjobb
• Övervaka ett kopieringsjobb