Adatfolyamok leképezését ismertető oktatóvideók

Vonatkozik: Azure Data Factory Azure Synapse Analytics

Tipp

Data Factory a Microsoft Fabric a Azure Data Factory következő generációja, egyszerűbb architektúrával, beépített AI-vel és új funkciókkal. Ha még nem ismerkedik az adatintegrációval, kezdje a Fabric Data Factoryvel. A meglévő ADF-számítási feladatok frissíthetők Fabric használatával, hogy elérjék az adatkutatás, a valós idejű elemzés és a jelentéskészítés új képességeit.

Az alábbiakban az Azure Data Factory csapat által készített, az adatfolyam-leképezéssel kapcsolatos oktatóanyagok listáját találja.

Mivel a termék folyamatosan frissül, egyes funkciók hozzáadott vagy eltérő funkciókkal rendelkeznek a jelenlegi Azure Data Factory felhasználói felületén.

Első lépések

A lekérdezés a Azure Data Factory

Leképezési adatfolyamok hibakeresése és fejlesztése

Az adatfolyamok leképezésének hibakeresése és tesztelése.

Adatfeltárás

Gyorsműveletek az adatok előzetes verziójában

A leképezési adatfolyam teljesítményének monitorozása és kezelése

Teljesítményteszt időzítése

Adatfolyamok munkafolyamatainak hibakeresése

Frissített figyelési nézet

Átalakítási áttekintések

Összesítő átalakítás

Sorátalakítás módosítása

Származtatott oszlop átalakítása

Csatlakozás átalakítás

Önillesztési minta

Keresési átalakítás

Keresési átalakítási frissítések és tippek

Kimutatásátalakítás

Kimutatásátalakítás: eltolódott oszlopok leképezése

Átalakítás kiválasztása

Átalakítás kiválasztása: Szabályalapú leképezés

Átalakítás kiválasztása: Nagyméretű adathalmazok

Helyettes kulcs átalakítása

Uniós átalakítás

Unpivot transzformáció

Ablaktranszformáció

Szűrő transzformáció

Feltételes felosztás átalakítása

Létezik átalakítás

Dinamikus illesztések és dinamikus keresések

Simított átalakítás

Flowletek

Sztringes átalakítás

Külső hívás átalakítása

Hierarchikus adatok átalakítása

Rangsorolás átalakítása

Cache-elt keresés

Sorkörnyezet ablakátalakításon keresztül

Átalakítás elemzése

Összetett adattípusok átalakítása

Kimenet a következő tevékenységhez

Sztringes átalakítás

Külső hívás átalakítása

Átalakítási igény érvényesítése

Naplóérvényesítési hibasorok

Fuzzy illesztés

Forrás és fogadó

JSON-k olvasása és írása

Parquet és határolt szövegfájlok

CosmosDB-összekötő

Adattípusok következtetése tagolt szövegfájlokban

Particionált fájlok olvasása és írása

Több SQL-tábla átalakítása és létrehozása

Fájlok particionálása a data lake-ben

Adattárház betöltési mintája

A Data Lake-fájl kimeneti beállításai

Az adatfolyamok leképezésének optimalizálása

Adatleszármazás

Fájlok iterálása paraméterekkel

Kezdő időpontok csökkentése

Az SQL DB teljesítménye

Naplózás és auditálás

Adatfolyamfürt méretének dinamikus optimalizálása futtatókörnyezetben

Adatfolyam indítási idejének optimalizálása

Azure integrációs futtatókörnyezetek az adatfolyamokhoz

Gyors fürtindítási idő az Azure IR-rel

Adatfolyam-forgatókönyvek leképezése

Homályos keresések

Előkészítő adatminta

Címminta tisztítása

Deduplikáció

Fájlok egyesítése

Lassan változó 1. típusú dimenzió: felülírás

Lassan változó 2. típusú dimenziók: előzmények

Ténytábla betöltése

Alakítsa át a helyszíni SQL Servert delta adatbetöltési mintával

Paraméterezése

Különböző sorok és sorok száma

Csonkítási hibák kezelése

Intelligens adat-útválasztás

Adatmaszkolás bizalmas adatokhoz

Logikai modellek és fizikai modellek

Forrásadatok változásainak észlelése

2. típusú általános lassan változó dimenzió

A célsorok törlése, ha nem szerepelnek a forrásban

Incrementális adatbetöltés az Azure Data Factory és az Azure SQL-adatbázis használatával

Avro-adatok átalakítása az Event Hubsból elemzés és összesimítás használatával

Adatfolyam-kifejezések

Dátum-/időkifejezések

Tömbök felosztása és esetutasítás

Szórakoztató a sztring interpolációjával és paramétereivel

Data Flow szkriptbevezetés: Másolás, beillesztés, kódrészletek

Adatminőségi kifejezések

Összesítő függvény összegyűjtése

Dinamikus kifejezések paraméterekként

Felhasználó által definiált függvények

Metaadatok

Metaadatok érvényesítési szabályai