Mi a Microsoft Fabric adatmérnöki szolgáltatása?

A Microsoft Fabric adatfejlesztése lehetővé teszi, hogy a felhasználók olyan infrastruktúrákat és rendszereket tervezhessenek, építsenek ki és tartsanak fenn, amelyek lehetővé teszik a szervezetek számára a nagy mennyiségű adat gyűjtését, tárolását, feldolgozását és elemzését.

A Microsoft Fabric különböző adatmérnöki képességeket biztosít, hogy az adatok könnyen hozzáférhetők, rendezettek és kiváló minőségűek legyenek. Az adatmérnöki kezdőlapon a következőt teheti:

• Adatok létrehozása és kezelése egy lakehouse használatával

• Folyamatok tervezése az adatok lakehouse-ba másolásához

• Spark-feladatdefiníciók használata köteg-/streamelési feladat Spark-fürtbe való elküldéséhez

• Kód írása adatbetöltéshez, előkészítéshez és átalakításhoz jegyzetfüzetek használatával

  

Lakehouse

A Lakehouse-k olyan adatarchitektúrák, amelyek lehetővé teszik a szervezetek számára a strukturált és strukturálatlan adatok egyetlen helyen való tárolását és kezelését, különböző eszközök és keretrendszerek használatával az adatok feldolgozásához és elemzéséhez. Ezek az eszközök és keretrendszerek sql-alapú lekérdezéseket és elemzéseket, valamint gépi tanulási és egyéb fejlett elemzési technikákat is tartalmazhatnak.

Apache Spark-feladatdefiníció

A Spark-feladatdefiníciók olyan utasítások, amelyek meghatározzák, hogyan hajthat végre feladatokat Egy Spark-fürtön. Olyan információkat tartalmaz, mint a bemeneti és kimeneti adatforrások, az átalakítások és a Spark-alkalmazás konfigurációs beállításai. A Spark-feladat definíciója lehetővé teszi, hogy kötegelt/streamelési feladatot küldjön a Spark-fürtnek, és különböző átalakítási logikát alkalmazzon a lakehouse-on tárolt adatokra, valamint sok más dolgot is.

Jegyzetfüzet

A jegyzetfüzetek interaktív számítástechnikai környezetek, amelyekkel a felhasználók élő kódot, egyenleteket, vizualizációkat és elbeszélő szöveget tartalmazó dokumentumokat hozhatnak létre és oszthatnak meg. Lehetővé teszik a felhasználók számára, hogy kódot írjanak és hajtsanak végre különböző programozási nyelveken, beleértve a Pythont, az R-t és a Scalát. Jegyzetfüzeteket használhat adatbetöltéshez, előkészítéshez, elemzéshez és más, adatokkal kapcsolatos feladatokhoz.

Adat prognózis

Az adatfolyamok olyan lépések sorozatai, amelyek adatokat gyűjthetnek, dolgozhatnak fel és alakíthatnak át nyers formájukból olyan formátumba, amelyet elemzéshez és döntéshozatalhoz használhat. Ezek az adatelemzés kritikus összetevői, mivel lehetővé teszik az adatok megbízható, méretezhető és hatékony áthelyezését a forrásból a célhelyre.

A Microsoft Fabricben a adatmérnök ingyenesen használhatja, amikor regisztrál a Fabric próbaverziójára. Microsoft Fabric-kapacitást vagy fenntartott hálókapacitást is vásárolhat

Kapcsolódó tartalom

Ismerkedés a adatmérnök felülettel:

• A lakehouse-okkal kapcsolatos további információkért lásd : Mi az a tóház a Microsoft Fabricben?
• A lakehouse használatának megkezdéséhez lásd : Tóház létrehozása a Microsoft Fabricben.
• Az Apache Spark-feladatdefiníciókkal kapcsolatos további információkért lásd : Mi az Az Apache Spark-feladatdefiníció?
• Az Apache Spark-feladatdefiníciók használatának megkezdéséhez tekintse meg az Apache Spark-feladatdefiníciók létrehozását a Fabricben.
• A jegyzetfüzetekről további információt a Jegyzetfüzet létrehozása és végrehajtása című témakörben talál.
• A folyamatmásolási tevékenységgel kapcsolatos első lépésekért lásd : Adatok másolása másolási tevékenységgel.