Mi az az Azure Synapse Analytics?
A Azure Synapse egy nagyvállalati elemzési szolgáltatás, amely felgyorsítja az adattárházak és big data rendszerek elemzési idejét. Azure Synapse egyesíti a nagyvállalati adattárházakban használt SQL technológiák, a big data-hoz használt Spark-technológiák, a napló- és idősorozat-elemzések Data Explorer, az adatintegrációs folyamatok és az ETL/ELT, valamint más Azure-szolgáltatásokkal, például a Power BI, a CosmosDB-vel való mély integrációt , és az AzureML.
Iparágvezető SQL
A Synapse SQL egy elosztott lekérdezési rendszer a T-SQL számára, amely lehetővé teszi az adattárházak és adatvirtualizálási forgatókönyvek megvalósítását, és kibővíti a T-SQL a streamelési és gépi tanulási forgatókönyvek kezelésére.
- A Synapse SQL kiszolgáló nélküli és dedikált erőforrásmodelleket is kínál. A kiszámítható teljesítmény és a költséghatékonyság érdekében hozzon létre dedikált SQL-készleteket az SQL-táblákban tárolt adatok hatékony feldolgozásához. A nem tervezett vagy kiugró számítási feladatokhoz használja a mindig elérhető, kiszolgáló nélküli SQL végpontot.
- Beépített streamelési képességek használata a felhőbeli adatforrásokból származó adatok SQL táblákba való levezetéséhez
- AI integrálása SQL gépi tanulási modellek használatával adatok pontozásához a T-SQL PREDICT függvény használatával
Iparági szabvány szerinti Apache Spark
Az Apache Spark for Azure Synapse mélyen és zökkenőmentesen integrálja az Apache Sparkot– ez a legnépszerűbb nyílt forráskód big data-motor, amelyet adat-előkészítéshez, adatfejlesztéshez, ETL-hez és gépi tanuláshoz használnak.
- ML Modellek SparkML-algoritmusokkal és AzureML-integrációval az Apache Spark 3.1-hez a Linux Foundation Delta Lake beépített támogatásával.
- Egyszerűsített erőforrásmodell, amely nem kell aggódnia a fürtök kezelésével kapcsolatban.
- Gyors Spark-indítás és agresszív automatikus skálázás.
- A Sparkhoz készült .NET beépített támogatása lehetővé teszi a C# szakértelmének és a meglévő .NET-kódnak a Spark-alkalmazáson belüli újrafelhasználását.
A Data Lake használata
Azure Synapse megszünteti a SQL és a Spark együttes használata közötti hagyományos technológiai akadályokat. Igényei és szakértelme alapján zökkenőmentesen kombinálhatja és egyeztetheti azokat.
- A data lake-beli fájlokon definiált táblákat a Spark vagy a Hive zökkenőmentesen használja fel.
- SQL és a Spark közvetlenül feltárhatja és elemezheti a Data Lake-ben tárolt Parquet-, CSV-, TSV- és JSON-fájlokat.
- Gyors, méretezhető adatbetöltés SQL és Spark-adatbázisok között
Beépített adatintegráció
Azure Synapse ugyanazt az adatintegrációs motort és élményt tartalmazza, mint Azure Data Factory, így gazdag, nagy léptékű ETL-folyamatokat hozhat létre anélkül, hogy elhagyná Azure Synapse Analyticset.
- Adatok betöltése több mint 90 adatforrásból
- ETL Code-Free adatfolyam-tevékenységekkel
- Jegyzetfüzetek, Spark-feladatok, tárolt eljárások, SQL szkriptek és egyebek vezénylése
Data Explorer (előzetes verzió)
Azure Synapse Data Explorer interaktív lekérdezési felületet biztosít az ügyfeleknek a napló- és telemetriaadatokból származó megállapítások feloldásához. A meglévő SQL és az Apache Spark Analytics futtatókörnyezeti motorjai kiegészítése érdekében Data Explorer elemzési futtatókörnyezet hatékony naplóelemzésre van optimalizálva hatékony indexelési technológiával, amely automatikusan indexeli a telemetriai adatokban gyakran előforduló szabad szöveges és részben strukturált adatokat.
A Data Explorer adatplatformként használható közel valós idejű naplóelemzési és IoT-elemzési megoldások létrehozásához a következőkhöz:
- A naplók és események adatainak összesítése és korrelálása helyszíni, felhőbeli, külső adatforrásokban.
- Felgyorsíthatja az AI-műveletek folyamatát (mintafelismerés, anomáliadetektálás, előrejelzés stb.)
- Cserélje le az infrastruktúra-alapú naplókeresési megoldásokat a költségek megtakarítása és a termelékenység növelése érdekében.
- IoT Analytics-megoldást hozhat létre az IoT-adatokhoz.
- Elemzési SaaS-megoldásokat hozhat létre, hogy szolgáltatásokat nyújtson belső és külső ügyfeleinek.
Egységesített felület
Synapse Studio egyetlen módot kínál a vállalatok számára megoldások létrehozására, karbantartására és védelmére egyetlen felhasználói felületen
- Fő feladatok végrehajtása: betöltés, felfedezés, előkészítés, vezénylés, vizualizáció
- Erőforrások, használat és felhasználók monitorozása SQL, Spark és Data Explorer
- Szerepköralapú hozzáférés-vezérlés használata az elemzési erőforrásokhoz való hozzáférés egyszerűsítéséhez
- SQL, Spark vagy KQL kód írása és integrálása vállalati CI/CD-folyamatokkal
Együttműködés a Synapse-közösséggel
- Microsoft Q& Válasz: Technikai kérdések feltevése.
- Stack Overflow: Fejlesztési kérdések feltevése.