Share via

Wat is er nieuw in Azure Synapse Analytics Archive

  • Artikel

In dit artikel worden de updates van de vorige maand voor Azure Synapse Analytics beschreven. Bekijk de nieuwste updates van Azure Synapse Analytics voor de meest recente release van de huidige maand. Elke update bevat koppelingen naar de Azure Synapse Analytics-blog en een artikel met meer informatie.

Algemeen beschikbare functies

De volgende tabel bevat een eerdere geschiedenis van de functies van Azure Synapse Analytics die zijn overgestapt van preview naar algemene beschikbaarheid (GA).

Month Functie Meer informatie
Juli 2022 Apache Spark™ 3.2 voor Synapse Analytics Apache Spark™ 3.2 voor Synapse Analytics is nu algemeen beschikbaar. Bekijk de officiële releaseopmerkingen en migratierichtlijnen tussen Spark 3.1 en 3.2 om mogelijke wijzigingen in uw toepassingen te beoordelen. Lees ondersteuning voor Apache Spark-versies en Azure Synapse Runtime voor Apache Spark 3.2 voor meer informatie. Hoogtepunten van wat er beter is in Spark 3.2 in de update van juli 2022 van Azure Synapse Analytics.
Juli 2022 Functie Apache Spark in Azure Synapse Intelligent Cache Intelligent Cache voor Spark slaat elke leesbewerking automatisch op in de toegewezen cacheopslagruimte, detecteert onderliggende bestandswijzigingen en vernieuwt de bestanden om de meest recente gegevens te leveren. Zie voor meer informatie hoe u de cache voor uw Apache Spark-pool inschakelt/uitschakelt.
Juni 2022 Hulpmiddel Kaartgegevens Het hulpprogramma Kaartgegevens is een begeleid proces waarmee u ETL-toewijzingen en toewijzingsgegevensstromen van uw brongegevens naar Synapse kunt maken zonder code te schrijven. Lees Kaartgegevens in Azure Synapse Analytics voor meer informatie over het hulpprogramma Kaartgegevens.
Juni 2022 Door de gebruiker gedefinieerde functies Door de gebruiker gedefinieerde functies (UDF's) zijn nu algemeen beschikbaar. Lees door de gebruiker gedefinieerde functies in toewijzingsgegevensstromen voor meer informatie.
Mei 2022 Azure Synapse Data Explorer-connector voor Power Automate, Logic Apps en Power Apps Met de Azure Data Explorer-connector voor Power Automate kunt u stromen organiseren en plannen, meldingen en waarschuwingen verzenden als onderdeel van een geplande of geactiveerde taak. Lees de Azure Data Explorer-connector voor Microsoft Power Automate en gebruiksvoorbeelden voor Azure Data Explorer-connector voor Power Automate voor meer informatie.
April 2022 Herstel tussen abonnementen voor Azure Synapse SQL Met de PowerShell-module Az.Sql 3.8-update kan de cmdlet Restore-AzSqlDatabase worden gebruikt voor het herstellen van toegewezen SQL-pools voor meerdere abonnementen. Zie Blog: Een toegewezen SQL-pool (voorheen SQL DW) herstellen naar een ander abonnement voor meer informatie. Deze functie is nu algemeen beschikbaar voor toegewezen SQL-pools (voorheen SQL DW) en toegewezen SQL-pools in een Synapse-werkruimte. Wat is het verschil?
April 2022 Databaseontwerper Met de databaseontwerper kunnen gebruikers visueel databases maken in Synapse Studio zonder dat ze één regel code hoeven te schrijven. Zie Announcing General Availability of Database Designer (Algemene beschikbaarheid van Database Designer) voor meer informatie. Lees meer over lake-databases en leer hoe u een bestaande Lake-database wijzigt met behulp van de databaseontwerper.
April 2022 Databasesjablonen Er zijn nieuwe branchespecifieke databasesjablonen geïntroduceerd in het blog Algemene beschikbaarheid van Synapse-databasesjablonen. Meer informatie over databasesjablonen en de verbeterde verkenningservaring.
April 2022 Synapse Monitoring Operator RBAC-rol Met de rol Synapse Monitoring Operator RBAC (op rollen gebaseerd toegangsbeheer) kan een gebruiker persona de uitvoering van Synapse Pipelines en Spark-toepassingen bewaken zonder dat deze toepassingen kunnen worden uitgevoerd of geannuleerd. Raadpleeg de Synapse RBAC-rollen voor meer informatie.
Maart 2022 Stroomlets Met Flowlets kunt u delen van nieuwe gegevensstroomlogica ontwerpen of delen van een bestaande gegevensstroom extraheren en opslaan als afzonderlijk artefact in uw Synapse-werkruimte. Vervolgens kunt u deze stroomlets opnieuw gebruiken in andere gegevensstromen. Raadpleeg voor meer informatie het blogbericht over de aankondiging van Flowlets GA en lees Flowlets in de toewijzingsgegevensstroom.
Maart 2022 Feedconnectors wijzigen Gewijzigde gegevensopname (CDC) feedgegevensstroomtransformaties voor Azure Cosmos DB, Azure Blob Storage, ADLS Gen1, ADLS Gen2 en Common Data Model (CDM) zijn nu algemeen beschikbaar. Door gewoon een selectievakje in te schakelen, kunt u ADF laten weten dat u automatisch een controlepunt wilt beheren en alleen de meest recente rijen leest die zijn bijgewerkt of ingevoegd sinds de laatste pijplijnuitvoering. Raadpleeg voor meer informatie het blogbericht Over de algemene beschikbaarheid van wijzigingenfeedconnectors en lees gegevens kopiëren en transformeren in Azure Data Lake Storage Gen2 met behulp van Azure Data Factory of Azure Synapse Analytics.
Maart 2022 Versleuteling op kolomniveau voor toegewezen SQL-pools Versleuteling op kolomniveau is nu algemeen beschikbaar voor gebruik op nieuwe en bestaande logische Azure SQL-servers met toegewezen SQL-pools van Azure Synapse en toegewezen SQL-pools in Azure Synapse-werkruimten. Ondersteuning voor SQL Server Data Tools (SSDT) voor versleuteling op kolomniveau voor de toegewezen SQL-pools is beschikbaar vanaf de build 17.2 Preview 2 van Visual Studio 2022.
Maart 2022 Synapse Spark Common Data Model-connector (CDM) Met de CDM-indeling lezer/schrijver kan een Spark-programma CDM-entiteiten lezen en schrijven in een CDM-map via Spark-dataframes. Zie voor meer informatie hoe de CDM-connector het lezen, schrijven van gegevens, voorbeelden en bekende problemen ondersteunt.
November 2021 VOORSPELLEN De syntaxis van T-SQL PREDICT is nu algemeen beschikbaar voor toegewezen SQL-pools. Ga aan de slag met de wizard voor scoren van machine learning-modellen voor toegewezen SQL-pools.
Oktober 2021 Synapse RBAC-rollen Synapse RBAC-rollen (op rollen gebaseerd toegangsbeheer) zijn nu algemeen beschikbaar. Meer informatie over Synapse RBAC-rollen en op rollen gebaseerd toegangsbeheer van Azure Synapse (RBAC) met behulp van PowerShell.

Community

Deze sectie is een archief van de verkoopkansen van de Azure Synapse Analytics-community en het Azure Synapse Influencer-programma van Microsoft.

Month Functie Meer informatie
Mei 2022 Azure Synapse Influencer-programma Meld u aan voor ons gratis Azure Synapse Influencer-programma en maak verbinding met een community van Synapse-gebruikers die zijn gewijd aan het helpen van anderen om meer te bereiken met cloudanalyses. Registreer u nu voor onze volgende Synapse Influencer Ask the Experts-sessie. Het is gratis om deel te nemen en iedereen is welkom om deel te nemen aan de discussie over Synapse-gerelateerde onderwerpen. U kunt in het verleden opgenomen ask the experts-gebeurtenissen bekijken op het YouTube-kanaal van Azure Synapse.
Maart 2022 Videoserie over Azure Synapse Analytics en Microsoft MVP YouTube Een gezamenlijke activiteit met het Azure Synapse-productteam en de Microsoft MVP-community, een nieuwe YouTube MVP Video Series over de Azure Synapse-functies is gestart. Bekijk meer op het YouTube-kanaal van Azure Synapse Analytics.

Apache Spark voor Azure Synapse Analytics

Deze sectie is een archief met functies en mogelijkheden van Apache Spark voor Azure Synapse Analytics.

Month Functie Meer informatie
Mei 2022 Azure Synapse toegewezen SQL-poolconnector voor Apache Spark is nu beschikbaar in Python Voorheen was de Toegewezen SQL-poolconnector van Azure Synapse voor Apache Spark alleen beschikbaar met behulp van Scala. Nu kan de toegewezen SQL-poolconnector voor Apache Spark worden gebruikt met Python in Spark 3.
Mei 2022 Azure Synapse Apache Spark-configuratie beheren Met de nieuwe functie voor Apache Spark-configuraties kunt u een zelfstandig Spark-configuratieartefact maken met automatische suggesties en ingebouwde validatieregels. Met het Spark-configuratieartefact kunt u uw Spark-configuratie delen binnen en tussen Azure Synapse-werkruimten. U kunt uw Spark-configuratie ook eenvoudig koppelen aan een Spark-pool, een notebook en een Spark-taakdefinitie voor hergebruik en de noodzaak om de Spark-configuratie op meerdere plaatsen te kopiëren minimaliseren.
April 2022 Apache Spark 3.2 voor Synapse Analytics Apache Spark 3.2 voor Synapse Analytics met preview-beschikbaarheid. Bekijk de officiële releaseopmerkingen voor Spark 3.2 en migratierichtlijnen tussen Spark 3.1 en 3.2 om mogelijke wijzigingen in uw toepassingen te beoordelen. Lees ondersteuning voor Apache Spark-versies en Azure Synapse Runtime voor Apache Spark 3.2 voor meer informatie.
April 2022 Parameterisatie voor Spark-taakdefinitie U kunt nu dynamisch parameters toewijzen op basis van variabelen, metagegevens of pijplijnspecifieke parameters opgeven voor de Spark-taakdefinitieactiviteit. Lees gegevens transformeren met behulp van de Apache Spark-taakdefinitie voor meer informatie.
April 2022 Momentopname van Apache Spark-notebook U kunt toegang krijgen tot een momentopname van het notebook wanneer er een fout is opgetreden bij het uitvoeren van een pijplijnnotitieblok of wanneer er een langlopende Notebook-taak is. Lees gegevens transformeren door een Synapse-notebook en inleiding tot Microsoft Spark-hulpprogramma's uit te voeren voor meer informatie.
Maart 2022 Synapse Spark Common Data Model-connector (CDM) Met de CDM-indeling lezer/schrijver kan een Spark-programma CDM-entiteiten lezen en schrijven in een CDM-map via Spark-dataframes. Zie voor meer informatie hoe de CDM-connector het lezen, schrijven van gegevens, voorbeelden en bekende problemen ondersteunt.
Maart 2022 Prestatieoptimalisatie voor toegewezen SQL-poolconnector van Synapse Spark Nieuwe verbeteringen in de Toegewezen SQL-poolconnector van Azure Synapse voor Apache Spark verminderen de verplaatsing van gegevens en maken gebruik van COPY INTOgegevens. Prestatietests hebben ten minste ~5x verbetering aangegeven ten opzichte van de vorige versie. Er is geen actie van de gebruiker vereist om gebruik te maken van deze verbeteringen. Zie Blog: Synapse Spark Dedicated SQL Pool (DW) Connector: Prestatieverbeteringen voor meer informatie.
Maart 2022 Ondersteuning voor alle opties voor Spark Dataframe SaveMode De toegewezen SQL-poolconnector van Azure Synapse voor Apache Spark ondersteunt nu alle vier de opties voor Spark Dataframe SaveMode: Append, Overwrite, ErrorIfExists, Ignore. Lees de officiële Apache Spark-documentatie voor meer informatie over Spark SaveMode.
Maart 2022 Functie Voor Apache Spark in Azure Synapse Analytics Intelligent Cache Intelligent Cache voor Spark slaat elke leesbewerking automatisch op in de toegewezen cacheopslagruimte, detecteert onderliggende bestandswijzigingen en vernieuwt de bestanden om de meest recente gegevens te leveren. Zie voor meer informatie over deze preview-functie hoe u de cache voor uw Apache Spark-pool inschakelt/uitschakelt of het blogbericht bekijkt.

Gegevensintegratie

Deze sectie is een archief met functies en mogelijkheden van azure Synapse Analytics-gegevensintegratie. Meer informatie over het laden van gegevens in Azure Synapse Analytics met behulp van Azure Data Factory (ADF) of een Synapse-pijplijn.

Month Functie Meer informatie
Juni 2022 Preview van SAP CDC-connector Een nieuwe gegevensconnector voor SAP Change Data Capture (CDC) is nu beschikbaar in preview. Zie Aankondiging van openbare preview van de SAP CDC-oplossing in Azure Data Factory en Azure Synapse Analytics en SAP CDC-oplossing in Azure Data Factory voor meer informatie.
Juni 2022 Fuzzy join-optie in Join Transformation Gebruik fuzzy overeenkomsten met een schuifregelaar voor de drempelwaarde voor overeenkomsten is toegevoegd aan de jointransformatie in toewijzings-Gegevensstroom s.
Juni 2022 Algemene beschikbaarheid van het hulpprogramma Kaartgegevens We zijn verheugd om aan te kondigen dat het hulpprogramma Kaartgegevens nu algemeen beschikbaar is. Het hulpprogramma Kaartgegevens is een begeleid proces waarmee u ETL-toewijzingen en toewijzingsgegevensstromen van uw brongegevens naar Synapse kunt maken zonder code te schrijven.
Juni 2022 Pijplijn opnieuw uitvoeren met nieuwe parameters U kunt nu pijplijnparameters wijzigen bij het opnieuw uitvoeren van een pijplijn vanaf de pagina Bewaking zonder dat u hoeft terug te keren naar de pijplijneditor. Lees pijplijnen en activiteiten opnieuw uitvoeren voor meer informatie.
Juni 2022 Algemene beschikbaarheid van door de gebruiker gedefinieerde functies Door de gebruiker gedefinieerde functies (UDF's) in toewijzingsgegevensstromen zijn nu algemeen beschikbaar.
Mei 2022 Pijplijnbewaking exporteren als CSV De mogelijkheid om pijplijnbewaking te exporteren naar CSV en andere bewakingsverbeteringen zijn geïntroduceerd in ADF.
Mei 2022 Automatisch incrementele brongegevens laden vanuit PostgreSQL en MySQL Het automatisch laden van incrementele brongegevens van PostgreSQL en MySQL naar Synapse SQL en Azure Database is nu systeemeigen beschikbaar in ADF.
Mei 2022 Verwerking van transformatiefouten bevestigen Foutafhandeling is nu toegevoegd aan sinks na een assertietransformatie in de toewijzingsgegevensstroom. U kunt nu kiezen of de mislukte rijen moeten worden uitgevoerd naar de geselecteerde sink of naar een afzonderlijk bestand.
Mei 2022 Projectie van toewijzingsgegevensstromen bewerken In toewijzingsgegevensstromen kunt u nu kolomnamen en kolomtypen voor bronprojectie bijwerken.
April 2022 Dataverse-connector voor Synapse-Gegevensstroom s Dataverse is nu een bron- en sinkconnector voor Synapse-Gegevensstroom s. U kunt gegevens kopiëren en transformeren vanuit Dynamics 365 (Microsoft Dataverse) of Dynamics CRM met behulp van Azure Data Factory of Azure Synapse Analytics.
April 2022 Configureerbare time-out voor reactie van Synapse Pipelines-webactiviteit Met de time-outeigenschap httpRequestTimeoutvoor antwoorden kunt u een time-out definiëren voor de HTTP-aanvraag tot 10 minuten. Webactiviteiten werken uitzonderlijk goed met API's die het asynchrone aanvraag-antwoordpatroon volgen, een voorgestelde benadering voor het bouwen van schaalbare web-API's/services.
Maart 2022 sFTP-connector voor Synapse-gegevensstromen Een systeemeigen sftp-connector in Synapse-gegevensstromen wordt ondersteund voor het lezen en schrijven van gegevens uit sFTP met behulp van de interface voor gegevensstromen met weinig code in Synapse. Zie Gegevens kopiëren en transformeren in SFTP-server met behulp van Azure Data Factory of Azure Synapse Analytics voor meer informatie.
Maart 2022 Verbeteringen in gegevensstromen in Data Preview Bekijk de functies die zijn toegevoegd aan de gegevensvoorbeeld en foutopsporingsverbeteringen in toewijzings-Gegevensstroom s.
Maart 2022 Pijplijnscriptactiviteit U kunt nu gegevens transformeren met behulp van de scriptactiviteit om SQL-opdrachten aan te roepen om zowel DDL als DML uit te voeren.
December 2021 Aangepaste partities voor Synapse-koppeling voor Azure Cosmos DB Verbeter de uitvoeringstijden van query's voor uw Spark-query's door aangepaste partities te maken op basis van velden die vaak worden gebruikt in uw query's. Zie Aangepaste partitionering in Azure Synapse Link voor Azure Cosmos DB (preview) voor meer informatie.

Databasesjablonen en databaseontwerper

Deze sectie is een archief met functies en mogelijkheden van databasesjablonen en de databaseontwerper.

Month Functie Meer informatie
April 2022 Databaseontwerper Met de databaseontwerper kunnen gebruikers visueel databases maken in Synapse Studio zonder dat ze één regel code hoeven te schrijven. Zie Announcing General Availability of Database Designer (Algemene beschikbaarheid van Database Designer) voor meer informatie. Lees meer over lake-databases en leer hoe u een bestaande Lake-database wijzigt met behulp van de databaseontwerper.
April 2022 Databasesjablonen Er zijn nieuwe branchespecifieke databasesjablonen geïntroduceerd in het blog Algemene beschikbaarheid van Synapse-databasesjablonen. Meer informatie over databasesjablonen en de verbeterde verkenningservaring.
April 2022 Lake-database klonen In Synapse Studio kunt u nu een database klonen met behulp van het actiemenu dat beschikbaar is in de Lake-database. Lees voor meer informatie: Een Lake-database klonen.
April 2022 Jokertekens gebruiken om aangepaste maphiërarchieën op te geven Lake-databases bevinden zich boven op gegevens die zich in het lake bevinden en deze gegevens kunnen zich bevinden in geneste mappen die niet in schone partitiepatronen passen. U kunt nu jokertekens gebruiken om aangepaste maphiërarchieën op te geven. Lees instructies voor meer informatie: Een datalake wijzigen.
Januari 2022 Nieuwe databasesjablonen Meer informatie over nieuwe industriespecifieke sjablonen voor Automotive, Genomics, Manufacturing en Pharmaceuticals en aan de slag met databasesjablonen in de Synapse Studio-galerie.

Ontwikkelaarservaring

Deze sectie is een archief van de kwaliteit van de levensduur en functieverbeteringen voor ontwikkelaars in Azure Synapse Analytics.

Month Functie Meer informatie
Mei 2022 Azure Synapse Analyzer-rapport bijgewerkt Meer informatie over de nieuwe functies in versie 2.0 van het Synapse Analyzer-rapport.
April 2022 Azure Synapse Analyzer-rapport Met het Azure Synapse Analyzer-rapport kunt u veelvoorkomende problemen identificeren die mogelijk aanwezig zijn in uw database die kunnen leiden tot prestatieproblemen.
April 2022 Niet-gepubliceerde notitieblokken verwijzen Wanneer u nu %run-notebooks gebruikt, kunt u niet-gepubliceerde notitieblokken inschakelen, zodat u kunt verwijzen naar niet-gepubliceerde notitieblokken. Wanneer deze optie is ingeschakeld, haalt de uitvoering van het notebook de huidige inhoud op in de webcache van het notitieblok, wat betekent dat er direct naar de wijzigingen in uw notebook-editor kan worden verwezen door andere notitieblokken zonder te hoeven worden gepubliceerd (livemodus) of doorgevoerd (Git-modus).
Maart 2022 Codecellen met uitzondering om standaarduitvoer weer te geven Nu worden in Synapse-notebooks zowel standaarduitvoer- als uitzonderingsberichten weergegeven wanneer een code-instructie mislukt voor Python- en Scala-talen. Zie Synapse-notebooks voor voorbeelden: Codecellen met uitzondering om standaarduitvoer weer te geven.
Maart 2022 Gedeeltelijke uitvoer is beschikbaar voor het uitvoeren van notebookcodecellen In Synapse-notebooks ziet u nu alles wat u schrijft (bijvoorbeeld met println opdrachten) terwijl de cel wordt uitgevoerd, in plaats van te wachten totdat deze eindigt. Zie Synapse-notebooks voor voorbeelden : Gedeeltelijke uitvoer is beschikbaar voor het uitvoeren van notebookcodecellen .
Maart 2022 Uw Spark-sessieconfiguratie dynamisch beheren met pijplijnparameters In Synapse-notebooks kunt u pijplijnparameters gebruiken om de sessie te configureren met het notebook %%magic configureren. Zie Synapse-notebooks voor voorbeelden: de configuratie van uw Spark-sessie dynamisch beheren met pijplijnparameters.
Maart 2022 Notebooksessies opnieuw gebruiken en beheren In Synapse-notebooks is het eenvoudig om een actieve sessie gemakkelijk opnieuw te gebruiken zonder dat u een nieuwe sessie hoeft te starten en om uw actieve sessies in de lijst actieve sessies te bekijken en te beheren. Als u uw sessies wilt weergeven, selecteert u de drie puntjes in het notitieblok en selecteert u Sessies beheren. Zie Synapse-notebooks voor voorbeelden : Notebooksessies opnieuw gebruiken en beheren.
Maart 2022 Ondersteuning voor Python-logboekregistratie In Synapse-notebooks wordt alles wat is geschreven via de Python-logboekregistratiemodule vastgelegd, naast de stuurprogrammalogboeken. Zie Synapse-notebooks voor voorbeelden : ondersteuning voor Python-logboekregistratie.

Machine Learning

Deze sectie is een archief met functies en verbeteringen in machine learning-modellen in Azure Synapse Analytics.

Month Functie Meer informatie
Juni 2022 Gedistribueerde Deep Neural Network Training (preview) De Azure Synapse-runtime bevat ook ondersteunende bibliotheken zoals Petastorm en Horovod, die vaak worden gebruikt voor gedistribueerde training. Deze functie is momenteel beschikbaar in de preview-versie. De Azure Synapse Analytics-runtime voor Apache Spark 3.1 en 3.2 bevat nu ook ondersteuning voor de meest voorkomende Deep Learning-bibliotheken, zoals TensorFlow en PyTorch. Lees de zelfstudies voor Deep Learning voor meer informatie over het gebruik van deze bibliotheken in uw met GPU versnelde Pools van Azure Synapse Analytics.
November 2021 VOORSPELLEN De syntaxis van T-SQL PREDICT is nu algemeen beschikbaar voor toegewezen SQL-pools. Ga aan de slag met de wizard voor scoren van machine learning-modellen voor toegewezen SQL-pools.

Voorbeelden en richtlijnen

Deze sectie is een archief met richtlijnen en voorbeeldprojectbronnen voor Azure Synapse Analytics.

Month Functie Meer informatie
Juni 2022 Azure Orbital-analyse met Synapse Analytics We bieden nu een Azure Orbital Analytics-voorbeeldoplossing met een end-to-end implementatie van het extraheren, laden, transformeren en analyseren van ruimtegebonden gegevens met behulp van georuimtelijke bibliotheken en AI-modellen met Azure Synapse Analytics. De voorbeeldoplossing laat ook zien hoe u georuimtelijke, specifieke Azure AI-servicesmodellen , AI-modellen van partners en bring-your-own-data-modellen integreert.
Juni 2022 Migratiehandleidingen voor Oracle Er is nu een nieuwe door Microsoft geschreven migratiehandleiding voor Oracle naar Azure Synapse Analytics beschikbaar. Ontwerp en prestaties voor Oracle-migraties.
Juni 2022 Azure Synapse is standaard geslaagd Het Azure Synapse-proof-of-conceptplaybook biedt een handleiding voor het bepalen, ontwerpen, uitvoeren en evalueren van een proof-of-concept voor SQL- of Spark-workloads.
Juni 2022 Migratiehandleidingen voor Teradata Er is nu een nieuwe door Microsoft geschreven migratiehandleiding voor Teradata naar Azure Synapse Analytics beschikbaar. Ontwerp en prestaties voor Teradata-migraties.
Juni 2022 Migratiehandleidingen voor IBM Netezza Er is nu een nieuwe door Microsoft geschreven migratiehandleiding voor IBM Netezza naar Azure Synapse Analytics beschikbaar. Ontwerp en prestaties voor IBM Netezza-migraties.

Beveiliging

Deze sectie is een archief met beveiligingsfuncties en -instellingen in Azure Synapse Analytics.

Month Functie Meer informatie
April 2022 Synapse Monitoring Operator RBAC-rol Met de RBAC-rol (Synapse Monitoring Operator- op rollen gebaseerd toegangsbeheer) kan een gebruiker de uitvoering van Synapse Pipelines en Spark-toepassingen bewaken zonder dat deze toepassingen kunnen worden uitgevoerd of geannuleerd. Raadpleeg de Synapse RBAC-rollen voor meer informatie.
Maart 2022 Minimale TLS-versie afdwingen U kunt nu de minimale TLS-versie verhogen of verlagen voor toegewezen SQL-pools in Synapse-werkruimten. Zie Azure SQL-connectiviteitsinstellingen voor meer informatie. De beheerde SQL-API van de werkruimte kan worden gebruikt om de minimale TLS-instellingen te wijzigen.
Maart 2022 Azure Synapse Analytics ondersteunt nu alleen verificatie van Azure Active Directory (Azure AD) U kunt nu Azure Active Directory-verificatie gebruiken om de toegang tot alle Azure Synapse-resources centraal te beheren, inclusief SQL-pools. U kunt lokale verificatie uitschakelen bij het maken of nadat een werkruimte is gemaakt via Azure Portal.
December 2021 Door de gebruiker toegewezen beheerde identiteiten U kunt nu door de gebruiker toegewezen beheerde identiteiten gebruiken in gekoppelde services voor verificatie in Synapse Pipelines en Gegevensstromen. Zie Referenties in Azure Data Factory en Azure Synapse voor meer informatie.
December 2021 Bladeren in ADLS Gen2-mappen in de Azure Synapse Analytics-werkruimte U kunt nu bladeren en beveiligen door een Azure Data Lake Storage Gen2-container of -map (ADLS Gen2) in uw Azure Synapse Analytics-werkruimte door verbinding te maken met een specifieke container of map in Synapse Studio.
December 2021 TLS 2.1 afgedwongen voor nieuwe Synapse-werkruimten Vanaf december 2021 is alleen een vereiste voor TLS 1.2 geïmplementeerd voor nieuwe Synapse-werkruimten.

Azure Synapse Data Explorer

Azure Data Explorer (ADX) is een snelle en zeer schaalbare service om gegevens in logboeken en telemetrie te verkennen. Het biedt opname van Event Hubs, IoT Hubs, blobs die zijn geschreven naar blobcontainers en Azure Stream Analytics-taken. Deze sectie is een archief met functies en mogelijkheden van Azure Synapse Data Explorer en de Kusto-querytaal (KQL). Lees meer over wat is het verschil tussen Azure Synapse Data Explorer en Azure Data Explorer? (Preview)

Month Functie Meer informatie
Juni 2022 Nieuwe startpagina van Web Explorer De nieuwe startpagina van Azure Synapse Web Explorer maakt het nog eenvoudiger om aan de slag te gaan met Synapse Web Explorer.
Juni 2022 Voorbeeldgalerie van Web Explorer De voorbeeldgalerie van Web Explorer bevat end-to-end voorbeelden van hoe klanten gebruikmaken van populaire gebruiksvoorbeelden van Synapse Data Explorer, zoals logboekgegevens, metrische gegevens, IoT-gegevens en voorbeelden van basis-big data.
Juni 2022 Inzoommogelijkheden voor Web Explorer-dashboards U kunt nu drillthroughs gebruiken als parameters in uw Synapse Web Explorer-dashboards.
Juni 2022 Tijdzone-instellingen voor Web Explorer De tijdzone-instellingen van Web Explorer zijn nu van toepassing op zowel de queryresultaten als op het dashboard. Door de tijdzone te wijzigen, worden de dashboards automatisch vernieuwd om de gegevens met de geselecteerde tijdzone weer te geven.
Mei 2022 Livequery van Synapse Data Explorer in Excel Met de nieuwe data explorer-webervaring openen in Excel kunt u nu toegang bieden tot liveresultaten van uw query door de verbonden Excel-werkmap te delen met collega's en teamleden. U kunt de livequery openen in een Excel-werkmap en deze rechtstreeks vanuit Excel vernieuwen om de meest recente queryresultaten te verkrijgen. Als u een Excel-werkmap wilt maken die is verbonden met Synapse Data Explorer, begint u met het uitvoeren van een query in de webervaring.
Mei 2022 Beheerde identiteiten gebruiken voor externe SQL Server-tabellen Met ondersteuning voor beheerde identiteiten is de definitie van de Synapse Data Explorer-tabel nu eenvoudiger en veiliger. U kunt nu beheerde identiteiten gebruiken in plaats van uw referenties in te voeren. Lees externe SQL Server-tabellen maken en wijzigen voor meer informatie over externe tabellen.
Mei 2022 Azure Synapse Data Explorer-connector voor Microsoft Power Automate, Logic Apps en Power Apps Nieuwe Azure Data Explorer-connectors voor Power Automate zijn algemeen beschikbaar. Lees de Azure Data Explorer-connector voor Microsoft Power Automate, de Microsoft Logic App en Azure Data Explorer en de mogelijkheid om een Power Apps-toepassing te maken om een query uit te voeren op gegevens in Azure Data Explorer voor meer informatie.
Mei 2022 Dynamische gebeurtenissen routeren van Event Hub naar meerdere databases We bieden nu ondersteuning voor het routeren van gebeurtenisgegevens van Azure Event Hub/Azure IoT Hub/Azure Event Grid naar meerdere databases die worden gehost in één ADX-cluster. Lees Opnemen vanuit Event Hub voor meer informatie over dynamische routering.
Mei 2022 Een database configureren met behulp van een inline KQL-script als onderdeel van de JSON ARM-implementatiesjabloon Als u een KQL-script (Kusto-querytaal) uitvoert om uw database te configureren, kunt u nu een inlinescript gebruiken dat inline is opgegeven als parameter voor een JSON ARM-sjabloon.

Azure Synapse Link is een geautomatiseerd systeem voor het repliceren van gegevens van SQL Server of Azure SQL Database, Azure Cosmos DB of Dataverse naar Azure Synapse Analytics. Deze sectie is een archief met nieuws over de azure Synapse Link-functie.

Month Functie Meer informatie
Mei 2022 Azure Synapse Link voor SQL Preview Azure Synapse Link voor SQL is in preview voor zowel SQL Server 2022 als Azure SQL Database. De functie Azure Synapse Link biedt weinig en geen code, bijna realtime gegevensreplicatie vanuit uw operationele opslag op basis van SQL in Azure Synapse Analytics. Geef BI-rapportage over operationele gegevens in bijna realtime, met minimale impact op uw operationele archief. De Azure Synapse Link voor SQL Preview is aangekondigd. Zie Blog: Azure Synapse Link voor SQL Deep Dive voor meer informatie.

Synapse SQL

Deze sectie is een archief met verbeteringen en functies in SQL-pools in Azure Synapse Analytics.

Month Functie Meer informatie
Juni 2022 Limiet voor resultatensets verhogen De maximale grootte van queryresultatensets in serverloze SQL-pools is verhoogd van 200 GB tot 400 GB.
Mei 2022 Automatische berekening van de lengte van tekenkolommen voor serverloze SQL-pools Het is niet meer nodig om de lengte van tekenkolommen te definiëren voor serverloze SQL-pools in de data lake. U kunt optimale queryprestaties krijgen zonder het schema te hoeven definiëren, omdat de serverloze SQL-pool automatisch berekende gemiddelde kolomlengten en kardinaliteitschatting gebruikt.
April 2022 Herstel tussen abonnementen voor azure Synapse SQL GA Met de PowerShell-module Az.Sql 3.8-update kan de cmdlet Restore-AzSqlDatabase worden gebruikt voor het herstellen van toegewezen SQL-pools voor meerdere abonnementen. Zie Een toegewezen SQL-pool herstellen naar een ander abonnement voor meer informatie. Deze functie is nu algemeen beschikbaar voor toegewezen SQL-pools (voorheen SQL DW) en toegewezen SQL-pools in een Synapse-werkruimte. Wat is het verschil?
April 2022 SQL-pool herstellen van verwijderde server of werkruimte Met de PowerShell Restore-cmdlets in Az.Sql en Az.Synapse modules kunt u nu herstellen vanaf een verwijderde server of werkruimte zonder een ondersteuningsticket in te dienen. Zie Een toegewezen SQL-pool herstellen vanuit een verwijderde Azure Synapse-werkruimte of Een zelfstandige toegewezen SQL-pools (voorheen SQL DW) herstellen van een verwijderde server, afhankelijk van uw scenario.
Maart 2022 Versleuteling op kolomniveau voor toegewezen SQL-pools Versleuteling op kolomniveau is nu algemeen beschikbaar voor gebruik op nieuwe en bestaande logische Azure SQL-servers met toegewezen SQL-pools van Azure Synapse en toegewezen SQL-pools in Azure Synapse-werkruimten. Ondersteuning voor SQL Server Data Tools (SSDT) voor versleuteling op kolomniveau voor de toegewezen SQL-pools is beschikbaar vanaf de build 17.2 Preview 2 van Visual Studio 2022.
Maart 2022 Parallelle uitvoering voor CETAS Betere prestaties voor CREATE TABLE AS SELECT (CETAS) en volgende SELECT-instructies die nu mogelijk zijn gemaakt door gebruik te maken van parallelle uitvoeringsplannen. Zie Betere prestaties voor CETAS en volgende SELECTs voor voorbeelden.

Vorige maandelijkse updates in Azure Synapse Analytics

Hieronder volgt de vorige indeling van maandelijkse nieuwsupdates voor Synapse Analytics.

Update juni 2022

Algemeen

  • Azure Orbital Analytics met Synapse Analytics : we bieden nu een Azure Orbital-voorbeeldoplossing met een end-to-end implementatie van het extraheren, laden, transformeren en analyseren van ruimtegebonden gegevens met behulp van georuimtelijke bibliotheken en AI-modellen met Azure Synapse Analytics. De voorbeeldoplossing laat ook zien hoe u georuimtelijke, specifieke Azure AI-servicesmodellen , AI-modellen van partners en bring-your-own-data-modellen integreert.

  • Azure Synapse is standaard geslaagd: projectucces is geen ongeluk en vereist zorgvuldige planning en uitvoering. De Synapse Analytics's Success by Design playbooks zijn nu beschikbaar. Het Azure Synapse-proof-of-conceptplaybook biedt een handleiding voor het bepalen, ontwerpen, uitvoeren en evalueren van een proof-of-concept voor SQL- of Spark-workloads. Deze handleidingen bevatten best practices van de meest uitdagende en complexe oplossings implementaties waarin Azure Synapse is opgenomen. Lees Success by Design voor meer informatie over het Azure Synapse-proof-of-conceptplaybook.

SQL

Limiet voor de grootte van resultatensets is toegenomen . We weten dat u zich aanmeldt bij Azure Synapse Analytics om te werken met grote hoeveelheden gegevens. Daarom is de maximale grootte van queryresultatensets in serverloze SQL-pools verhoogd van 200 GB tot 400 GB. Deze limiet wordt gedeeld tussen gelijktijdige query's. Lees self-help voor serverloze SQL-pool voor meer informatie over deze limietverhoging en andere beperkingen.

Synapse Data Explorer

  • Nieuwe startpagina van Web Explorer: de nieuwe startpagina van Synapse Web Explorer maakt het nog eenvoudiger om aan de slag te gaan met Synapse Web Explorer. De startpagina van Web Explorer bevat nu de volgende secties:

    • Aan de slag: voorbeeldgalerie met voorbeeldquery's en dashboards voor populaire Synapse Data Explorer-gebruiksvoorbeelden.
    • Aanbevolen: populaire leermodules die zijn ontworpen om u te helpen synapse Web Explorer en KQL te beheersen.
    • Documentatie- Synapse Web Explorer basis- en geavanceerde documentatie.

  • Web Explorer-voorbeeldgalerie - Een geweldige manier om meer te leren over een product is om te zien hoe het door anderen wordt gebruikt. De voorbeeldgalerie van Web Explorer bevat end-to-end voorbeelden van hoe klanten gebruikmaken van populaire gebruiksvoorbeelden van Synapse Data Explorer, zoals logboekgegevens, metrische gegevens, IoT-gegevens en voorbeelden van basis-big data. Elk voorbeeld bevat de gegevensset, goed gedocumenteerde query's en een voorbeelddashboard. Lees Azure Data Explorer in 60 minuten met de nieuwe galerie met voorbeelden voor meer informatie over de voorbeeldgalerie.

  • Inzoommogelijkheden voor Web Explorer-dashboards: u kunt nu drill through-mogelijkheden toevoegen aan uw Synapse Web Explorer-dashboards. Met de nieuwe mogelijkheden voor inzoomen kunt u eenvoudig heen en weer springen tussen dashboardpagina's. Dit wordt mogelijk gemaakt met behulp van een contextueel filter om uw dashboards te verbinden. Het definiëren van deze contextuele drill throughs wordt uitgevoerd door de visuele interacties van de geselecteerde tegel in uw dashboard te bewerken. Lees Drillthroughs gebruiken als dashboardparameters voor meer informatie over drillthrough-mogelijkheden.

  • Tijdzone-instellingen voor Web Explorer : het weergeven van gegevens in verschillende tijdzones is zeer krachtig. U kunt nu besluiten om de gegevens in UTC-tijd, uw lokale tijdzone of de tijdzone van het bewaakte apparaat/apparaat weer te geven. De tijdzone-instellingen van Web Explorer zijn nu van toepassing op zowel de queryresultaten als op het dashboard. Door de tijdzone te wijzigen, worden de dashboards automatisch vernieuwd om de gegevens met de geselecteerde tijdzone weer te geven. Lees Datum/tijd wijzigen in specifieke tijdzone voor meer informatie over tijdzone-instellingen.

Gegevensintegratie

  • De optie Fuzzy Join in Join Transformation - Fuzzy matching with a sliding similarity score option is toegevoegd aan de Join-transformatie in Mapping Gegevensstroom s. U kunt inner- en outer joins maken voor gegevenswaarden die vergelijkbaar zijn in plaats van exacte overeenkomsten. Voorheen had u een exacte overeenkomst moeten gebruiken. De schuifschaalwaarde gaat van 60% naar 100%, zodat u de overeenkomstdrempel eenvoudig kunt aanpassen. Lees samenvoegingstransformatie in de toewijzingsgegevensstroom voor meer informatie over fuzzy joins.

  • Kaartgegevens [Algemeen beschikbaar] - We zijn verheugd om aan te kondigen dat het hulpprogramma Kaartgegevens nu algemeen beschikbaar is. Het hulpprogramma Kaartgegevens is een begeleid proces waarmee u ETL-toewijzingen en toewijzingsgegevensstromen van uw brongegevens naar Synapse kunt maken zonder code te schrijven. Lees Kaartgegevens in Azure Synapse Analytics voor meer informatie over Kaartgegevens.

  • Pijplijn opnieuw uitvoeren met nieuwe parameters : u kunt nu pijplijnparameters wijzigen wanneer u een pijplijn opnieuw uitvoert vanaf de pagina Bewaking zonder dat u hoeft terug te keren naar de pijplijneditor. Nadat u een pijplijn met nieuwe parameters hebt uitgevoerd, kunt u de nieuwe uitvoering eenvoudig controleren op de oude parameters zonder dat u tussen pagina's hoeft te schakelen. Lees Pijplijnen en activiteiten opnieuw uitvoeren voor meer informatie over het opnieuw uitvoeren van pijplijnen met nieuwe parameters.

  • Door de gebruiker gedefinieerde functies [Algemeen beschikbaar] : we zijn verheugd om aan te kondigen dat door de gebruiker gedefinieerde functies (UDF's) nu algemeen beschikbaar zijn. Met door de gebruiker gedefinieerde functies kunt u aangepaste expressies maken die opnieuw kunnen worden gebruikt in meerdere toewijzingsgegevensstromen. U hoeft niet langer dezelfde tekenreeksmanipulatie, wiskundige berekeningen of andere complexe logica meerdere keren te gebruiken. Door de gebruiker gedefinieerde functies worden gegroepeerd in bibliotheken om ontwikkelaars te helpen algemene sets functies te groeperen. Lees door de gebruiker gedefinieerde functies in toewijzingsgegevensstromen voor meer informatie over door de gebruiker gedefinieerde functies.

Machinelearning

Gedistribueerde Deep Neural Network Training met Horovod en Petastorm [Openbare preview] - Om het proces voor het maken en beheren van gpu-versnelde pools te vereenvoudigen, zorgt Azure Synapse voor het vooraf installeren van bibliotheken op laag niveau en het instellen van alle complexe netwerkvereisten tussen rekenknooppunten. Met deze integratie kunnen gebruikers binnen een paar minuten aan de slag met GPU-versnelde pools.

Azure Synapse Analytics biedt nu ingebouwde ondersteuning voor deep learning-infrastructuur. De Azure Synapse Analytics-runtime voor Apache Spark 3.1 en 3.2 bevat nu ondersteuning voor de meest voorkomende Deep Learning-bibliotheken, zoals TensorFlow en PyTorch. De Azure Synapse-runtime bevat ook ondersteunende bibliotheken zoals Petastorm en Horovod, die vaak worden gebruikt voor gedistribueerde training. Deze functie is momenteel beschikbaar in openbare preview.

Lees de zelfstudies voor Deep Learning voor meer informatie over het gebruik van deze bibliotheken in uw met GPU versnelde Pools van Azure Synapse Analytics.

Update van mei 2022

De volgende updates zijn deze maand nieuw voor Azure Synapse Analytics.

Algemeen

Maak verbinding met het nieuwe Azure Synapse Influencer-programma. Neem deel aan een community van Azure Synapse Influencers die elkaar helpen meer te bereiken met cloudanalyses. Het Azure Synapse Influencer-programma herkent Azure Synapse Analytics-gebruikers en pleitbezorgers die de community actief ondersteunen door Synapse-gerelateerde inhoud, aankondigingen en productnieuws te delen via sociale media.

SQL

  • Handleiding voor datawarehousemigratie voor toegewezen SQL-pools in Azure Synapse Analytics : met de voordelen die cloudmigratie biedt, horen we dat u vaak zoekt naar stappen, processen of richtlijnen die u moet volgen voor snelle en eenvoudige migraties vanuit bestaande datawarehouse-omgevingen. We hebben zojuist een set datawarehouse-migratiehandleidingen uitgebracht om uw overgang naar toegewezen SQL-pools in Azure Synapse Analytics eenvoudiger te maken.

  • Automatische berekening van de lengte van tekenkolommen - Het is niet meer nodig om lengte van tekenkolommen te definiëren. Met serverloze SQL-pools kunt u query's uitvoeren op bestanden in de data lake zonder het schema vooraf te kennen. De best practice was om de lengte van tekenkolommen op te geven om optimale prestaties te krijgen. Niet meer! Met deze nieuwe functie kunt u optimale queryprestaties krijgen zonder dat u het schema hoeft te definiëren. De serverloze SQL-pool berekent de gemiddelde kolomlengte voor elke uitgestelde tekenkolom of tekenkolom die is gedefinieerd als groter dan 100 bytes. Het schema blijft hetzelfde, terwijl de serverloze SQL-pool intern de berekende gemiddelde kolomlengten gebruikt. Ook wordt automatisch de kardinaliteitschatting berekend voor het geval er geen eerder gemaakte statistiek is gemaakt.

Apache Spark for Synapse

  • Azure Synapse Dedicated SQL-poolconnector voor Apache Spark Nu beschikbaar in Python : voorheen was de Azure Synapse Dedicated SQL-poolconnector alleen beschikbaar met Scala. Het kan nu worden gebruikt met Python in Spark 3. Het enige verschil tussen de Scala- en Python-implementaties is de optionele Scala-callback-handle, waarmee u metrische gegevens na schrijven kunt ontvangen.

    Het volgende wordt nu ondersteund in Python in Spark 3:

    • Lezen met azure Active Directory-verificatie (AD) of basisverificatie
    • Schrijven naar interne tabel met behulp van Azure AD-verificatie of basisverificatie
    • Schrijven naar externe tabel met behulp van Azure AD-verificatie of basisverificatie

    Lees Azure Synapse Dedicated SQL Pool Connector voor Apache Spark voor meer informatie over de connector in Python.

  • Azure Synapse Apache Spark-configuratie beheren- Apache Spark-configuratiebeheer is altijd een uitdagende taak omdat Spark honderden eigenschappen heeft. Het is ook lastig om de optimale waarde voor Spark-configuraties te kennen. Met de nieuwe functie voor Spark-configuratiebeheer kunt u een zelfstandig Spark-configuratieartefact maken met automatische suggesties en ingebouwde validatieregels. Met het Spark-configuratieartefact kunt u uw Spark-configuratie delen binnen en tussen Azure Synapse-werkruimten. U kunt uw Spark-configuratie ook eenvoudig koppelen aan een Spark-pool, een notebook en een Spark-taakdefinitie voor hergebruik en de noodzaak om de Spark-configuratie op meerdere plaatsen te kopiëren minimaliseren. Lees De Apache Spark-configuratie beheren voor meer informatie over de nieuwe functie voor Spark-configuratiebeheer.

Synapse Data Explorer

  • Synapse Data Explorer-livequery in Excel : met de nieuwe functie Data Explorer-webervaring Openen in Excel kunt u nu toegang bieden tot liveresultaten van uw query door de verbonden Excel-werkmap te delen met collega's en teamleden.  U kunt de livequery openen in een Excel-werkmap en deze rechtstreeks vanuit Excel vernieuwen om de meest recente queryresultaten te verkrijgen. Lees Livequery openen in Excel voor meer informatie over livequery van Excel.

  • Beheerde identiteiten gebruiken voor externe SQL Server-tabellen : een van de belangrijkste voordelen van Azure Synapse is de mogelijkheid om gegevensintegratie, zakelijke datawarehousing en big data-analyses samen te brengen. Met ondersteuning voor beheerde identiteiten is de definitie van de Synapse Data Explorer-tabel nu eenvoudiger en veiliger. U kunt nu beheerde identiteiten gebruiken in plaats van uw referenties in te voeren.

    Een externe SQL-tabel is een schema-entiteit die verwijst naar gegevens die buiten de Synapse Data Explorer-database zijn opgeslagen. Met de opdracht Externe SQL Server-tabellen maken en wijzigen, kunnen externe SQL-tabellen eenvoudig worden toegevoegd aan het Synapse Data Explorer-databaseschema.

    Lees het overzicht van beheerde identiteiten voor meer informatie over beheerde identiteiten.

    Lees externe SQL Server-tabellen maken en wijzigen voor meer informatie over externe tabellen.

  • Nieuwe KQL Learn-module (2 van 3) is live! - De kracht van Kusto-querytaal (KQL) is de eenvoud om samen query's uit te voeren op gestructureerde, semi-gestructureerde en ongestructureerde gegevens. Om het voor u gemakkelijker te maken om KQL te leren, brengen we Learn-modules uit. Eerder hebben we Uw eerste query schrijven uitgebracht met Kusto-querytaal. Nieuw deze maand is Inzichten verkrijgen uit uw gegevens met behulp van Kusto-querytaal.

    KQL is de querytaal die wordt gebruikt om een query uit te voeren op big data van Synapse Data Explorer. KQL heeft een groeiende gebruikerscommunity, met honderdduizenden ontwikkelaars, data engineers, gegevensanalisten en studenten.

    Bekijk de nieuwste KQL Learn-module en bekijk zelf hoe eenvoudig het is om een KQL-master te worden.

    Lees het overzicht van Kusto-querytaal (KQL) voor meer informatie over KQL.

  • Azure Synapse Data Explorer-connector voor Microsoft Power Automate, Logic Apps en Power Apps [Algemeen beschikbaar] - Met de Azure Data Explorer-connector voor Power Automate kunt u stromen organiseren en plannen, meldingen en waarschuwingen verzenden als onderdeel van een geplande of geactiveerde taak. Lees de Azure Data Explorer-connector voor Microsoft Power Automate en gebruiksvoorbeelden voor Azure Data Explorer-connector voor Power Automate voor meer informatie.

  • Dynamische gebeurtenissen routeren van Event Hub naar meerdere databases - Routeringsgebeurtenissen van Event Hub/IOT Hub/Event Grid is een activiteit die vaak wordt uitgevoerd door Azure Data Explorer-gebruikers (ADX). Voorheen kon u gebeurtenissen alleen routeren naar één database per gedefinieerde verbinding. Als u de gebeurtenissen naar meerdere databases wilt routeren, moet u meerdere ADX-clusterverbindingen maken.

    Ter vereenvoudiging van de ervaring bieden we nu ondersteuning voor het routeren van gebeurtenisgegevens naar meerdere databases die worden gehost in één ADX-cluster. Lees Opnemen vanuit Event Hub voor meer informatie over dynamische routering.

  • Configureer een database met behulp van een inline KQL-script als onderdeel van de JSON ARM-implementatiesjabloon. Voorheen ondersteunde Azure Data Explorer het uitvoeren van een Kusto-querytaal -script (KQL) om uw database te configureren tijdens de implementatie van een ARM-sjabloon (Azure Resource Manager). U kunt dit nu doen met behulp van een inlinescript dat inline is opgegeven als parameter voor een JSON ARM-sjabloon. Lees Een database configureren met behulp van een Kusto-querytaal script voor meer informatie over het gebruik van een inline KQL-script.

Gegevensintegratie

  • Pijplijnbewaking exporteren als csv - De mogelijkheid om pijplijnbewaking naar CSV te exporteren, is toegevoegd na het ontvangen van veel communityaanvragen voor de functie. Filter eenvoudig het scherm Pijplijnuitvoeringen naar de gewenste gegevens en selecteer Exporteren naar CSV*. Lees azure Data Factory-bewakingsverbeteringen voor meer informatie over het exporteren van pijplijnbewaking en andere bewakingsverbeteringen.

  • Incrementeel laden van gegevens is eenvoudig voor Synapse en Azure Database for PostgreSQL en MySQL : in een oplossing voor gegevensintegratie is incrementeel laden van gegevens na een eerste volledige gegevensbelasting een veelgebruikt scenario. Het automatisch laden van incrementele brongegevens is nu systeemeigen beschikbaar voor Synapse SQL en Azure Database for PostgreSQL en MySQL. Gebruikers kunnen incrementeel extraheren inschakelen en alleen ingevoegde of bijgewerkte rijen worden gelezen door de pijplijn. Lees incrementeel gegevens uit een brongegevensarchief incrementeel kopiëren naar een doelgegevensarchief voor meer informatie over het laden van incrementele gegevens.

  • Door de gebruiker gedefinieerde functies voor toewijzing Gegevensstroom s [openbare preview]: we horen u dat u dezelfde tekenreeksmanipulatie, wiskundige berekeningen of andere complexe logica meerdere keren kunt uitvoeren. Met de nieuwe functiefunctie die door de gebruiker is gedefinieerd, kunt u aangepaste expressies maken die opnieuw kunnen worden gebruikt voor meerdere toewijzingsgegevensstromen. Door de gebruiker gedefinieerde functies worden gegroepeerd in bibliotheken om ontwikkelaars te helpen algemene sets functies te groeperen. Zodra u een gegevensstroombibliotheek hebt gemaakt, kunt u uw door de gebruiker gedefinieerde functies toevoegen. U kunt zelfs meerdere argumenten toevoegen om uw functie herbruikbaar te maken. Lees door de gebruiker gedefinieerde functies in toewijzingsgegevensstromen voor meer informatie over door de gebruiker gedefinieerde functies.

  • Assert Error Handling - Foutafhandeling is nu toegevoegd aan sinks na een assert-transformatie. Met Assert-transformaties kunt u aangepaste regels maken voor gegevenskwaliteit en gegevensvalidatie. U kunt nu kiezen of de mislukte rijen moeten worden uitgevoerd naar de geselecteerde sink of naar een afzonderlijk bestand. Lees Assert-gegevenstransformatie in toewijzingsgegevensstroom voor meer informatie over foutafhandeling.

  • Projectie van toewijzingsgegevensstromen wordt bewerkt . Er zijn nieuwe UI-updates aangebracht voor het bewerken van bronprojectie in toewijzingsgegevensstromen. U kunt nu kolomnamen en kolomtypen voor bronprojectie bijwerken. Lees de brontransformatie in de toewijzingsgegevensstroom voor meer informatie over het bewerken van bronprojecties.

Azure Synapse Link voor SQL Server : op Microsoft Build 2022 hebben we de openbare preview-beschikbaarheid van Azure Synapse Link voor SQL aangekondigd voor zowel SQL Server 2022 als Azure SQL Database. Gegevensgestuurde, kwaliteitsinzichten zijn essentieel voor bedrijven om concurrerend te blijven. De snelheid om deze inzichten te bereiken, kan het verschil maken. De kostbare en tijdrovende aard van traditionele ETL- en ELT-pijplijnen is niet meer voldoende. Met deze release kunt u nu profiteren van lage en geen code, bijna realtime gegevensreplicatie vanuit uw operationele opslag op basis van SQL in Azure Synapse Analytics. Hierdoor is het eenvoudiger om BI-rapportage uit te voeren op operationele gegevens in bijna realtime, met minimale impact op uw operationele archief. Lees voor meer informatie de openbare preview van Azure Synapse Link voor SQL en bekijk onze YouTube-video.

Update van apr 2022

De volgende updates zijn deze maand nieuw voor Azure Synapse Analytics.

SQL

Synapse-databasesjablonen en databaseontwerper

  • Op basis van populaire feedback van klanten hebben we belangrijke verbeteringen aangebracht in onze verkenningservaring bij het maken van een Lake-database met behulp van een branchesjabloon. Lees voor meer informatie quickstart: Een nieuwe Lake-database maken met behulp van databasesjablonen.

  • We hebben de optie toegevoegd om een Lake-database te klonen. Dit biedt extra mogelijkheden om nieuwe versies van databases te beheren of schema's te ondersteunen die zich in afzonderlijke stappen ontwikkelen. U kunt snel een database klonen met behulp van het actiemenu dat beschikbaar is op de Lake-database. Lees voor meer informatie: Een Lake-database klonen.

  • U kunt nu jokertekens gebruiken om aangepaste maphiërarchieën op te geven. Lake-databases bevinden zich boven op gegevens die zich in het lake bevinden en deze gegevens kunnen zich bevinden in geneste mappen die niet in schone partitiepatronen passen. Voorheen moest u een query uitvoeren op Lake-databases die vereist zijn dat uw gegevens bestaan in een eenvoudige mapstructuur die u kunt bladeren met behulp van het mappictogram zonder de mogelijkheid om handmatig mapstructuur op te geven of jokertekens te gebruiken. Lees instructies voor meer informatie: Een datalake wijzigen.

Apache Spark for Synapse

  • We zijn verheugd om de preview-beschikbaarheid van Apache Spark™ 3.2 op Synapse Analytics aan te kondigen. Deze nieuwe versie bevat door de gebruiker aangevraagde verbeteringen en lost 1.700+ Jira-tickets op. Bekijk de officiële releaseopmerkingen voor de volledige lijst met fixes en functies en bekijk de migratierichtlijnen tussen Spark 3.1 en 3.2 om mogelijke wijzigingen in uw toepassingen te beoordelen. Lees ondersteuning voor Apache Spark-versies en Azure Synapse Runtime voor Apache Spark 3.2 voor meer informatie.

  • Het dynamisch toewijzen van parameters op basis van variabelen, metagegevens of het opgeven van pijplijnspecifieke parameters is een van uw belangrijkste functieaanvragen. Nu, met de release van parameterisatie voor de Spark-taakdefinitieactiviteit, kunt u dat doen. Lees gegevens transformeren met behulp van de Apache Spark-taakdefinitie voor meer informatie.

  • We ontvangen vaak klantaanvragen voor toegang tot de momentopname van het notebook wanneer er een fout optreedt bij het uitvoeren van een pijplijnnotitieblok of als er een langlopende Notebook-taak is. Met de release van de synapse Notebook-momentopnamefunctie kunt u nu de momentopname van de uitvoering van de Notebook-activiteit bekijken met de oorspronkelijke Notebook-code, de celuitvoer en de invoerparameters. U kunt ook toegang krijgen tot de momentopname van het notitieblok waarnaar wordt verwezen vanuit de celuitvoer waarnaar wordt verwezen als u naar andere notebooks verwijst via Spark-hulpprogramma's. Lees gegevens transformeren door een Synapse-notebook en inleiding tot Microsoft Spark-hulpprogramma's uit te voeren voor meer informatie.

Beveiliging

  • De rol Synapse Monitoring Operator RBAC is nu algemeen beschikbaar. Sinds de GA van Synapse hebben klanten gevraagd om een verfijnde RBAC-rol (op rollen gebaseerd toegangsbeheer) waarmee een gebruiker de uitvoering van Synapse Pipelines en Spark-toepassingen kan bewaken zonder dat ze de uitvoering van deze toepassingen kunnen uitvoeren of annuleren. Klanten kunnen nu de rol Synapse Monitoring Operator toewijzen aan dergelijke persona's voor bewaking. Hierdoor kunnen organisaties compatibel blijven en tegelijkertijd flexibiliteit hebben bij het delegeren van taken aan personen of teams. Lees meer over Synapse RBAC-rollen.

Gegevensintegratie

  • Microsoft heeft Dataverse toegevoegd als bron- en sinkconnector aan Synapse-Gegevensstroom s, zodat u nu ETL-taken voor gegevenstransformatie met weinig code kunt bouwen in Synapse die rechtstreeks toegang hebben tot uw Dataverse-omgeving. Lees de eigenschappen van de toewijzingsgegevensstroom voor meer informatie over het gebruik van deze nieuwe connector.

  • We hebben van u gehoord dat een time-out van 1 minuut voor webactiviteit niet lang genoeg was, met name in gevallen van synchrone API's. Met de time-outeigenschap httpRequestTimeout van het antwoord kunt u nu een time-out definiëren voor de HTTP-aanvraag tot 10 minuten. Meer informatie door time-outverbeteringen voor reactie van webactiviteit te lezen.

Ontwikkelaarservaring

  • Als u eerder naar een notitieblok in een ander notitieblok wilt verwijzen, kunt u alleen verwijzen naar gepubliceerde of vastgelegde inhoud. Wanneer u nu %run-notebooks gebruikt, kunt u niet-gepubliceerde notitieblokken inschakelen, zodat u kunt verwijzen naar niet-gepubliceerde notitieblokken. Wanneer deze optie is ingeschakeld, haalt de uitvoering van het notebook de huidige inhoud op in de webcache van het notitieblok, wat betekent dat er direct naar de wijzigingen in uw notebook-editor kan worden verwezen door andere notitieblokken zonder te hoeven worden gepubliceerd (livemodus) of doorgevoerd (Git-modus). Lees verwijzing voor niet-gepubliceerd notitieblok voor meer informatie.

Update van maart 2022

De volgende updates zijn deze maand nieuw voor Azure Synapse Analytics.

Ontwikkelaarservaring

SQL

  • Versleuteling op kolomniveau voor toegewezen SQL-pools van Azure Synapse is nu algemeen beschikbaar. Met versleuteling op kolomniveau kunt u voor elke kolom verschillende beveiligingssleutels gebruiken met elke sleutel met eigen toegangsmachtigingen. De gegevens in door CLE afgedwongen kolommen worden versleuteld op schijf en blijven versleuteld in het geheugen totdat de functie DECRYPTBYKEY wordt gebruikt om deze te ontsleutelen. Zie voor meer informatie hoe u een gegevenskolom versleutelt.

  • Serverloze SQL-pools ondersteunen nu betere prestaties voor CETAS (Externe tabel maken als selecteren) en volgende SELECT-query's. De prestatieverbeteringen zijn onder andere een parallel uitvoeringsplan dat resulteert in snellere CETAS-uitvoering en het uitvoeren van meerdere bestanden. Zie CETAS met Synapse SQL-artikel en het blogbericht voor meer informatie

Apache Spark for Synapse

  • Synapse Spark Common Data Model (CDM) Connector is nu algemeen beschikbaar. Met de CDM-indeling lezer/schrijver kan een Spark-programma CDM-entiteiten lezen en schrijven in een CDM-map via Spark-dataframes. Zie voor meer informatie hoe de CDM-connector het lezen, schrijven van gegevens, voorbeelden en bekende problemen ondersteunt.

  • Synapse Spark Dedicated SQL Pool (DW) Connector ondersteunt nu verbeterde prestaties. De nieuwe architectuur elimineert redundante gegevensverplaatsing en maakt gebruik van COPY-INTO in plaats van PolyBase. U kunt zich verifiëren via basisverificatie van SQL of u aanmelden bij de verificatiemethode op basis van Azure Active Directory/Azure AD. Het heeft nu ~5x verbeteringen ten opzichte van de vorige versie. Zie Azure Synapse Dedicated SQL Pool Connector voor Apache Spark voor meer informatie

  • Synapse Spark Dedicated SQL Pool (DW) Connector ondersteunt nu alle opties voor Spark Dataframe SaveMode. Het biedt ondersteuning voor de modi Append, Overwrite, ErrorIfExists en Ignore. Toevoegen en overschrijven zijn essentieel voor het beheren van gegevensopname op schaal. Zie de ondersteuning voor SaveMode voor DataFrame-schrijfbewerkingen voor meer informatie

  • Versnel de snelheid van spark-uitvoering met behulp van de nieuwe functie Intelligent Cache. Deze functie is momenteel beschikbaar als openbare preview-versie. Intelligent Cache slaat elke leesbewerking automatisch op in de toegewezen cacheopslagruimte, detecteert onderliggende bestandswijzigingen en vernieuwt de bestanden om de meest recente gegevens te leveren. Zie voor meer informatie hoe u de cache voor uw Apache Spark-pool inschakelt/uitschakelt of bekijk het blogbericht

Beveiliging

Gegevensintegratie

Update van februari 2022

De volgende updates zijn deze maand nieuw voor Azure Synapse Analytics.

SQL

Gegevensintegratie

Update van januari 2022

De volgende updates zijn deze maand nieuw voor Azure Synapse Analytics.

Apache Spark for Synapse

U kunt nu vier nieuwe databasesjablonen gebruiken in Azure Synapse. Meer informatie over auto-, Genomics-, Productie- en Farmaceutische sjablonen vindt u in het blogbericht of het artikel over databasesjablonen. Deze sjablonen zijn momenteel beschikbaar als openbare preview en zijn beschikbaar in de Synapse Studio-galerie.

Machine Learning

Verbeteringen in de Synapse Machine Learning-bibliotheek v0.9.5 (voorheen MMLSpark genoemd). Deze release vereenvoudigt het maken van zeer schaalbare machine learning-pijplijnen met Apache Spark. Lees voor meer informatie het blogbericht over de nieuwe mogelijkheden in deze release of bekijk de volledige releaseopmerkingen

Beveiliging

  • Het beveiligingsoverzicht van Azure Synapse Analytics- een technisch document dat de vijf beveiligingslagen omvat. De beveiligingslagen omvatten verificatie, toegangsbeheer, gegevensbeveiliging, netwerkbeveiliging en bedreigingsbeveiliging. Krijg inzicht in elke beveiligingsfunctie in gedetailleerde informatie over het implementeren van een industriestandaard beveiligingsbasislijn en het beveiligen van uw gegevens in de cloud.

  • TLS 1.2 is nu vereist voor nieuw gemaakte Synapse-werkruimten. Zie voor meer informatie hoe TLS 1.2 verbeterde beveiliging biedt met behulp van dit artikel of de blogpost. Aanmeldingspogingen naar een zojuist gemaakte Synapse-werkruimte vanuit verbindingen met TLS-versies lager dan 1.2 mislukken.

Gegevensintegratie

Synapse SQL

Update van december 2021

De volgende updates zijn deze maand nieuw voor Azure Synapse Analytics.

Apache Spark for Synapse

  • Blogartikel over het versnellen van Spark-workloads met NVIDIA GPU-versnelling
  • Blogartikel over het koppelen van externe opslag aan een Synapse Spark-pool
  • Systeemeigen lezen en schrijven van gegevens in ADLS met Pandas-blogartikel
  • Dynamische toewijzing van uitvoerders voor Spark-blogartikel

Machine Learning

  • Het blogartikel over de Synapse Machine Learning-bibliotheek
  • Aan de slag met het blogartikel over geavanceerde, vooraf gebouwde intelligente modellen
  • Verantwoordelijke AI-systemen bouwen met het blogartikel over de Synapse ML-bibliotheek
  • PREDICT is nu algemeen beschikbaar voor Synapse Dedicated SQL-pools-blogartikel
  • Eenvoudig en schaalbaar scoren met PREDICT en MLFlow voor Apache Spark voor Synapse-blogartikel
  • Blogartikel over retail AI-oplossingen

Beveiliging

  • Door de gebruiker toegewezen beheerde identiteiten worden nu ondersteund in Synapse Pipelines in het preview-blogartikel
  • Bladeren in ADLS Gen2-mappen in een Azure Synapse Analytics-werkruimte in preview-blogartikel

Gegevensintegratie

  • Blogartikel over mislukte pijplijnactiviteit
  • Toewijzing Gegevensstroom krijgt nieuw blogartikel over systeemeigen connectors
  • Meer notebook-exportindelingen: HTML-, Python- en LaTeX-blog
  • Drie nieuwe grafiektypen in de notitieblokweergave: boxplot, histogram en draaitabelblog
  • Opnieuw verbinding maken met verloren blog van notitiebloksessie

Integreren

  • Blogartikel over Azure Synapse Link voor Dataverse
  • Aangepaste partities voor Azure Synapse Link voor Azure Cosmos DB in preview-blogartikel
  • Map data tool (openbare preview), een artikel over een begeleide ETL-ervaring zonder code
  • Blogartikel over snel opnieuw gebruiken van Spark-cluster
  • Blogartikel over transformatie van externe oproepen
  • Blogartikel over Flowlets (openbare preview)

Update van november 2021

De volgende updates zijn deze maand nieuw voor Azure Synapse Analytics.

Synapse Data Explorer

  • Synapse Data Explorer nu beschikbaar in het preview-blogartikel

Werken met databases en Data Lakes

  • Inleiding tot Lake-databases (voorheen bekend als Spark-databases) blogartikel
  • Lake Database Designer nu beschikbaar in het preview-blogartikel
  • Blogartikel over databasesjablonen en databaseontwerper

SQL

  • Delta Lake-ondersteuning voor serverloze SQL is algemeen beschikbaar blogartikel
  • Query's uitvoeren op meerdere bestandspaden met behulp van OPENROWSET in een serverloos SQL-blogartikel
  • Serverloze SQL-query's kunnen nu maximaal 200 GB aan resultatenblogartikel retourneren
  • Ongeldige rijen verwerken met OPENROWSET in een serverloos SQL-blogartikel

Apache Spark for Synapse

  • Blogartikel over het versnellen van Spark-workloads met NVIDIA GPU-versnelling
  • Blogartikel over het koppelen van externe opslag aan een Synapse Spark-pool
  • Systeemeigen lezen en schrijven van gegevens in ADLS met Pandas-blogartikel
  • Dynamische toewijzing van uitvoerders voor Spark-blogartikel

Machine Learning

  • Het blogartikel over de Synapse Machine Learning-bibliotheek
  • Aan de slag met het blogartikel over geavanceerde, vooraf gebouwde intelligente modellen
  • Verantwoordelijke AI-systemen bouwen met het blogartikel over de Synapse ML-bibliotheek
  • PREDICT is nu algemeen beschikbaar voor Synapse Dedicated SQL-pools-blogartikel
  • Eenvoudig en schaalbaar scoren met PREDICT en MLFlow voor Apache Spark voor Synapse-blogartikel
  • Blogartikel over retail AI-oplossingen

Beveiliging

  • Door de gebruiker toegewezen beheerde identiteiten worden nu ondersteund in Synapse Pipelines in het preview-blogartikel
  • Bladeren in ADLS Gen2-mappen in een Azure Synapse Analytics-werkruimte in preview-blogartikel

Gegevensintegratie

  • Blogartikel over Azure Synapse Link voor Dataverse
  • Aangepaste partities voor Azure Synapse Link voor Azure Cosmos DB in preview-blogartikel

Update van oktober 2021

De volgende updates zijn deze maand nieuw voor Azure Synapse Analytics.

Algemeen

  • Blogartikel over het beheren van uw kosten met azure Synapse-abonnementen
  • Blogartikel over het verplaatsen van uw Azure Synapse-werkruimte in Azure-regio's

Apache Spark for Synapse

Beveiliging

  • Alle Synapse RBAC-rollen zijn nu algemeen beschikbaar voor gebruik in het blogartikel over productie
  • Blogartikel over het toepassen van door de gebruiker toegewezen beheerde identiteiten voor dubbele versleuteling
  • Synapse-beheerders hebben nu verhoogde toegang tot toegewezen SQL-pools-blogartikel

Beheer

  • Synapse-werkruimten kunnen nu automatisch herkomstgegevens pushen naar het Microsoft Purview-blogartikel

Integreren

  • Gebruik Stringify in gegevensstromen om eenvoudig complexe gegevenstypen te transformeren naar het blogartikel over tekenreeksen
  • Time-to-live (TTL) van Spark-sessie beheren in het blogartikel over gegevensstromen

CI/CD & Git

  • Synapse-werkruimten implementeren met behulp van het blogartikel over GitHub Actions
  • Meer controle over het maken van Git-vertakkingen in synapse Studio-blogartikel

Ontwikkelaarservaring

  • Verbeterde Markdown-bewerking in het preview-blogartikel van Synapse-notebooks
  • Pandas-dataframes worden automatisch weergegeven als mooi opgemaakte HTML-tabellen blogartikel
  • IPython-widgets gebruiken in het blogartikel van Synapse Notebooks
  • Mssparkutils runtime-context nu beschikbaar voor Python- en Scala-blogartikel

Volgende stappen

Aan de slag met Azure Synapse Analytics