Delen via

Releaseopmerkingen voor Databricks SQL 2024

Hieronder vindt u een overzicht van de verbeteringen en updates in Databricks SQL van januari tot en met december 2024.

21 november 2024

SQL Warehouse-systeemtabellen (openbare preview)

  • De system.compute.warehouses-tabel registreert wanneer SQL-warehouses worden gemaakt, bewerkt en verwijderd. U kunt de tabel gebruiken om wijzigingen in magazijninstellingen te controleren, waaronder de naam van het magazijn, het type, de grootte, het kanaal, tags, instellingen voor automatisch stoppen en automatisch schalen. Zie systeemtabel voor magazijnen.

Gegevensdetectie

  • Het tabblad Herkomst in Catalog Explorer is opnieuw ontworpen met een verbeterde gebruikersinterface voor het filteren van entiteiten.

13 november 2024

Verouderde dashboards:

  • Er is een probleem opgelost waarbij tooltips met sjablonen geen gedetailleerde inhoud weergeven voor grafieken met dubbele assen en meerdere velden.

6 november 2024

Mensleesbare schema-ondersteuning voor Databricks SQL-streamingtabellen en gematerialiseerde weergaven

Gebruikers kunnen nu schema's voor het streamen van tabellen en gematerialiseerde weergaven starten, maken en wijzigen met behulp van mensvriendelijke syntaxis in plaats van CRON-planning. Zie ALTER MATERIALIZED VIEW, ALTER STREAMING TABLE, CREATE MATERIALIZED VIEWen CREATE STREAMING TABLE.

Streamingtabellen ondersteunen nu query's voor tijdreizen

U kunt nu tijdreizen gebruiken om een query uit te voeren op eerdere tabelversies op basis van tijdstempel of tabelversie (zoals vastgelegd in het transactielogboek). Mogelijk moet u uw streamingtabel vernieuwen voordat u query's voor tijdreizen gebruikt. Zie Wat is tijdreizen?

Queries voor tijdreizen worden niet ondersteund voor gematerialiseerde weergaven.

31 oktober 2024

Updates van de gebruikersinterface

nieuwe SQL-editor (openbare preview)

  • U kunt nu de actieve SQL-query uitvoeren met behulp van de sneltoets Command (of Ctrl) + Shift + Enter.
  • In het invoergebied voor parameters wordt nu een schuifbalk weergegeven wanneer de tekst zich buiten het weergavevenster bevindt.
  • Er is een probleem opgelost waardoor de pagina met details van het queryprofiel niet volledig werd geopend.
  • U kunt nu de naam van query's wijzigen door de nieuwe naam in de tabtitel te typen.
  • De knop Schema is nu uitgeschakeld voor query's die nog nooit zijn opgeslagen.

24 oktober 2024

Releaseopmerkingen voor AI/BI-hulpprogramma's

De releaseopmerkingen voor AI/BI-dashboards en AI/BI Genie zijn verplaatst naar AI/BI-releaseopmerkingen. Toekomstige releases en updates worden daar gedocumenteerd.

17 oktober 2024

Meldingsbestemmingen zijn nu algemeen beschikbaar

U kunt meldingsbestemmingen maken en configureren die werkruimtegebruikers kunnen toevoegen aan bepaalde werkstromen, zoals waarschuwingen, Lakeflow-taken en AI/BI-dashboardschema's, om e-mailberichten of webhooks te verzenden wanneer een gebeurtenis wordt uitgevoerd. Zie Beheer meldingsbestemmingen.

10 oktober 2024

Gerealiseerde weergaven en streamingtabellen zijn nu algemeen beschikbaar in Databricks SQL

Streamingtabellen maken incrementele opname van cloudopslag en berichtenwachtrijen mogelijk, terwijl gerealiseerde weergaven vooraf berekende weergaven zijn die automatisch en incrementeel worden bijgewerkt wanneer nieuwe gegevens binnenkomen. Zie Gerealiseerde weergaven gebruiken in Databricks SQL en streamingtabellen gebruiken in Databricks SQL.

Query-inzichten

3 oktober 2024

Serverloze SQL Warehouse-ondersteuning uitgebreid

Serverloze SQL-warehouses zijn nu beschikbaar in de swedencentral regio. Zie Functies met beperkte regionale beschikbaarheid.

Updates van de gebruikersinterface

De functies die in deze sectie worden vermeld, zijn onafhankelijk van de hierboven beschreven SQL Warehouse-rekenversies.

Catalogusverkenner

  • Door AI gegenereerde opmerkingen worden nu ondersteund voor catalogi, schema's, volumes, modellen en functies en gebruikers kunnen de inline-chatassistent gebruiken om hun opmerkingen te bewerken.

SQL AI-functies De functie vector_search() is nu beschikbaar in openbare preview. Zie vector_search functie

26 september 2024

Serverloze SQL Warehouse-ondersteuning uitgebreid

Serverloze SQL-warehouses zijn nu beschikbaar in de francecentral regio. Zie Functies met beperkte regionale beschikbaarheid.

11 september 2024

Updates van de gebruikersinterface

De functies in deze sectie zijn onafhankelijk van de hierboven beschreven SQL Warehouse-rekenversies.

SQL-editor

U kunt nu de syntaxis van benoemde parametermarkeringen gebruiken in de SQL-editor. Benoemde parametermarkeringssyntaxis kan worden gebruikt in de SQL-editor, notebooks en AI/BI-dashboards. Zie Het werken met queryparameters.

Queries en verouderde dashboards

Voor SQL-query's en verouderde dashboards worden verwijderde items niet meer weergegeven op de lijstpagina's. Verwijderde items zoeken in de prullenbak van de werkruimte. Werkruimtebeheerders kunnen verwijderde items weergeven in de prullenbak van alle gebruikers.

5 september 2024

Wijzigingen in 2024.40

Databricks SQL-versie 2024.40 bevat de volgende gedragswijzigingen, nieuwe functies en verbeteringen.

Gedragswijzigingen

  • Wijziging naar de standaard schema-bindingsmodus voor weergaven

    Weergaven passen zich nu aan aan schemawijzigingen in de onderliggende query door het gebruik van schemacompensatie volgens reguliere casting regels. Dit is een wijziging ten opzichte van de vorige standaardmodus van BINDING, die problemen veroorzaakte wanneer een veilige cast niet kon worden uitgevoerd bij het verwijzen naar de weergave.

    Zie CREATE VIEW en cast functie.

  • Het gebruik van de ongedocumenteerde !-syntaxis is niet toegestaan in plaats van NOT buiten booleaanse expressies

    Met deze release is het gebruik van ! als synoniem voor NOT buiten booleaanse expressies niet meer toegestaan. Bijvoorbeeld instructies zoals het volgende: CREATE ... IF ! EXISTS, IS ! NULL, een ! NULL kolom- of veldeigenschap, ! IN en ! TUSSEN, moeten worden vervangen door: CREATE ... IF NOT EXISTS, IS NOT NULL, een NOT NULL kolom- of veldeigenschap, NOT IN en NOT BETWEEN.

    Deze wijziging zorgt voor consistentie, is afgestemd op de SQL-standaard en maakt uw SQL draagbaarder.

    De booleaanse voorvoegseloperator! (bijvoorbeeld !is_mgr of !(true AND false)) wordt niet beïnvloed door deze wijziging.

  • Verbied ongedocumenteerde kolomdefinitiesyntaxis in weergaven

    Databricks ondersteunt CREATE VIEW met benoemde kolommen en kolomopmerkingen. Voorheen is de specificatie van kolomtypen, NOT NULL beperkingen of DEFAULT toegestaan. Met deze release kunt u deze syntaxis niet meer gebruiken.

    Deze wijziging zorgt voor consistentie, is afgestemd op de SQL-standaard en biedt ondersteuning voor toekomstige verbeteringen.

  • Een CHECK beperking toevoegen aan een ongeldige kolom retourneert nu de foutklasse UNRESOLVED_COLUMN.WITH_SUGGESTION

    In Databricks Runtime 15.3 en hoger, retourneert een ALTER TABLE ADD CONSTRAINT instructie met een CHECK beperking die verwijst naar een ongeldige kolomnaam de UNRESOLVED_COLUMN.WITH_SUGGESTION foutklasse om nuttigere foutberichten te verstrekken. Eerder werd een INTERNAL_ERROR teruggestuurd.

Nieuwe functies en verbeteringen

  • UniForm Iceberg inschakelen met behulp van ALTER TABLE

    U kunt UniForm Iceberg nu inschakelen voor bestaande tabellen zonder gegevensbestanden opnieuw te schrijven. Zie Iceberg-leesbewerkingen inschakelen voor een bestaande tabel.

  • UTF-8-validatiefuncties

    In deze release worden de volgende functies geïntroduceerd voor het valideren van UTF-8-tekenreeksen:

    • is_valid_utf8 gecontroleerd of een tekenreeks een geldige UTF-8-tekenreeks is.
    • make_valid_utf8 converteert een mogelijk ongeldige UTF-8-tekenreeks naar een geldige UTF-8-tekenreeks met vervangingstekens
    • validate_utf8 genereert een fout als de invoer geen geldige UTF-8-tekenreeks is.
    • try_validate_utf8 retourneert NULL als de invoer geen geldige UTF-8-tekenreeks is.

  • de to_avro- en from_avro-functies

    Met de functies to_avro en from_avro kunnen SQL-typen worden geconverteerd naar binaire Avro-gegevens en terug.

  • functie try_url_decode

    In deze release wordt de try_url_decode-functie geïntroduceerd, waarmee een tekenreeks met URL-codering wordt gedecodeerd. Als de tekenreeks niet de juiste indeling heeft, retourneert de functie NULL in plaats van een fout op te geven.

  • Optioneel toestaan dat de optimizer afhankelijk is van niet-afgedwongen vreemde-sleutelbeperkingen

    Als u de queryprestaties wilt verbeteren, kunt u nu het RELY trefwoord opgeven voor FOREIGN KEY beperkingen wanneer u CREATE of ALTER een tabel.

  • Ondersteuning voor het laten vallen van de tabelcontrolebeperkingenfunctie

    Selectief overschrijven met behulp van replaceWhere nu taken uitvoeren waarmee gegevens worden verwijderd en nieuwe gegevens parallel worden ingevoegd, waardoor de queryprestaties en het clustergebruik worden verbeterd.

  • geparalleliseerde taakuitvoeringen voor selectief overschrijven

    Selectief overschrijven met behulp van replaceWhere nu taken uitvoeren waarmee gegevens worden verwijderd en nieuwe gegevens parallel worden ingevoegd, waardoor de queryprestaties en het clustergebruik worden verbeterd.

  • Verbeterde prestaties voor het wijzigen van gegevensfeed met selectief overschrijven

    Selectief overschrijven met behulp van replaceWhere op tabellen met een wijzigingsgegevensstroom schrijft geen afzonderlijke wijzigingsgegevensbestanden meer voor ingevoegde gegevens. Deze bewerkingen maken gebruik van een verborgen _change_type kolom die aanwezig is in de onderliggende Parquet-gegevensbestanden om wijzigingen vast te leggen zonder schrijfversterking.

  • Verbeterde querylatentie voor de opdracht COPY INTO

    Deze release bevat een wijziging die de querylatentie voor de opdracht COPY INTO verbetert. Deze verbetering wordt geïmplementeerd door het laden van de status door de RocksDB-statusopslag asynchroon te maken. Met deze wijziging ziet u een verbetering in de begintijden voor query's met grote statussen, zoals query's met een groot aantal al opgenomen bestanden.

Updates van de gebruikersinterface

De functies in deze sectie zijn onafhankelijk van de hierboven beschreven SQL Warehouse-rekenversies.

Visualizations

  • Tooltiptotalen worden nu alleen weergegeven voor gestapelde grafieken.

22 augustus 2024

Visualizations

Voor gegroepeerde configuraties en configuraties met meerdere velden worden nu totalen weergegeven wanneer u de muisaanwijzer over grafiekelementen beweegt.

15 augustus 2024

Visualizations

Er is een probleem opgelost waarbij rijnummers in tabelvisualisaties niet zijn bijgewerkt na het wijzigen van het paginaformaat.

Gegevensdetectie

De mogelijkheid om kolomtypen die genest en complex zijn uit te vouwen en samen te vouwen in Unity Catalog-tabellen, wordt nu ondersteund.

1 augustus 2024

Visualizations:

  • Tabelsortering blijft nu behouden wanneer gegevens worden gewijzigd als gevolg van filteren.

SQL Editor:

  • Verbeterde leesbaarheid door extra opvulling toe te voegen tussen de laatste regel van een query en de resultaatuitvoer.

25 juli 2024

Databricks REST API:

  • API's voor het beheren van query's, waarschuwingen, gegevensbronnen en machtigingen zijn gewijzigd. De verouderde versie wordt zes maanden nog steeds ondersteund. Deze overgangsperiode is bedoeld om u voldoende tijd te geven om uw toepassingen en integraties naar de nieuwe versie te migreren voordat de oudere versie wordt uitgefaseerd. Zie Bijwerken naar de nieuwste versie van de SQL API van Databricks

18 juli 2024

Updates van de gebruikersinterface

Catalogusverkenner:

  • Er is nu een nieuwe wizard catalogusconfiguratie beschikbaar voor het instellen van werkruimtebindingen, catalogusbevoegdheden en metagegevens bij het maken van een catalogus.

SQL Warehouse-monitoring:

  • CAN MONITOR-machtiging is nu algemeen beschikbaar. Hiermee kunnen bevoegde gebruikers SQL-warehouses bewaken, waaronder de bijbehorende querygeschiedenis en queryprofielen. Zie SQL Warehouse-ACL's.

11 juli 2024

Databricks SQL-versie 2024.35 beschikbaar

Implementatieschema: Preview-implementatie voor 2024.35: Tussen 9 juli en 15 juli

Wijzigingen in 2024.35

Kolomtoewijzing uitschakelen bij gebruik van de drop-functie

U kunt nu DROP FEATURE gebruiken om kolomtoewijzing in Delta-tabellen uit te schakelen en het tabelprotocol te downgraden. Zie Uitschakelen van kolomtoewijzing.

Varianten syntaxis en functies in openbare previewversie

Ingebouwde Apache Spark-ondersteuning voor het werken met semi-gestructureerde gegevens als VARIANT-type is nu beschikbaar in Spark DataFrames en SQL. Zie gegevens van queryvarianten.

Ondersteuning voor varianttypen voor Delta Lake in openbare preview

U kunt nu VARIANT gebruiken om semi-gestructureerde gegevens op te slaan in tabellen die worden ondersteund door Delta Lake. Zie ondersteuning voor varianttypen.

Ondersteuning voor verschillende modi van schemaontwikkeling in weergaven

CREATE VIEW en ALTER VIEW kunt u nu een schemabindingsmodus instellen, zodat u kunt verbeteren hoe weergaven schemawijzigingen in onderliggende objecten verwerken. Met deze functie kunnen weergaven schemawijzigingen in de onderliggende objecten tolereren of aanpassen. Hiermee worden wijzigingen in het queryschema opgelost die het gevolg zijn van wijzigingen in objectdefinities.

Prestatieverbetering voor sommige vensterfuncties

Deze release bevat een wijziging die de prestaties van sommige Spark-vensterfuncties verbetert, met name functies die geen ORDER BY component of een window_frame parameter bevatten. In deze gevallen kan het systeem de query herschrijven om deze uit te voeren met behulp van een statistische functie. Met deze wijziging kan de query sneller worden uitgevoerd door gedeeltelijke aggregatie te gebruiken en de overhead van actieve vensterfuncties te voorkomen. De Spark-configuratieparameter spark.databricks.optimizer.replaceWindowsWithAggregates.enabled beheert deze optimalisatie en is standaard ingesteld op true. Als u deze optimalisatie wilt uitschakelen, stelt u spark.databricks.optimizer.replaceWindowsWithAggregates.enabled in op false.

Ondersteuning voor de try_mod-functie toegevoegd

In deze release wordt ondersteuning toegevoegd voor de functie PySpark try_mod(). Deze functie ondersteunt de ANSI SQL-compatibele berekening van de rest van het gehele getal door twee numerieke waarden te delen. Als het argument deler 0 is, retourneert de functie try_mod() null in plaats van een uitzondering te genereren. U kunt de functie try_mod() gebruiken in plaats van mod of %, waardoor een uitzondering wordt gegenereerd als het argument deler 0 is en ANSI SQL is ingeschakeld.

Updates van de gebruikersinterface

SQL Editor:

De inline-assistent is nu beschikbaar in de SQL-editor. Klik op het assistentpictogram in het editorvak om de invoer in te schakelen. Typ een vraag of opmerking in het Engels en druk vervolgens op Enter (niet Shift+Enter, waarmee een query wordt uitgevoerd) om een antwoord met een andere weergave rechtstreeks in de editor te genereren.

Platform:

Er is nu een API voor meldingsbestemmingen beschikbaar. U kunt nu programmatisch webhook- en e-mailbestemmingen beheren voor uw waarschuwingen en taakuitvoeringsmeldingen. Zie Meldingsbestemmingen.

4 juli 2024

Databricks SQL-versie 2024.30 beschikbaar

implementatieschema: Preview-implementatie voor 2024.30: Tussen 9 juli en 15 juli

Wijzigingen in 2024.30

Lakehouse Federation is nu algemeen beschikbaar (GA)

Lakehouse Federation-connectors zijn nu algemeen beschikbaar (GA) voor de volgende typen databases:

  • MySQL
  • PostgreSQL
  • Amazon Redshift
  • Snowflake
  • Microsoft SQL Server
  • Azure Synapse (SQL Data Warehouse)
  • Databricks

In deze release worden ook de volgende verbeteringen geïntroduceerd:

  • Ondersteuning voor extra "pushdowns" (tekenreeks, wiskunde, diverse functies).
  • Verbeterde slagingspercentages voor pushdown bij verschillende query-structuren.
  • Aanvullende mogelijkheden voor pushdown-debuggen:
    • In de EXPLAIN FORMATTED-uitvoer wordt de tekst van de doorgeschoven query weergegeven.
    • In de gebruikersinterface van het queryprofiel worden de doorgestuurde querytekst, federatieve knooppuntidentificaties en uitvoeringstijd van JDBC-query's (in gedetailleerde modus) weergegeven. Zie Door het systeem gegenereerde federatieve query's weergeven.

DESCRIBE HISTORY toont nu clusterkolommen voor tabellen die gebruikmaken van liquide clustering

Wanneer u een DESCRIBE HISTORY-query uitvoert, wordt in de kolom operationParameters standaard een clusterBy veld weergegeven voor CREATE OR REPLACE- en OPTIMIZE-bewerkingen. Voor een Delta-tabel die gebruikmaakt van liquide clustering, wordt het clusterBy veld gevuld met de clusterkolommen van de tabel. Als de tabel geen gebruikmaakt van liquide clustering, is het veld leeg.

Ondersteuning voor primaire en vreemde sleutels is algemeen beschikbaar.

Ondersteuning voor primaire en vreemde sleutels in Databricks Runtime is algemeen beschikbaar. De GA-release bevat de volgende wijzigingen in de bevoegdheden die vereist zijn voor het gebruik van primaire en buitenlandse sleutels:

  • Als u een foreign key wilt definiëren, moet u de SELECT bevoegdheid hebben op de tabel met de primaire sleutel waarnaar de foreign key verwijst. U hoeft niet de eigenaar van de tabel te zijn met de primaire sleutel, die eerder vereist was.
  • Het verwijderen van een primaire sleutel met behulp van de CASCADE-component vereist geen rechten voor de tabellen die buitenlandse sleutels definiëren die de primaire sleutel refereren. Voorheen moest u eigenaar zijn van de verwijzende tabellen.
  • Voor het verwijderen van een tabel met beperkingen zijn nu dezelfde bevoegdheden vereist als het verwijderen van tabellen die geen beperkingen bevatten.

Zie CONSTRAINT clausule, ADD CONSTRAINT clausule en DROP CONSTRAINT clausule voor instructies over het gebruik van primaire en vreemde sleutels met tabellen of weergaven.

Vloeistofclustering is algemeen beschikbaar

Ondersteuning voor liquide clustering is nu algemeen beschikbaar met Databricks Runtime 15.2 en hoger. Zie Liquid Clustering gebruiken voor tabellen.

Typeverbreding is beschikbaar in publieke preview.

U kunt nu typebreedheid inschakelen voor tabellen die worden ondersteund door Delta Lake. Tabellen waarvoor typebreiding is ingeschakeld, kunnen het type kolommen wijzigen in een breder gegevenstype zonder onderliggende gegevensbestanden opnieuw te schrijven. Zie Typeverbreding.

Component voor schemaontwikkeling toegevoegd aan de syntaxis van SQL-samenvoeging

U kunt nu de WITH SCHEMA EVOLUTION-component toevoegen aan een SQL-samenvoegingsinstructie om schemaontwikkeling voor de bewerking mogelijk te maken. Zie schema-evolutiesyntaxis voor samenvoegen.

Ondersteuning voor vacuüminventaris

U kunt nu een inventaris opgeven van bestanden waarmee u rekening moet houden bij het uitvoeren van de opdracht VACUUM in een Delta-tabel. Zie de OSS Delta-documenten.

Ondersteuning voor Zstandard-compressiefuncties

U kunt nu de functies zst_compress, zstd_decompressen try_zstd_decompress gebruiken om BINARY gegevens te comprimeren en decomprimeren.

Queryplannen in de SQL-gebruikersinterface worden nu correct weergegeven PhotonWriteStage

Wanneer deze worden weergegeven in de SQL-gebruikersinterface, werden write-commando’s in queryplannen onjuist als PhotonWriteStage als operator getoond. Met deze release wordt de gebruikersinterface bijgewerkt om PhotonWriteStage als fase weer te geven. Dit is alleen een wijziging in de gebruikersinterface en heeft geen invloed op de wijze waarop query's worden uitgevoerd.

Updates van de gebruikersinterface

API-ondersteuning:

27 juni 2024

Rijfilters en kolommaskers in Databricks SQL gematerialiseerde weergaven en streaming-tabellen zijn in openbare preview.

Rijfilters en kolommaskers in Databricks SQL gematerialiseerde weergaven en streaming tabellen zijn openbare preview. De openbare preview-versie bevat de volgende wijzigingen:

  • U kunt rijfilters en kolommaskers toevoegen aan een databricks SQL-gerealiseerde weergave of streamingtabel.

    • U kunt databricks SQL gerealiseerde weergaven of streamingtabellen definiëren voor tabellen die rijfilters en kolommaskers bevatten.

    Zie CREATE MATERIALIZED VIEW en CREATE STREAMING TABLE.

Updates van de gebruikersinterface

Visualizations:

  • Verbeterde interactiviteit bij het tonen van tooltips bij muisovergangen over taart-, spreidings- en heatmapdiagrammen met veel datapunten.

Catalogusverkenner:

  • Een vernieuwde Catalogusverkenner-gebruikersinterface maakt het gemakkelijker om recente Unity Catalog-assets te detecteren en favoriet te maken vanuit de Snelle toegang weergave. De navigatie-ervaring is ook vereenvoudigd, zodat u berekeningen, opslag, referenties, verbindingen, DBFS en beheerdetails kunt verkennen met behulp van het pictogram InstellingenInstellingen in de linkerbovenhoek van het scherm. Delta Sharing, Clean Rooms en Externe gegevens hebben nu speciale pagina's.

6 juni 2024

Oplossing voor gematerialiseerde weergaven en streamingtabellen van Databricks SQL

Het probleem waardoor ALTER SCHEDULE query's op Databricks SQL gematerialiseerde weergaven en streamingtabellen pas van kracht werden na de volgende REFRESH bewerking, is opgelost. Nu worden ALTER SCHEDULE query's onmiddellijk toegepast. Zie Gematerialiseerde weergavevernieuwingen plannen.

Gematerialiseerde weergaven en streamingtabellen in Databricks SQL zijn in openbare preview-versie.

Gerealiseerde weergaven en streamingtabellen in Databricks SQL zijn openbare preview en beschikbaar voor alle klanten. De openbare preview-versie bevat de volgende wijzigingen:

Updates van de gebruikersinterface

Dashboards:

  • Accountgebruikers kunnen nu visualisatiegegevens downloaden van gepubliceerde dashboards
  • Niet-gepubliceerde dashboards kunnen nu worden gepubliceerd met behulp van de vervolgkeuzelijst Concept/Publiceren boven aan het dashboard.
  • Er is een probleem opgelost waarbij parameters met de naam limiet niet zijn gedetecteerd.

Visualizations:

  • Verbeterde weergave van boxplots in donkere modus.

Query-inzichten:

  • Voor alle notebooks die zijn gekoppeld aan SQL Warehouses, hebt u toegang tot het queryprofiel door te klikken op Zie prestaties onder de cel met de query. Als de cel meerdere query's bevat, wordt voor elke instructie een koppeling naar het queryprofiel opgegeven.

30 mei 2024

Nieuw machtigingsniveau voor SQL Warehouses

Machtiging Kan monitoren stelt gebruikers in staat om SQL-magazijnen te monitoren, inclusief de bijbehorende querygeschiedenis en queryprofielen. De Kan monitoren-toestemming bevindt zich nu in openbare preview. Zie SQL Warehouse-ACL's.

Updates van de gebruikersinterface

Dashboardverbeteringen:

  • Er is een kebabmenu toegevoegd aan de dashboardwidgets voor het downloaden van afbeeldingen en gegevens.
  • Gebruikers kunnen parameters van oudere dashboardquery's en parameters van vervolgkeuzelijsten migreren naar dashboards.

23 mei 2024

Updates van de gebruikersinterface

  • U kunt nu meerdere items in de werkruimte selecteren die u wilt verplaatsen of verwijderen. Wanneer er meerdere objecten zijn geselecteerd, wordt er een actiebalk weergegeven en worden opties geboden voor het verplaatsen of verwijderen van items. Daarnaast kunt u meerdere items selecteren met de muis en ze naar een nieuwe locatie slepen. Bestaande machtigingen voor objecten zijn nog steeds van toepassing tijdens bulksgewijs verplaatsen en verwijderen.
  • U kunt nu Unity Catalog-assets markeren als favorieten in de Catalogusverkenner en SchemaBrowser. Dit omvat catalogi, schema's, tabellen, modellen, schijven en functies. Unity Catalog-assets die u als favorieten markeert, zijn eenvoudig toegankelijk vanaf de startpagina van Azure Databricks.

Dashboard-updates:

  • Combinatiegrafieken met dubbele assen geven nu correct stavenlegenda's weer op de rechteras en lijnenlegenda's op overeenkomstige wijze.
  • Dubbelassige grafieken geven nu labels op de balken correct weer.

Updates voor visualisaties:

  • De voorwaardelijke opmaaklabels van de tabeleditor voor als en dan ondersteunen nu ook de donkere modus.
  • Het redundante pictogram voor open koppeling is verwijderd uit de tooltips voor de opmaak van de tabelbewerker.
  • Het label van de standaardletterkleur in de tabeleditor wordt nu automatisch uitgelijnd.

16 mei 2024

planning voor implementatie

  • Preview-implementatie voor 2024.25: Voltooid op 1 mei
  • Huidige implementatie voor 2024.25: Tussen 14 mei en 21 mei

Note

Een upgrade naar de Panda Python-bibliotheek (versie 2.0.3) heeft een belangrijke wijziging veroorzaakt in Databricks SQL-versie 2024.20. Azure Databricks heeft versie 2024.20 niet geïmplementeerd in het huidige kanaal. In plaats daarvan is het preview-kanaal bijgewerkt naar 2024.25 op 1 mei 2025. De huidige kanaaluitrol gaat rechtstreeks van 2024.15 naar 2024.25.

Wijzigingen in 2024.25

Gegevensbeheer

Referentiepassthrough en toegangsbeheer van Hive-metastore-tabellen worden niet langer ondersteund.

Referentie-passthrough en toegangsbeheer voor Hive-metastore-tabellen zijn verouderde modellen voor gegevensbeheer. Voer een upgrade uit naar Unity Catalog om de beveiliging en governance van uw gegevens te vereenvoudigen door een centrale plaats te bieden voor het beheren en controleren van gegevenstoegang in meerdere werkruimten in uw account. Zie Wat is Unity Catalog?.

Ondersteuning voor referentiepassthrough en toegangsbeheer voor Hive-metastore-tabellen zal worden verwijderd in een toekomstige versie van Databricks Runtime.

SQL-taalfuncties

De * (ster) clausule wordt nu ondersteund in de WHERE clausule.

U kunt nu de stercomponent (*) in de WHERE-component gebruiken om te verwijzen naar alle kolommen uit de SELECT lijst. Bijvoorbeeld SELECT * FROM VALUES(1, 2) AS T(a1, a2) WHERE 1 IN(T.*).

Ondersteuning voor Cloudflare R2-opslag om vanaf 2024 uitgaande kosten bij gegevensoverdracht tussen regio's te vermijden.

U kunt Cloudflare R2 nu gebruiken als cloudopslag voor gegevens die zijn geregistreerd in Unity Catalog. Cloudflare R2 is voornamelijk bedoeld voor gebruiksscenario's voor Delta Sharing waarin u de kosten voor uitgaand gegevensverkeer wilt voorkomen die door cloudproviders in rekening worden gebracht wanneer gegevens door regio's worden gekruist.

Cloudflare R2-opslag ondersteunt alle Databricks-gegevens en AI-bronnen die worden ondersteund door Azure Data Lake Storage.

Zie Cloudflare R2-replica's gebruiken of opslag migreren naar R2 en Een opslagreferentie maken om verbinding te maken met Cloudflare R2.

Updates van de gebruikersinterface

De functies in deze sectie zijn onafhankelijk van de hierboven beschreven SQL Warehouse-rekenversies.

Updates voor gegevensdetectie: De Hive Metastore naar Unity Catalog-updatewizard ondersteunt het upgraden van beheerde Hive Metastore-tabellen met behulp van algemene rekenclusters of SQL-warehouses. Als u meer dan 20 tabellen bijwerkt, wordt een nieuw notitieblok gemaakt met de opdrachten SYNC AND ALTER TABLE waarmee de conversie wordt uitgevoerd.

Dashboard-updates:

  • De functionaliteit voor twee assen is nu beschikbaar voor gebied-, staaf-, lijn- en spreidingsdiagrammen.
    • Wanneer u een grafiek met dubbele as inschakelt, worden de astitel en het bereik niet meer gekopieerd naar de secundaire as.
    • Het laatste veld dat in de visualisatieconfiguratie wordt geïdentificeerd, wordt automatisch verplaatst naar de y-as aan de rechterkant.

9 mei 2024

SQL Editor herstelupdates:

  • De beheerinstelling Functies van het klembord van de resultattabel is nu van toepassing op de nieuwe resultattabel van de SQL-editor.

Dashboardverbeteringen:

  • Met op query's gebaseerde parameters kunnen auteurs een lijst met selecteerbare waarden definiëren die kijkers kunnen gebruiken als parameters voor andere visualisaties op een dashboardcanvas. Zie Parameters op basis van query's gebruiken.
  • Kolomvolgorde in bestanden die zijn gedownload uit een tabelwidget, blijft nu behouden.
  • De tabeleditor bevat nu zweeftooltips die de namen van kolommen weergeven.
  • Wanneer u overschakelt van andere visualisatietypen naar een histogram, blijft informatiecodering nu beter behouden.

Oplossingen voor dashboards:

  • Er is een probleem opgelost waarbij een filter voor één rasterhoogte een onnodige overloopschuifbalk weergeeft.
  • Er is een probleem opgelost waarbij onjuist gerenderde visualisaties op gepubliceerde dashboards zijn veroorzaakt waarbij een kolom met gegevenssets waarnaar wordt verwezen, is verwijderd.

2 mei 2024

Dashboard-updates:

  • Query's en visualisaties kunnen nu vanuit sql-editor worden gekopieerd naar een nieuw dashboard. U kunt nog steeds visualisaties toevoegen aan verouderde dashboards vanuit de SQL-editor. Zie Bewerken, downloaden of toevoegen aan een dashboard.
  • Dashboards onderhouden nu een resultatencache van 24 uur om de initiële laadtijden te optimaliseren. Zie Optimalisatie en caching van gegevenssets.
  • Staafdiagrammen met categorische X en kwantitatieve Y worden nu gesorteerd in antwoorden van Databricks Assistant.
  • Opgelost migratieprobleem met oudere histogram COUNT (*) om een nauwkeurige migratie te garanderen.
  • De mogelijkheid geïmplementeerd om numerieke typen en datumtypen te combineren in een filterwidget.
  • Wanneer u grafieken maakt, worden in Databricks Assistant nu automatisch relevante kolommen voorgesteld terwijl u typt.

Visualisatie-updates:

  • Door de gebruiker geselecteerde kleur voor tabellen blijft nu behouden in de licht- en donkermodus in verouderde grafieken.
  • De logica voor het afkappen van gegevens is verbeterd om de prestaties in combinatie-, taart-, heatmap- en histogramdiagrammen te verbeteren.
  • Nu wordt er altijd een vinkje bovenaan een kwantitatieve as weergegeven in basisgrafieken.

23 april 2024

UI-updates:

  • Voor alle dialoogvensters delen in de gebruikersinterface is de All Users-groep hernoemd naar All Workspace Users. De nieuwe naam weerspiegelt het bereik van de groep, die altijd gebruikers bevat die zijn toegewezen aan de werkruimte. Er wordt geen wijziging aangebracht in groepslidmaatschap als onderdeel van deze naamswijziging.

Dashboardverbeteringen:

  • Wanneer het SQL Warehouse van een dashboard wordt gestart, wordt er een dialoogvenster weergegeven waarin de wachttijd wordt uitgelegd.
  • Schuifpositie blijft behouden wanneer u schakelt tussen de tabbladen Canvas en Gegevens.
  • Het klonen van een verouderd dashboard om een Lakeview-dashboard te maken, ondersteunt nu een aantal parameterconversies. Zie Verouderde parameters aanpassen.
  • Relatieve datums, zoals Vandaag, Morgenen 7 dagen geleden, worden nu ondersteund voor datum- en tijdparameters.
  • Schuifbalken voor het getallenbereik kunnen als filters op een dashboard worden toegevoegd.
  • Histogrammen kunnen nu niet-geaggregeerde gegevens weergeven.
  • Spreidingsdiagrammen ondersteunen nu grootte-encodering.

Oplossingen voor dashboards:

  • Tijdelijke kleurcodering kan nu kleurtoewijzingen correct wijzigen.

Visualisatie-updates:

  • Aangepaste tooltop-indelingen functioneren nu correct voor grafieken met meerdere assen.
  • De Nieuwe grafieken preview-tag wordt verwijderd wanneer gebruikers de wisselknop in de afgelopen 14 dagen niet hebben gewijzigd.

18 april 2024

Lakeview-dashboards zijn algemeen beschikbaar

Lakeview-dashboards zijn nu het standaardhulpprogramma voor dashboarding. Ze zijn gewijzigd als Dashboards in de gebruikersinterface. Databricks SQL-dashboards worden nu Verouderde dashboards genoemd. De namen van de gerelateerde API-hulpprogramma's zijn niet gewijzigd.

  • Dashboardverbeteringen:
    • Auditlogboeken zijn beschikbaar voor Lakeview-dashboards. Zie AI/BI-dashboard-gebeurtenissen.
    • Gegevens die zijn gedownload uit dashboards, respecteren toegepaste parameters.
    • Databricks Assistant is ingeschakeld op het tabblad Data zonder eerst gegevenssets toe te voegen.
    • Gestapelde staafdiagrammen met meerdere Y-velden kunnen het sorteren van de X-as ondersteunen op basis van de som van Y-aswaarden.
    • Schakelen tussen lineaire en log(symmetrisch) schaalfuncties in menu's van visualisatieas.
    • De standaardgrootte van de filterwidget is nu compacter.
    • De initiële laadtijd voor de filterwidget voor tekstinvoer is verminderd.
    • Verbeterde automatische grafiekconversies bij het migreren van verouderde dashboards.
  • Oplossingen voor dashboards:
    • De waarschuwing met instellingen voor beperkte weergave wordt niet weergegeven als het dashboard met anderen is gedeeld.
    • De foutberichten in de SQL-editor van het tabblad Data zijn nu geschikt voor de donkere modus.

Updates van de gebruikersinterface

De functies die in deze sectie worden vermeld, zijn onafhankelijk van de hierboven beschreven SQL Warehouse-rekenversies.

Improvements:

  • In de tooltips op gestapelde grafieken wordt nu standaard de stackwaarde en het percentage weergegeven.
  • De tooltips voor grafieken met meerdere assen accentueren nu het item waarover met de muis wordt bewogen.
  • Tabelvisualisaties voor Databricks SQL passen nu het gegevenstype van een nieuw queryresultaat aan wanneer ze worden bewerkt in de SQL-editor.
  • In de tabel Querygeschiedenis van De Catalogusverkenner ziet u een structuurweergave voor het toewijzen van querybronnen . U kunt dit gebruiken om te zien welke entiteiten de query hebben laten uitvoeren.

11 april 2024

Updates van de gebruikersinterface

De functies die in deze sectie worden vermeld, zijn onafhankelijk van de hierboven beschreven SQL Warehouse-rekenversies.

Improvements:

  • U kunt nu groeperen op percentage bij het maken van visualisaties in Databricks SQL en notebooks.
  • Voor nieuwe grafieken (in openbare preview) kunt u inzoomen op één as door op een rechte lijn parallel aan de as te klikken en te slepen.
  • Het gedeelde Unity Catalog-cluster Allowlist UI is nu algemeen beschikbaar. U kunt deze openen op de pagina metastore-details in Catalog Explorer. Zie Hoe items toe te voegen aan de acceptatielijst.
  • Formulieren voor het maken en bewerken van externe locaties worden nu geopend als een volledige pagina. Ze bevatten de optie om een opslagreferentie toe te voegen.

Fixes:

  • Er is een probleem opgelost voor histogrammen waarbij negatieve waarden ten onrechte als positief werden gemarkeerd.

4 april 2024

Updates van de gebruikersinterface

De functies die in deze sectie worden vermeld, zijn onafhankelijk van de hierboven beschreven SQL Warehouse-rekenversies.

Improvements:

  • Verbeteringen in histogrammen op Lakeview-dashboards.
    • Er is ondersteuning toegevoegd voor labels.
    • Bin-instellingen blijven nu behouden wanneer u schakelt tussen verschillende velden.
  • In de voorbeeldengalerij op de dashboardvermeldingspagina worden nu Lakeview-dashboards aangemaakt. Zie Zelfstudie: Voorbeelddashboardsgebruiken.
  • Als u met de rechtermuisknop op de rand van een widget op een Lakeview-dashboard klikt, wordt een contextmenu geopend.
  • De navigatiebalk aan de linkerkant blijft behouden voor werkruimtegebruikers die gepubliceerde Lakeview-dashboards bekijken.
  • Filterselecties blijven behouden wanneer u navigeert tussen gepubliceerde en conceptdashboards van Lakeview.
  • Kolomnamen kunnen nu worden ingevoegd in de SQL-editor wanneer u een query bewerkt vanaf het tabblad Data in een conceptdashboard van Lakeview.
  • Als u een Lakeview-dashboard vervangt, blijft de bestaande dashboardnaam en wordt de inhoud vervangen.
  • Het wisselen van visualisaties tussen heatmaps en andere grafiektypen behoudt nu de relevante velden beter.

Fixes:

  • Staafdiagrammen met kleurcoderingen beperken nu het toevoegen van meerdere Y-asvelden.
  • Er is een probleem opgelost waarbij de knop Downloaden als PNG- ontbreekt in sommige visualisaties.
  • De opmaak is gecorrigeerd voor negatieve grote gehele getallen die eerder duizenden scheidingstekens missen.
  • Onjuiste hoverlijnplaatsing opgelost bij het zweven boven labels in lijndiagrammen.

28 maart 2024

Databricks SQL-versie 2024.15 beschikbaar

planning voor implementatie

  • Preview-implementatie voor 2024.15: Tussen 14 februari en 4 maart
  • Huidige implementatie voor 2024.15: Tussen 25 maart en 8 april

Wijzigingen in 2024.15

Delta-updates

  • Delta UniForm is nu algemeen beschikbaar: UniForm is nu algemeen beschikbaar en maakt gebruik van de tabelfunctie IcebergCompatV2. U kunt UniForm nu inschakelen of upgraden voor bestaande tabellen. Zie Delta-tabellen lezen met Iceberg-clients.
  • Statistieken voor het overslaan van gegevens voor Delta-tabellen opnieuw compileren: U kunt nu statistieken die zijn opgeslagen in het Delta-logboek opnieuw compileren nadat u kolommen hebt gewijzigd die worden gebruikt voor het overslaan van gegevens. Zie Specificeren van statistiekkolommen.

Updates van de SQL-taal

  • Tijdelijke variabelen declareren in een SQL-sessie: In deze release wordt de mogelijkheid geïntroduceerd om tijdelijke variabelen te declareren in een sessie die kan worden ingesteld en waarnaar vervolgens in query's kan worden verwezen. Zie variabelen.
  • ondersteuning voor systeemeigen XML-bestandsindelingen (openbare preview): ondersteuning voor systeemeigen XML-bestandsindelingen is nu beschikbaar in openbare preview. Ondersteuning voor XML-bestandsindeling maakt opname, query's en parsering van XML-gegevens mogelijk voor batchverwerking of streaming. Het kan automatisch schema- en gegevenstypen afleiden en ontwikkelen, SQL-expressies zoals from_xmlondersteunt en XML-documenten kan genereren. Het vereist geen externe jar's en werkt naadloos met Auto Loader, read_files, en COPY INTODLT. Zie XML-bestanden lezen en schrijven.

updates voor Apache Spark SQL

Databricks SQL 2024.15 bevatten Apache Spark 3.5.0. Aanvullende foutoplossingen en verbeteringen voor SQL worden vermeld in de releasenotitie van Databricks Runtime 14.3. Zie Apache Spark- en zoek naar de [SQL]-tag voor een volledige lijst.

Updates van de gebruikersinterface

De functies die in deze sectie worden vermeld, zijn onafhankelijk van de hierboven beschreven SQL Warehouse-rekenversies.

  • Een nieuw tabblad Overzicht op de entiteitspagina van Catalog Explorer toont belangrijke metagegevens, zoals bestanden, gegevensbron, eigenaar, tabelschema en opmerkingen.
  • Lakeview-dashboardupdates:
    • Lakeview-dashboards ondersteunen nu parameters. Auteurs kunnen parameters toevoegen aan gegevenssetquery's op het tabblad Gegevens en vervolgens parameters instellen op het canvas met behulp van selectors met één waarde en datumkiezers. Zie Werken met de dashboardparameters.
    • Lakeview-dashboards worden nu ondersteund in de API voor werkruimtemachtigingen. Zie PATCH /api/workspace/workspace/updatepermissions in de REST API-verwijzing.
    • Control widgets op het canvas zijn gewijzigd in Filter widgets.
    • Combinatiegrafieken staan niet langer niet-geaggregeerde velden op de x-as toe.
    • De knop Koppeling kopiëren in het dialoogvenster Delen bevat nu parameters die zijn opgeslagen in de URL.
    • Widgets op gepubliceerde dashboards geven geen randen meer weer wanneer u de muisaanwijzer aanwijst.
    • Er is een probleem opgelost waarbij de knoppen 'Databricks Assistant' en 'PNG downloaden' elkaar overlappen met de grafiekvisuals.
  • Als u van visualisatie wisselt tussen heatmaps en andere grafiektypen, blijven de relevante velden nu beter behouden.
  • Staafdiagrammen met kleurcoderingen beperken nu het toevoegen van meerdere Y-asvelden.

21 maart 2024

  • Unity Catalog-modellijn bevindt zich nu in publieke preview.

De tabelweergave in Catalog Explorer heeft nu een tabblad Overzicht om de primaire metagegevens te beschrijven.

  • MET SQL-warehouses voor notebooks, nu algemeen beschikbaar, kunt u profiteren van volledig beheerde, directe en schaalbare rekenkracht voor uw SQL-workloads in de uitgebreide, gezamenlijke ontwerpomgeving van een notebook. Zie Een notebook gebruiken met een SQL Warehouse-.

De volgende oplossingen en verbeteringen zijn van toepassing op Lakeview-dashboards:

  • Uitgebreide API-ondersteuning voor Lakeview voegt de mogelijkheid toe om dashboards te maken, op te halen, bij te werken en te verwijderen. Zie Lakeview in de REST API-documentatie.
  • Er is een vernieuwingsknop toegevoegd voor de Catalogus-browser op het tabblad Gegevens.
  • Lakeview-dashboards worden nu weergegeven voordat Dashboards in het menu Nieuw in de zijbalk van de werkruimte. Op de pagina met dashboardvermeldingen wordt het tabblad Lakeview-dashboards links van het tabblad Dashboards weergegeven.
  • De Databricks Assistant-ervaring voor Lakeview is bijgewerkt met een invoervak en suggesties om de zichtbaarheid te verbeteren en gebruikers te helpen inzicht te krijgen in de aanwijzingen die ze kunnen stellen.
  • Lakeview-visualisaties ondersteunen nu mediaanaggregaties.
  • De kleurkiezer is bijgewerkt in de visualisatie-editor van het Lakeview-dashboard voor een meer gestroomlijnde gebruikerservaring bij het maken van tabellen.
  • Verbeterde migratie van cirkeldiagrammen ter ondersteuning van scenario's met hoek- of kleurdefinities.
  • Er is een fout opgelost die groepering van grafieken met de naam countverhinderde. Grafieken kunnen nu worden gegroepeerd op velden met de naam aantal.
  • Voor staafdiagrammen worden groep en stack indelingsbesturingselementen nu verborgen wanneer deze niet van toepassing zijn op de door de gebruiker geselecteerde configuratie.

14 maart 2024

Voor Lakeview-dashboards:

  • Histogrammen ondersteunen nu aangepaste categorische kleuren.
    • Heatmaps ondersteunen nu kwantitatieve schalen.
    • Titels en beschrijvingen blijven behouden bij het schakelen tussen visualisatietypen, waaronder combinatiegrafieken.
    • U kunt nu de onderliggende dataset openen die verbonden is aan een widget voor een concept-dashboard door er met de rechtermuisknop op te klikken. De gegevensset wordt geopend op het tabblad Gegevens.
  • Nieuwe grafieken passen nu aliassen en aangepaste kleuren toe voor null-waarden in numerieke kolommen.
  • Nieuwe grafieken tonen nu streepjes om de bovenkant van de y-as aan te geven.

7 maart 2024

  • Wanneer u een tabel bekijkt in Catalog Explorer, bevat de knop Maken een optie voor het maken van een Lakeview-dashboard in plaats van een Databricks SQL-dashboard.
  • Histogrammen zijn nu beschikbaar voor Lakeview-dashboards. Histogrammen worden vaak gebruikt om de verdeling van een numeriek veld te visualiseren.
  • Wanneer u een Databricks SQL-dashboard kloont om een Lakeview-dashboard te maken, worden problemen met de conversie van gegevenssets nu weergegeven als fouten in de nieuwe widget op het Lakeview-dashboard.
  • Kleurovergangen zijn beschikbaar wanneer een numeriek veld wordt gebruikt voor een visualisatie op een Lakeview-dashboard.
  • Kleurovergangen worden nu weergegeven in de visualisatie-editor van het Lakeview-dashboard wanneer een Kleur per veld is opgegeven.
  • De titel en beschrijving die aan een visualisatie zijn gekoppeld, kunnen niet meer worden bewerkt als de viewer geen bewerkingsbevoegdheden meer heeft op een concept Lakeview-dashboard.
  • Er is een probleem opgelost waarbij knopinfo in grafieken met meer dan 100 reeksen onterecht alle reeksen toonde. Nu wordt alleen de gefocuste reeks weergegeven.
  • Verminderde typelatentie in de SQL-editor met 30% door middel van prestatieoptimalisaties.
  • Wanneer u query's in de SQL-editor beheert, wordt het tabblad automatisch gesloten wanneer u een query naar de prullenbak verplaatst.
  • Er is een probleem opgelost in de SQL-editor waarbij tekst per ongeluk werd geselecteerd bij het aanpassen van de breedte van het zijpaneel.

29 februari 2024

  • De schemabrowser in Catalog Explorer geeft nu primaire en buitenlandse sleutelbeperkingen weer.
  • De bewaartijd die op het tabblad Herkomst in Catalog Explorer wordt weergegeven, is verlengd naar één jaar.
  • Knopinfo voor nieuwe grafieken in notitieblokken wordt nu altijd weergegeven binnen de grenzen van de visualisatie.
  • Meer informatie over het programmatisch beheren van Lakeview-dashboards met behulp van de REST API. Zie Dashboards beheren met werkruimte-API's.
  • Lakeview-dashboards ondersteunen nu histogrammen.
  • Verbeterd delen en publiceren in Lakeview-dashboards:
    • Verbeterde dialoogvensters voor delen en publiceren, waardoor gebruikers veilig en eenvoudig kunnen delen.
    • Dashboards die vanuit de werkruimtebrowser worden geopend, geven het gepubliceerde dashboard weer als dit bestaat. Kijkers kunnen nu ook details bekijken van de meest recente gepubliceerde versie, waaronder uitgever, tijd en referenties.
    • Voor editors kunt u met een nieuwe vervolgkeuzelijst in de gebruikersinterface van Lakeview Dashboard snel schakelen tussen conceptversies en gepubliceerde versies.

Februari 22, 2024

  • Met verbeteringen in het tabblad Voorbeeldgegevens in de tabelweergave Catalogusverkenner kunt u kolommen sorteren, geselecteerde gegevens naar het klembord kopiëren en regelnummers weergeven. Er kunnen nu betere speciale waarden worden weergegeven, zoals JSON-objecten, datums, numerieke en null-waarden.
  • Lakeview-dashboards bieden nu ondersteuning voor het verzenden van periodieke PDF-momentopnamen van het dashboard naar werkruimtegebruikers en meldingsbestemmingen. Zie Planningen en abonnementen.
  • De lijst met visualisatieopties in de vervolgkeuzelijst Lakeview wordt nu alfabetisch gesorteerd.
  • Wanneer u Databricks SQL-dashboards kopieert naar Lakeview-dashboards, tonen widgets die niet kunnen worden geconverteerd nu de visualisatieconfiguratiekiezer in plaats van een foutbericht.

15 februari 2024

  • De documentatie voor queryfilters op basis van code, zoals SELECT action AS 'action::filter', is verwijderd. Databricks raadt het bijwerken van query's aan om dit patroon te verwijderen.
  • Voor dashboards van Lakeview worden cirkeldiagrammen nu weergegeven met partjes van gelijke grootte wanneer er geen hoekveld is opgegeven.
  • Lakeview biedt nu ondersteuning voor combinatiegrafieken, waarmee staaf- en lijndiagrammen worden gecombineerd om twee verschillende waarden in hetzelfde diagram weer te geven.
  • Heatmapdiagrammen, die kleurintensiteit gebruiken om de grootte van de correlatie tussen twee discrete variabelen weer te geven, zijn nu beschikbaar in Lakeview.

8 februari 2024

  • U kunt nu toegang aanvragen bij het openen van een koppeling naar een Lakeview-dashboard waarvoor u geen machtigingen hebt.
  • De dashboardfilters van Lakeview hebben nu expliciete opties: Alles en Niets. Auteurs kunnen ervoor kiezen om de optie Alle te verbergen in enkele selectie-filters.
  • U kunt nu minimum- en maximumwaarden instellen voor assen in Lakeview-dashboarddiagrammen.

1 februari 2024

Databricks SQL-versie 2024.10 Beschikbaar

planning voor implementatie

  • Preview-implementatie voor 2024.10: Tussen 30 januari 2024 en 5 februari 2024
  • Huidige implementatie voor 2024.10: Tussen 13 februari 2023 en 20 februari 2024

Wijzigingen in 2024.10

  • Beschadigde bestandsafhandeling in DML-opdrachten opgelost: De DML-opdrachten DELETE, UPDATEen MERGE INTO de leesopties ignoreCorruptFiles en ignoreMissingFilesniet meer respecteren. Wanneer u een onleesbaar bestand in een tabel tegenkomt, mislukken deze opdrachten, zelfs als deze opties zijn opgegeven.
  • gelijktijdigheid op rijniveau is algemeen beschikbaar en standaard ingeschakeld: gelijktijdigheid op rijniveau vermindert conflicten tussen gelijktijdige schrijfbewerkingen door wijzigingen op rijniveau te detecteren. Gelijktijdigheid op rijniveau wordt alleen ondersteund voor tabellen zonder partitionering, waaronder tabellen met liquide clustering. Gelijktijdigheid op rijniveau is standaard ingeschakeld voor Delta-tabellen waarvoor verwijderingsvectoren zijn ingeschakeld. Zie Schrijfconflicten met concurrentie op rijniveau.
  • Ondiepe kloon voor externe tabellen van Unity Catalog (openbare preview): U kunt nu ondiepe kloon gebruiken met externe tabellen van Unity Catalog. Zie Ondiepe kloon van Unity Catalog-tabellen.
  • Snellere verzameling van statistieken met meerdere threads: De verzameling van statistieken is maximaal 10 keer sneller op kleine clusters bij het uitvoeren van CONVERT TO DELTA of het klonen van Iceberg- en Parquet-tabellen. Zie Omzetten naar Delta Lake en het incrementeel klonen van Parquet- en Apache Iceberg-tabellen naar Delta Lake.
  • Pushdown-filters in DeltaSource op Delta-bestanden: Voor een betere benutting worden partitiefilters op streamingquery's van Delta-tabellen nu naar Delta gepusht voordat snelheidslimitering wordt toegepast.

Updates van de gebruikersinterface

De functies in deze sectie zijn onafhankelijk van de hierboven beschreven SQL Warehouse-rekenversies.

  • De beheerweergave tabblad met vermeldingspagina's voor Databricks SQL-objecten (query's, dashboards en waarschuwingen) is verwijderd. Beheerders van de werkruimte kunnen alle objecten vanaf hun respectieve lijstpagina's bekijken. Zie Opgeslagen query's, verouderde dashboards en Databricks SQL-waarschuwingen bekijken en beheren.
  • Op de pagina querygeschiedenis worden standaard query's van de afgelopen 24 uur weergegeven. Zie zoekgeschiedenis.
  • Er is een menuoptie, Clone to Lakeview-dashboard, toegevoegd aan de gebruikersinterface van het Databricks SQL-dashboard. U kunt dit hulpprogramma gebruiken om een nieuw Lakeview-dashboard te maken dat dezelfde query's en visualisaties bevat in uw bestaande Databricks SQL-dashboards. Zie Een verouderd dashboard klonen naar een AI/BI-dashboard.
  • Staafdiagrammen in Lakeview-dashboards ondersteunen het stapelen van balken om te normaliseren naar 100%.
  • Er is een probleem opgelost waarbij inzoomen op een gepubliceerd Lakeview-dashboard resulteerde in focus op onjuiste zoomintervallen.

24 januari 2024

  • Het Lakeview-dashboardcanvas past de plaatsing van de widget automatisch aan om waar mogelijk lege verticale witruimte tussen rijen te verwijderen.
  • Beperkte witruimte tussen titel- en beschrijvingstekst in Visualisaties van Het Lakeview-dashboard.

18 januari 2024

  • Er is een weergaveprobleem opgelost voor visualisaties waarbij staafdiagrammen met één datum op de x-as een zeer dunne staaf hebben opgeleverd. Nieuwe grafiekvisualisaties worden weergegeven zoals verwacht.
  • Op de lijstpagina van het Lakeview-dashboard worden uw dashboards standaard weergegeven. U kunt filters op die pagina gebruiken om toegang te krijgen tot Lakeview-dashboards die eigendom zijn van andere werkruimtegebruikers.

11 januari 2024

  • Databricks SQL-queries en dashboard-API's ondersteunen het programmatisch wijzigen van de rolinstelling Uitvoeren als.

4 januari 2024

  • Last updated on