Opmerkingen bij de release van SQL Databricks
Dit artikel bevat nieuwe Functies en verbeteringen van Databricks SQL, samen met bekende problemen en veelgestelde vragen.
Vrijgaveproces
Databricks brengt voortdurend updates uit voor de gebruikersinterface van de Databricks SQL-webtoepassing, waarbij alle gebruikers gedurende een korte periode dezelfde updates ontvangen.
Daarnaast brengt Databricks regelmatig nieuwe SQL Warehouse-rekenversies uit. Er zijn altijd twee kanalen beschikbaar: Preview en Current.
Notitie
Releases worden gefaseerd. Uw Databricks-account wordt mogelijk pas bijgewerkt met een nieuwe SQL Warehouse-versie of Databricks SQL-functie tot een week of meer na de eerste releasedatum.
Notitie
Databricks SQL Serverless is niet beschikbaar in Azure China. Databricks SQL is niet beschikbaar in Azure Government-regio's.
Kanalen
Met kanalen kunt u kiezen tussen de rekenversie van Current SQL Warehouse of de preview-versie. Met preview-versies kunt u functionaliteit uitproberen voordat deze de Databricks SQL-standaard wordt. Profiteer van preview-versies om uw productiequery's en dashboards te testen op toekomstige wijzigingen.
Normaal gesproken wordt een preview-versie ongeveer twee weken na de release naar het huidige kanaal gepromoveerd naar het huidige kanaal. Sommige functies, zoals beveiligingsfuncties, onderhoudsupdates en oplossingen voor fouten, kunnen rechtstreeks worden vrijgegeven aan het huidige kanaal. Van tijd tot tijd kan Databricks een preview-versie naar het huidige kanaal promoveren volgens een ander schema. Elke nieuwe versie wordt aangekondigd in de volgende secties.
Zie Preview-kanalen voor meer informatie over het overschakelen van een bestaand SQL-warehouse naar het preview-kanaal. De functies die worden vermeld in de secties voor updates van de gebruikersinterface, zijn onafhankelijk van de SQL Warehouse-rekenversies die worden beschreven in de sectie Opgeloste problemen van de releaseopmerkingen.
Beschikbare Databricks SQL-versies
Huidig kanaal: Databricks SQL-versie 2024.35
- Zie functies in 2024.35.
15 augustus 2024
AI-/BI-dashboards:
Functie:
- Auditlogboekregistratie is nu beschikbaar voor query-uitvoeringen en e-mails met dashboardabonnementen. Zie Dashboards-gebeurtenissen.
Visualisaties:
Oplossing:
- Er is een probleem opgelost waarbij rijnummers in tabelvisualisaties onjuist werden na het wijzigen van het paginaformaat.
Gegevensdetectie:
Functie:
- De mogelijkheid om geneste complexe kolomtypen in Unity Catalog-tabellen uit te vouwen en samen te vouwen, wordt nu ondersteund.
8 augustus 2024
AI-/BI-dashboards:
Functies:
- Grafieken die verwijzen naar dezelfde gegevensset ondersteunen nu kruislings filteren, zodat u op een element in de ene grafiek kunt klikken om gerelateerde gegevens in een andere grafiek te filteren en bij te werken. Zie Kruislings filteren.
- Aangepaste getalopmaak wordt ondersteund voor de meeste grafieken. Zie Getalnotatie in grafieken.
Correcties:
- Er is een probleem opgelost met het schuiven bij het selecteren van datums in de datumkiezer met behulp van het muiswiel of aanraakscherm.
- In de tabelvisualisatie worden nu rijnummers correct opnieuw ingesteld bij het wijzigen van het aantal items per pagina.
- Grafieken die kleuren gebruiken om onderscheid te maken tussen categorieën, behouden nu hun kleurtoewijzingen wanneer filters worden toegepast.
1 augustus 2024
Updates van de gebruikersinterface
AI-/BI-dashboards:
Functies:
- U kunt nu visualisatiewidgets configureren om statische widgetparameters te gebruiken. Zie parameters voor statische widget.
- U kunt nu standaardwaarden instellen voor de volgende filtertypen:
- Enkele waarde
- Meerdere waarden
- Datumkiezer
- Datumbereikkiezer
- Tekstinvoer
Oplossing:
- Kijkers zonder bewerkingstoegang zien de werkbalk voor het toevoegen van widgets niet meer tijdens het weergeven van een conceptdashboard.
Visualisaties:
- Tabelsortering blijft nu behouden wanneer gegevens worden gewijzigd als gevolg van filteren.
SQL Editor:
- Verbeterde leesbaarheid door extra opvulling toe te voegen tussen de laatste regel van een query en de resultaatuitvoer.
25 juli 2024
Databricks REST API:
- API's voor het beheren van query's, waarschuwingen, gegevensbronnen en machtigingen zijn gewijzigd. De verouderde versie wordt zes maanden nog steeds ondersteund. Deze overgangsperiode is bedoeld om u voldoende tijd te geven om uw toepassingen en integraties naar de nieuwe versie te migreren voordat de oudere versie wordt uitgefaseerd. Zie Bijwerken naar de nieuwste versie van de SQL API van Databricks
Updates van de gebruikersinterface
AI-/BI-dashboards:
Functies:
- Null-indicatoren informeren nu dashboardauteurs van verborgen null-waarden in grafieken.
- Totalen in draaitabellen worden nu berekend in de back-end, zodat de nauwkeurigheid zelfs wanneer gevisualiseerde gegevens worden afgekapt. Totalen voor alle aggregaties worden ondersteund.
- Histogrammen ondersteunen nu een bin-breedte van nul.
- Dashboards kunnen nu worden beheerd met Behulp van Terraform. Zie de Databricks Terraform-documentatie voor meer informatie.
AI/BI Genie:
Functies:
- U kunt nu een koppeling toevoegen aan een Genie-ruimte vanuit een AI/BI-dashboard. Wanneer dashboardviewers de koppeling openen, kunnen ze de Genie-ruimte gebruiken om hun vragen te beantwoorden.
- Gebruik het hulpprogramma Een Genie-ruimte maken om met één klik een nieuwe Genie-ruimte te maken op basis van een AI/BI-dashboard. De Genie-ruimte maakt gebruik van uw huidige conceptdashboard om het eerste framework voor een Genie-ruimte te maken.
18 juli 2024
Updates van de gebruikersinterface
AI-/BI-dashboards:
Verbeteringen
- De assistent kan u nu helpen bij het bewerken van titels van grafiekas en het beheren van de zichtbaarheid van grafiekgegevenslabels.
- U kunt nu meerdere metingen toewijzen aan draaitabellen.
- Er zijn meer relatieve datum/tijd-opties toegevoegd, zoals Afgelopen 10 seconden en Last minute, voor besturingselementen voor datum/tijd-parameters.
- Er is een optie Nu opgegeven in de besturingselementwidgets van datumkiezer voor het filteren van datum/tijd-waarden.
- Verbeterde verwerking van uitzonderingen om bewerkingswidgets met uploadfouten toe te staan.
- De groottelimiet verhoogd voor het filteren van gegevenssets op velden die lokaal moeten worden uitgevoerd, zonder queryuitvoering in de back-end, tot 100.000 rijen of 100 MB.
Genie:
Verbeteringen
- Tijdvergelijkingsvragen retourneren nauwkeurigere antwoorden.
- Antwoorden op vragen over gerangschikte waarden verbergen nu tussenliggende classificatiekolommen om de leesbaarheid van reacties te verbeteren.
- Nieuwe speciale verwerking voorkomt onbedoelde toepassing van bepaalde optimalisaties.
- De knop Terug is vervangen door breadcrumbs voor eenvoudigere navigatie.
- U kunt nu tabeldetails uitvouwen en weergeven op het tabblad Gegevens .
- Verbeterde verwerking van niet-Engelse tekens voorkomt voortijdige inzending van prompts van speciale toetsencombinaties.
Catalogusverkenner:
- Er is nu een nieuwe wizard catalogusconfiguratie beschikbaar voor het instellen van werkruimtebindingen, catalogusbevoegdheden en metagegevens bij het maken van een catalogus.
SQL Warehouse-bewaking:
- CAN MONITOR-machtiging is nu algemeen beschikbaar. Hiermee kunnen bevoegde gebruikers SQL-warehouses bewaken, waaronder de bijbehorende querygeschiedenis en queryprofielen. Zie SQL Warehouse-ACL's.
donderdag 11 juli 2024
Databricks SQL-versie 2024.35 beschikbaar
Implementatieschema: Preview-implementatie voor 2024.35: Tussen 9 juli en 15 juli
Wijzigingen in 2024.35
Kolomtoewijzing uitschakelen met drop-functie
U kunt nu kolomtoewijzing DROP FEATURE
uitschakelen voor Delta-tabellen en het tabelprotocol downgraden. Zie Kolomtoewijzing uitschakelen.
Syntaxis en functies van varianttype in openbare preview
Ingebouwde Apache Spark-ondersteuning voor het werken met semi-gestructureerde gegevens als VARIANT
type is nu beschikbaar in Spark DataFrames en SQL. Zie Queryvariantgegevens.
Ondersteuning voor varianttypen voor Delta Lake in openbare preview
U kunt nu VARIANT
semi-gestructureerde gegevens opslaan in tabellen die worden ondersteund door Delta Lake. Bekijk de variantondersteuning in Delta Lake.
Ondersteuning voor verschillende modi van schemaontwikkeling in weergaven
MET CREATE VIEW en ALTER VIEW kunt u nu een schemabindingsmodus instellen, waardoor u kunt verbeteren hoe weergaven schemawijzigingen verwerken in onderliggende objecten. Met deze functie kunnen weergaven schemawijzigingen in de onderliggende objecten tolereren of aanpassen. Hiermee worden wijzigingen in het queryschema opgelost die het gevolg zijn van wijzigingen in objectdefinities.
Prestatieverbetering voor sommige vensterfuncties
Deze release bevat een wijziging die de prestaties van sommige Spark-vensterfuncties verbetert, met name functies die geen component of parameter window_frame
bevattenORDER BY
. In deze gevallen kan het systeem de query herschrijven om deze uit te voeren met behulp van een statistische functie. Met deze wijziging kan de query sneller worden uitgevoerd door gedeeltelijke aggregatie te gebruiken en de overhead van actieve vensterfuncties te voorkomen. De Spark-configuratieparameter spark.databricks.optimizer.replaceWindowsWithAggregates.enabled
bepaalt deze optimalisatie en is standaard ingesteld true
op. Als u deze optimalisatie wilt uitschakelen, gaat u spark.databricks.optimizer.replaceWindowsWithAggregates.enabled
naar false
.
Ondersteuning voor de try_mod
toegevoegde functie
In deze release wordt ondersteuning toegevoegd voor de functie PySpark try_mod()
. Deze functie ondersteunt de ANSI SQL-compatibele berekening van de rest van het gehele getal door twee numerieke waarden te delen. Als het argument deler 0 is, retourneert de try_mod()
functie null in plaats van een uitzondering te genereren. U kunt de try_mod()
functie gebruiken in plaats van mod
of %
, die een uitzondering genereert als het argument deler 0 is en ANSI SQL is ingeschakeld.
Updates van de gebruikersinterface
AI-/BI-dashboards:
Functies:
- Als u met de rechtermuisknop op een gegevensset klikt, wordt nu de optie Naam voorstellen weergegeven. In dit hulpprogramma worden tabelmetagegevens gebruikt om de naam van uw gegevensset automatisch te wijzigen.
- U kunt ervoor kiezen om de legenda in een visualisatiewidget te verbergen.
- Widgettitels die zijn afgekapt, tonen nu de volledige titel bij aanwijzen.
- Widgets tonen nu een afkappingswaarschuwing als volledige resultaten niet worden weergegeven.
- De Databricks Assistant voor het ontwerpen van visualisaties wordt teruggezet naar de oorspronkelijke titel bij het weigeren van een aanbeveling.
- Gepubliceerde en conceptdashboardweergaven worden nu vastgelegd in auditlogboeken voor AI/BI-dashboards met de gebeurtenisnamen,
getDashboard
getPublishedDashboard
engetDashboardDetails
. Zie Dashboards-gebeurtenissen. - U kunt nu standaardwaarden instellen voor filtertypen voor één waarde en meerdere waarden . Zie Filteren op velden.
Correcties:
- Er is een probleem opgelost waardoor gebruikers niet kunnen overschakelen van een lege draai naar de andere grafiektypen in de visualisatie-editor voor dashboards.
- De koptekst van de draaikolom loopt niet meer over als deze de kolombreedte overschrijdt.
SQL Editor:
De inline-assistent is nu beschikbaar in de SQL-editor. Klik op het assistentpictogram in het editorvak om de invoer in te schakelen. Typ een vraag of opmerking in het Engels en druk vervolgens op Enter (niet Shift+Enter, waarmee een query wordt uitgevoerd) om een antwoord met een andere weergave rechtstreeks in de editor te genereren.
Platform:
Er is nu een API voor meldingsbestemmingen beschikbaar. U kunt nu programmatisch webhook- en e-mailbestemmingen beheren voor uw waarschuwingen en taakuitvoeringsmeldingen. Zie Meldingsbestemmingen.
4 juli 2024
Databricks SQL-versie 2024.30 beschikbaar
Implementatieschema: Preview-implementatie voor 2024.30: Tussen 9 juli en 15 juli
Wijzigingen in 2024.30
Lakehouse Federation is algemeen beschikbaar (GA)
Functie: Lakehouse Federation-connectors in de volgende databasetypen zijn nu algemeen beschikbaar (GA):
- MySQL
- PostgreSQL
- Amazon Redshift
- Snowflake
- Microsoft SQL Server
- Azure Synapse (SQL Data Warehouse)
- Databricks
In deze release worden ook de volgende verbeteringen geïntroduceerd:
Ondersteuning voor eenmalige aanmelding (SSO) verificatie in de Snowflake- en Microsoft SQL Server-connectors.
Ondersteuning voor Azure Private Link in de SQL Server-connector vanuit serverloze rekenomgevingen. Zie stap 3: regels voor privé-eindpunten maken.
Ondersteuning voor extra pushdowns (tekenreeks, wiskunde, diverse functies).
Verbeterde slagingspercentage voor pushdown in verschillende queryshapes.
Aanvullende mogelijkheden voor pushdown-foutopsporing:
- In
EXPLAIN FORMATTED
de uitvoer wordt de tekst van de gepushte query weergegeven. - In de gebruikersinterface van het queryprofiel worden de pushed-down querytekst, federatieve knooppunt-id's en uitvoeringstijden van JDBC-query's (in uitgebreide modus) weergegeven. Zie Door het systeem gegenereerde federatieve query's weergeven.
- In
DESCRIBE HISTORY
toont nu clusterkolommen voor tabellen die gebruikmaken van liquide clustering
Gedragswijziging: Wanneer u een DESCRIBE HISTORY
query uitvoert, wordt in de operationParameters
kolom standaard een clusterBy
veld weergegeven voor CREATE OR REPLACE
en OPTIMIZE
bewerkingen. Voor een Delta-tabel die gebruikmaakt van liquide clustering, wordt het clusterBy
veld gevuld met de clusterkolommen van de tabel. Als de tabel geen gebruikmaakt van liquide clustering, is het veld leeg.
Ondersteuning voor primaire en refererende sleutels is algemeen beschikbaar
Functie: Ondersteuning voor primaire en refererende sleutels in Databricks Runtime is algemeen beschikbaar. De GA-release bevat de volgende wijzigingen in de bevoegdheden die zijn vereist voor het gebruik van primaire en refererende sleutels:
- Als u een refererende sleutel wilt definiëren, moet u de
SELECT
bevoegdheid voor de tabel hebben met de primaire sleutel waarnaar de refererende sleutel verwijst. U hoeft niet de eigenaar van de tabel te zijn met de primaire sleutel, die eerder vereist was. - Het verwijderen van een primaire sleutel met behulp van de
CASCADE
component vereist geen bevoegdheden voor de tabellen die refererende sleutels definiëren die verwijzen naar de primaire sleutel. Voorheen moest u eigenaar zijn van de verwijzende tabellen. - Voor het verwijderen van een tabel met beperkingen zijn nu dezelfde bevoegdheden vereist als het verwijderen van tabellen die geen beperkingen bevatten.
Zie constrainT-component, ADD CONSTRAINT-component en DROP CONSTRAINT-component voor meer informatie over het gebruik van primaire en refererende sleutels met tabellen of weergaven.
Liquid clustering is GA
Functie: Ondersteuning voor liquide clustering is nu algemeen beschikbaar met Databricks Runtime 15.2 en hoger. Zie Liquid clustering gebruiken voor Delta-tabellen.
Type widening is beschikbaar in openbare preview
Functie: U kunt nu typebreiding inschakelen voor tabellen die worden ondersteund door Delta Lake. Tabellen waarvoor typebreiding is ingeschakeld, kunnen het type kolommen wijzigen in een breder gegevenstype zonder onderliggende gegevensbestanden opnieuw te schrijven. Zie Type breder maken.
Component voor schemaontwikkeling toegevoegd aan de syntaxis van SQL-samenvoeging
Functie: U kunt de WITH SCHEMA EVOLUTION
component nu toevoegen aan een SQL-samenvoegingsinstructie om schemaontwikkeling voor de bewerking mogelijk te maken. Zie de syntaxis voor de ontwikkeling van schema's voor samenvoegen.
Ondersteuning voor vacuüminventaris
Functie: U kunt nu een inventaris opgeven van bestanden waarmee u rekening moet houden bij het uitvoeren van de VACUUM
opdracht in een Delta-tabel. Zie de OSS Delta-documenten.
Ondersteuning voor Zstandard-compressiefuncties
Functie: U kunt nu de functies zst_compress, zstd_decompress en try_zstd_decompress gebruiken om gegevens te comprimeren en decomprimeren BINARY
.
Queryplannen in de SQL-gebruikersinterface worden nu correct weergegeven PhotonWriteStage
Oplossing: Wanneer deze worden weergegeven in de SQL-gebruikersinterface, write
worden opdrachten in queryplannen onjuist weergegeven PhotonWriteStage
als operator. Met deze release wordt de gebruikersinterface bijgewerkt om weer te geven PhotonWriteStage
als een fase. Dit is alleen een wijziging in de gebruikersinterface en heeft geen invloed op de wijze waarop query's worden uitgevoerd.
Updates van de gebruikersinterface
AI-/BI-dashboards:
- Functies:
- Standaardwaarden zijn nu beschikbaar voor filtertypen voor één waarde en meerdere waarden .
- Tellergrafieken ondersteunen nu voorwaardelijke opmaak en nieuwe tekststijlen.
- Er zijn meer kleurcategorieën toegevoegd aan de sectie Kleur/groeperen op van de dashboardvisualisatieeditor.
- Fixes:
- Beschrijvingen in widgets respecteren nu linkeropvulling bij het teruglopen van tekst.
- Mediaanaggregaties blijven nu behouden bij het migreren van verouderde dashboards naar AI/BI-dashboards.
- Veranderen:
- De optie voor het maken van een verouderd dashboard is verwijderd uit het menu Nieuw in de zijbalk van de werkruimte en het menu Maken in de bestandsbrowser.
API-ondersteuning:
- U kunt nu meldingsbestemmingen beheren met behulp van de REST API. Zie Meldingsbestemmingen.
AI/BI Genie:
- Functies:
- Vertrouwde assets zijn nu beschikbaar. Vertrouwde assets zijn door de gebruiker gedefinieerde tabelfuncties die u kunt schrijven om geverifieerde antwoorden te geven op specifieke vragen die u van gebruikers verwacht. Zie Vertrouwde assets gebruiken in AI/BI Genie-ruimten
- Fixes:
- Verbeterde verwerking van kolommen met tijdstempels om beter te reageren op vragen over tijdvergelijking.
- Het vermogen van Genie om vragen die niet gerelateerd zijn aan een bepaalde Genie-ruimte nauwkeurig te identificeren en te blokkeren. Dit vermindert exemplaren van Genie die onjuiste schattingen maken.
- Moedigde het gebruik van in de gegenereerde SQL-instructies van
ILIKE
Genie aan voor flexibelere vergelijkingen in vergelijking met strengere vergelijkingsoperatoren.
27 juni 2024
Rijfilters en kolommaskers in databricks SQL gerealiseerde weergaven en streamingtabellen zijn openbare preview
Rijfilters en kolommaskers in databricks SQL gerealiseerde weergaven en streamingtabellen zijn openbare preview. De openbare preview-versie bevat de volgende wijzigingen:
U kunt rijfilters en kolommaskers toevoegen aan een Databricks SQL Materialized-weergave of streamingtabel.
- U kunt databricks SQL gerealiseerde weergaven of streamingtabellen definiëren voor tabellen die rijfilters en kolommaskers bevatten.
Zie DE GEREALISEERDE WEERGAVE CREATE en CREATE STREAMING TABLE.
Updates van de gebruikersinterface
AI-/BI-dashboards:
- De API voor het weergeven van dashboards is nu beschikbaar. Zie Lijstdashboards.
- Er is een probleem opgelost waarbij histogrammen af en toe geen ondersteuning bieden voor breedte van decimale bins.
- Er is ondersteuning toegevoegd voor het aanpassen van de grootte en dekking van spreidingspunten.
Visualisaties:
- Verbeterde interactiviteit bij het weergeven van knopinfo bij het aanwijzen van cirkel-, spreidings- en heatmapdiagrammen met veel gegevenspunten.
Catalogusverkenner:
- Een vernieuwde Catalogusverkenner-gebruikersinterface maakt het gemakkelijker om recente Unity Catalog-assets te ontdekken en favoriet te maken vanuit de weergave Snelle toegang . De navigatie-ervaring is ook vereenvoudigd, zodat u berekeningen, opslag, referenties, verbindingen, DBFS en beheerdetails kunt verkennen met behulp van de
instellingen in de linkerbovenhoek van het scherm. Delta Sharing, Clean Rooms en Externe gegevens hebben nu speciale pagina's.
20 juni 2024
Updates van de gebruikersinterface
AI-/BI-dashboards:
- Widgets die door Databricks Assistant zijn gemaakt, worden nu geleverd met een titel.
- Gebruikers kunnen nu puntgrootten en ondoorzichtigheid in spreidingsdiagrammen aanpassen.
- Null-waarden worden nu consistent opgemaakt in teller-, draai- en tabeldiagrammen.
- Verbeterde tekst voor lege canvashints wanneer gegevenssets zijn gemaakt.
- Er is een probleem opgelost waarbij dashboards query's niet opnieuw konden uitvoeren nadat ze opnieuw zijn geopend vanuit de bestandsbrowser.
- Er is een probleem opgelost waardoor het moeilijk was om widgets voor tekstvakken te slepen.
SQL-editor:
- De SQL-editor verwijdert nu het queryconcept correct bij het sluiten van een niet-opgeslagen query.
- Verbeterde prestaties van SQL-editor voor automatisch aanvullen, laadtijden van pagina's en algehele reactiesnelheid van de gebruikersinterface.
- Foutberichten in de SQL-editor voor toegang tot een verwijderde query of voor geen machtigingen voor de query worden nu per tabblad weergegeven.
6 juni 2024
Oplossing voor gerealiseerde weergaven en streamingtabellen van Databricks SQL
Het probleem waardoor ALTER SCHEDULE
query's op databricks SQL gerealiseerde weergaven en streamingtabellen pas van kracht worden nadat de volgende VERNIEUWINGsbewerking is opgelost. ALTER SCHEDULE
Query's worden nu onmiddellijk toegepast. Zie Gerealiseerde weergavevernieuwing plannen.
Gerealiseerde weergaven en streamingtabellen in Databricks SQL zijn openbare preview
Gerealiseerde weergaven en streamingtabellen in Databricks SQL zijn openbare preview en beschikbaar voor alle klanten. De openbare preview-versie bevat de volgende wijzigingen:
REFRESH
van gerealiseerde weergaven en streamingtabellen in Databricks SQL is nu standaard synchroon. Zie VERNIEUWEN (GEREALISEERDE WEERGAVE of STREAMINGTABEL).- Fouten die optreden tijdens een vernieuwingsbewerking van een databricks SQL-gerealiseerde weergave of streamingtabel, worden geretourneerd in de SQL-editor.
Voor meer informatie over het gebruik van gerealiseerde weergaven en streamingtabellen in Databricks SQL raadpleegt u Gerealiseerde weergaven gebruiken in Databricks SQL en gegevens laden met behulp van streamingtabellen in Databricks SQL.
Updates van de gebruikersinterface
Dashboards:
- Accountgebruikers kunnen nu visualisatiegegevens downloaden van gepubliceerde dashboards
- Niet-gepubliceerde dashboards kunnen nu worden gepubliceerd met behulp van de vervolgkeuzelijst Concept/Publiceren boven aan een dashboard.
- Er is een probleem opgelost waarbij parameters met de benoemde limiet niet zijn gedetecteerd.
Visualisaties:
- Verbeterde weergave van boxplots in donkere modus.
Query-inzichten:
- Voor alle notebooks die zijn gekoppeld aan SQL Warehouses, hebt u toegang tot het queryprofiel door te klikken op Prestaties weergeven onder de cel met de query. Als de cel meerdere query's bevat, wordt voor elke instructie een koppeling naar het queryprofiel opgegeven.
30 mei 2024
Nieuw machtigingsniveau voor SQL Warehouses
Met machtigingen kunnen gebruikers SQL Warehouses bewaken , waaronder de bijbehorende querygeschiedenis en queryprofielen. De machtiging Kan controleren bevindt zich nu in openbare preview. Zie SQL Warehouse-ACL's.
Updates van de gebruikersinterface
Dashboardverbeteringen:
- Er is een dashboardmenu toegevoegd aan dashboardwidgets voor het downloaden van afbeeldingen en gegevens.
- Gebruikers kunnen verouderde parameters voor dashboardquery's en vervolgkeuzelijstparameters migreren naar dashboards.
23 mei 2024
Updates van de gebruikersinterface
- U kunt nu meerdere items in de werkruimte selecteren die u wilt verplaatsen of verwijderen. Wanneer er meerdere objecten zijn geselecteerd, wordt er een actiebalk weergegeven en worden opties geboden voor het verplaatsen of verwijderen van items. Daarnaast kunt u meerdere items selecteren met de muis en ze naar een nieuwe locatie slepen. Bestaande machtigingen voor objecten zijn nog steeds van toepassing tijdens bulksgewijs verplaatsen en verwijderen.
- U kunt nu Unity Catalog-assets markeren als favorieten in de Catalogusverkenner en SchemaBrowser. Dit omvat catalogi, schema's, tabellen, modellen, volumes en functies. Unity Catalog-assets die u als favorieten markeert, zijn eenvoudig toegankelijk vanaf de startpagina van Azure Databricks.
Dashboardupdates:
- Combinatiegrafieken met dubbele as geven nu op de juiste manier staaflegda's weer op de rechteras en lijnlegenda's.
- Grafieken met dubbele as tonen nu correct labels op balken.
Updates voor visualisaties:
- De labels voor voorwaardelijke opmaak van de tabeleditor voor als en vervolgens nu de donkere modus ondersteunen.
- Het redundante pictogram voor geopende koppelingen is verwijderd uit de knopinfo voor indeling van de tabeleditor.
- Het label van de standaardletterkleur in de tabeleditor wordt nu automatisch uitgelijnd.
16 mei 2024
Implementatieschema
- Preview-implementatie voor 2024.25: Voltooid op 1 mei
- Huidige implementatie voor 2024.25: Tussen 14 mei en 21 mei
Notitie
Een upgrade naar de Panda Python-bibliotheek (versie 2.0.3) heeft een belangrijke wijziging veroorzaakt in Databricks SQL-versie 2024.20. Azure Databricks heeft versie 2024.20 niet geïmplementeerd in het huidige kanaal. In plaats daarvan is het preview-kanaal bijgewerkt naar 2024.25 op 1 mei 2025. De huidige kanaal-implementatie gaat rechtstreeks van 2024.15 naar 2024.25.
Wijzigingen in 2024.25
Gegevens-governance
Toegangsbeheer voor referentiepassthrough- en Hive-metastore-tabellen zijn afgeschaft.
Toegangsbeheer voor referentiepassthrough- en Hive-metastore-tabellen zijn verouderde modellen voor gegevensbeheer. Voer een upgrade uit naar Unity Catalog om de beveiliging en governance van uw gegevens te vereenvoudigen door een centrale plaats te bieden voor het beheren en controleren van gegevenstoegang in meerdere werkruimten in uw account. Bekijk Wat is Unity Catalog?
Ondersteuning voor toegangsbeheer voor referentiepassthrough- en Hive-metastore-tabellen wordt verwijderd in een toekomstige DBR-versie.
SQL-taalfuncties
De component * (ster) wordt nu ondersteund in de WHERE-component.
U kunt nu de stercomponent (*
) in de WHERE
component gebruiken om te verwijzen naar alle kolommen uit de SELECT
lijst.
Bijvoorbeeld: SELECT * FROM VALUES(1, 2) AS T(a1, a2) WHERE 1 IN(T.*)
.
Ondersteuning voor Cloudflare R2-opslag om uitgaande kosten voor meerdere regio's te voorkomen sinds 2024.15
U kunt Cloudflare R2 nu gebruiken als cloudopslag voor gegevens die zijn geregistreerd in Unity Catalog. Cloudflare R2 is voornamelijk bedoeld voor gebruiksscenario's voor Delta Sharing waarin u de kosten voor uitgaand gegevensverkeer wilt voorkomen die door cloudproviders in rekening worden gebracht wanneer gegevens door regio's worden gekruist.
Cloudflare R2-opslag ondersteunt alle Databricks-gegevens en AI-assets die worden ondersteund in Azure Data Lake Storage Gen2.
Zie Cloudflare R2-replica's gebruiken of opslag migreren naar R2 en een opslagreferentie maken om verbinding te maken met Cloudflare R2.
Updates van de gebruikersinterface
De functies in deze sectie zijn onafhankelijk van de hierboven beschreven SQL Warehouse-rekenversies.
Updates voor gegevensdetectie: de hive-metastore naar de updatewizard van Unity Catalog biedt ondersteuning voor het upgraden van beheerde Hive-metastore-tabellen met behulp van reken- of SQL-warehouses voor alle doeleinden. Als u meer dan 20 tabellen bijwerkt, wordt een nieuw notitieblok gemaakt dat de SYNC
AND-opdrachten ALTER TABLE
bevat waarmee de conversie wordt uitgevoerd.
Dashboardupdates:
- De functionaliteit voor twee assen is nu beschikbaar voor typen vlak-, staaf-, lijn- en spreidingsdiagrammen.
- Wanneer u een grafiek met dubbele as inschakelt, worden de astitel en het bereik niet meer gekopieerd naar de secundaire as.
- Het laatste veld dat in de visualisatieconfiguratie wordt geïdentificeerd, wordt automatisch verplaatst naar de y-as aan de rechterkant.
9 mei 2024
Sql Editor-oplossingen:
- De beheerinstelling voor de tabel klembordfuncties voor resultaten is nu van toepassing op de nieuwe resultaattabel van de SQL-editor.
Dashboardverbeteringen:
- Met op query's gebaseerde parameters kunnen auteurs een lijst met selecteerbare waarden definiëren die kijkers kunnen gebruiken als parameters voor andere visualisaties op een dashboardcanvas. Zie Parameters op basis van query's gebruiken.
- Kolomvolgorde in bestanden die zijn gedownload uit een tabelwidget, blijft nu behouden.
- De tabeleditor bevat nu knopinfo voor aanwijzen waarmee de namen van kolommen worden weergegeven.
- Wanneer u overschakelt van andere visualisatietypen naar een histogram, blijft informatiecodering nu beter behouden.
Oplossingen voor dashboards:
- Er is een probleem opgelost waarbij een filter voor één rasterhoogte een onnodige overloopschuifbalk weergeeft.
- Er is een probleem opgelost waarbij onjuist gerenderde visualisaties op gepubliceerde dashboards zijn veroorzaakt waarbij een kolom met gegevenssets waarnaar wordt verwezen, is verwijderd.
2 mei 2024
Dashboardupdates:
- Query's en visualisaties kunnen nu vanuit sql-editor worden gekopieerd naar een nieuw dashboard. U kunt nog steeds visualisaties toevoegen aan verouderde dashboards vanuit de SQL-editor. Zie Bewerken, downloaden of toevoegen aan een dashboard.
- Dashboards onderhouden nu een resultatencache van 24 uur om de initiële laadtijden te optimaliseren. Zie Optimalisatie en caching van gegevenssets.
- Staafdiagrammen met categorische X en kwantitatieve Y worden nu gesorteerd in antwoorden van Databricks Assistant.
- Migratieprobleem met verouderd histogram
COUNT (*)
gecorrigeerd om een nauwkeurige migratie te garanderen. - De mogelijkheid geïmplementeerd om numerieke typen en datumtypen te combineren in een filterwidget.
- Wanneer u grafieken maakt, worden in Databricks Assistant nu automatisch relevante kolommen voorgesteld terwijl u typt.
Visualisatie-updates:
- Door de gebruiker geselecteerde kleur voor tabellen blijft nu behouden in lichte en donkere modi in verouderde grafieken.
- De logica voor het afkappen van gegevens is verbeterd om de prestaties in combinatie-, cirkel-, heatmap- en histogrammen te verbeteren.
- Een maatstreepje wordt nu altijd boven aan een kwantitatieve as weergegeven voor basisgrafieken.
23 april 2024
Ui-updates:
- Voor alle dialoogvensters delen in de gebruikersinterface is de naam van de
All Users
groep gewijzigd inAll Workspace Users
. De nieuwe naam weerspiegelt het bereik van de groep, die altijd gebruikers bevat die zijn toegewezen aan de werkruimte. Er wordt geen wijziging aangebracht in groepslidmaatschap als onderdeel van deze naamswijziging.
Dashboardverbeteringen:
- Wanneer het SQL Warehouse van een dashboard wordt gestart, wordt er een dialoogvenster weergegeven waarin de wachttijd wordt uitgelegd.
- De schuifpositie blijft behouden wanneer u schakelt tussen de tabbladen Canvas en Gegevens .
- Het klonen van een verouderd dashboard om een Lakeview-dashboard te maken, ondersteunt nu een aantal parameterconversies. Zie Verouderde parameters aanpassen.
- Relatieve datums, zoals Vandaag, Morgen en 7 dagen geleden, worden nu ondersteund voor datum- en datum/tijdparameters.
- Schuifregelaars voor het nummerbereik kunnen worden toegevoegd als filters op een dashboard.
- Histogrammen kunnen nu niet-geaggregeerde gegevens weergeven.
- Spreidingsdiagrammen ondersteunen nu groottecodering.
Oplossingen voor dashboards:
- Tijdelijke kleurcodering kan nu kleurtoewijzingen correct wijzigen.
Visualisatie-updates:
- Aangepaste indelingen van hulpprogramma's werken nu correct voor grafieken met meerdere assen.
- De preview-tag Nieuwe grafieken wordt verwijderd wanneer gebruikers de wisselknop in de afgelopen 14 dagen niet hebben gewijzigd.
18 april 2024
Lakeview-dashboards zijn algemeen beschikbaar
Lakeview-dashboards zijn nu het standaardhulpprogramma voor dashboarding. Ze zijn hernoemd als dashboards in de gebruikersinterface. Databricks SQL-dashboards worden nu verouderde dashboards genoemd. De namen van de gerelateerde API-hulpprogramma's zijn niet gewijzigd.
- Dashboardverbeteringen:
- Auditlogboeken zijn beschikbaar voor Lakeview-dashboards. Zie Dashboards-gebeurtenissen.
- Gegevens die zijn gedownload uit dashboards, respecteren toegepaste parameters.
- Databricks Assistant is ingeschakeld op het tabblad Gegevens zonder eerst gegevenssets toe te voegen.
- Gestapelde staafdiagrammen met meerdere Y-velden kunnen het sorteren van de X-as ondersteunen op basis van de som van Y-aswaarden.
- Schakelen tussen lineaire en log(symmetrische) schaalfuncties in menu's van visualisatieas.
- De standaardgrootte van de filterwidget is nu compacter.
- De initiële laadtijd voor de filterwidget voor tekstinvoer is verminderd.
- Verbeterde automatische grafiekconversies bij het migreren van verouderde dashboards.
- Oplossingen voor dashboards:
- De waarschuwing met instellingen voor beperkte weergave wordt niet weergegeven als het dashboard met anderen is gedeeld.
- De foutberichten in de SQL-editor op het tabblad Gegevens zijn nu donker ingeschakeld.
Updates van de gebruikersinterface
De functies die in deze sectie worden vermeld, zijn onafhankelijk van de hierboven beschreven SQL Warehouse-rekenversies.
Verbeteringen
- In de knopinfo op gestapelde grafieken wordt nu standaard de stackwaarde en het percentage weergegeven.
- De knopinfo voor grafieken met meerdere assen markeert nu het aanwijsitem.
- Tabelvisualisaties voor Databricks SQL passen nu het gegevenstype van een nieuw queryresultaat aan wanneer ze worden bewerkt in de SQL-editor.
- In de tabel Querygeschiedenis van De Catalogusverkenner ziet u een structuurweergave voor het toewijzen van querybronnen. U kunt dit gebruiken om te zien welke entiteiten de query-instructie hebben geactiveerd om uit te voeren.
11 april 2024
Updates van de gebruikersinterface
De functies die in deze sectie worden vermeld, zijn onafhankelijk van de hierboven beschreven SQL Warehouse-rekenversies.
Verbeteringen
- U kunt nu groeperen op percentage bij het maken van visualisaties in Databricks SQL en notebooks.
- Voor nieuwe grafieken (in openbare preview) kunt u inzoomen op één as door op een rechte lijn parallel aan de as te klikken en te slepen.
- De allowlist-gebruikersinterface van het gedeelde Unity Catalog-cluster is nu algemeen beschikbaar. U kunt deze openen op de pagina Met metastore-details in Catalog Explorer. Zie Items toevoegen aan de acceptatielijst.
- Formulieren voor het maken en bewerken van externe locaties worden nu geopend als een volledige pagina. Ze bevatten de optie om een opslagreferentie op te nemen.
Oplossingen:
- Er is een probleem opgelost voor histogrammen waarbij negatieve waarden ten onrechte als positief werden gemarkeerd.
4 april 2024
Updates van de gebruikersinterface
De functies die in deze sectie worden vermeld, zijn onafhankelijk van de hierboven beschreven SQL Warehouse-rekenversies.
Verbeteringen
Verbeteringen in histogrammen op Lakeview-dashboards.
- Er is ondersteuning toegevoegd voor labels.
- Bin-instellingen blijven nu behouden wanneer u schakelt tussen verschillende velden.
In de galerie met voorbeelden op de dashboardvermeldingspagina worden nu Lakeview-dashboards gemaakt. Zie zelfstudie: Voorbeelddashboards gebruiken.
Als u met de rechtermuisknop op de rand van een widget op een Lakeview-dashboard klikt, wordt een contextmenu geopend.
De navigatiebalk aan de linkerkant blijft behouden voor werkruimtegebruikers die gepubliceerde Lakeview-dashboards bekijken.
Filterselecties blijven behouden wanneer u navigeert tussen gepubliceerde en concept-Lakeview-dashboards.
Kolomnamen kunnen nu worden ingevoegd in de SQL-editor wanneer u een query bewerkt vanaf het tabblad Gegevens in een concept-Lakeview-dashboard.
Als u een Lakeview-dashboard vervangt, blijft de bestaande dashboardnaam en wordt de inhoud vervangen.
Als u van visualisatie wisselt tussen heatmaps en andere grafiektypen, blijven de relevante velden nu beter.
Oplossingen:
- Staafdiagrammen met kleurcoderingen beperken nu het toevoegen van meerdere Y-asvelden.
- Er is een probleem opgelost waarbij de knop Downloaden als PNG ontbreekt in sommige visualisaties.
- De opmaak is gecorrigeerd voor negatieve grote gehele getallen die eerder duizenden scheidingstekens missen.
- Er is een onjuiste positie van de aanwijslijn opgelost bij het aanwijzen van labels in lijndiagrammen.
28 maart 2024
Databricks SQL-versie 2024.15 beschikbaar
Implementatieschema
- Preview-implementatie voor 2024.15: Tussen 14 februari en 4 maart
- Huidige implementatie voor 2024.15: Tussen 25 maart en 8 april
Wijzigingen in 2024.15
Delta-updates
- Delta UniForm is nu algemeen beschikbaar: UniForm is nu algemeen beschikbaar en maakt gebruik van de tabelfunctie IcebergCompatV2. U kunt UniForm nu inschakelen of upgraden voor bestaande tabellen. Zie UniForm gebruiken om Delta-tabellen te lezen met Iceberg-clients.
- Statistieken voor het overslaan van gegevens voor Delta-tabellen opnieuw compileren: u kunt nu statistieken die zijn opgeslagen in het Delta-logboek opnieuw compileren nadat u kolommen hebt gewijzigd die worden gebruikt voor het overslaan van gegevens. Zie Kolommen voor Delta-statistieken opgeven.
SQL-taalupdates
- Tijdelijke variabelen declareren in een SQL-sessie: in deze release wordt de mogelijkheid geïntroduceerd om tijdelijke variabelen te declareren in een sessie die kan worden ingesteld en waarnaar vervolgens in query's kan worden verwezen. Zie variabelen.
- Ondersteuning voor systeemeigen XML-bestandsindelingen (openbare preview): ondersteuning voor systeemeigen XML-bestandsindelingen is nu beschikbaar in openbare preview. Ondersteuning voor XML-bestandsindeling maakt opname, query's en parsering van XML-gegevens mogelijk voor batchverwerking of streaming. Het kan automatisch schema- en gegevenstypen afleiden en ontwikkelen, ONDERSTEUNT SQL-expressies zoals
from_xml
en kan XML-documenten genereren. Er zijn geen externe jar's vereist en werkt naadloos samen met Automatische laadprogramma's,read_files
enCOPY INTO
Delta Live Tables. Zie XML-bestanden lezen en schrijven.
Apache Spark SQL-updates
Databricks SQL 2024.15 bevatten Apache Spark 3.5.0. Aanvullende foutoplossingen en verbeteringen voor SQL worden vermeld in de releasenotitie van Databricks Runtime 14.3. Zie Apache Spark en zoek naar de [SQL]
tag voor een volledige lijst.
Updates van de gebruikersinterface
De functies die in deze sectie worden vermeld, zijn onafhankelijk van de hierboven beschreven SQL Warehouse-rekenversies.
Een nieuw tabblad Overzicht op de entiteitspagina van Catalog Explorer toont belangrijke metagegevens, zoals bestanden, gegevensbron, eigenaar, tabelschema en opmerkingen.
Updates van Lakeview-dashboard:
- Lakeview-dashboards ondersteunen nu parameters. Auteurs kunnen parameters toevoegen aan gegevenssetquery's op het tabblad Gegevens en vervolgens parameters instellen op het canvas met behulp van selectors met één waarde en datumkiezers. Zie Wat zijn dashboardparameters?
- Lakeview-dashboards worden nu ondersteund in de API voor werkruimtemachtigingen. Zie PATCH /api/workspace/workspace/updatepermissions in de REST API-verwijzing.
- De naam van besturingswidgets op het canvas is gewijzigd in Filterwidgets .
- Combinatiegrafieken staan niet langer niet-geaggregeerde velden op de x-as toe.
- De knop Koppeling kopiëren in het dialoogvenster Delen bevat nu parameters die zijn opgeslagen in de URL.
- Widgets op gepubliceerde dashboards geven geen randen meer weer wanneer u de muisaanwijzer aanwijst.
- Er is een probleem opgelost waarbij de knoppen Databricks Assistant en PNG downloaden elkaar overlappen met grafiekvisuals.
Als u van visualisatie wisselt tussen heatmaps en andere grafiektypen, blijven de relevante velden nu beter behouden.
Staafdiagrammen met kleurcoderingen beperken nu het toevoegen van meerdere Y-asvelden.
21 maart 2024
- Unity Catalog-modelherkomst bevindt zich nu in openbare preview.
De tabelweergave in Catalog Explorer heeft nu een tabblad Overzicht om de primaire metagegevens te beschrijven.
- MET SQL-warehouses voor notebooks, nu algemeen beschikbaar, kunt u profiteren van volledig beheerde, directe en schaalbare rekenkracht voor uw SQL-workloads in de uitgebreide, gezamenlijke ontwerpomgeving van een notebook. Zie Een notebook gebruiken met een SQL-warehouse.
De volgende oplossingen en verbeteringen zijn van toepassing op Lakeview-dashboards:
- Uitgebreide API-ondersteuning voor Lakeview voegt de mogelijkheid toe om dashboards te maken, op te halen, bij te werken en te verwijderen. Zie Lakeview in de REST API-verwijzing.
- Er is een knop Vernieuwen toegevoegd voor de browser Catalogus op het tabblad Gegevens .
- Lakeview-dashboards worden nu weergegeven vóór Dashboards in het menu Nieuw in de zijbalk van de werkruimte. Op de pagina met dashboardvermeldingen wordt het tabblad Lakeview-dashboards links van het tabblad Dashboards weergegeven.
- De Databricks Assistant-ervaring voor Lakeview is bijgewerkt met een invoervak en suggesties om de zichtbaarheid te verbeteren en gebruikers te helpen inzicht te krijgen in de aanwijzingen die ze kunnen stellen.
- Lakeview-visualisaties ondersteunen nu mediaanaggregaties.
- De kleurkiezer is bijgewerkt in de visualisatie-editor van het Lakeview-dashboard voor een meer gestroomlijnde gebruikerservaring bij het maken van tabellen.
- Verbeterde migratie van cirkeldiagrammen ter ondersteuning van scenario's met hoek- of kleurdefinities.
- Er is een fout opgelost waardoor groepering op grafieken met de naam Count werd voorkomen. Grafieken kunnen nu worden gegroepeerd op velden met de naam Count.
- Voor staafdiagrammen worden besturingselementen voor groeps - en stapelindelingen nu verborgen wanneer deze niet van toepassing zijn op de door de gebruiker geselecteerde configuratie.
14 maart 2024
Voor Lakeview-dashboards:
Histogrammen ondersteunen nu aangepaste categorische kleuren.
- Heatmaps ondersteunen nu kwantitatieve schalen.
- Titels en beschrijvingen blijven behouden bij het schakelen tussen visualisatietypen, waaronder combinatiegrafieken.
- U kunt nu de onderliggende gegevensset openen die is gekoppeld aan een conceptdashboardwidget door er met de rechtermuisknop op te klikken. De gegevensset wordt geopend op het tabblad Gegevens .
Nieuwe grafieken passen nu aliassen en aangepaste kleuren toe voor null-waarden in numerieke kolommen.
Nieuwe grafieken geven nu maatstreepjes weer om de bovenkant van de y-as weer te geven.
7 maart 2024
Wanneer u een tabel bekijkt in Catalog Explorer, bevat de knop Maken een optie voor het maken van een Lakeview-dashboard in plaats van een Databricks SQL-dashboard.
Histogrammen zijn nu beschikbaar voor Lakeview-dashboards. Histogrammen worden vaak gebruikt om de verdeling van een numeriek veld te visualiseren.
Wanneer u een Databricks SQL-dashboard kloont om een Lakeview-dashboard te maken, worden problemen met de conversie van gegevenssets nu weergegeven als fouten in de nieuwe widget op het Lakeview-dashboard.
Kleurovergangen zijn beschikbaar wanneer een numeriek veld wordt gebruikt voor een visualisatie op een Lakeview-dashboard.
Kleurovergangen worden nu weergegeven in de visualisatie-editor van het Lakeview-dashboard wanneer een veld Kleur per veld is opgegeven.
De titel en beschrijving die aan een visualisatie zijn gekoppeld, kunnen niet meer worden bewerkt als de viewer geen bewerkingsbevoegdheden meer heeft op een concept Lakeview-dashboard.
Er is een probleem opgelost waarbij knopinfo in grafieken met meer dan 100 reeksen onjuist werd weergegeven. Nu wordt alleen de reeks met prioriteit weergegeven.
Verminderde typelatentie in de SQL-editor met 30% door middel van prestatieoptimalisaties.
Wanneer u query's in de SQL-editor beheert, wordt het tabblad automatisch gesloten wanneer u een query naar de prullenbak verplaatst.
Er is een probleem opgelost in de SQL-editor waarbij tekst per ongeluk werd geselecteerd bij het aanpassen van de breedte van het zijpaneel.
donderdag 29 februari 2024
In de schemabrowser in Catalog Explorer worden nu beperkingen voor primaire en refererende sleutels weergegeven.
De bewaartijd die wordt weergegeven op het tabblad Herkomst in Catalog Explorer is verhoogd tot één jaar.
Knopinfo voor nieuwe grafieken in notitieblokken wordt nu altijd weergegeven binnen de visualisatiegrens.
Meer informatie over het programmatisch beheren van Lakeview-dashboards met behulp van de REST API. Zie Dashboards beheren met werkruimte-API's.
Lakeview-dashboards ondersteunen nu histogrammen.
Verbeterd delen en publiceren in Lakeview-dashboards:
- Verbeterde dialoogvensters voor delen en publiceren, waardoor gebruikers veilig en eenvoudig kunnen delen.
- Dashboards die vanuit de werkruimtebrowser worden geopend, geven het gepubliceerde dashboard weer als dit bestaat. Kijkers kunnen nu ook details bekijken van de meest recente gepubliceerde versie, waaronder uitgever, tijd en referenties.
- Voor editors kunt u met een nieuwe vervolgkeuzelijst in de gebruikersinterface van Lakeview Dashboard snel schakelen tussen conceptversies en gepubliceerde versies.
Februari 22, 2024
Met verbeteringen in het tabblad Voorbeeldgegevens in de tabelweergave Catalogusverkenner kunt u kolommen sorteren, geselecteerde gegevens naar het klembord kopiëren en regelnummers weergeven. Er kunnen nu betere speciale waarden worden weergegeven, zoals JSON-objecten, datums, numerieke en null-waarden.
Lakeview-dashboards bieden nu ondersteuning voor het verzenden van periodieke PDF-momentopnamen van het dashboard naar werkruimtegebruikers en meldingsbestemmingen. Zie Dashboards plannen voor periodieke updates.
De lijst met visualisatieopties in de vervolgkeuzelijst Lakeview wordt nu alfabetisch gesorteerd.
Wanneer u Databricks SQL-dashboards kopieert naar Lakeview-dashboards, tonen widgets die niet kunnen worden geconverteerd nu de visualisatieconfiguratiekiezer in plaats van een foutbericht.
15 februari 2024
De documentatie voor queryfilters op basis van code, zoals
SELECT action AS 'action::filter'
, is verwijderd. Databricks raadt het bijwerken van query's aan om dit patroon te verwijderen.Voor Lakeview-dashboards worden cirkeldiagrammen nu segmenten met gelijke grootte weergegeven wanneer er geen hoekveld is opgegeven.
Lakeview biedt nu ondersteuning voor combinatiegrafieken, waarmee staaf- en lijndiagrammen worden gecombineerd om twee verschillende waarden in hetzelfde diagram weer te geven.
Heatmapdiagrammen, die kleurintensiteit gebruiken om de grootte van de correlatie tussen twee discrete variabelen weer te geven, zijn nu beschikbaar in Lakeview.
8 februari 2024
- U kunt nu toegang aanvragen bij het openen van een koppeling naar een Lakeview-dashboard waarvoor u geen machtigingen hebt.
- Dashboardfilters van Lakeview hebben nu expliciete opties voor Alles en Geen . Auteurs kunnen ervoor kiezen om de optie Alles te verbergen in filters voor één selectie.
- U kunt nu minimum- en maximumwaarden instellen voor assen in Lakeview-dashboarddiagrammen.
1 februari 2024
Databricks SQL-versie 2024.10 Beschikbaar
Implementatieschema
- Preview-implementatie voor 2024.10: Tussen 30 januari 2024 en 5 februari 2024
- Huidige implementatie voor 2024.10: Tussen 13 februari 2023 en 20 februari 2024
Wijzigingen in 2024.10
- Beschadigde bestandsafhandeling in DML-opdrachten opgelost: de DML-opdrachten
DELETE
,UPDATE
enMERGE INTO
respecteer de leesoptiesignoreCorruptFiles
niet meer enignoreMissingFiles
. Wanneer u een onleesbaar bestand in een tabel tegenkomt, mislukken deze opdrachten, zelfs als deze opties zijn opgegeven. - Gelijktijdigheid op rijniveau is algemeen beschikbaar en standaard ingeschakeld: gelijktijdigheid op rijniveau vermindert conflicten tussen gelijktijdige schrijfbewerkingen door wijzigingen op rijniveau te detecteren. Gelijktijdigheid op rijniveau wordt alleen ondersteund voor tabellen zonder partitionering, waaronder tabellen met liquide clustering. Gelijktijdigheid op rijniveau is standaard ingeschakeld voor Delta-tabellen waarvoor verwijderingsvectoren zijn ingeschakeld. Zie Schrijfconflicten met gelijktijdigheid op rijniveau.
- Ondiepe kloon voor externe tabellen van Unity Catalog (openbare preview): u kunt nu een ondiepe kloon gebruiken met externe tabellen van Unity Catalog. Zie Ondiepe kloon voor Unity Catalog-tabellen.
- Snellere verzameling statistieken met meerdere threads: de verzameling statistieken is maximaal 10 keer sneller op kleine clusters bij het uitvoeren
CONVERT TO DELTA
of klonen van Iceberg- en Parquet-tabellen. Zie Converteren naar Delta Lake en incrementeel Parquet- en Iceberg-tabellen klonen naar Delta Lake. - Pushdownfilters in de DeltaSource op Delta-bestanden: partitiefilters op Delta-tabellen worden nu naar Delta gepusht voordat snelheidsbeperking wordt bereikt.
Updates van de gebruikersinterface
De functies in deze sectie zijn onafhankelijk van de hierboven beschreven SQL Warehouse-rekenversies.
Het tabblad Beheerweergave op de lijstpagina's voor Databricks SQL-objecten (query's, dashboards en waarschuwingen) is verwijderd. Gebruikers van werkruimtebeheerders kunnen alle objecten van hun respectieve vermeldingspagina's bekijken. Zie Opgeslagen query's, verouderde dashboards en wat zijn Databricks SQL-waarschuwingen?
Op de pagina querygeschiedenis worden standaard query's van de afgelopen 24 uur weergegeven. Bekijk de querygeschiedenis.
Er is een menuoptie, Klonen naar Lakeview-dashboard, toegevoegd aan de gebruikersinterface van het Databricks SQL-dashboard. U kunt dit hulpprogramma gebruiken om een nieuw Lakeview-dashboard te maken dat dezelfde query's en visualisaties bevat in uw bestaande Databricks SQL-dashboards. Zie Een verouderd dashboard klonen naar een Lakeview-dashboard.
Staafdiagrammen in Lakeview-dashboards ondersteunen stapelbalken om te normaliseren tot 100%.
Er is een probleem opgelost waarbij inzoomen op een gepubliceerd Lakeview-dashboard resulteerde in focus op onjuiste zoomintervallen.
24 januari 2024
- Het Lakeview-dashboardcanvas past de plaatsing van de widget automatisch aan om waar mogelijk lege verticale witruimte tussen rijen te verwijderen.
- Beperkte witruimte tussen titel- en beschrijvingstekst in Visualisaties van Het Lakeview-dashboard.
18 januari 2024
Er is een weergaveprobleem opgelost voor visualisaties waarbij staafdiagrammen met één datum op de x-as een zeer dunne staaf hebben opgeleverd. Nieuwe grafiekvisualisaties worden weergegeven zoals verwacht.
Op de lijstpagina van het Lakeview-dashboard worden uw dashboards standaard weergegeven. U kunt filters op die pagina gebruiken om toegang te krijgen tot Lakeview-dashboards die eigendom zijn van andere werkruimtegebruikers.
11 januari 2024
Databricks SQL-query's en dashboard-API's ondersteunen het programmatisch wijzigen van de instelling Uitvoeren als rol.
Lakeview biedt ondersteuning voor het exporteren en importeren van dashboards als bestanden om het reproduceren van conceptdashboards in werkruimten te vergemakkelijken. Een dashboard exporteren, importeren of vervangen
4 januari 2024
- Er zijn primaire-sleutel- en refererende-sleutelrelatiediagrammen geïntroduceerd in Catalog Explorer. Zie Het diagram van de entiteitsrelatie weergeven.
21 december 2023
Het visualisatietype Lakeview Counter toont kleuren bij het vergelijken van
BigInt
waarden in de hoofdvelden Waarde en Doel .De knopinfo die wordt weergegeven wanneer u de zichtbaarheid van kolommen voor tabellen in Lakeview wijzigt, is verbeterd. Ze gedragen zich zoals verwacht en blijven niet behouden.
Gebruikers kunnen nu Databricks Assistant gebruiken om visualisaties te maken in Lakeview. Zie Visualisaties maken met Databricks Assistant.
Voor nieuwe grafieken respecteren heatmap-type grafieken de omgekeerde instelling.
Er is een prestatieprobleem met rendering opgelost voor notebooks met een groot aantal visualisaties.
14 december 2023
- Er is een fout opgelost waarbij Lakeview-dashboards niet werden weergegeven op de lakeview-vermeldingspagina zonder handmatige paginavernieuwing.
- Gebruik de escape-toets om het maken van een Lakeview-widget te annuleren wanneer u deze op het canvas plaatst.
- Catalog Explorer geeft nu Vector Search-indexen weer in de gebruikersinterface als onderdeel van de openbare preview van Mosaic AI Vector Search .
7 december 2023
Updates van de gebruikersinterface
Lakeview-dashboards kunnen worden toegevoegd aan favorieten voor snelle toegang.
Sneltoetsen voor kopiëren en plakken worden ondersteund bij het opstellen van een Lakeview-dashboard. Met de verwijdersleutel worden ook geselecteerde widgets verwijderd.
Verbeterde Lakeview-widgettitels en -beschrijvingen om te voorkomen dat tekst tijdens het laden wordt geknipt.
Er is een probleem opgelost met de opmaak van visualisaties waarbij grote gehele getallen per ongeluk als floats werden weergegeven.
Er is een probleem opgelost met Databricks SQL-dashboards waarbij uitgevouwen grafiekweergaven soms lege grafieken werden weergegeven.
Staafdiagrammen met kwantitatieve velden op zowel X- als Y-assen geven beter leesbare gegevenslabels weer.
Er is een probleem opgelost in de SQL-editor, zodat tabellen met het woord
stream
in de titel niet langer conflicteren met het gereserveerde trefwoord. Deze tabellen worden nu weergegeven zoals verwacht in de schemabrowser en zijn niet fout gemarkeerd.De pagina querygeschiedenis ondersteunt nu het formaat van kolommen en kolomselecties.
De pagina querygeschiedenis ondersteunt twee nieuwe kolommen: querybron en querybrontype.
BI-opties, zoals Tableau en Power BI, zijn gemakkelijker te vinden in Catalog Explorer op in aanmerking komende pagina's.
30 november 2023
Updates van de gebruikersinterface
De functies in deze sectie zijn onafhankelijk van de hierboven beschreven SQL Warehouse-rekenversies.
Cirkeldiagrammen in Lakeview kunnen nu aangepaste kleurtoewijzingen hebben.
Visualisatietransformaties in Lakeview blijven nu behouden wanneer u schakelt tussen compatibele veldtypen.
Titelinstellingen toegevoegd voor hoekkanalen van lakeview-cirkeldiagrammen.
De vervolgkeuzelijst van de Lakeview-gegevensset is nu doorzoekbaar voor eenvoudigere navigatie.
Lakeview ondersteunt volledige numerieke weergave voor waarden onder 10.000, waardoor afkortingen worden geëlimineerd.
Mogelijkheid toegevoegd om categorische datumvelden in Lakeview in kleurcode te coden.
Lakeview-gebruikers kunnen nu grafieklegenda's markeren met hun cursor om de waarden te kopiëren en plakken.
Cirkeldiagrammen in Lakeview hebben nu een optie voor het in-/uitschakelen van labels.
Een standaardblauwe kleur gestandaardiseerde voor alle Lakeview-visualisaties.
Lakeview-kolompictogrammen in transformaties komen nu consistent overeen met de gebruikte transformatiemethode.
Besturingselementen in het bewerkingsvenster van Lakeview worden nu automatisch verpakt voor verbeterde leesbaarheid.
Er is een verbeterde kleureneditor uitgebracht voor Lakeview-visualisaties.
Het besturingselement voor tabellettertypevoorwaarden in Lakeview is nu verpakt om de leesbaarheid te verbeteren.
Verbeterde compatibiliteit met donkere modus voor labels in nieuwe grafieken.
Nieuwe grafieken geven nu consistent prioriteit aan labelweergave in balken.
Er is een fout opgelost waarbij sommige snelmenuacties niet werkten in de SQL-editor.
16 november 2023
Updates van de gebruikersinterface
De functies in deze sectie zijn onafhankelijk van de hierboven beschreven SQL Warehouse-rekenversies.
Databricks SQL-query's, waarschuwingen en dashboards hebben een nieuwe planner en planningsinterface.
Lakeview-widgets zijn nu gemakkelijker te wijzigen vanwege een grotere grootte van triggerzone.
Werkruimtebeheerders kunnen nu de eigenaar van een Lakeview-dashboard wijzigen. Vanuit de bewerkingsmodus op een Lakeview-dashboard:
- Klik op Delen
- Klik op
- Klik op Nieuwe eigenaar toewijzen
Gebruikers kunnen labels in- of uitschakelen in Lakeview.
Visualisaties:
- Nieuwe grafieklabels geven er nu de voorkeur aan om waar mogelijk binnen een staaf te zitten.
- Nieuwe grafieklabels worden nu correct weergegeven op gestapelde balken die breed genoeg zijn om het hele label weer te geven.
- Labelkleuren in staafdiagrammen zijn nu consistenter.
9 november 2023
Wijzigingen in 2023.50:
Hoogtepunten:
- U kunt nu benoemde parameter aanroepen gebruiken voor SQL en Python UDF.
SQL-taalupdates: de volgende ingebouwde functies zijn toegevoegd:
from_xml
: parseert een XMLSTRING
in eenSTRUCT
.schema_of_xml
: Hiermee wordt een schema afgeleid van een XMLSTRING
.session_user
: retourneert de aangemelde gebruiker.try_reflect
: retourneertNULL
in plaats van de uitzondering als een Java-methode mislukt.
De volgende ingebouwde functies zijn verbeterd:
- functie aanroepen. Tabelargumenten voor functies ondersteunen partitionering en volgorde: U kunt nu en
ORDER BY
componenten gebruikenPARTITION BY
om te bepalen hoe tabelargumenten worden doorgegeven aan een functie. mode
: Ondersteuning voor een optionele parameter die een deterministisch resultaat afdwingt.to_char
: Nieuwe ondersteuning voorDATE
,TIMESTAMP
enBINARY
.to_varchar
: Nieuwe ondersteuning voorDATE
,TIMESTAMP
enBINARY
.array_insert()
is 1 gebaseerd op negatieve indexen: dearray_insert
functie is 1 gebaseerd op zowel positieve als negatieve indexen. Er wordt nu een nieuw element ingevoegd aan het einde van invoermatrices voor de index -1.
Updates van de gebruikersinterface
De functies die in deze sectie worden vermeld, zijn onafhankelijk van de hierboven beschreven SQL Warehouse-rekenversies.
Visualisaties:
- Knopinfo voor nieuwe grafieken toont alleen zwevende items voor grafieken met hoge kardinaliteit.
- Nieuwe grafieken worden automatisch uitgelijnd op twee asdiagrammen op nul.
- Grafieken hebben de draairichting van label- en astekst gewijzigd van -90 tot 90 graden.
- Grafieken gebruiken nu de breedte van het label om de draaiing te bepalen.
Lakeview-dashboards:
- Oplossing: Tabelrijen in Lakeview-dashboards voegen geen verticale opvulling meer toe wanneer slechts een klein aantal rijen wordt geretourneerd.
- Het klonen van een nieuwe Lakeview-dashboardwidget probeert eerst de kloon rechts van het origineel te plaatsen, mits er voldoende ruimte is op het canvas. Als er onvoldoende ruimte beschikbaar is, wordt de kloon onder het origineel geplaatst.
- U kunt nu de eigenaar van een Lakeview-dashboard opnieuw toewijzen via het dialoogvenster Delen.
SQL Editor: Automatisch aanvullen is nu minder agressief en wordt automatisch aan het einde van de instructies gesloten
2 november 2023
Verbeteringen
Hieronder ziet u verbeteringen in de herkomst van lakeview-dashboards:
- Er zijn afzonderlijke pictogrammen toegevoegd voor tabellen, weergaven en gerealiseerde weergaven.
- Ondersteuning toegevoegd voor verticaal schuiven in het geval van veel upstream-gegevensbronnen.
- Verbeterd foutbericht wanneer viewer geen machtigingen voor het upstream-object heeft.
- Verduidelijkte berichten over voorbeeldgegevenstabellen en HMS-gegevens.
- Tags voor sleutelwaarden toegevoegd aan upstreamgegevensbronnen.
Oplossing:
- Er is een probleem opgelost in nieuwe grafieken die weergave verhinderden na het wijzigen van de naam van een reeks met booleaanse waarden.
26 oktober 2023
Wijzigingen in Databricks SQL-versie 2023.45
Hoogtepunten:
- Voorspellende I/O voor updates is nu algemeen beschikbaar. Zie Wat is voorspellende I/O?
- Verwijderingsvectoren zijn nu algemeen beschikbaar. Zie Wat zijn verwijderingsvectoren?
Queryoptimalisaties:
- De outer join is verwijderd als ze allemaal afzonderlijke statistische functies zijn. SPARK-42583
- De volgorde van filterpredicaten is geoptimaliseerd. SPARK-40045
Sql-functie-updates:
- Er is ondersteuning toegevoegd voor impliciete resolutie van de laterale kolomalias op
Aggregate
. SPARK-41631 - Ondersteuning voor impliciete laterale kolomalias in query's met Window. SPARK-42217
- Ondersteuning voor Datasketches
HLLSketch
. Zie hll_sketch_agg statistische functie. try_aes_decrypt()
De functie is toegevoegd. Zie try_aes_decrypt functie.- Ondersteuning voor CBC-modus voor
aes_encrypt()
enaes_decrypt()
. Zie aes_decrypt functie. - Voeg 3 args-functiealiassen toe DATE_ADD en DATE_DIFF.
- Er is ondersteuning toegevoegd voor aes_encrypt IVs en AAD. SPARK-43290
- Bitmapfuncties implementeren. SPARK-44154
to_varchar
De alias toegevoegd voorto_char
. Zie to_varchar functie.- Er is ondersteuning toegevoegd
array_compact
. Zie array_compact functie. - Ondersteuning voor udf
luhn_check
. Zie luhn_check functie. - Er is analyseondersteuning toegevoegd voor benoemde argumenten voor ingebouwde functies. SPARK-44059
- Ondersteuning voor
TABLE
argumentparserregel voorTableValuedFunction
. SPARK-44200 array_insert
mislukt nu met 0 index. SPARK-43011- Er zijn waarden toegevoegd
NULL
voorINSERT
met door de gebruiker opgegeven lijsten met minder kolommen dan de doeltabel. SPARK-42521 DECODE
de functie retourneert onjuiste resultaten wanneer null wordt doorgegeven. SPARK-41668
Updates van de gebruikersinterface
Verbeteringen
De Lakeview SQL-editor ondersteunt nu sneltoetsen voor het uitvoeren van query's.
Filters in Lakeview bevatten nu snelle relatieve datumbereikselecties voor de afgelopen 7, 14, 28, 30, 60 en 90 dagen.
Perioden in gegevensveldnamen resulteren niet langer in lege grafieken.
De verouderde schemabrowser werkt nu met Unity Catalog.
Prestatieverbeteringen geïmplementeerd om alleen het actieve tabblad in de SQL-editor te laden, waardoor de initiële laadtijd met maximaal 20% wordt verminderd.
Door AI gegenereerde tabelopmerkingen in Catalog Explorer zijn nu algemeen beschikbaar.
Fixes:
- Balken in tijdelijke staafdiagrammen worden nu gecentreerd boven het datumstreepje.
- Sjablonen voor gegevenslabels met statistische expressies gebruiken nu de juiste numerieke formatters.
- Het inzoomen op nieuwe grafieken werkt nu met een schaalset die categorisch is met behulp van tijdelijke gegevens.
Nieuw artikel:
- Er is een nieuw artikel uitgebracht met alle Lakeview-visualisaties, inclusief schermopnamen en notities die laten zien hoe u elke visualisatie in elke schermopname opnieuw maakt. Zie Dashboardvisualisatietypen.
19 oktober 2023
Verbeteringen
Slepen en neerzetten in schemabrowser is nu beschikbaar.
De modale tabel selecteren in Lakeview-dashboards maakt het gemakkelijker om te selecteren uit alle tabellen in een catalogus of schema en maakt nu gebruik van voorspellingen voor automatisch aanvullen terwijl u typt.
Fixes:
Instructies voor knopinfo voor legendaselectie geven het gebruik
cmd
van Mac-gebruikers en Windows-gebruikers opctrl
.Verbeterde zichtbaarheid van afgekapte berichten in Lakeview-dashboards wanneer weergegeven gegevens de limieten overschrijden.
Grafieken met afgekapte gegevens geven consistente kleuren weer, zoals te zien is in de editor.
12 oktober 2023
Verbeteringen
Waarden voor tekstfilters die speciale tekens bevatten, worden nu correct gefilterd in Lakeview-dashboards.
Nieuwe grafieken ondersteunen
@@name
gegevenslabels op spreidingsdiagrammen.Aangepaste percentagenotaties zijn van toepassing op knopinfo voor gegroepeerde grafieken in nieuwe grafieken.
De gebruikersinterface voor de bindingsextensie voor werkruimten is algemeen beschikbaar.
Fixes:
- Verbeterde labelweergave op nieuwe grafieken om te voorkomen dat labels buiten de grafiekgrenzen overlopen.
- Vergroot het contrast van maatstreep- en rasterlijnen op nieuwe grafieken om de zichtbaarheid te verbeteren.
- Vergroot de afstand tussen aslabels om de leesbaarheid van nieuwe grafieken te verbeteren.
5 oktober 2023
Verbeteringen
Er zijn nauwkeurige knopinfo toegevoegd voor acties voor de publicatiemodus en datumherkomst in Lakeview-dashboards.
Voorwaardelijke opmaak en koppelingssjablonen in Lakeview-tabelvisualisaties ondersteunen nu verborgen kolommen.
Geoptimaliseerde labelpositie voor tijdelijke grafieken met brede balken om de duidelijkheid in nieuwe grafieken te verbeteren.
Tellervisualisatie in Lakeview behoudt de transformaties, zelfs nadat andere velden zijn verwijderd, waardoor consistentie wordt gegarandeerd.
Als u de muisaanwijzer op een reeks in een grafiek plaatst, wordt de omringende reeks nu in de knopinfo gedimd om de leesbaarheid in nieuwe grafieken te verbeteren.
Nieuwe grafieken met percentagewaarden geven nu knopinfo weer met absolute waarden.
Er is ondersteuning toegevoegd voor automatisch aanvullen voor het maken van volumes.
Als u een niet-actief tabblad sluit, schakelt u geen tabs meer over.
Geselecteerde uitvoering geeft duidelijk aan wanneer tekst wordt gemarkeerd.
Fixes:
Verbeterde formulering van foutberichten in draaitabellen wanneer de gegevens worden afgekapt.
Er is een weergavefout opgelost in draaitabellen waarbij kleuren niet werden weergegeven bij het gebruik van BigInt-gegevenstypen.
Bij het downloaden van PNG's in nieuwe grafieken met tal van legenda-items, heeft u het kleursymbool voor overlooplegende vermeldingen verwijderd.
Lijnen in nieuwe grafieken behouden een consistente dikte, zelfs bij de bovenste weergavegrens.
Als er geen gegevensset bestaat in Lakeview, is de gegevenssetkiezer in het canvas leeg.
Delta Live-tabellen worden correct gedetecteerd door de SQL-parser en worden niet weergegeven als ongeldige tabellen in schemabrowser.
Knopinfo is toegevoegd aan de zijbalk.
28 september 2023
Verbeteringen
Gepubliceerde Lakeview-dashboards hebben nu een vernieuwingsknop.
Verbeterde foutberichten voor gebruikers die geen toegang hebben tot een Lakeview-dashboard.
Filterconfiguratie in Lakeview-dashboards bevat nu geldige velden boven aan de selectielijst.
Als u een grafiek als PNG downloadt vanuit een Lakeview-dashboard, behoudt u nu de titel en beschrijving.
Verbetering van de geschiedenis van Delta-tabellen in Catalog Explorer omvat het toevoegen van filters voor datumbereik, gebruikers- en bewerkingstype, evenals sorteerbare kolommen en inlinekoppelingen naar gekoppelde taken en notitieblokken.
Ondersteuning voor donkere modus toegevoegd aan legenda's, knopinfo en tabelvisualisatie.
Oplossing:
- Filterselecties worden niet meer gewist bij het vernieuwen van een Lakeview-dashboard.
21 september 2023
Verbeteringen
- De renderingprestaties van draaitabellen zijn verbeterd.
- Nieuw DuBois-patroon voor tabelweergaven van herkomst in de gebruikersinterface.
14 september 2023
Verbetering:
- Bestandsnamen blijven nu behouden bij het downloaden van PNG's in nieuwe grafiekvisualisaties. Zie Nieuwe grafiekvisualisaties in Databricks.
7 september 2023
Databricks SQL-versie 2023.40 beschikbaar
Implementatieschema
- Preview-implementatie voor 2023.40: Tussen 5 sep 2023 en 11 sep 2023
- Huidige implementatie voor 2023.40: Tussen 18 sep 2023 en 25 sep 2023
Wijzigingen in 2023.40:
- Tags zijn nu beschikbaar met Unity Catalog.
- Databricks Runtime retourneert een fout als een bestand wordt gewijzigd tussen queryplanning en aanroep.
- Ondersteuning voor Azure Databricks ODBC/JDBC-stuurprogramma's.
- Schakel labeling van tijdreekskolommen in.
- Nieuwe bitmap SQL-functies.
- Verbeterde versleutelingsfuncties.
- Ondersteuning voor Unity Catalog voor
REFRESH FOREIGN.
INSERT BY NAME
wordt nu ondersteund.- Deel gerealiseerde weergaven met Delta Sharing.
Updates van de gebruikersinterface
Verbeteringen
Er zijn nu nieuwe grafieken beschikbaar, met snellere weergaveprestaties, mooie kleuren en verbeterde interactiviteit. Zie Nieuwe grafiekvisualisaties in Databricks.
In de grafiekweergave van het queryprofiel kunt u nu het jointype weergeven op elk knooppunt met een join in het queryplan.
De naam van Data Explorer wordt gewijzigd in Catalog Explorer om het feit te herkennen dat u deze kunt gebruiken om te werken met alle beveiligbare objecten in Unity Catalog, niet alleen gegevensobjecten. Zie Wat is Catalog Explorer?
De Databricks SQL-instructieuitvoerings-API is nu algemeen beschikbaar met Databricks SQL-versie 2023.35 en hoger. Met de API kunt u SQL-instructies indienen voor uitvoering in een Databricks SQL Warehouse, de status controleren en resultaten ophalen, of een uitvoering van de SQL-instructie annuleren. Zie de API voor het uitvoeren van instructies.
donderdag 31 augustus 2023
Nieuwe functie:
- Taggen voor Unity Catalog bevindt zich in openbare preview. U kunt tags gebruiken om de zoek- en detectie van uw gegevensassets te vereenvoudigen. Zie Tags toepassen op beveiligbare objecten in Unity Catalog.
24 augustus 2023
Verbetering:
- Automatisch aanvullen stopt met het voorstellen van aanbevelingen nadat u op de spatiebalk hebt drukken.
- Schemabrowser ziet Delta Live-tabellen niet meer als verbroken
live
tabellen.
16 augustus 2023
Verbetering:
- De vervolgkeuzelijst Catalogus in de SQL-editor wordt nu gesloten wanneer u schakelt tussen tabbladen. Voorheen zou de vervolgkeuzelijst geopend blijven wanneer u overschakelt van tabbladen.
10 augustus 2023
Verbetering:
- Automatisch aanvullen ondersteunt nu de nieuwe syntaxis voor het instellen van Unity Catalog-tags. Zie de naslaginformatie over SQL-talen voor meer informatie over opdrachten.
3 augustus 2023
Verbeteringen
- De onderliggende Monaco Editor gebruikt nu versie 37.1.
- Ondersteuning voor automatisch aanvullen voor
SHOW ARCHIVED FILES FOR
Delta-opdrachten.
27 juli 2023
Verbeteringen
- De SQL-editor is nu compatibel met nieuwe regels van Windows, zodat queryopmaak in alle gevallen werkt zoals verwacht.
- U kunt de navigatie van het queryprofiel openen vanuit notebookresultaten. Voer uw query uit met SQL Warehouse voor query's.
20 juli 2023
Databricks SQL-versie 2023.35 beschikbaar
Implementatieschema
- Preview-implementatie voor 2023.35: Tussen 18 juli 2023 en 24 juli 2023
- Huidige implementatie voor 2023.35: Tussen 31 juli 2023 en 8 augustus 2023
Wijzigingen in 2023.35:
- Verbeterde betrouwbaarheid voor
VACUUM
ondiepe kloon in Unity Catalog. - Ondersteuning voor Python UDF's in SQL.
- Delta Lake UniForm voor Iceberg is in openbare preview.
- Delta Lake liquid clustering is beschikbaar in openbare preview.
- Archiveringsondersteuning voor Delta Lake.
- Ondersteuning voor id-componenten.
- Ondersteuning voor Unity Catalog voor Door de gebruiker gedefinieerde Python- en Pandas-functies (UDF's).
Verbetering:
- De populariteit van tabellen in Catalog Explorer is beschikbaar voor alle Unity Catalog-gebruikers.
13 juli 2023
Verbetering:
- Unity Catalog-gebruikers kunnen nu aanvullende tabelinzichten bekijken in Catalog Explorer, zoals vaak gekoppelde tabellen, frequente gebruikers van een bepaalde tabel en veelgebruikte notebooks en dashboards.
22 juni 2023
Openbare preview:
- Databricks SQL biedt nu ondersteuning voor grote taalmodellen (LLM's) die worden gehost op model voor eindpunten. Bel
ai_query()
om toegang te krijgen tot uw LLM. Deze functie is alleen beschikbaar in openbare preview op Databricks SQL Pro en serverloos. Als u wilt deelnemen aan openbare preview, dient u het inschrijvingsformulier voor openbare preview van AI Functions in.
15 juni 2023
Nieuwe functie:
- SQL-taken in taken zijn nu algemeen beschikbaar. U kunt query's, dashboards en waarschuwingen op de pagina Taken indelen. Zie opties voor taaktype.
- Een nieuwe schemabrowser bevindt zich nu in openbare preview, met een bijgewerkte UX, een tabblad Voor u en verbeterde filters. De schemabrowser is beschikbaar in Databricks SQL, Catalog Explorer en notebooks. Zie Browse-gegevens.
8 juni 2023
DBSQL-versie 2023.30 beschikbaar
Wijzigingen in 2023.30
- Nieuwe ingebouwde SQL-functies, zoals
array_prepend(array, elem)
,try_aes_decrypt(expr, key [, mode [, padding]])
ensql_keywords()
. - U kunt nu ondiepe kloon gebruiken om nieuwe beheerde Unity Catalog-tabellen te maken op basis van bestaande beheerde tabellen in Unity Catalog. Zie Ondiepe kloon voor Unity Catalog-tabellen.
- U kunt nu
CLONE
enCONVERT TO DELTA
met Iceberg-tabellen die partities hebben gedefinieerd voor afgekapte kolommen van typenint
,long
enstring
. Afgekapte kolommen van het typedecimal
worden niet ondersteund. START VERSION
is nu afgeschaft voorALTER SHARE
.
Updates van de gebruikersinterface
Oplossing:
- Tellervisualisatie ondersteunt nu opmaak bij het gebruik van big integers.
donderdag 1 juni 2023
Verbeteringen
Binaire gegevens worden nu weergegeven als een hextekenreeks wanneer u de indeling Pijl gebruikt.
In de SQL-instructie-API wordt de CSV-indeling nu ondersteund voor de
EXTERNAL_LINKS
verwijdering. Hierdoor kunnen clients maximaal 100 GiB-gegevens extraheren in CSV-indeling met vooraf ondertekende URL's, terwijl deINLINE
limiet voor JSON 16 MiB is.Azure Databricks SQL Pro is beschikbaar in alle Regio's van China. SQL Pro is nu het standaardwarehouse in de gebruikersinterface. De STANDAARD-API is nog steeds klassiek.
29 mei 2023
Nieuwe functie:
- U kunt nu de gebruikersinterface voor het toevoegen van gegevens gebruiken om gegevens te laden vanuit een opslagpad voor cloudobjecten dat is gedefinieerd als een externe locatie voor Unity Catalog. Zie Gegevens laden met behulp van een externe locatie van Unity Catalog voor meer informatie.
25 mei 2023
Verbeteringen
- U kunt nu het resultaatvenster voor automatisch aanvullen in- of uitschakelen.
- Schakel de enter-toets uit zodat deze geen suggesties meer accepteert voor automatisch aanvullen. Klik onder DBSQL-gebruikersinstellingen op Editor-instellingen en vervolgens op Nieuwe editorinstellingen. Schakel Enter-toets accepteren suggesties voor automatisch aanvullen uit.
Fixes:
- Gesorteerde tabelkoppen hebben nu kleuren.
- Grafieklijnen worden nu correct weergegeven.
18 mei 2023
Verbetering:
- In de SQL-instructie-API ondersteunt de
EXTERNAL_LINKS
verwijdering nu deJSON_ARRAY
indeling. U kunt maximaal 100 GiB-gegevens extraheren in JSON-indeling met vooraf ondertekende URL's. DeINLINE
limiet voor JSON is 16 MiB.
11 mei 2023
Nieuwe functie:
- Schemabrowser is nu algemeen beschikbaar in Catalog Explorer.
Verbeteringen
- Het detailvenster met de aanwijstabel is minder gevoelig.
- De escape-toets sluit nu het deelvenster voor automatisch aanvullen.
- Definities weergeven hebben nu syntaxismarkeringen op het tabblad Details van Catalogusverkenner.
Fixes:
- Draaitabellen worden nu correct weergegeven op Windows-apparaten.
- Voltooiingssuggesties volgen nu het geval van het eerste trefwoord.
4 mei 2023
Databricks SQL-versie 2023.26 beschikbaar
Implementatieschema
- Preview-implementatie voor 2023.26: Tussen 19 april 2023 en 25 april 2023
- Huidige implementatie voor 2023.26: Tussen 3 mei 2023 en 10 mei 2023
Wijzigingen in 2023.26
- Photon retourn retourneert een fout als een bestand wordt gewijzigd tussen het plannen en uitvoeren van query's.
- Nieuwe functies en uitgebreide ondersteuning voor voorspellende I/O-functies. Zie Databricks Runtime 13.0 (EoS).
- Gebruik de Azure Databricks-connector om verbinding te maken met een andere Azure Databricks-werkruimte.
CREATE TABLE LIKE
functie voor Delta-tabellen.- Nieuwe kolomvelden met metagegevens die de begin- en lengte van het bestandsblok aanduken.
- Nieuwe georuimtelijke H3-functies. Zie georuimtelijke H3-functies.
- Nieuwe ingebouwde SQL-functies. Zie Databricks Runtime 13.0 (EoS).
Updates van de gebruikersinterface
Verbeteringen
- Beheerders kunnen magazijneigenaren wijzigen met behulp van de gebruikersinterface of de API. Zie Een SQL-warehouse beheren.
- Catalog Explorer geeft nu service-principals voor accounts weer in gebruikerslijsten voor assets in Unity Catalog. Accountservice-principals zijn bijvoorbeeld zichtbaar bij het bewerken van bevoegdheden of het wijzigen van eigenaars in Catalog Explorer.
- Aangepaste grafieklabels bieden ondersteuning voor de mogelijkheid om te verwijzen naar een kolom in de gegevensset.
- Dashboardfilters laden nu kolomnamen, zelfs wanneer u query's gebruikt die geen catalogus- of schemagegevens hebben.
27 april 2023
Verbeteringen
- De SQL-editor is nu afhankelijk van de Monaco-editor voor een betrouwbaardere bewerkingservaring.
- De pagina SQL History List (Query's) bevat nu het Ontwerpsysteem van Sql.
20 april 2023
Verbeteringen
- Introduceert nieuwe draaitabellen waarmee u meer dan 64.000 resultaten kunt aggregeren.
- Databricks SQL-tabellen en -visualisaties ondersteunen nu BigInt, 38-bits decimalen en niet-UTF-8 tekens. Voor getallen is de standaardinstelling nu door de gebruiker gedefinieerde precisie van cijfers.
- Automatisch aanvullen suggereert nu veelgebruikte joins uit het verleden voor Unity Catalog-tabellen, mogelijk gemaakt door Gegevensherkomst van Unity Catalog in Databricks Runtime 12.0 en hoger.
Nieuwe functie:
- Retourneert tekst die is gegenereerd door een geselecteerd LLM (Large Language Model) op basis van de prompt met ai_generate_text. Deze functie is alleen beschikbaar als openbare preview op Databricks SQL Pro en Serverloos. Als u wilt deelnemen aan de openbare preview, vult en verzendt u het inschrijvingsformulier voor openbare preview van AI Functions.
13 april 2023
Nieuwe functie:
- Het
TIMESTAMP_NTZ
type vertegenwoordigt waarden die bestaan uit velden jaar, maand, dag, uur, minuut en seconde. Alle bewerkingen worden uitgevoerd, ongeacht de tijdzone. Zie TIMESTAMP_NTZ type.
Verbeteringen
- Gebruikers kunnen nu opgemaakte resultaten binnen waarschuwingen verzenden met behulp van de
QUERY_RESULT_TABLE
tag in een aangepast waarschuwingsbericht. - Gebruikers kunnen nu de bestandsgrootte voor Unity Catalog-tabellen bekijken in Catalog Explorer.
6 april 2023
Databricks SQL-versie 2023.20 beschikbaar
Implementatieschema
- Preview-implementatie voor 2023.20: Tussen 15 maart 2023 en 23 maart 2023
- Huidige implementatie voor 2023.20: Tussen 27 maart 2023 en 3 april 2023
Wijzigingen in 2023.20
- Delta Lake-schemaontwikkeling ondersteunt het opgeven van bronkolommen in samenvoeginstructies.
- Verwijder alle NULL-elementen uit een matrix met behulp van array_compact.
- Als u elementen wilt toevoegen aan een matrix, gebruikt u array_append.
- Als u gevoelige tekenreekswaarden wilt anoniem maken, gebruikt u de maskerfunctie.
- Veelvoorkomende foutvoorwaarden retourneren nu SQLSTATE.
- Roep generatorfuncties met tabelwaarden aan in de reguliere
FROM
component van een query. - Gebruik de
from_protobuf
ento_protobuf
functies om gegevens uit te wisselen tussen binaire en structtypen. Zie Buffers voor lees- en schrijfprotocollen. - Verbeterde consistentie voor Delta-doorvoergedrag voor lege transacties met betrekking tot
update
,delete
enmerge
opdrachten. - Gedragswijziging
- De functie voor het laterale kolomalias introduceert gedragswijzigingen tijdens de naamomzetting. Zie Gedragswijzigingen.
Updates van de gebruikersinterface
Verbeteringen
- Catalog Explorer ondersteunt nu het verwijderen van Hive-metastores.
- Het bericht voor de initiële status van de visualisatieeditor is gewijzigd van Ontbrekende vereiste kolommen in Geen gegevens.
3 april 2023
Nieuwe functie:
- De pagina Tabel maken of wijzigen vanaf de pagina voor het uploaden van bestanden ondersteunt nu uploads van JSON-bestanden. Zie Een tabel maken of wijzigen met behulp van het uploaden van bestanden voor meer informatie.
30 maart 2023
Verbeteringen
- Op de bewakingspagina van het magazijn kunt u nu de querygeschiedenis voor het geselecteerde tijdsbereik weergeven, samen met uw schaalgrafieken. U kunt momenteel uitgevoerde en in de wachtrij geplaatste query's, actieve SQL-sessies, de magazijnstatus en het huidige aantal clusters bekijken. Zie Een SQL-warehouse bewaken.
- Toewijzingsclustering is nu standaard uitgeschakeld in markeringskaarten.
- Knopinfo voor afkapping van visualisaties en weergavelimieten zijn toegevoegd.
Fixes:
- Grafieken respecteren nu de oorspronkelijke volgorde wanneer sorteren is uitgeschakeld voor de aswaarden en de grafiek de groepeert op kolom.
23 maart 2023
Verbeteringen
- Visualisaties ondersteunen nu tijd binning per week.
Total
Berekent nu alle gegevens buiten de 100 X 100 cellen tot 64.000 resultaten in draaitabellen van notebooks.- Gebruikers kunnen nu celwaarden opmaken in de draaitabel voor nieuwe notitieblokken.
- Gegevensherkomsten voor bestanden, query's en onderdelenopslag zijn beschikbaar.
16 maart 2023
Verbetering:
- Ondersteuning voor
GROUP BY ALL
syntaxis.
9 maart 2023
Nieuwe functie:
- De Databricks SQL-instructieuitvoerings-API is nu beschikbaar in openbare preview. Uitvoering van instructies biedt eindpunten waarop SQL-instructies worden uitgevoerd in een Databricks SQL Warehouse. Het kan ook de status controleren, resultaten ophalen en een actieve SQL-instructie annuleren.
Verbetering:
- De SQL-beheerconsole is gecombineerd met de algemene beheerdersinstellingen om een uniforme ervaring te creëren voor beheerdersgebruikers. Alle SQL-beheerinstellingen zijn nu toegankelijk vanuit de beheerconsole.
- Waarschuwingsbestemmingen worden nu meldingsbestemmingen genoemd.
Fixes:
- In tabellen worden geen twee schuifbalken meer weergegeven.
- Lege widgettitels worden niet meer overschreven op dashboards.
2 maart 2023
Oplossing:
- U kunt nu relatieve URL's in tabellen gebruiken om toegang te krijgen tot dashboards.
23 februari 2023
Verbetering:
TINYINT
wordt nu ondersteund in resultatentabellen in notebooks.
Oplossing:
- Er is een fout opgelost waarbij schuiven op het dashboardfilter modaal maken een fout heeft opgeleverd.
16 februari 2023
Verbeteringen
- Gegevenslabels in grafieken bevatten nu meer tekens om afkappen van beschrijvingen te voorkomen.
- Automatisch aanvullen herkent
range()
nu en Python UDF-functiescreate
. - Automatisch aanvullen voorkomt nu het initiëren van fragmenten op decimalen en in codeopmerkingen.
Fixes:
- Gebruikers kunnen nu inzoomen op kaarten.
- In notitieblokken worden kleuren nu correct toegewezen aan grafieken.
donderdag 2 februari 2023
Verbeteringen
- Ondersteuning voor
DESCRIBE DETAILS
in de editor. - Verbeterde laadsnelheid van de schemabrowser.
- U kunt nu een lijst met mogelijke kolommen weergeven in het zijpaneel van een
SELECT *
.
26 januari 2023
Verbetering:
- De foutberichten van uw query bevatten nu koppelingen naar het gerelateerde documentatieonderwerp waarin de fout wordt beschreven.
19 januari 2023
Verbeteringen
- U vindt nu een deelvenster Wat is nieuw , waarin belangrijke verbeteringen worden gemarkeerd. U kunt dit deelvenster openen en sluiten door op het cadeaupictogram te klikken.
- Beheerders kunnen nu het eigendom van SQL-warehouses wijzigen.
- U kunt nu filteren op meerdere visualisaties in een dashboard door te klikken op Filter toevoegen>en de query en kolommen te selecteren voor filteren.
12 januari 2023
Verbeteringen
- Titels van visualisatiewidgets op dashboards zijn nu opgemaakt als visualisatienaam: querynaam standaard.
- H3 Georuimtelijke functies toegevoegd aan de inline panelverwijzing.
- Inlineverwijzingen toegevoegd voor SQL-syntaxis, zoals
CREATE TABLE
enOVER
.
Fixes:
- Er zijn nu sorteer- en omgekeerde wisselknoppen beschikbaar wanneer de schaal van de X-as is ingesteld op automatisch.
- Heatmaps en draaitabellen reageren nu op bepaalde edge-gevallen.
- De maatstreepjes voor categorische Y-as worden nu standaard gesorteerd.
- Queryconcepten gaan niet meer verloren nadat een browser is vernieuwd.
8 december 2022
- Azure Databricks SQL-waarschuwingen ondersteunen nu waarschuwingen voor aggregaties van queryresultatenkolommen zoals
SUM
,COUNT
enAVG
. - De standaardvisualisatietitel is nu 'VisualizationName - QueryName' bij het maken van nieuwe widgets op dashboards.
17 november 2022
Waarschuwingen:
- Chatworks, Mattermost en Google Hangouts Chat zijn geen meldingsbestemmingen meer.
Verbetering:
- De y-as geeft nu getallen weer als percentages bij het controleren van procentwaarden.
- De instelling van de werkruimtebeheerder om de gebruikersinterface voor uploadgegevens uit te schakelen, is nu van toepassing op de nieuwe gebruikersinterface voor uploadgegevens. Deze instelling is van toepassing op de Datawetenschap & Engineering, Databricks Machine Learning en Databricks SQL Personas.
Fixes:
- Er is een probleem opgelost in Databricks SQL-waarschuwingen waarbij het vergelijken met null-waarden onjuist werd geëvalueerd.
- Er is een probleem opgelost waarbij schuifbalken op draaitabellen verdwenen.
- Er is een probleem opgelost waarbij de schemabrowser het formaat niet kon wijzigen met overlopende tabbladen.
donderdag 10 november 2022
Verbetering:
- U kunt nu een dashboardfilter maken dat in meerdere query's tegelijk werkt. Kies in de modus Dashboard bewerken de optie Toevoegen en vervolgens Filteren en vervolgens Nieuw dashboardfilter.
- Automatisch aanvullen ondersteunt
CREATE MATERIALIZED VIEW
nu .
Oplossing:
- Er is een probleem opgelost waarbij het schuiven naar het einde van een set met gepaginade dashboardresultaten een fout zou verzenden.
- Er is een probleem opgelost waarbij het overschakelen van een gestapeld staafdiagram naar een lijndiagram de stapeleigenschap behouden bleef.
- Er zijn gedupliceerde ophaaloproepen opgelost.
3 november 2022
Verbetering:
- Wanneer u toegang aanvraagt in Databricks SQL, is de standaardmachtiging nu 'kan worden uitgevoerd'.
Fixes:
- Er is een probleem opgelost waarbij het sorteren
created_at
met behulp van de API query's en dashboards de juiste sorteervolgorde niet heeft geretourneerd. - Er is een probleem opgelost waarbij kolommen met URL's met HTML-opmaak een te brede kolombreedte hadden.
- Er is een probleem opgelost waarbij
WHERE
het trefwoord niet werd gemarkeerd.
27 oktober 2022
Verbeteringen
De rijlimiet voor het downloaden van queryresultaten naar Excel is verhoogd van 64.000 rijen tot 100.000 rijen. Csv- en TSV-downloadlimieten blijven ongewijzigd (ongeveer 1 GB aan gegevens).
Automatisch aanvullen ondersteunt
LIST
nu syntaxis, URL's en referenties.Geconsolideerde en gemoderniseerde fix-me suggestiepanelen.
Er wordt een nieuw magazijntype, Databricks SQL Pro, geïntroduceerd voor Databricks SQL. Met dit magazijntype kan een Databricks SQL Warehouse takenintegratie, queryfederatie, georuimtelijke functies en voorspellende IO gebruiken.
Fixes:
- Er is een probleem opgelost waarbij de waarschuwingsbanner in de editor visualisaties op volledige hoogte overlapte.
- Er is een probleem opgelost waarbij de kolombreedte van de tabel niet behouden bleef toen kolommen van de tabel werden verplaatst.
- Er is een probleem opgelost waarbij de koppeling naar het dashboard in pop-upmeldingen is verbroken als er een visualisatie is toegevoegd vanuit de SQL-editor.
20 oktober 2022
Verbeteringen
- U kunt nu de voortgangsbalk voor query's vinden in de voettekst en de bewerking van een visualisatieactie in hetmenumenu.
- Automatisch aanvullen ondersteunt nu Delta-tijdreizen en biedt automatisch aanvullen van kolommen bij het definiëren van een refererende sleutel.
Oplossing:
- Er is een probleem opgelost waarbij het toevoegen van meerdere visualisaties aan een dashboard snel zou leiden tot visualisaties die niet op het dashboard worden weergegeven.
13 oktober 2022
Verbeteringen
- U kunt nu gerapporteerde foutberichten verwijderen.
COMMENT ON
instructie wordt nu ondersteund in de editor.- U kunt nu Cmd+P of Ctr+P (voor pc) gebruiken als snelkoppeling voor Zoeken naar boven. Gebruik Cmd+I of Ctr+I (voor pc) voor parameters toevoegen.
11 oktober 2022
Verbeteringen
- De gebruikersinterface voor het toevoegen van gegevens biedt toegang tot configuraties van algemene gegevensbronnen en UIS's voor het uploaden van bestanden. Zie Bestanden uploaden naar Azure Databricks.
- U kunt kleine bestanden uploaden naar Delta Lake met behulp van een gebruikersinterface. Zie Een tabel maken of wijzigen met behulp van het uploaden van bestanden.
6 oktober 2022
Verbeteringen
EXTERNAL
is nu een gereserveerde tabeleigenschap. OpdrachtenCREATE TABLE ... TBLPROPERTIES
enALTER TABLE ... SET TBLPROPERTIES
mislukken alsEXTERNAL
deze zijn opgegeven in de eigenschappen.- Het
strfmt
informat_string(strfmt, obj, ...)
enprintf(strfmt, obj, ...)
ondersteunt het gebruik van0$
als eerste argument niet meer. Er moet naar het eerste argument worden verwezen1$
wanneer u een argumentindex gebruikt om de positie van het argument in de lijst met argumenten aan te geven. - Cirkeldiagramsegmenten hebben nu een dunne rand om verschillende segmenten af te bakenen.
- U kunt nu Cmd+I (voor Mac) of Ctr+I (voor pc) gebruiken als snelkoppeling voor parameter Toevoegen. Gebruik Cmd+P of Ctr+P (voor pc) als snelkoppeling voor globaal zoeken.
- Er is een feedbackknop beschikbaar voor foutberichten met goede of slechte query's.
- Suggesties voor oplossingen zijn nu beschikbaar als snelle oplossing.
Fixes:
lpad
enrpad
functies werken nu correct metBINARY
tekenreeksinvoer. De uitvoer vanlpad
enrpad
voorBINARY
tekenreeksinvoer is nu eenBINARY
tekenreeks.- Er is een probleem opgelost waarbij handmatige vernieuwingen van waarschuwingen niet werkten.
- Wijzigingen in automatische tellergrootte teruggedraaid om opmaakproblemen op te lossen.
29 september 2022
Verbeteringen
- U kunt nu toegang aanvragen tot Databricks SQL-query's, waarschuwingen en dashboards van eigenaren van deze assets.
- U kunt nu filteren op queryduur en instructietype op de pagina Querygeschiedenis.
- Als u het filter voor de queryduur wilt gebruiken, voert u een hoeveelheid tijd in en kiest u een tijdseenheid. Het geschiedenisresultaat retourneert query's die langer worden uitgevoerd dan de opgegeven tijd.
- Als u het instructietypefilter wilt gebruiken, kiest u een instructietype in de vervolgkeuzelijst. Het geschiedenisresultaat retourneert query's met die instructie.
Oplossing:
- Er is een probleem opgelost waarbij niet alle ondersteunde HTML-tags werkten in aangepaste waarschuwingssjablonen. Alle tags zijn beschikbaar zoals beschreven.
- Er is een probleem opgelost waarbij pop-ups van visualisatiemeldingen zijn opgelost. Dubbelklik bijvoorbeeld om uit te zoomen op een visualisatie werd eerder niet weergegeven.
- Er is een probleem opgelost waarbij het wisselen van de assen in een grafiek niet werd weergegeven in de grafieknaam.
22 september 2022
Verbeteringen
- Tellerwidgets van dezelfde grootte hebben dezelfde tekengrootte wanneer meerdere tegenwidgets worden weergegeven op een dashboard.
- Combinatiegrafieken bijgewerkt, zodat bij gebruik van dubbele as alleen hetzelfde grafiektype (bijvoorbeeld lijn, staaf) op dezelfde as kan worden gebruikt. Reeksaliassen worden ook toegepast op de as.
- Ondersteuning voor automatisch aanvullen toegevoegd voor surrogaatsleutels en
LIST
-bewerkingen.
Oplossing:
- Er is een probleem opgelost waarbij tekstparameters niet als een geldige waarde zijn geaccepteerd
Null
.
15 september 2022
Oplossing:
- Er is een probleem opgelost waarbij het weergeven van de querygeschiedenis vanaf de vermeldingspagina van SQL Warehouses niet werkte.
8 september 2022
Verbetering:
- Maak kennis met de nieuwe kaart Open Source Integrations in DSE/SQL-startpagina's met opensource-integratieopties zoals Delta Live Tables en dbt Core.
Oplossing:
- Er is een probleem opgelost waarbij vervolgkeuzelijsten voor parameters werden geblokkeerd door het tabblad Visualisatie.
1 september 2022
Verbeteringen
- Maak kennis met een nieuwe vereenvoudigde gebruikersinterface om parameters en filters toe te voegen. Kies en kies ervoor om een filter of parameter toe te voegen.
- De haakjes van SQL-tokens, zoals 'OVER()' worden nu automatisch aangevuld.
Fixes:
- Er is een probleem opgelost waarbij het weergeven van het dashboard in volledig scherm het kleurenpalet negeerde.
- Er is een probleem opgelost waarbij het snel typen en vervolgens met de snelkoppeling Uitvoeren de vorige querytekst uitvoerde, in plaats van de zojuist getypte querytekst.
- Er is een probleem opgelost waarbij het gebruik van de toetsenbordopdracht Ctrl +Enter om query's uit te voeren dubbele query's zou verzenden.
25 augustus 2022
Oplossing:
- Er is een probleem opgelost waarbij dashboardfilters niet werden bijgewerkt toen queryparameters werden gewijzigd.
18 augustus 2022
Voor Databricks SQL is Unity Catalog (openbare preview) beschikbaar in het preview-kanaal. Zie Wat is Unity Catalog? voor meer informatie.
Documentatie: Api-documentatie voor waarschuwingen is uitgebracht.
Visualisaties: Gebruikers kunnen nu standaardwaarden instellen voor datumfilters. Telkens wanneer het filter wordt vernieuwd op een query of dashboard, wordt de standaardwaarde toegepast.
Fixes:
- Er is een probleem opgelost waarbij het toepassen van wijzigingen niet werkte als een dashboard nog steeds opnieuw werd geladen.
- Er is een probleem opgelost waarbij kolommen te smal waren wanneer een query geen resultaten retourneert.
11 augustus 2022
Verbeteringen
- Gebruikers kunnen e-mailberichten ontvangen wanneer hun vernieuwingen mislukken. Als u dergelijke meldingen wilt inschakelen, gaat u naar het tabblad SQL-instellingen van de beheerconsole. Kies onder E-mailberichten over fouten het type object (Query, Dashboard of Waarschuwing) waarvoor u foutmeldingen wilt ontvangen. Foutrapporten worden elk uur verzonden.
- Visualisaties
- Maak kennis met een nieuw, modern kleurenpalet voor visualisaties en dashboards. Als u een dashboard wilt wijzigen in het nieuwe kleurenpalet, gaat u naar uw dashboard, klikt u op - - en selecteert u het Databricks-kleurenpalet. SQL-beheerders kunnen het nieuwe kleurenpalet ook instellen als de standaardoptie voor een werkruimte door naar -> -> -> en het nieuwe palet te selecteren.
Fixes:
- Er is een probleem opgelost waarbij het eerder selecteren van toepassen om een filter toe te passen niet werkte als er al een query werd uitgevoerd.
4 augustus 2022
Verbeteringen
- Bij het klonen van een dashboard is er nu een optie voor het al dan niet klonen van query's.
- Tabbladinhoud wordt gesynchroniseerd op browsertabbladen. De status van uw query wordt nu gesynchroniseerd op alle browsertabbladen. Dit betekent dat als u werkt aan query1 in browsertab 1 en vervolgens overschakelt naar browsertabblad 2, query1 wordt weergegeven in de status waarin u het hebt achtergelaten in het oorspronkelijke browsertabblad.
Oplossing:
- Labels voor lege tekenreeksen in cirkeldiagram geven nu aan dat de tekenreeks leeg is in plaats van de index van de waarde.
28 juli 2022
- Waarschuwingen
- Aangepaste e-mailsjablonen voor waarschuwingen zijn bijgewerkt om bepaalde HTML-tags die mogelijk een beveiligingsrisico vormen, niet toe te staan. Niet-toegestane HTML-tags en -kenmerken worden automatisch opgeschoond. Is bijvoorbeeld
- Gebruikers kunnen nu andere gebruikers abonneren op waarschuwingen zonder dat ze een meldingsbestemming hoeven te maken. Hiervoor zijn beheerdersmachtigingen vereist.
- Downloads: Gebruikers kunnen nu maximaal 1 GB aan resultatengegevens downloaden van Databricks SQL in CSV- en TSV-indeling, tot 64.000 rijen eerder.
- Visualisaties
- U kunt nu visualisaties rechtstreeks op het dashboard bewerken. Klik in de bewerkingsmodus ophetmenu en selecteer Visualisatie bewerken om de visualisatie te bewerken.
- Wanneer u resultaten downloadt die zijn gekoppeld aan een visualisatie die gebruikmaakt van aggregaties, worden de gedownloade resultaten ook samengevoegd. De optie om te downloaden is overschakelen van bottom-vak naar de resource die aan het tabblad is gekoppeld. De gedownloade resultaten zijn afkomstig van de meest recente uitvoering van de query die de visualisatie heeft gemaakt.
- SQL-editor: resultatentabellen geven nu een bericht weer wanneer gegevens die worden weergegeven door de tabel in de browser, zijn beperkt tot 64.000 rijen. TSV- en CSV-download zijn nog steeds maximaal 1 GB aan gegevens.
- Queryfilters:
- Queryfilters zijn bijgewerkt om dynamisch te werken aan client- of serverzijde om de prestaties te optimaliseren. Vorige queryfilters (nu verouderd) werken alleen aan clientzijde. Gebruikers kunnen nog steeds verouderde filters gebruiken met de
::
syntaxis, indien gewenst. - De bijgewerkte filters zijn eenvoudiger: gebruikers klikken op de knop +Filter toevoegen en selecteren een kolom in een vervolgkeuzelijst. Voorheen moesten gebruikers de querytekst rechtstreeks wijzigen.
- Relevante waarden zijn gemarkeerd, zodat u gemakkelijker kunt zien welke selecties in een filter resultaten opleveren op basis van andere filterselecties.
- Queryfilters zijn bijgewerkt om dynamisch te werken aan client- of serverzijde om de prestaties te optimaliseren. Vorige queryfilters (nu verouderd) werken alleen aan clientzijde. Gebruikers kunnen nog steeds verouderde filters gebruiken met de
- Querygeschiedenis: Querydetails in querygeschiedenis tonen nu de querybron, de oorsprong van de uitgevoerde query.
21 juli 2022
- Meldingen over delen: gebruikers worden nu per e-mail op de hoogte gesteld wanneer een dashboard, query of waarschuwing met hen wordt gedeeld.
- Verbeterde SQL-editor-ervaring via de nieuwe ingesloten editor-toolkit
- Live syntaxis fout markeren (bijvoorbeeld verkeerd trefwoord, tabel bestaat niet en suggesties voor het oplossen van de fout)
- In contexthulp: bij aanwijzen (bijvoorbeeld volledige tabelnaam, gedetailleerd functievenster) en inline-uitvoeringsfoutberichten (bijvoorbeeld rij markeren met fout na uitvoering)
- Intelligente classificatie van suggesties (bijvoorbeeld parameter automatisch aanvullen, classificatieformule, minder luidruchtige overeenkomsten)
14 juli 2022
- U kunt nu TSV-bestanden uploaden met behulp van de
Create Table
gebruikersinterface naast CSV-bestanden. - Databricks SQL biedt nu de mogelijkheid om gebruikers per e-mail op de hoogte te stellen wanneer een dashboard, query of waarschuwing met hen wordt gedeeld.
- Visualisatietabellen bevatten nu optioneel rijnummers die naast de resultaten worden weergegeven.
- Wanneer u een geografische regio voor de visualisatie Chloropleth selecteert, krijgt u nu inline hints voor geaccepteerde waarden.
23 juni 2022
- Naam van SQL-eindpunt gewijzigd: Databricks heeft de naam van het SQL-eindpunt gewijzigd in SQL Warehouse, omdat het meer is dan alleen een API-toegangspunt voor het uitvoeren van SQL-opdrachten. Een SQL Warehouse is een rekenresource voor al uw behoeften voor datawarehousing, een integraal onderdeel van het Databricks-platform. Rekenresources zijn infrastructuurresources die verwerkingsmogelijkheden in de cloud bieden.
- Voor Choropleth-visualisaties zijn de naam van de selecties van de sleutelkolom en het doelveld in de visualisatie-editor gewijzigd in Geografische kolom en Geografisch type. Deze hernoeming voor begrijpelijkheid introduceert geen gedragswijzigingen in nieuwe of bestaande choropleten.
- De queryoptie limiet 1000 is verplaatst van een selectievakje in de SQL-queryeditor naar een selectievakje in de knop Uitvoeren.
- Query's in de tabel Querygeschiedenis worden nu gemarkeerd met een cachetag.
- Handmatig vernieuwen van een dashboard maakt gebruik van het magazijn van het dashboard (indien beschikbaar) in plaats van het magazijn van elke afzonderlijke query.
- Wanneer u een waarschuwing vernieuwt, wordt altijd het magazijn van de waarschuwing gebruikt, ongeacht de instelling Uitvoeren als viewer/eigenaar.
9 juni 2022
- Wanneer u de muisaanwijzer in de eindpuntkiezer plaatst, wordt de volledige eindpuntnaam weergegeven als knopinfo.
- Wanneer u filtert in de schemabrowser van de SQL-editor, wordt de zoekterm nu gemarkeerd in de zoekresultaten.
- In het dialoogvenster Alles sluiten in de SQL-editor wordt nu een lijst met niet-opgeslagen query's weergegeven.
- Als u het laatst gesloten tabblad in de SQL-editor opnieuw wilt openen, gebruikt u deze nieuwe sneltoets:
<Cmd> + <Shift> + <Option> + T
- U kunt nu gegevenslabels toevoegen aan combinatiegrafieken.
- De lijst met bewerkingen voor visualisatieaggregaties bevat nu variantie en standaarddeviatie.
26 mei 2022
Ontwerpverbeteringen:
- U kunt nu aggregaties overslaan wanneer u visualisaties maakt. Dit is met name handig wanneer uw query al een aggregatie bevat. Als uw query bijvoorbeeld is
SELECT AVG(price_per_sqft), isStudio, location GROUP BY location, isStudio
, moest de grafiekeditor eerder expliciet een andere aggregatielaag opgeven. - Wanneer u dashboards maakt, hebt u nu de mogelijkheid om het volgende te doen:
- Widgets voor tekstvak dupliceren
- De grootte van het deelvenster Tekstvak bewerken uitvouwen
- De standaardaggregatie voor de foutkolom wanneer u visualisaties maakt, is standaarddeviatie.
Fixes:
- Bewerkingsacties voor visualisaties zijn alleen beschikbaar wanneer het dashboard zich in de bewerkingsmodus bevindt. Bewerkingsacties zijn niet meer beschikbaar als een weergavemodusactie.
- Wanneer u een nieuwe query maakt, wordt deze geopend op een tabblad rechts van het tabblad in plaats van aan het einde van de lijst.
- De modale geopende query laat zien welke query al is geopend en biedt de optie om de focus naar dat querytabblad te verplaatsen.
- De Sankey & Sunburst-grafieken behandelen 0 niet langer als null.
19 mei 2022
- Probleem opgelost: wanneer u de focus van de SQL-editor op een specifiek visualisatietabblad hebt geopend en de koppeling naar een andere gebruiker deelt, heeft de gebruiker dezelfde focus in de SQL-editor wanneer deze op de gedeelde koppeling klikt.
- Verbeteringen
- Microsoft Teams is nu een ondersteunde meldingsbestemming.
- De parameters Datumbereik, Datum- en tijdsbereik en Datum- en tijdsbereik (met seconden) ondersteunen nu de optie om de begindag van de week aan te wijzen, met zondag als standaardwaarde.
12 mei 2022
- Visualisaties ondersteunen nu het rechtstreeks binning van tijd in de gebruikersinterface. U kunt nu eenvoudig schakelen tussen jaarlijkse, maandelijkse, dagelijkse of uurlijke opslaglocaties van uw gegevens door een vervolgkeuzelijst te wijzigen in plaats van een
date_trunc()
functie toe te voegen en te wijzigen in de querytekst zelf. - Dashboards hebben nu standaard kleurconsistentie. Als u dezelfde reeks in meerdere grafieken hebt, wordt de reeks altijd hetzelfde gekleurd voor alle grafieken, zonder dat er handmatige configuratie nodig is.
3 mei 2022
- Wanneer u een dashboard deelt met een gebruiker of groep, bieden we nu ook de mogelijkheid om alle upstreamquery's te delen die worden gebruikt door visualisaties en parameters.
- Wanneer u niet gemachtigd bent om een of meer upstream-query's te delen, ontvangt u een waarschuwingsbericht dat niet alle query's kunnen worden gedeeld.
- De machtigingen die zijn verleend bij het delen van een dashboard, overschrijven, negate of uitbreiden van bestaande machtigingen voor de upstream-query's. Als een gebruiker of groep bijvoorbeeld KAN UITVOEREN als eigenaarmachtigingen voor het gedeelde dashboard maar alleen Machtigingen voor Uitvoeren als viewer heeft voor een upstream-query, worden de effectieve machtigingen voor die upstreamquery uitgevoerd als Viewer.
27 april 2022
- Uw dashboardindeling blijft nu behouden wanneer u exporteert naar PDF op aanvraag en e-mailberichten over geplande abonnementen genereert.
17 maart 2022
- Grafieken bevatten een nieuwe combinatievisualisatieoptie. Hiermee kunt u grafieken maken die zowel balken als lijnen bevatten.
10 maart 2022
- Met Unity Catalog (preview) kunt u governance en toegang tot uw gegevens beheren op het niveau van het account. U kunt metastores en gegevensmachtigingen centraal beheren en u kunt een metastore toewijzen aan meerdere werkruimten in uw account. U kunt Unity Catalog-gegevens en -objecten beheren en gebruiken met behulp van Databricks SQL Catalog Explorer of de SQL-editor en u kunt Unity Catalog-gegevens gebruiken in dashboards en visualisaties. Bekijk Wat is Unity Catalog?
Notitie
Voor Unity Catalog moeten SQL-eindpunten versie 2022.11 gebruiken, die zich in het preview-kanaal bevindt.
- Met Delta Sharing (preview) kunt u alleen-lezengegevens delen met ontvangers buiten uw organisatie. Databricks SQL biedt ondersteuning voor het uitvoeren van query's op Delta Sharing-gegevens en het gebruik ervan in visualisaties en dashboards.
- Telkens wanneer een dashboard handmatig of volgens een schema wordt vernieuwd, worden alle query's in het dashboard en upstream, inclusief de query's die door parameters worden gebruikt, vernieuwd. Wanneer een afzonderlijke visualisatie wordt vernieuwd, worden alle upstream-query's, inclusief de query's die door parameters worden gebruikt, vernieuwd.
3 maart 2022
- De cohortvisualisatie is bijgewerkt, zodat cohorten worden geïnterpoleerd van minimum- en maximumwaarden in plaats van 0 en 100. Het is nu veel eenvoudiger om cohorten te onderscheiden binnen het werkelijke bereik van beschikbare gegevens. Als alle getallen eerder dicht bij elkaar waren, gebruikten ze dezelfde kleur. Getallen die dicht bij elkaar liggen, hebben nu meer kans om verschillende kleuren te gebruiken, omdat het cohort is verdeeld van het maximum tot minimumbereik om elke reeks te vormen.
- Het is gemakkelijker om te zien of een dashboardabonnementsschema actief of onderbroken is. Wanneer u op Abonneren klikt en de planning van het dashboardabonnement is onderbroken, wordt het bericht Dit schema is onderbroken weergegeven. Wanneer een dashboardabonnement is onderbroken, kunt u zich abonneren of afmelden voor het dashboard, maar geplande momentopnamen worden niet verzonden en worden de visualisaties van het dashboard niet bijgewerkt.
- Wanneer u querygeschiedenis bekijkt, kunt u de lijst nu sorteren op duur. Standaard worden query's gesorteerd op begintijd.
24 februari 2022
- In Catalog Explorer kunt u nu de machtigingen bekijken die gebruikers of groepen hebben voor een tabel, weergave, schema of catalogus. Klik op het object en klik vervolgens op Machtigingen en gebruik het nieuwe filtervak.
17 februari 2022
- Visualisaties werden net een beetje slimmer. Wanneer een query resulteert in een of twee kolommen, wordt automatisch een aanbevolen visualisatietype geselecteerd.
- U kunt nu histogrammen maken om de frequentie te visualiseren die elke waarde in een gegevensset optreedt en om te begrijpen of een gegevensset waarden heeft die zijn geclusterd rond een klein aantal bereiken of meer verspreid zijn.
- In zowel querygeschiedenis als queryprofiel kunt u nu uitbreiden tot volledige breedte van de querytekenreeks en het foutbericht van een mislukte query. Hierdoor kunt u eenvoudiger queryplannen analyseren en problemen met mislukte query's oplossen.
- In visualisaties van staaf-, lijn-, vlak-, cirkel- en heatmapvisualisaties kunt u nu rechtstreeks in de gebruikersinterface van de visualisatieconfiguratie aggregatie uitvoeren zonder dat u de query zelf hoeft te wijzigen. Wanneer u deze nieuwe mogelijkheden gebruikt, wordt de aggregatie uitgevoerd voor de hele gegevensset in plaats van te worden beperkt tot de eerste 64.000 rijen. Wanneer u een visualisatie bewerkt die vóór deze release is gemaakt, ziet u een bericht met de tekst
This visualization uses an old configuration. New visualizations support aggregating data directly within the editor.
Als u gebruik wilt maken van de nieuwe mogelijkheden, moet u de visualisatie opnieuw maken. Zie Aggregatie inschakelen in een visualisatie.
10 februari 2022
U kunt nu een aangepast kleurenpalet instellen voor een dashboard. Alle visualisaties die in dat dashboard worden weergegeven, gebruiken het opgegeven palet. Het instellen van een aangepast palet heeft geen invloed op de weergave van een visualisatie in andere dashboards of de SQL-editor.
U kunt hexwaarden opgeven voor een palet of kleuren importeren uit een ander palet, ongeacht of deze worden geleverd door Databricks of gemaakt door een werkruimtebeheerder.
Wanneer een palet wordt toegepast op een dashboard, gebruiken alle visualisaties die in dat dashboard worden weergegeven het geselecteerde kleurenpalet standaard, zelfs als u aangepaste kleuren configureert wanneer u de visualisatie maakt. Zie Kleuren aanpassen voor een visualisatie om dit gedrag te overschrijven.
Werkruimtebeheerders kunnen nu een aangepast kleurenpalet maken met behulp van de beheerconsole. Nadat het aangepaste kleurenpalet is gemaakt, kan het worden gebruikt in nieuwe en bestaande dashboards. Als u een aangepast kleurenpalet voor een dashboard wilt gebruiken of wilt aanpassen, kunt u dashboardinstellingen bewerken.
Wanneer u vanuit het SQL-menu
een visualisatie toevoegt die gebruikmaakt van parameters aan een dashboard, worden in de visualisatie standaard parameters op dashboardniveau gebruikt. Dit komt overeen met het gedrag wanneer u een widget toevoegt met behulp van de knop Visualisatie toevoegen in een dashboard.
Wanneer u de querygeschiedenis bekijkt en de lijst filtert op een combinatie van parameters, wordt het aantal overeenkomende query's nu weergegeven.
In visualisaties is een probleem opgelost waarbij het bereik van de Y-as niet kon worden aangepast aan specifieke waarden.
3 februari 2022
De SQL-editor met tabbladen is nu standaard ingeschakeld voor alle gebruikers. Zie Meerdere query's bewerken voor meer informatie of als u de editor met tabbladen wilt uitschakelen.
Abonnees van dashboard-e-mail ontvangen nu een inlineafbeelding met de momentopname van het dashboard in plaats van een bijlage. Er wordt een PDF-bestand van de momentopname toegevoegd aan het e-mailbericht.
U kunt nu de betrouwbaarheid en kosten verdelen door het spot-exemplaarbeleid voor SQL-eindpunten te configureren. Het spot-exemplaarbeleid bepaalt of werknemers alleen on-demand exemplaren of een combinatie van on-demand en spot-exemplaren gebruiken. Kosten geoptimaliseerd (de standaardinstelling) maakt voornamelijk gebruik van spot-exemplaren en één on-demand exemplaar. Betrouwbaarheid geoptimaliseerd maakt alleen gebruik van instanties op aanvraag. Voorheen werden on-demand exemplaren altijd gebruikt voor SQL-eindpunten. Als u dit gedrag wilt behouden, stelt u het beleid voor het spot-exemplaar in op Geoptimaliseerd voor betrouwbaarheid. Zie Spot-exemplaarbeleid configureren.
27 januari 2022
Er zijn verbeteringen aangebracht in hoe u het profiel van een query kunt bekijken, delen en importeren. Zie Queryprofiel.
Met de visualisatie Details kunt u nu de naam van kolommen wijzigen, net zoals de tabelvisualisatie.
U kunt nu een tabblad in de SQL-editor sluiten door erop te klikken.
De volgende sneltoetsen zijn toegevoegd aan de SQL-editor met tabbladen:
- Alle tabbladen sluiten: Cmd+Option+Shift+A (macOS) / Ctrl+Option+Shift+A (Windows)
- Andere tabbladen sluiten: Cmd+Option+Shift+W (macOS) / Ctrl+Option+Shift+W (Windows)
Deze sneltoetsen bieden een alternatief voor het klikken met de rechtermuisknop op een tabblad om toegang te krijgen tot dezelfde acties. Als u alle sneltoetsen wilt weergeven, klikt u op het
pictogram Toetsenbord in de SQL-editor met tabbladen.
20 januari 2022
- De standaardopmaak voor geheel getal- en floatgegevenstypen in tabellen is bijgewerkt en bevat geen komma's. Dit betekent dat standaard waarden zoals
10002343
komma's niet meer bevatten. Als u deze typen wilt opmaken om weer te geven met komma's, klikt u op Visualisatie bewerken, vouwt u het gebied voor de kolom uit en wijzigt u de indeling zodat deze een komma bevat. - Voor een betere afstemming met browserweergavelimieten worden in visualisaties nu maximaal 10.000 gegevenspunten weergegeven. Een spreidingsdiagram geeft bijvoorbeeld een maximum van 10.000 stippen weer. Als het aantal gegevenspunten is beperkt, wordt er een waarschuwing weergegeven.
13 januari 2022
- Er is een probleem opgelost waarbij de knop Opslaan in de SQL-editor soms werd uitgeschakeld. De knop Opslaan is nu altijd ingeschakeld en bevat een sterretje (
*
) wanneer niet-opgeslagen wijzigingen worden gedetecteerd.
15 december 2021
- Databricks SQL is algemeen beschikbaar. Dit markeert een belangrijke mijlpaal bij het bieden van het eerste Lakehouse-platform waarmee gegevens, AI en BI-workloads op één plaats worden samengebouwd. Met GA kunt u het hoogste stabiliteitsniveau, ondersteuning en bedrijfsgereedheid van Databricks verwachten voor bedrijfskritieke workloads. Lees de ga-aankondigingsblog voor meer informatie.
- Waarschuwingen worden nu onafhankelijk van query's gepland. Wanneer u een nieuwe waarschuwing maakt en een query maakt, wordt u gevraagd ook een planning voor de waarschuwing te maken. Als u een bestaande waarschuwing hebt, hebben we het schema van de oorspronkelijke query gedupliceerd. Met deze wijziging kunt u ook waarschuwingen instellen voor zowel Run as Owner- als Run as Viewer-query's. Voer als eigenaarquery's uit volgens het aangewezen waarschuwingsschema met de referentie van de query-eigenaar. Uitvoeren als Viewer-query's worden uitgevoerd volgens het aangewezen waarschuwingsschema met de referentie van de maker van de waarschuwing. Zie Wat zijn Databricks SQL-waarschuwingen? en Plan een query.
- U kunt nu parameters opnieuw ordenen in zowel de SQL-editor als in dashboards.
- De documentatie voor het maken van heatmapvisualisaties is uitgebreid. Zie heatmapopties.
9 december 2021
- Wanneer u een tabelvisualisatie maakt, kunt u nu de tekstkleur voor een kolom instellen op een statische waarde of een bereik met waarden op basis van de waarden van het veld van de kolom. De letterlijke waarde wordt vergeleken met de drempelwaarde. Als u bijvoorbeeld resultaten wilt kleuren waarvan de waarden groter zijn
500000
, maakt u de drempelwaarde> 500000
in plaats> 500,000
van . Zie Kolomkleuren voorwaardelijk opmaken. - Met pictogrammen in de schemabrowser van de SQL-editor met tabbladen kunt u nu onderscheid maken tussen tabellen en weergaven.
1 december 2021
- U kunt nu SQL-configuratieparameters toepassen op werkruimteniveau. Deze parameters zijn automatisch van toepassing op alle bestaande en nieuwe SQL-eindpunten in de werkruimte. Zie SQL-parameters configureren.
18 november 2021
Wanneer u de geschiedenis van een query bekijkt, kunt u nu query's filteren op de service-principal die deze heeft uitgevoerd. Zie Querygeschiedenis weergeven.
U kunt nu de SQL-editor openen met behulp van een snelkoppeling op de zijbalk. Klik op SQL Editor om de SQL-editor te openen.
Als u gemachtigd bent om Datawetenschap & Engineering-clusters te maken, kunt u nu SQL-eindpunten maken door te klikken op Maken in de zijbalk en op SQL-eindpunt te klikken.
Beheerders kunnen nu het eigendom van een query, dashboard of waarschuwing overdragen aan een andere gebruiker via de gebruikersinterface. Zie:
4 november 2021
- In een visualisatievisualisatie voor kaarten (Choropleth) is het maximum aantal kleurovergangen voor kleuren in de legenda verhoogd van 11 tot 20. De standaardwaarde is 5 kleurovergangsstappen inclusief Minimale kleur en Maximale kleur.
- De SQL-editor met tabbladen ondersteunt nu bulksgewijs tabbladbeheer. Als u met de rechtermuisknop op een tabblad klikt, ziet u de optie om anderen te sluiten, links sluiten, Sluiten rechts en Alles sluiten. Als u met de rechtermuisknop op het eerste of laatste tabblad klikt, ziet u niet de opties om links of rechts sluiten te sluiten.
28 oktober 2021
- Wanneer u een tabel in Catalog Explorer bekijkt, hebt u twee opties om de interactie met de tabel te vereenvoudigen:
- Klik op Query maken > om een query te maken die alle kolommen selecteert en de eerste 1000 rijen retourneert.
- Klik op Snel dashboard maken > om een configuratiepagina te openen waarin u kolommen van belang kunt selecteren en een dashboard en ondersteunende query's kunt maken die enkele basisinformatie bieden met behulp van deze kolommen en parameters op dashboardniveau en andere mogelijkheden kunt presenteren.
19 oktober 2021
- Nieuwe sneltoetsen zijn nu beschikbaar in de editor met tabbladen:
- Nieuw tabblad openen:
- Windows:
Cmd+Alt+T
- Mac:
Cmd+Option+T
- Windows:
- Huidig tabblad sluiten
- Windows:
Cmd+Alt+W
- Mac:
Cmd+Option+W
- Windows:
- Dialoogvenster Query openen
- Windows:
Cmd+Alt+O
- Mac:
Cmd+Option+O
- Windows:
- Nieuw tabblad openen:
23 september 2021
- U kunt nu een nieuw dashboard maken door een bestaand dashboard te klonen, zolang u de machtiging CAN RUN hebt, KAN BEWERKEN en KAN BEHEREN op het dashboard en alle upstreamquery's. Zie Een verouderd dashboard klonen.
- U kunt nu in een visualisatie met meerdere Y-askolommen gebruiken
GROUP BY
. Zie Spreidingsdiagram. - U kunt nu gegevenslabels opmaken
{{ @@yPercent}}
in een niet-gestapeld staafdiagram. Zie Staafdiagram. - Als u SAML-verificatie gebruikt en uw SAML-referentie binnen enkele minuten verloopt, wordt u nu proactief gevraagd u opnieuw aan te melden voordat u een query uitvoert of een dashboard vernieuwt. Dit helpt onderbrekingen te voorkomen vanwege een referentie die verloopt tijdens het uitvoeren van query's.
20 september 2021
- U kunt nu het eigendom van dashboards, query's en waarschuwingen overdragen met behulp van de REST API voor machtigingen. Zie ACL's voor query's.
16 september 2021
- In queryresultaten
BIGINT
worden de resultaten nu geserialiseerd als tekenreeksen die groter zijn dan 9007199254740991. Hiermee wordt een probleem opgelost waarbijBIGINT
de resultaten kunnen worden afgekapt in queryresultaten. Andere gehele getallen worden nog steeds geserialiseerd als getallen. Getalopmaak op aslabels en knopinfo is niet van toepassing opBIGINT
resultaten die als tekenreeksen worden geserialiseerd. Zie BIGINT-type voor meer informatie over gegevenstypen in Databricks SQL.
7 september 2021
Databricks implementeert de wijzigingen die volgen in de loop van een week. Uw werkruimte is mogelijk pas na 7 september ingeschakeld voor deze wijzigingen.
Databricks SQL is nu beschikbaar als openbare preview en is ingeschakeld voor alle gebruikers in nieuwe werkruimten.
Notitie
Als uw werkruimte is ingeschakeld voor Databricks SQL tijdens de openbare preview, dat wil gezegd vóór de week vanaf 7 september 2021, behouden gebruikers het recht dat vóór die datum is toegewezen, tenzij u deze wijzigt. Met andere woorden, als een gebruiker tijdens de openbare preview geen toegang heeft tot Databricks SQL, hebben ze deze nu niet, tenzij een beheerder deze aan hen geeft.
Beheerders kunnen beheren welke gebruikers toegang hebben tot Databricks SQL door het toegangsrechten voor Databricks SQL (
databricks-sql-access
in de API) toe te wijzen aan gebruikers of groepen. Nieuwe gebruikers hebben standaard dit recht.Beheerders kunnen een gebruiker of groep beperken tot toegang tot alleen Databricks SQL en voorkomen dat ze toegang krijgen tot Datawetenschap & Engineering of Databricks Machine Learning door de rechten voor werkruimtetoegang (
workspace-access
in de API) van de gebruiker of groep te verwijderen. Nieuwe gebruikers hebben standaard dit recht.Belangrijk
Als u zich wilt aanmelden en toegang wilt krijgen tot Azure Databricks, moet een gebruiker de Toegangsrechten voor Databricks SQL of werkruimtetoegang hebben (of beide).
Een klein klassiek SQL-eindpunt met de naam Starter Endpoint is vooraf geconfigureerd voor alle werkruimten, zodat u meteen aan de slag kunt met het maken van dashboards, visualisaties en query's. Als u complexere workloads wilt verwerken, kunt u de grootte ervan eenvoudig vergroten (om latentie te verminderen) of het aantal onderliggende clusters (om meer gelijktijdige gebruikers te verwerken). Voor het beheren van kosten is het starterseindpunt geconfigureerd om te worden beëindigd na 120 minuten inactief.
Om snel aan de slag te gaan, is er een nieuwe begeleide onboarding-ervaring beschikbaar voor beheerders en gebruikers. Het onboardingpaneel is standaard zichtbaar en u kunt altijd zien hoeveel onboardingtaken er nog in de zijbalk staan. Klik op taken links om het onboardingvenster opnieuw te openen.
U kunt snel aan de slag met Databricks SQL met twee uitgebreide gegevenssets in een alleen-lezencatalogus met de naam
SAMPLES
, die beschikbaar is vanuit alle werkruimten. Wanneer u meer te weten komt over Databricks SQL, kunt u deze schema's gebruiken om query's, visualisaties en dashboards te maken. Er is geen configuratie vereist en alle gebruikers hebben toegang tot deze schema's.- Het
nyctaxi
schema bevat taxiritgegevens in detrips
tabel. - Het
tpch
schema bevat omzet- en toeleveringsketengegevens in de volgende tabellen:customer
lineitem
nation
orders
part
partsupp
region
supplier
Klik op Uw eerste query uitvoeren in het onboardingvenster om een nieuwe query van het
nyctaxi
schema te genereren.- Het
Als u meer wilt weten over het visualiseren van gegevens in Databricks SQL zonder configuratie, kunt u dashboards importeren uit de galerie Met dashboardvoorbeelden. Deze dashboards worden mogelijk gemaakt door de gegevenssets in de
SAMPLES
catalogus.Als u de galerie Dashboardvoorbeelden wilt weergeven, klikt u op Voorbeelddashboard importeren in het onboardingvenster.
U kunt nu systeemeigen SQL-functies maken en verwijderen met behulp van de opdrachten CREATE FUNCTION en DROP FUNCTION .
2 september 2021
Gebruikers met de machtiging CAN EDIT op een dashboard kunnen nu het vernieuwingsschema en de abonnementslijst van het dashboard beheren. Voorheen was de machtiging CAN MANAGE vereist. Zie Automatisch een dashboard vernieuwen voor meer informatie.
Visualisaties worden standaard niet meer dynamisch aangepast op basis van het aantal geretourneerde resultaten, maar behouden dezelfde hoogte, ongeacht het aantal resultaten. Als u wilt terugkeren naar het vorige gedrag en een visualisatie wilt configureren om het formaat dynamisch te wijzigen, schakelt u de hoogte van het deelvenster dynamisch in in de instellingen van de visualisatie in het dashboard. Zie Tabelopties voor meer informatie.
Als u toegang hebt tot meer dan één werkruimte in hetzelfde account, kunt u van werkruimte wisselen vanuit Databricks SQL. Klik
in de linkerbenedenhoek van uw Azure Databricks-werkruimte en selecteer vervolgens een werkruimte om ernaar over te schakelen.
12 augustus 2021
- Een beheerder kan nu de query van een andere gebruiker beëindigen terwijl deze wordt uitgevoerd. Zie Een uitvoeringsquery beëindigen voor meer informatie.
05 augustus 2021
- Verbeterde
EXPLAIN
resultaatopmaak- Uitlegresultaten zijn gemakkelijker te lezen
- Opgemaakt als monospaced zonder lijnterugloop
29 juli 2021
- Het gebruik van meerdere query's is zojuist eenvoudiger geworden met ondersteuning voor meerdere tabbladen in de query-editor. Zie Meerdere query's bewerken als u de editor met tabbladen wilt gebruiken.
08 juli 2021
- Visualisatiewidgets in dashboards hebben nu titels en beschrijvingen, zodat u de titel en beschrijving van visualisaties die in meerdere dashboards worden gebruikt, kunt aanpassen aan het dashboard zelf.
- De zijbalk is bijgewerkt voor verbeterde zichtbaarheid en navigatie:
- Warehouses zijn nu SQL-eindpunten en geschiedenis is gewijzigd in Querygeschiedenis.
- Accountinstellingen (voorheen Gebruikers genoemd) zijn verplaatst naar
Account. Wanneer u Account selecteert, kunt u de Azure Databricks-werkruimte wijzigen en afmelden.
- Gebruikersinstellingen zijn verplaatst naar
Instellingen en zijn gesplitst in Instellingen en SQL-beheerconsole. DE SQL-beheerconsole is alleen zichtbaar voor beheerders.
- Het Help-pictogram is gewijzigd in
Help.
01 juli 2021
- Met de nieuwe Catalogusverkenner kunt u eenvoudig machtigingen voor databases en tabellen verkennen en beheren. Gebruikers kunnen schemadetails bekijken, voorbeeldgegevens bekijken en tabeldetails en eigenschappen bekijken. Beheerders kunnen eigenaren van gegevensobjecten bekijken en wijzigen, en eigenaren van gegevensobjecten kunnen machtigingen verlenen en intrekken. Zie Wat is Catalog Explorer? voor meer informatie.
- Y-assen in horizontale grafieken zijn bijgewerkt om dezelfde volgorde weer te geven als in tabellen. Als u eerder omgekeerde volgorde hebt geselecteerd, kunt u de wisselknop Omgekeerde volgorde op het tabblad Y-as gebruiken om de nieuwe volgorde om te draaien.
23 juni 2021
- Configureer eenvoudig SQL-eindpunten met service-principals. Er is nu een besturingselement waarmee u een service-principal kunt configureren in de globale INSTELLING voor SQL-eindpunten. Zie Een service-principal configureren.
- Tijdelijke weergaven worden nu ondersteund.
17 juni 2021
- Photon, de nieuwe vectorized uitvoeringsengine van Databricks, is nu standaard ingeschakeld voor nieuw gemaakte SQL-eindpunten (zowel UI als REST API). Foton versnelt transparant
- Schrijfbewerkingen naar Parquet- en Delta-tabellen.
- Veel SQL-query's. Zie beperkingen.
- Beheer eenvoudig gebruikers en groepen met
CREATE GROUP
,DROP GROUP
,ALTER GROUP
enSHOW GROUPS
SHOW USERS
opdrachten. Zie Beveiligingsinstructies en Show-instructies voor meer informatie. - De schemabrowser van de queryeditor is sneller en sneller in schema's met meer dan 100 tabellen. In dergelijke schema's worden niet alle kolommen automatisch geladen in de schemabrowser; de lijst met tabellen wordt nog steeds zoals gebruikelijk weergegeven, maar kolommen worden alleen geladen wanneer u op een tabel klikt. Deze wijziging is van invloed op het automatisch aanvullen van query's in de queryeditor, omdat deze afhankelijk is van deze informatie om suggesties weer te geven. Totdat u een tabel uitvouwt en de kolommen laadt, zijn deze suggesties niet beschikbaar.
03 juni 2021
- Beheerders van nieuw ingeschakelde Azure Databricks-werkruimten ontvangen nu standaard het Databricks SQL-recht en hoeven zichzelf niet langer de Toegangsrechten voor Databricks SQL te geven via de beheerconsole.
- Photon is nu beschikbaar als openbare preview en is standaard ingeschakeld voor nieuwe SQL-eindpunten.
- Taakverdeling voor meerdere clusters is nu beschikbaar als openbare preview.
- U kunt nu samenwerking inschakelen op dashboards en query's met andere leden van uw organisatie met behulp van de machtiging CAN EDIT. Zie Toegangsbeheerlijsten.
26 mei 2021
- De naam van SQL Analytics wordt gewijzigd in Databricks SQL. Deze wijziging heeft de volgende klantgerichte gevolgen:
Verwijzingen in de webgebruikersinterface zijn bijgewerkt.
De naam van het recht om toegang te verlenen tot Databricks SQL is gewijzigd:
- Gebruikersinterface: Databricks SQL-toegang (voorheen SQL Analytics-toegang)
- SCIM-API:
databricks-sql-access
(eerdersql-analytics-access
)
Gebruikers, groepen en service-principals met het vorige recht zijn gemigreerd naar het nieuwe recht.
Tags voor auditlogboekgebeurtenissen met betrekking tot Databricks SQL zijn gewijzigd:
- Het voorvoegsel voor Databricks SQL-gebeurtenissen is nu
databrickssql
. changeSqlAnalyticsAcl
is nuchangeDatabricksSqlAcl
.
- Het voorvoegsel voor Databricks SQL-gebeurtenissen is nu
- Dashboardupdates
- De bestandsnaam van het exporteren van het dashboard is bijgewerkt als de naam van het dashboard + tijdstempel in plaats van een UUID.
- De limiet voor exportrecords is verhoogd van 22.000 tot 64.000.
20 mei 2021
U kunt nu uw eigen sleutel uit Azure Key Vault gebruiken om de Databricks SQL-query's en querygeschiedenis te versleutelen die zijn opgeslagen in Azure Databricks. Als u al uw eigen sleutel hebt geconfigureerd voor een werkruimte voor het versleutelen van gegevens voor beheerde services (notebooks en geheimen), is er geen verdere actie vereist. Dezelfde door de klant beheerde sleutel voor beheerde services versleutelt nu ook de Databricks SQL-query's en querygeschiedenis. Zie door de klant beheerde sleutels voor beheerde services. Deze wijziging is alleen van invloed op nieuwe gegevens die in rust worden opgeslagen. Databricks SQL-query's en querygeschiedenis die eerder zijn opgeslagen, worden niet gegarandeerd versleuteld met deze sleutel.
Databricks SQL-queryresultaten worden opgeslagen in uw hoofdexemplaren van Azure Blob Storage die Azure Databricks heeft gemaakt tijdens het instellen van de werkruimte en worden niet versleuteld door uw beheerde servicessleutel. U kunt echter uw eigen sleutel gebruiken om ze te versleutelen. Zie door de klant beheerde sleutels voor dbFS-hoofdmap.
Deze functie is beschikbaar bij het Premium-abonnement.
Op het tabblad Uitvoeringen in het verleden wordt nu relatieve tijd weergegeven.
13 mei 2021
Databricks SQL probeert geen kolomtypen meer te raden. Voorheen werd een kolom met de indeling
xxxx-yy-dd
automatisch behandeld als een datum, zelfs als het een identificatiecode was. Nu die kolom niet meer automatisch wordt behandeld als een datum. U moet dat desgewenst in de query opgeven. Deze wijziging kan ertoe leiden dat sommige visualisaties die afhankelijk waren van het vorige gedrag niet meer werken. In deze release kunt u de optie Compatibiliteit met instellingen>wijzigen> om terug te keren naar het vorige gedrag. In een toekomstige release wordt deze mogelijkheid verwijderd.
De queryeditor heeft nu een voortgangsindicator voor query's. Statuswijzigingen zijn nu zichtbaar in een voortdurend bijgewerkte voortgangsbalk.
06 mei 2021
U kunt nu de inhoud van het dashboard downloaden als pdf-bestand. Zie Downloaden als PDF.
Een gebruiker met beheerdersrechten heeft nu toegang tot alle query's en dashboards. In deze weergave kan een beheerder een query of dashboard bekijken en verwijderen. De beheerder kan de query of het dashboard echter niet bewerken als deze niet wordt gedeeld met de beheerder. Zie de weergave Querybeheerder en de verouderde dashboardbeheerderweergave.
De mogelijkheid om de gelijktijdigheid van eindpunten met taakverdeling met meerdere clusters te verhogen, is nu beschikbaar voor alle accounts. U kunt eindpunten maken die automatisch schalen tussen opgegeven minimum- en maximumaantal clusters. Overbelaste eindpunten worden omhoog geschaald en ondergeladen eindpunten worden omlaag geschaald.
29 april 2021
- Queryopties en -details zijn nu geordend in een set tabbladen links van de query-editor:
Gegevensbronnen: Selecteer uit de beschikbare gegevensbronnen en het schema. Zie Een query maken.
Eerdere uitvoeringen: bekijk eerdere uitvoeringen die zijn uitgevoerd in de SQL-editor. Hiermee worden geen geplande uitvoeringen weergegeven. Zie Query's schrijven en gegevens verkennen in de SQL-editor.
Querygegevens: Stel de beschrijving van de query in, bekijk informatie over de query en stel het vernieuwingsschema in. Zie Query's schrijven en gegevens verkennen in de SQL-editor en een query plannen.
22 april 2021
- Er is een probleem opgelost waarbij eindpunten niet toegankelijk waren en leek te worden verwijderd vanwege een interne fout.
16 april 2021
Databricks SQL behoudt compatibiliteit met Apache Spark SQL-semantiek. In deze release worden de semantiek bijgewerkt zodat deze overeenkomen met die van Apache Spark 3.1. Voorheen werd Databricks SQL afgestemd op Apache Spark 3.0-semantiek.
- Statistische aggregatiefuncties, waaronder
std
,stddev
,stddev_samp
,variance
,var_samp
,skewness
, ,kurtosis
encovar_samp
,corr
retournerenNULL
in plaats van wanneerDivideByZero
ze plaatsvinden tijdens de evaluatie vanDouble.NaN
expressies, bijvoorbeeld wanneerstddev_samp
ze worden toegepast op één elementset. Vóór deze release zou deze worden geretourneerdDouble.NaN
. grouping_id()
retourneert lange waarden. Vóór deze release heeft deze functie int-waarden geretourneerd.- In het queryplan worden de resultaten nu opgemaakt.
from_unixtime
,unix_timestamp
,to_unix_timestamp
,to_timestamp
ento_date
mislukt als het opgegeven datum/tijd-patroon ongeldig is. Vóór deze release keerdenNULL
ze terug.- De gegevensbronnen Parquet, ORC, Avro en JSON genereren de uitzondering
org.apache.spark.sql.AnalysisException
: 'Dubbele kolommen gevonden in het gegevensschema, gelezen als ze dubbele namen in kolommen op het hoogste niveau en in geneste structuren detecteren'. - Structs en kaarten worden verpakt door de
{}
haken in het gieten van structs naar tekenreeksen. De actie en deCAST
expressie maken bijvoorbeeldshow()
gebruik van dergelijke vierkante haken. Vóór deze release werden de d-haken gebruikt voor hetzelfde doel. - NULL-elementen van structuren, matrices en kaarten worden geconverteerd naar 'null' in het casten naar tekenreeksen. Vóór deze release
NULL
zijn elementen geconverteerd naar lege tekenreeksen. - De som van de kolomoverloop van het decimale type retourneert null. Vóór deze release kan de som van de kolom van het decimale type null of onjuist resultaat retourneren, of zelfs mislukt tijdens runtime (afhankelijk van de werkelijke uitvoering van het queryplan).
IllegalArgumentException
wordt geretourneerd voor de letterlijke waarde van het onvolledige interval, bijvoorbeeldINTERVAL '1'
,INTERVAL '1 DAY 2'
die ongeldig zijn. Vóór deze release resulteren deze letterlijke waarden in NULL's.- Laden en opslaan van tijdstempels van en naar Parquet-bestanden mislukt als de tijdstempels eerder
1900-01-01 00:00:00Z
zijn en geladen (opgeslagen) als hetINT96
type. Vóór deze release mislukken de acties niet, maar kunnen leiden tot het verschuiven van de tijdstempels van invoer vanwege het opnieuw toepassen van/naar Julian naar/van proleptische Gregoriaanse kalender. - De
schema_of_json
enschema_of_csv
functies retourneren het schema in de SQL-indeling waarin veldnamen worden geciteerd. Vóór deze release retourneert de functie een catalogustekenreeks zonder veldvermelding en in kleine letters. CHAR
enCHARACTER
VARCHAR
typen worden ondersteund in het tabelschema. Tabelscan en invoeging respecteert het teken/varchar semantisch. Als char/varchar wordt gebruikt op andere plaatsen dan het tabelschema, wordt er een uitzondering gegenereerd (CAST is een uitzondering die alleen char/varchar als tekenreeks als voorheen behandelt).- De volgende uitzonderingen worden gegenereerd voor tabellen uit de externe Hive-catalogus:
ALTER TABLE .. ADD PARTITION
PartitionsAlreadyExistException
genereert als er al een nieuwe partitie bestaat.ALTER TABLE .. DROP PARTITION
NoSuchPartitionsException
genereert voor niet-bestaande partities.
13 april 2021
- Verbeterde querydoorvoer met wachtrijen voor SQL-eindpunten. Query's die zijn verzonden naar een SQL-eindpunt, worden nu in de wachtrij geplaatst wanneer het eindpunt al vol is met actieve query's. Dit verbetert de doorvoer van query's door het eindpunt niet te overbelasten met aanvragen. U kunt de verbeterde prestaties bekijken in het scherm voor eindpuntbewaking.
01 april 2021
- Zoek snel de tijd die is besteed aan compilatie, uitvoering en resultaat ophalen voor een query in querygeschiedenis. Zie Queryprofiel. Voorheen was deze informatie alleen beschikbaar door op een query te klikken en het tabblad Uitvoeringsdetails te openen.
- SQL-eindpunten worden niet langer geschaald buiten de maximaal opgegeven clusters. Alle clusters die aan een SQL-eindpunt zijn toegewezen, worden na 24 uur gerecycled, waardoor er een kort venster kan worden gemaakt waarin er één extra cluster is.
18 maart 2021
- Automatisch aanvullen in de query-editor ondersteunt nu de SQL-syntaxis van Databricks en is context en aliasbewust. Zie Een query maken.
- JDBC- en ODBC-aanvragen mislukken niet meer met ongeldige sessiefouten nadat er een time-out optreedt voor de sessie op de server. BI-clients kunnen nu naadloos herstellen wanneer er sessietime-outs optreden.
11 maart 2021
- Beheerders en gebruikers in werkruimten die nieuw zijn ingeschakeld voor Databricks SQL, hebben niet langer automatisch toegang tot Databricks SQL. Om toegang tot Databricks SQL in te schakelen, moet de beheerder het volgende doen:
- Ga naar de pagina met beheerdersinstellingen.
- Klik op het tabblad Gebruikers.
- Klik in de rij voor het account op het selectievakje Databricks SQL-toegang .
- Klik op Bevestigen.
- Herhaal stap 3 en 4 om gebruikers toegang te verlenen tot Databricks SQL of om toegang te verlenen tot groepen.
- Eenvoudig query's, dashboards en waarschuwingen maken door Nieuw > te selecteren
[Query | Dashboard | Waarschuwing] boven aan de zijbalk.
- Power Query-editor slaat concepten nu op en kunt u terugkeren naar een opgeslagen query. Zie Query's schrijven en gegevens verkennen in de SQL-editor.
- U kunt geen externe gegevensbronnen meer maken.
- De betrouwbaarheid van het SQL-eindpuntbewakingsdiagram is verbeterd. In de grafiek worden niet langer onregelmatig foutberichten weergegeven.
04 maart 2021
De API-documentatie voor query's, dashboards en waarschuwingen is nu beschikbaar. Zie databricks REST API-naslaginformatie.
Geplande dashboardvernieuwing wordt nu altijd uitgevoerd. De vernieuwingen worden uitgevoerd in de webtoepassing, zodat u het dashboard niet langer in een browser hoeft te openen. Zie Automatisch een dashboard vernieuwen.
Nieuwe SQL-eindpunten die zijn gemaakt met behulp van de SQL Warehouse-API , hebben nu automatisch stoppen ingeschakeld met een standaardtime-out van twee uur.
Tableau Online-gebruikers kunnen nu verbinding maken met SQL-eindpunten. Bekijk de nieuwe quickstart voor Tableau Online.
26 februari 2021
De nieuwe Power BI-connector voor Azure Databricks, uitgebracht in de openbare preview van september 2020, is nu algemeen beschikbaar. Het biedt:
- Eenvoudige verbindingsconfiguratie: de nieuwe Power BI Azure Databricks-connector is geïntegreerd in Power BI en u configureert deze met behulp van een eenvoudig dialoogvenster met een paar klikken.
- Verificatie op basis van Referenties voor Microsoft Entra-id's. Beheerders hoeven geen PAT-tokens meer te configureren.
- Snellere import en geoptimaliseerde aanroepen van metagegevens, dankzij het nieuwe ODBC-stuurprogramma van Azure Databricks, dat wordt geleverd met aanzienlijke prestatieverbeteringen.
- Toegang tot Azure Databricks-gegevens via Power BI respecteert toegangsbeheer voor Azure Databricks-tabellen en machtigingen voor Azure-opslagaccounts die zijn gekoppeld aan uw Microsoft Entra ID-identiteit.
Zie Power BI verbinden met Azure Databricks voor meer informatie.
25 februari 2021
- Het instellen van machtigingen voor een SQL-eindpunt gaat nu sneller. Dit is een stap direct nadat u een nieuw SQL-eindpunt hebt gemaakt en gemakkelijk toegankelijk is wanneer u een bestaand eindpunt bewerkt. Zie Wat is een SQL-magazijn? en Een SQL-warehouse beheren.
- Als u visualisatie-instellingen opnieuw wilt gebruiken, kunt u nu een visualisatie dupliceren. Zie Een visualisatie klonen.
- Queryresultaten worden nu opgeslagen in uw account in plaats van het Azure Databricks-account.
- Als u wilt voorkomen dat gegevens worden gelekt door alle gedefinieerde machtigingen voor een object weer te
SHOW GRANTS [<user>] <object>
geven, moet u een van de volgende opties zijn:- Een Databricks SQL-beheerder of de eigenaar van
<object>
. - De gebruiker die is opgegeven in
[<user>]
.
- Een Databricks SQL-beheerder of de eigenaar van
7 januari 2021
- Om de uitgaven voor inactieve eindpunten te verminderen, is bij nieuwe SQL-eindpunten nu automatisch stoppen ingeschakeld met een standaard time-out van twee uur. Na de time-out wordt het eindpunt gestopt. Het is te allen tijde mogelijk om de time-outperiode te bewerken of automatisch stoppen uit te schakelen.
- Met uitzondering van
TEXT
-queryparameters worden geen aanhalingstekens meer toegevoegd aan queryparameters. Als uDropdown List
-,Query Based Dropdown List
- ofDate
-queryparameters hebt gebruikt, moet u aanhalingstekens toevoegen voordat de query werkt. Als uw query bijvoorbeeldSELECT {{ d }}
is, moet deze query nuSELECT '{{ d }}'
zijn.
18 november 2020
Databricks introduceert de openbare preview van Databricks SQL, een intuïtieve omgeving voor het uitvoeren van ad-hocquery's en het maken van dashboards op gegevens die zijn opgeslagen in uw Data Lake. Databricks SQL stelt uw organisatie in staat om een multi-cloud lakehouse-architectuur te gebruiken die datawarehousingprestaties biedt met data lake-economie. Databricks SQL:
- Kan worden geïntegreerd met de BI-tools die u nu gebruikt, zoals Tableau en Microsoft Power BI, om een query uit te voeren op de meest complete en recente gegevens in uw data lake.
- Vormt een aanvulling op bestaande BI-tools met een SQL-native interface waarmee gegevensanalisten en gegevenswetenschappers rechtstreeks vanuit Azure Databricks gegevens kunnen opvragen.
- Stelt u in staat om queryinzichten te delen via rijke visualisaties en dashboards met ondersteuning voor slepen en neerzetten, met automatische waarschuwingen voor belangrijke wijzigingen van gegevens.
- Maakt gebruik van een SQL Warehouse? om betrouwbaarheid, kwaliteit, schaal, beveiliging en prestaties aan uw Data Lake te brengen, zodat u traditionele analyseworkloads kunt uitvoeren met behulp van uw meest recente en volledige gegevens.
- Introduceert de
USAGE
bevoegdheid om het beheer van gegevenstoegang te vereenvoudigen. Als u een object in een schema wilt gebruiken, moet u naast alle bevoegdheden die u nodig hebt om de actie uit te voeren, de bevoegdheid USAGE voor dat schema krijgen. DeUSAGE
bevoegdheid kan worden verleend aan schema's of aan de catalogus. Voor werkruimten die al gebruikmaken van toegangsbeheer voor tabellen wordt deUSAGE
bevoegdheid automatisch verleend aan de gebruikersgroep in de hoofd-CATALOG
. Zie Hive-metastore-bevoegdheden en beveiligbare objecten (verouderd) voor meer informatie.
Zie wat is datawarehousing in Azure Databricks? voor meer informatie.
Problemen opgelost
- SQL-editor. De SQL-editor blijft nu geselecteerde tekst en schuifpositie behouden bij het schakelen tussen querytabbladen.
- SQL-editor. Als u op Uitvoeren in een query in de SQL-editor klikt, gaat u naar een andere pagina en keert u terug terwijl de query nog steeds wordt uitgevoerd, wordt de juiste querystatus weergegeven. Als de query is voltooid terwijl u zich op een andere pagina bevindt, zijn queryresultaten beschikbaar op de pagina van de SQL-editor.
- U kunt nu MySQL 8.0 gebruiken als een externe metastore.
DESCRIBE DETAIL
opdrachten in Delta-tabellen mislukken niet meer metjava.lang.ClassCastException: java.sql.Timestamp cannot be cast to java.time.Instant.
- Het lezen van Parquet-bestanden met
INT96
tijdstempels mislukt niet meer. - Wanneer een gebruiker de machtiging CAN RUN voor een query heeft en deze uitvoert, als de query is gemaakt door een andere gebruiker, wordt in de querygeschiedenis de runner van de query weergegeven als de gebruiker.
- Null-waarden worden nu genegeerd bij het weergeven van een grafiek, waardoor de bruikbaarheid van grafieken wordt verbeterd. Eerder zien balken in een staafdiagram er bijvoorbeeld erg klein uit wanneer null-waarden aanwezig waren. De assen worden nu alleen ingesteld op niet-null-waarden.
Bekende problemen
- Leesbewerkingen uit gegevensbronnen anders dan Delta Lake in SQL-eindpunten met taakverdeling en meerdere clusters kunnen inconsistent zijn.
- Delta-tabellen die worden geopend in Databricks SQL, uploaden hun schema- en tabeleigenschappen naar de geconfigureerde metastore. Als u een externe metastore gebruikt, kunt u gegevens van Delta Lake zien in de metastore. Delta Lake probeert deze gegevens zo actueel mogelijk te houden op basis best effort. U kunt ook de opdracht
DESCRIBE <table>
gebruiken om ervoor te zorgen dat de gegevens worden bijgewerkt in uw metastore. - Databricks SQL biedt geen ondersteuning voor zone-offsets zoals GMT+8 als sessietijdzones. De tijdelijke oplossing is om in plaats daarvan een tijdzone https://en.wikipedia.org/wiki/List_of_tz_database_time_zonesop basis van een regio te gebruiken, zoals 'Etc/GMT+8'. Zie SET TIME ZONE voor meer informatie over het instellen van tijdzones.
Veelgestelde vragen
- Hoe worden databricks SQL-workloads in rekening gebracht?
- Waar worden SQL-eindpunten uitgevoerd?
- Kan ik SQL-eindpunten gebruiken vanuit SQL-notebooks van Datawetenschap & Engineering-werkruimte?
- Ik heb toegang gekregen tot gegevens met behulp van een cloudproviderreferentie. Waarom heb ik geen toegang tot deze gegevens in Databricks SQL?
Hoe worden databricks SQL-workloads in rekening gebracht?
Databricks SQL-workloads worden in rekening gebracht volgens de Standard Jobs Compute-SKU.
Waar worden SQL-eindpunten uitgevoerd?
Net als Azure Databricks-clusters worden SQL-eindpunten gemaakt en beheerd in uw Azure-account. SQL-eindpunten beheren automatisch met SQL geoptimaliseerde clusters in uw account en schalen om te voldoen aan de vraag van eindgebruikers.
Kan ik SQL-eindpunten gebruiken vanuit SQL-notebooks van Datawetenschap & Engineering-werkruimte?
Nee U kunt SQL-eindpunten gebruiken vanuit Databricks SQL-query's, BI-hulpprogramma's en andere JDBC- en ODBC-clients.
Ik heb toegang gekregen tot gegevens met behulp van een cloudproviderreferentie. Waarom heb ik geen toegang tot deze gegevens in Databricks SQL?
In Databricks SQL is alle toegang tot gegevens onderhevig aan gegevenstoegangsbeheer en moet een beheerder of gegevenseigenaar u eerst de juiste bevoegdheden verlenen.
Feedback
https://aka.ms/ContentUserFeedback.
Binnenkort beschikbaar: In de loop van 2024 zullen we GitHub-problemen geleidelijk uitfaseren als het feedbackmechanisme voor inhoud en deze vervangen door een nieuw feedbacksysteem. Zie voor meer informatie:Feedback verzenden en weergeven voor