Teilen über

Versionshinweise zu Databricks SQL 2024

Im Folgenden werden die Verbesserungen und Updates in Databricks SQL von Januar bis Dezember 2024 beschrieben.

21. November 2024

SQL Warehouse-Systemtabellen (öffentliche Vorschauversion)

  • Die system.compute.warehouses-Tabelle zeichnet auf, wann SQL-Lagerhäuser erstellt, bearbeitet und gelöscht werden. Sie können die Tabelle verwenden, um Änderungen an den Lagereinstellungen zu überwachen, einschließlich des Lagernamens, Typs, der Größe, des Kanals, der Tags sowie der Auto-Stop- und Autoscaling-Einstellungen. Weitere Informationen finden Sie unter Referenz zur Systemtabelle für Warehouses.

Datenermittlung

  • Die Registerkarte Lineage im Katalog-Explorer wurde mit einer verbesserten Benutzeroberfläche zur Entitätsfilterung neu gestaltet.

13. November 2024

Legacy-Dashboards:

  • Es wurde ein Problem behoben, bei dem vorlagenbasierte QuickInfos keinen detaillierten Inhalt für Zwei-Achsen- und Mehrfeld-Achsendiagramme anzeigten.

6. November 2024

Menschlich lesbare Zeitplanunterstützung für Databricks SQL-Streamingtabellen und materialisierte Ansichten

Benutzer können jetzt Zeitpläne für Streamingtabellen und materialisierte Ansichten mithilfe einer menschenlesbaren Syntax erstellen, starten und ändern, anstatt CRON-Zeitpläne zu verwenden. Siehe ALTER MATERIALIZED VIEW, ALTER STREAMING TABLE, CREATE MATERIALIZED VIEWund CREATE STREAMING TABLE.

Streamingtabellen unterstützen jetzt Zeitreiseabfragen

Sie können jetzt Zeitreisen verwenden, um frühere Tabellenversionen basierend auf dem Zeitstempel oder der Tabellenversion (wie im Transaktionsprotokoll aufgezeichnet) abzufragen. Möglicherweise müssen Sie Ihre Streamingtabelle aktualisieren, bevor Sie Zeitreiseabfragen verwenden. Weitere Informationen finden Sie unter Was ist die Delta Lake-Zeitreise?.

Zeitreiseabfragen werden für materialisierte Sichten nicht unterstützt.

31. Oktober 2024

Aktualisierungen der Benutzeroberfläche

Neuer SQL-Editor (öffentliche Vorschau)

  • Sie können nun die aktive SQL-Abfrage mit der Tastenkombination Command (oder Ctrl) + Shift + Enterausführen.
  • Der Parametereingabebereich zeigt nun eine Bildlaufleiste an, wenn sich der Text außerhalb des Anzeigefensters erstreckt.
  • Es wurde ein Problem behoben, durch das die Seite mit den Abfrageprofildetails nicht vollständig geöffnet wurde.
  • Sie können Abfragen jetzt umbenennen, indem Sie den neuen Namen in den Tabtitel eingeben.
  • Die Schaltfläche Planen ist jetzt für Abfragen deaktiviert, die noch nie zuvor gespeichert wurden.

24. Oktober 2024

Versionshinweise für KI/BI-Tools

Die Versionshinweise für die AI/BI-Dashboards und AI/BI Genie wurden zu den AI/BI Versionshinweisenverschoben. Zukünftige Versionen und Updates werden dort dokumentiert.

17. Oktober 2024

Benachrichtigungsziele sind jetzt allgemein verfügbar

Sie können Benachrichtigungsziele erstellen und konfigurieren, die Arbeitsbereichsbenutzer bestimmten Workflows hinzufügen können, z. B. Warnungen, Lakeflow-Aufträge und AI/BI-Dashboardzeitpläne, um E-Mails oder Webhooks zu senden, wenn ein Ereignis ausgeführt wird. Weitere Informationen finden Sie unter Verwalten von Benachrichtigungszielen.

10. Oktober 2024

Materialisierte Ansichten und Streamingtabellen sind jetzt allgemein in Databricks SQL verfügbar

Streamingtabellen ermöglichen die inkrementelle Erfassung von Cloudspeicher- und Nachrichtenwarteschlangen, während materialisierte Ansichten vorab berechnete Ansichten sind, die automatisch und inkrementell aktualisiert werden, wenn neue Daten eintreffen. Siehe Verwenden materialisierter Ansichten in Databricks SQL und Verwenden von Streamingtabellen in Databricks SQL.

Abfrageeinblicke

3. Oktober 2024

Erweiterte Unterstützung für serverlose SQL-Warehouses

Serverlose SQL-Lagerhäuser sind jetzt in der region swedencentral verfügbar. Weitere Informationen finden Sie unter Features mit eingeschränkter regionaler Verfügbarkeit.

Aktualisierungen der Benutzeroberfläche

Die in diesem Abschnitt aufgeführten Features sind unabhängig von den oben beschriebenen SQL Warehouse-Computeversionen.

Katalog-Explorer

  • KI-generierte Kommentare werden jetzt für Kataloge, Schemas, Volumes, Modelle und Funktionen unterstützt, und Benutzer können den Inlinechat-Assistenten verwenden, um ihre Kommentare zu bearbeiten.

SQL AI-Funktionen Die vector_search()-Funktion ist jetzt in der öffentlichen Vorschau verfügbar. Siehe vector_search Funktion

26. September 2024

Erweiterte Unterstützung für serverlose SQL-Warehouses

Serverlose SQL-Lagerhäuser sind jetzt in der region francecentral verfügbar. Weitere Informationen finden Sie unter Features mit eingeschränkter regionaler Verfügbarkeit.

11. September 2024

Aktualisierungen der Benutzeroberfläche

Die in diesem Abschnitt aufgeführten Features sind unabhängig von den oben beschriebenen SQL Warehouse-Computeversionen.

SQL-Editor

Sie können nun die Syntax der benannten Parametermarkierung im SQL-Editor verwenden. Die Syntax für benannte Parametermarkierungen kann im gesamten SQL-Editor, in Notizbüchern sowie in AI- und BI-Dashboards verwendet werden. Siehe Arbeiten mit Abfrageparametern.

Abfragen und Legacy-Dashboards

Bei SQL-Abfragen und älteren Dashboards werden gelöschte Elemente nicht mehr auf den Eintragsseiten angezeigt. Suchen Sie gelöschte Elemente im Papierkorb des Arbeitsbereichs. Arbeitsbereich-Administratoren können gelöschte Objekte in den Papierkorbordnern aller Benutzer einsehen.

5. September 2024

Änderungen im Jahr 2024.40

Databricks SQL Version 2024.40 enthält die folgenden Verhaltensänderungen, neue Features und Verbesserungen.

Verhaltensänderungen

  • Wechseln zum Standardschema-Bindungsmodus für Ansichten

    Ansichten passen sich jetzt an Schemaänderungen in der zugrunde liegenden Abfrage an, indem sie die Schemakompensierung mit regulären Umwandlungsregeln verwenden. Dies ist eine Änderung gegenüber dem vorherigen Standardmodus BINDING, der Fehler ausgelöst hat, wenn eine sichere Umwandlung beim Verweisen auf die Ansicht nicht ausgeführt werden konnte.

    Siehe CREATE VIEW und cast Funktion.

  • Verbieten der Verwendung der nicht dokumentierten !-Syntax anstelle von NOT außerhalb boolescher Ausdrücke

    Bei dieser Version ist die Verwendung von ! als Synonym für NOT außerhalb von booleschen Ausdrücken nicht mehr zulässig. Beispiel: Anweisungen wie die folgenden: CREATE ... IF ! EXISTS, IS ! NULL, eine ! NULL-Spalteneigenschaft oder -Feldeigenschaft, ! IN und ! BETWEEN muss ersetzt werden durch: CREATE ... IF NOT EXISTS, IS NOT NULL, eine NOT NULL-Spalten- oder Feldeigenschaft, NOT IN und NOT BETWEEN.

    Diese Änderung gewährleistet Konsistenz, richtet sich an den SQL-Standard und macht Ihre SQL portierbarer.

    Der boolesche Präfixoperator! (z. B. !is_mgr oder !(true AND false)) ist von dieser Änderung nicht betroffen.

  • Verbieten der nicht dokumentierten Spaltendefinitionssyntax in Ansichten

    Databricks unterstützt CREATE VIEW mit benannten Spalten und Spaltenkommentaren. Zuvor war die Spezifikation von Spaltentypen, NOT NULL-Einschränkungen oder DEFAULT zulässig. Mit dieser Version können Sie diese Syntax nicht mehr verwenden.

    Diese Änderung gewährleistet Konsistenz, richtet sich an den SQL-Standard und unterstützt zukünftige Verbesserungen.

  • Hinzufügen einer CHECK Einschränkung für eine ungültige Spalte gibt jetzt die UNRESOLVED_COLUMN.WITH_SUGGESTION Fehlerklasse

    Um nützlichere Fehlermeldungen bereitzustellen, gibt in Databricks Runtime 15.3 und höher eine ALTER TABLE ADD CONSTRAINT Anweisung, die eine CHECK Einschränkung enthält, die auf einen ungültigen Spaltennamen verweist, die UNRESOLVED_COLUMN.WITH_SUGGESTION Fehlerklasse zurück. Zuvor wurde ein INTERNAL_ERROR Wert zurückgegeben.

Neue Features und Verbesserungen

  • UniForm Iceberg mithilfe von ALTER TABLE aktivieren

    Sie können uniForm Iceberg jetzt für vorhandene Tabellen aktivieren, ohne Datendateien neu zu schreiben. Siehe Aktivieren von Iceberg-Lesevorgängen in einer vorhandenen Tabelle.

  • UTF-8-Gültigkeitsprüfungsfunktionen

    In dieser Version werden die folgenden Funktionen zum Validieren von UTF-8-Zeichenfolgen eingeführt:

    • is_valid_utf8 überprüft, ob eine Zeichenfolge eine gültige UTF-8-Zeichenfolge ist.
    • make_valid_utf8 konvertiert eine potenziell ungültige UTF-8-Zeichenfolge in eine gültige UTF-8-Zeichenfolge mit Ersetzungszeichen.
    • validate_utf8 löst einen Fehler aus, wenn die Eingabe keine gültige UTF-8-Zeichenfolge ist.
    • try_validate_utf8 gibt NULL zurück, wenn die Eingabe keine gültige UTF-8-Zeichenfolge ist.

  • Funktionen „to_avro“ und „from_avro“

    Die funktionen to_avro und from_avro ermöglichen die Konvertierung von SQL-Typen in Avro-Binärdaten und -zurück.

  • try_url_decode-Funktion

    Mit diesem Release wird die try_url_decode-Funktion eingeführt, die eine mit URL verschlüsselte Zeichenfolge entschlüsselt. Wenn sich die Zeichenfolge nicht im richtigen Format befindet, gibt die Funktion NULL zurück, anstatt einen Fehler zu auslösen.

  • Optionales Zulassen, dass der Optimierer auf nicht erzwungenen Fremdschlüsseleinschränkungen basiert

    Um die Abfrageleistung zu verbessern, können Sie jetzt das Keyword RELY für FOREIGN KEY-Einschränkungen angeben, wenn Sie CREATE oder ALTER für eine Tabelle verwenden.

  • Unterstützung für das Löschen der Funktion zum Überprüfen von Einschränkungen in Tabellen

    Selektive Überschreibungen mit replaceWhere führen jetzt Aufträge aus, die Daten löschen und neue Daten parallel einfügen, wodurch Abfrageleistung und Clusterauslastung verbessert werden.

  • Parallelisierter Auftrag wird für selektive Überschreibungen ausgeführt

    Selektive Überschreibungen mit replaceWhere führen jetzt Aufträge aus, die Daten löschen und neue Daten parallel einfügen, wodurch Abfrageleistung und Clusterauslastung verbessert werden.

  • Verbesserte Leistung für Änderungsdatenfeeds mit selektiven Überschreibungen

    Selektives Überschreiben mithilfe von replaceWhere in Tabellen mit Änderungsdaten-Feed erstellt keine separaten Änderungsdatendateien für die eingefügten Daten mehr. Diese Vorgänge verwenden eine ausgeblendete _change_type-Spalte, die in den zugrunde liegenden Parquet-Datendateien vorhanden ist, um Änderungen ohne Schreibverstärkung aufzuzeichnen.

  • Verbesserte Abfragelatenz für den COPY INTO-Befehl

    Diese Version enthält eine Änderung, die die Abfrageverzögerung für den Befehl COPY INTO verbessert. Diese Verbesserung wird dadurch umgesetzt, dass das Laden des Zustands durch den RocksDB-Statusspeicher asynchron erfolgt. Dank dieser Änderung sollten Sie eine Verbesserung der Startzeiten für Abfragen mit umfangreichen Statusinformationen feststellen, wie Abfragen mit einer großen Anzahl bereits erfasster Dateien.

Aktualisierungen der Benutzeroberfläche

Die in diesem Abschnitt aufgeführten Features sind unabhängig von den oben beschriebenen SQL Warehouse-Computeversionen.

Visualizations

  • QuickInfo-Summen werden jetzt nur noch für gestapelte Diagramme angezeigt.

22. August 2024

Visualizations

Bei gruppierten und Mehrfachfeld-Konfigurationen zeigen QuickInfos jetzt Summen an, wenn Sie mit der Maus auf Diagrammelemente zeigen.

15. August 2024

Visualizations

Es wurde ein Problem behoben, bei dem Zeilennummern in Tabellenvisualisierungen nach dem Ändern der Seitengröße nicht aktualisiert wurden.

Datenermittlung

Die Möglichkeit zum Erweitern und Reduzieren geschachtelter komplexer Spaltentypen in Unity-Katalogtabellen wird jetzt unterstützt.

1. August 2024

Visualizations:

  • Die Tabellensortierung wird jetzt beibehalten, wenn sich Daten aufgrund der Filterung ändern.

SQL-Editor:

  • Erhöhte Lesbarkeit durch Hinzufügen zusätzlicher Abstände zwischen der letzten Zeile einer Abfrage und der Ergebnisausgabe.

25. Juli 2024

Databricks-REST-API:

  • APIs zum Verwalten von Abfragen, Warnungen, Datenquellen und Berechtigungen wurden geändert. Die Legacyversion wird für sechs Monate weiterhin unterstützt. Dieser Übergangszeitraum soll Ihnen ausreichend Zeit geben, um Ihre Anwendungen und Integrationen zur neuen Version zu migrieren, bevor die ältere Version beendet wird. Siehe Update auf die neueste SQL-API-Version von Databricks

18. Juli 2024

Aktualisierungen der Benutzeroberfläche

Katalog-Explorer:

  • Ein neuer Katalogkonfigurations-Assistent ist jetzt zum Einrichten von Arbeitsbereichsbindungen, Katalogrechten und Metadaten beim Erstellen eines Katalogs verfügbar.

SQL Warehouse-Überwachung:

  • DIE CAN MONITOR-Berechtigung ist jetzt allgemein verfügbar. Es ermöglicht privilegierten Benutzern, SQL-Lagerhäuser zu überwachen, einschließlich des zugeordneten Abfrageverlaufs und Abfrageprofils. Siehe SQL-Lager-Zugriffssteuerungslisten (ACLs).

11. Juli 2024

Databricks SQL Version 2024.35 Verfügbar

Rolloutzeitplan: Rollout der Vorschauversion für 2024.35: Zwischen dem 9. Juli und dem 15. Juli

Änderungen in Version 2024.35

Spaltenzuordnung mit Drop-Funktion deaktivieren

Sie können jetzt DROP FEATURE verwenden, um die Spaltenzuordnung in Delta-Tabellen zu deaktivieren und das Tabellenprotokoll zu downgradeen. Siehe Spaltenzuordnung deaktivieren.

Syntax und Funktionen des Variant-Typs in der öffentlichen Vorschau

Integrierte Apache Spark-Unterstützung für die Arbeit mit halbstrukturierten Daten als VARIANT Typ ist jetzt in Spark DataFrames und SQL verfügbar. Siehe Abfragevariantendaten.

Variant-Typunterstützung für Delta Lake in der öffentlichen Vorschauversion

Sie können jetzt VARIANT verwenden, um halbstrukturierte Daten in Tabellen zu speichern, die von Delta Lake unterstützt werden. Siehe Unterstützung von Varianten im Delta Lake.

Unterstützung für verschiedene Modi der Schemaentwicklung in Ansichten

mit CREATE VIEW und ALTER VIEW können Sie jetzt einen Schemabindungsmodus festlegen und verbessern, wie Ansichten Schemaänderungen in zugrunde liegenden Objekten behandeln. Dieses Feature ermöglicht Es Ansichten, Schemaänderungen in den zugrunde liegenden Objekten zu tolerieren oder anzupassen. Es behandelt Änderungen im Abfrageschema, die sich aus Änderungen an Objektdefinitionen ergeben.

Leistungsverbesserung für einige Fensterfunktionen

Diese Version enthält eine Änderung, die die Leistung einiger Spark-Fensterfunktionen verbessert, insbesondere Funktionen, die keine ORDER BY Klausel oder einen window_frame Parameter enthalten. In diesen Fällen kann das System die Abfrage neu schreiben, um sie mit einer Aggregatfunktion auszuführen. Mit dieser Änderung kann die Abfrage schneller ausgeführt werden, indem eine partielle Aggregation verwendet wird und der Aufwand der laufenden Fensterfunktionen vermieden wird. Der Spark-Konfigurationsparameter spark.databricks.optimizer.replaceWindowsWithAggregates.enabled steuert diese Optimierung und ist standardmäßig auf true festgelegt. Um diese Optimierung zu deaktivieren, legen Sie spark.databricks.optimizer.replaceWindowsWithAggregates.enabled auf falsefest.

Unterstützung für die try_mod-Funktion hinzugefügt

Diese Version fügt Unterstützung für die PySpark-try_mod()-Funktion hinzu. Diese Funktion unterstützt die ANSI SQL-kompatible Berechnung des ganzzahligen Rests durch Dividieren von zwei numerischen Werten. Wenn das Argument divisor 0 ist, gibt die try_mod()-Funktion null zurück, anstatt eine Ausnahme zu auslösen. Sie können die try_mod()-Funktion anstelle von mod oder %verwenden, was eine Ausnahme auslöst, wenn das Divisor-Argument 0 ist und ANSI SQL aktiviert ist.

Aktualisierungen der Benutzeroberfläche

SQL-Editor:

Der Inline-Assistent ist jetzt im SQL-Editor verfügbar. Klicken Sie im Editorfeld auf das Symbol "Assistent", um die Eingabe umzuschalten. Geben Sie eine Frage oder einen Kommentar in Englisch ein, und drücken Sie dann die EINGABETASTE (nicht UMSCHALT+EINGABETASTE, die eine Abfrage ausführt), um eine Antwort mit einer anderen Ansicht direkt im Editor zu generieren.

Platform:

Eine API für Benachrichtigungsziele ist jetzt verfügbar. Sie können Webhook- und E-Mail-Ziele jetzt programmgesteuert für Ihre Warnungen und Auftragsausführungsbenachrichtigungen verwalten. Siehe Benachrichtigungsziele.

4. Juli 2024

Databricks SQL Version 2024.30 verfügbar

Rollout-Zeitplan: Vorab-Rollout für 2024.30: Zwischen dem 9. Juli und dem 15. Juli

Änderungen in Version 2024.30

Lakehouse Federation ist allgemein verfügbar (GA)

Lakehouse Federation-Connectoren für die folgenden Datenbanktypen sind jetzt allgemein verfügbar (GA):

  • MySQL
  • PostgreSQL
  • Amazon Redshift
  • Snowflake
  • Microsoft SQL Server
  • Azure Synapse (SQL Data Warehouse)
  • Databricks

In dieser Version werden auch die folgenden Verbesserungen eingeführt:

  • Unterstützung für zusätzliche Pushdowns (Zeichenfolgenfunktionen, mathematische Funktionen, verschiedene Funktionen).
  • Verbesserte Pushdown-Erfolgsrate für verschiedene Abfrageformen.
  • Zusätzliche Pushdown-Debuggingfunktionen:
    • Die EXPLAIN FORMATTED-Ausgabe zeigt den heruntergedrückten Abfragetext an.
    • Die Benutzeroberfläche des Abfrageprofils zeigt den Pushdown-Abfragetext, Verbundknotenbezeichner und Ausführungszeiten für JDBC-Abfragen (im ausführlichen Modus). Siehe Anzeigen der vom System generierten Verbundabfragen.

DESCRIBE HISTORY zeigt jetzt Cluster-Spalten für Tabellen an, die Liquid Clustering verwenden

Wenn Sie eine DESCRIBE HISTORY Abfrage ausführen, zeigt die spalte operationParameters standardmäßig ein clusterBy Feld für CREATE OR REPLACE- und OPTIMIZE-Vorgänge an. Bei einer Delta-Tabelle, die flüssigen Clustering verwendet, wird das clusterBy Feld mit den Clusterspalten der Tabelle aufgefüllt. Wenn die Tabelle keine flüssige Clusterung verwendet, ist das Feld leer.

Unterstützung für Primär- und Fremdschlüssel ist allgemein verfügbar.

Die Unterstützung für Primär- und Fremdschlüssel in Databricks Runtime ist allgemein verfügbar. Die GA-Version enthält die folgenden Änderungen an den Berechtigungen, die für die Verwendung von Primär- und Fremdschlüsseln erforderlich sind:

  • Zum Definieren eines Fremdschlüssels benötigen Sie die SELECT-Berechtigung für die Tabelle mit dem Primärschlüssel, auf den der Fremdschlüssel verweist. Sie müssen die Tabelle nicht mit dem Primärschlüssel besitzen, der zuvor erforderlich war.
  • Das Ablegen eines Primärschlüssels mithilfe der CASCADE-Klausel erfordert keine Berechtigungen für die Tabellen, die Fremdschlüssel definieren, die auf den Primärschlüssel verweisen. Zuvor mussten Sie die referenzierenden Tabellen besitzen.
  • Das Ablegen einer Tabelle, die Einschränkungen enthält, erfordert jetzt dieselben Berechtigungen wie das Ablegen von Tabellen, die keine Einschränkungen enthalten.

Informationen zum Verwenden von Primär- und Fremdschlüsseln mit Tabellen oder Ansichten finden Sie unter CONSTRAINT Klausel, ADD CONSTRAINT Klauselund DROP CONSTRAINT Klausel.

Liquid Clustering ist GA

Unterstützung für flüssigen Clustering ist jetzt allgemein mit Databricks Runtime 15.2 und höher verfügbar. Siehe Verwenden von Flüssigclustering für Tabellen.

Typerweiterung in Public Preview

Sie können jetzt die Typweiterung für Tabellen aktivieren, die von Delta Lake unterstützt werden. Tabellen mit aktivierter Typverbreiterung ermöglichen das Ändern des Spaltentyps in einen breiteren Datentyp, ohne zugrunde liegende Datendateien neu zu schreiben. Weitere Informationen finden Sie unter Typerweiterung.

Hinzufügung der Schema-Evolutionsklausel zur SQL-Merge-Syntax

Sie können nun die WITH SCHEMA EVOLUTION Klausel zu einer SQL Merge-Anweisung hinzufügen, um die Schemaentwicklung für den Vorgang zu aktivieren. Siehe Schemaentwicklungssyntax für Merge.

Vakuuminventarunterstützung

Sie können jetzt einen Bestand an Dateien angeben, die sie berücksichtigen sollten, wenn Sie den Befehl VACUUM in einer Delta-Tabelle ausführen. Siehe OSS Delta-Dokumente.

Unterstützung für Zstandardkomprimierungsfunktionen

Sie können jetzt die Funktionen zst_compress, zstd_decompressund try_zstd_decompress verwenden, um BINARY Daten zu komprimieren und zu dekomprimieren.

Abfragepläne in der SQL-Benutzeroberfläche werden jetzt ordnungsgemäß angezeigt PhotonWriteStage

Wenn sie in der SQL-Benutzeroberfläche angezeigt werden, werden write-Befehle in Abfrageplänen fälschlicherweise als PhotonWriteStage-Operator dargestellt. Mit dieser Version wird die Benutzeroberfläche aktualisiert, um PhotonWriteStage als Phase anzuzeigen. Dies ist nur eine Änderung der Benutzeroberfläche und wirkt sich nicht auf die Ausführung von Abfragen aus.

Aktualisierungen der Benutzeroberfläche

API-Unterstützung:

27. Juni 2024

Zeilenfilter und Spaltenmasken in materialisierten Sichten und Streamingtabellen von Databricks SQL sind jetzt in der Public Preview

Zeilenfilter und Spaltenmasken in materialisierten Sichten und Streamingtabellen von Databricks SQL sind jetzt in der Public Preview. Die Public Preview-Version enthält die folgenden Änderungen:

  • Sie können Zeilenfilter und Spaltenmasken zu einer materialisierten Sql-Ansicht von Databricks oder einer Streamingtabelle hinzufügen.

    • Sie können materialisierte Ansichten oder Streamingtabellen in Databricks SQL für Tabellen definieren, die Zeilenfilter und Spaltenmasken enthalten.

    Siehe CREATE MATERIALIZED VIEW und CREATE STREAMING TABLE.

Aktualisierungen der Benutzeroberfläche

Visualizations:

  • Die Interaktivität beim Anzeigen von QuickInfos, wenn Sie mit dem Mauscursor auf Kreis-, Punkt- und Wärmebilddiagrammen zeigen, wurde mit vielen Datenpunkten verbessert.

Katalog-Explorer:

  • Eine überarbeitete Benutzeroberfläche des Katalog-Explorers erleichtert das Auffinden und Favorisieren der aktuellen Unity-Katalog-Assets aus der Ansicht Schnellzugriff. Außerdem wurde die Navigationsoberfläche vereinfacht, sodass Sie mithilfe des Symbols EinstellungenEinstellungen in der oberen linken Ecke des Bildschirms Berechnen, Speichern, Anmeldeinformationen, Verbindungen, DBFS und Verwaltungsdetails erkunden können. Delta Sharing, Clean Rooms und externe Daten haben jetzt eigene Seiten.

6. Juni 2024

Fix für materialisierte Sichten und Streamingtabellen in Datenbricks SQL

Das Problem, das dazu führte, dass ALTER SCHEDULE-Abfragen für materialisierte Ansichten und Streamingtabellen in Datenbricks SQL erst nach dem nächsten REFRESH-Vorgang wirksam werden, wurde behoben. Jetzt werden ALTER SCHEDULE-Abfragen sofort angewendet. Weitere Informationen finden Sie unter Planen der Aktualisierung materialisierter Sichten.

Materialisierte Ansichten und Streaming-Tabellen in Databricks SQL sind in der öffentlichen Vorschau.

Materialisierte Ansichten und Streamingtabellen in Databricks SQL sind Public Preview und für alle Kunden verfügbar. Die öffentliche Vorschauversion enthält die folgenden Änderungen:

Aktualisierungen der Benutzeroberfläche

Dashboards:

  • Kontobenutzer können jetzt Visualisierungsdaten aus veröffentlichten Dashboards herunterladen
  • Unveröffentlichte Dashboards können jetzt mithilfe der Dropdownliste Entwurf/Veröffentlichen am oberen Rand eines Dashboards veröffentlicht werden.
  • Es wurde ein Problem behoben, bei dem Parameter mit dem Namen Limit nicht erkannt wurden.

Visualizations:

  • Verbessertes Rendern von Boxplots im dunklen Modus.

Abfrageeinblicke:

  • Bei allen an SQL-Warehouses angefügten Notebooks können Sie auf das Abfrageprofil zugreifen, indem Sie unter der Zelle, die die Abfrage enthält, auf Leistung anzeigen klicken. Wenn die Zelle mehrere Abfragen enthält, wird für jede Anweisung ein Link zum Abfrageprofil bereitgestellt.

30. Mai 2024

Neue Berechtigungsstufe für SQL-Lagerhäuser

Die Berechtigung Kann überwachen ermöglicht es Benutzenden, SQL-Warehouses zu überwachen, einschließlich dem zugehörigen Abfrageverlauf und den Abfrageprofilen. Die Berechtigung Kann überwachen ist als Public Preview verfügbar. Siehe SQL-Lager-Zugriffssteuerungslisten (ACLs).

Aktualisierungen der Benutzeroberfläche

Dashboardverbesserungen:

  • Ein Kebab-Menü wurde zu Dashboard-Widgets zum Herunterladen von Bildern und Daten hinzugefügt.
  • Benutzer können veraltete abfragegestützte Dashboard-Parameter und Dropdown-Listenparameter zu Dashboards migrieren.

23. Mai 2024

Aktualisierungen der Benutzeroberfläche

  • Sie können jetzt mehrere Elemente im Arbeitsbereich auswählen, um sie zu verschieben oder zu löschen. Wenn mehrere Objekte ausgewählt sind, wird eine Aktionsleiste angezeigt und bietet Optionen zum Verschieben oder Löschen von Elementen. Darüber hinaus können Sie mehrere Elemente mit der Maus auswählen und an eine neue Position ziehen. Vorhandene Berechtigungen für Objekte gelten weiterhin bei Massenverschiebungs- und Löschvorgängen.
  • Sie können jetzt Unity-Katalogobjekte als Favoriten im Katalog-Explorer und im Schemabrowser markieren. Dazu gehören Kataloge, Schemas, Tabellen, Modelle, Volumes und Funktionen. Unity-Katalogressourcen, die Sie als Favoriten markieren, sind auf der Azure Databricks-Homepage leicht zugänglich.

Dashboard-Updates:

  • Kombinationsdiagramme mit zwei Achsen zeigen jetzt Balkenlegenden auf der rechten Achse und Linienlegenden entsprechend richtig an.
  • Diagramme mit doppelter Achse zeigen jetzt Beschriftungen auf Balken richtig an.

Aktualisierungen von Visualisierungen:

  • Die bedingten Format-Beschriftungen des Tabellen-Editors für wenn und dann unterstützen jetzt den Dunkelmodus.
  • Das überflüssige Symbol open link wurde aus den Format-Tooltips des Tabelleneditors entfernt.
  • Die Bezeichnung der Standardschriftfarbe im Tabelleneditor wird jetzt automatisch ausgerichtet.

16. Mai 2024

Rolloutzeitplan

  • Vorschaurollout für 2024.25: Abgeschlossen am 1. Mai
  • Aktueller Rollout für 2024.25: Zwischen dem 14. Mai und dem 21. Mai

Note

Ein Upgrade auf die Panda Python-Bibliothek (Version 2.0.3) verursachte eine fehlerhafte Änderung in Databricks SQL Version 2024.20. Azure Databricks hat Version 2024.20 für den aktuellen Kanal nicht bereitgestellt. Stattdessen wurde der Vorschaukanal am 1. Mai 2025 auf 2024.25 aktualisiert. Der aktuelle Kanalrollout geht direkt von 2024.15 bis 2024.25.

Änderungen in Version 2024.25

Datenverwaltung

Passthrough für Anmeldeinformationen und die Hive-Metastore-Tabellenzugriffssteuerung sind veraltet.

Passthrough für Anmeldeinformationen und die Hive-Metastore-Tabellenzugriffssteuerung sind Legacymodelle für Daten-Governance. Aktualisieren Sie den Unity-Katalog, um die Sicherheit und Governance Ihrer Daten zu vereinfachen, indem Sie einen zentralen Ort zum Verwalten und Überwachen des Datenzugriffs über mehrere Arbeitsbereiche in Ihrem Konto bereitstellen. Siehe Was ist Unity Catalog?.

Unterstützung für die Übergreifende Authentifizierung und Hive-Metastore-Tabellenzugriffssteuerelemente wird in einer kommenden Version von Databricks Runtime entfernt.

SQL-Sprachfunktionen

Die Sternklausel (*) wird jetzt in der WHERE-Klausel unterstützt.

Sie können nun die Sternklausel (*) in der WHERE-Klausel verwenden, um auf alle Spalten aus der liste SELECT zu verweisen. Beispiel: SELECT * FROM VALUES(1, 2) AS T(a1, a2) WHERE 1 IN(T.*).

Unterstützung für Cloudflare R2-Speicher, um regionsübergreifende Ausgangsgebühren ab Version 2024.15 zu vermeiden.

Sie können Cloudflare R2 jetzt als Cloudspeicher für Daten verwenden, die im Unity-Katalog registriert sind. Cloudflare R2 ist in erster Linie für Delta Sharing-Anwendungsfälle vorgesehen, in denen Sie die von Cloudanbietern berechneten Datenausgangsgebühren vermeiden möchten, wenn Daten regionenübergreifend sind.

Cloudflare R2 Storage unterstützt alle Databricks-Daten und KI-Ressourcen, die in Azure Data Lake Storage unterstützt werden.

Weitere Informationen finden Sie unter Verwenden von Cloudflare R2-Replikaten oder Migrieren von Speicher zu R2 und Erstellen von Speicheranmeldeinformationen zum Herstellen einer Verbindung mit Cloudflare R2.

Aktualisierungen der Benutzeroberfläche

Die in diesem Abschnitt aufgeführten Features sind unabhängig von den oben beschriebenen SQL Warehouse-Computeversionen.

Datenermittlungsupdates: Der Assistent für das Update vom Hive-Metastore zu Unity Catalog unterstützt Upgrades von verwalteten Hive-Metastore-Tabellen mit universellen Computeressourcen oder SQL-Warehouses. Durch das Aktualisieren von mehr als 20 Tabellen wird ein neues Notizbuch erstellt, das die befehle SYNC UND ALTER TABLE enthält, die die Konvertierung ausführen.

Dashboard-Updates:

  • Dual-Axis-Funktionalität ist jetzt für Flächen-, Balken-, Linien- und Punktdiagrammtypen verfügbar.
    • Wenn Sie ein Diagramm mit zwei Achsen aktivieren, wird der Achsentitel und der Bereich nicht mehr auf die Sekundärachse kopiert.
    • Das letzte in der Visualisierungskonfiguration identifizierte Feld wird automatisch auf die rechte Y-Achse verschoben.

9. Mai 2024

Fehlerbehebungen für SQL-Editor:

  • Die Admin-Einstellung Merkmale der Ergebnistabelle in der Zwischenablage gilt jetzt für SQL editors New result table.

Dashboardverbesserungen:

  • Mit abfragebasierten Parametern können Autoren eine Liste von auswählbaren Werten definieren, die Viewer als Parameter für andere Visualisierungen auf einem Dashboard-Canvas verwenden können. Siehe Verwenden von abfragebasierten Parametern.
  • Die Spaltenreihenfolge in Dateien, die aus einem Tabellen-Widget heruntergeladen wurden, wird jetzt beibehalten.
  • Der Tabelleneditor enthält jetzt Tooltipps, die die Namen von Spalten beim Überfahren anzeigen.
  • Wenn Sie von anderen Visualisierungstypen zu einem Histogramm wechseln, bleibt die Informationscodierung jetzt besser erhalten.

Dashboard-Korrekturen:

  • Es wurde ein Problem behoben, bei dem ein einzelner Rasterhöhenfilter eine unnötige Überlaufscrollleiste angezeigt hat.
  • Es wurde ein Problem behoben, durch das falsch gerenderte Visualisierungen auf veröffentlichten Dashboards verursacht wurden, bei denen eine Referenzdatensatzspalte gelöscht wurde.

2. Mai 2024

Dashboard-Updates:

  • Abfragen und Visualisierungen können jetzt aus dem SQL-Editor in ein neues Dashboard kopiert werden. Sie können weiterhin Visualisierungen zu älteren Dashboards aus dem SQL-Editor hinzufügen. Siehe Bearbeiten, Herunterladen oder Hinzufügen zu einem Dashboard.
  • Dashboards verwalten nun einen 24-Stunden-Ergebniscache, um die anfänglichen Ladezeiten zu optimieren. Siehe Optimierung und Zwischenspeicherung von Datensätzen.
  • Balkendiagramme mit einer kategorischen X- und einer quantitativen Y-Achse sind jetzt in den Antworten des Databricks-Assistenten sortiert.
  • Das Migrationsproblem mit dem alten Histogramm COUNT (*) wurde behoben, um eine genaue Migration sicherzustellen.
  • Die Möglichkeit zum Kombinieren numerischer Typen und Datumstypen in einem Filter-Widget wurde implementiert.
  • Beim Erstellen von Diagrammen schlägt der Databricks-Assistent während der Eingabe automatisch relevante Spalten vor.

Aktualisierungen der Visualisierung:

  • Die vom Benutzer ausgewählte Farbe für Tabellen bleibt nun im hellen und dunklen Modus in älteren Diagrammen erhalten.
  • Die Datenkürzungslogik wurde verbessert, um die Leistung in Kombinations-, Kreis-, Diagrammen und Histogrammen zu verbessern.
  • Ein Häkchen wird jetzt immer oben auf einer quantitativen Achse bei einfachen Diagrammen angezeigt.

23. April 2024

Benutzeroberflächenaktualisierungen:

  • In allen Dialogfeldern Freigeben in der Benutzeroberfläche wurde die Gruppe All Users in All Workspace Users umbenannt. Der neue Name spiegelt den Umfang der Gruppe genauer wider, die immer dem Arbeitsbereich zugewiesene Benutzer enthält. Im Rahmen dieser Umbenennung wird keine Änderung an der Gruppenmitgliedschaft vorgenommen.

Dashboardverbesserungen:

  • Wenn das SQL-Lager eines Dashboards gestartet wird, wird ein Dialogfeld angezeigt, in dem die Wartezeit erläutert wird.
  • Die Bildlaufposition wird beim Wechseln zwischen den Registerkarten Canvas undDaten beibehalten.
  • Das Klonen eines legacy-Dashboards zum Erstellen eines Lakeview-Dashboards unterstützt jetzt eine Parameterkonvertierung. Weitere Informationen finden Sie unter Anpassen von Legacyparametern.
  • Relative Datumsangaben wie Today, Tomorrowund vor 7 Tagenwerden jetzt für Datums- und Datumstimeparameter unterstützt.
  • Schieberegler für Zahlenbereiche können einem Dashboard als Filter hinzugefügt werden.
  • Histogramme können jetzt aggregierte Daten anzeigen.
  • Punktwolken unterstützen jetzt eine Größencodierung.

Dashboard-Korrekturen:

  • Die zeitliche Farbcodierung kann jetzt Farbzuweisungen richtig ändern.

Aktualisierungen der Visualisierung:

  • Benutzerdefinierte Tooltopformate funktionieren jetzt ordnungsgemäß für Diagramme mit mehreren Achsen.
  • Der Vorschautag Neue Diagramme wird entfernt, wenn Benutzer die Umschaltfunktion in den letzten 14 Tagen nicht geändert haben.

18. April 2024

Lakeview-Dashboards sind allgemein verfügbar.

Lakeview-Dashboards sind jetzt das Standardmäßige Dashboarding-Tool. Sie wurden in der Benutzeroberfläche als Dashboards umbenannt. Databricks SQL-Dashboards werden jetzt als Legacy-Dashboardsbezeichnet. Die Namen der zugehörigen API-Tools wurden nicht geändert.

  • Dashboardverbesserungen:
    • Überwachungsprotokolle sind für Lakeview-Dashboards verfügbar. Siehe AI/BI-Dashboard-Ereignisse.
    • Daten, die aus Dashboards heruntergeladen wurden, respektieren angewendete Parameter.
    • Der Databricks-Assistent ist auf der Registerkarte Daten aktiviert, ohne zuerst Datasets hinzuzufügen.
    • Gestapelte Balkendiagramme mit mehreren Y-Feldern können die Sortierung der X-Achse basierend auf der Summe der Y-Achsenwerte unterstützen.
    • In Visualisierungsachsenmenüs kann zwischen Skalierungsfunktionen vom Typ Linear und Log (symmetrisch) umgeschaltet werden.
    • Die Standardgröße des Filter-Widgets ist jetzt kompakter.
    • Die anfängliche Ladezeit für das Texteingabefilter-Widget wurde reduziert.
    • Verbesserte automatische Diagrammkonvertierungen beim Migrieren von älteren Dashboards.
  • Dashboardfixes:
    • Die Warnung "Eingeschränkte Anzeigeeinstellungen" wird nicht angezeigt, wenn das Dashboard für andere Personen freigegeben wurde.
    • Die Fehlermeldungen im SQL-Editor auf der Registerkarte Daten unterstützen jetzt den dunklen Modus.

Aktualisierungen der Benutzeroberfläche

Die in diesem Abschnitt aufgeführten Features sind unabhängig von den oben beschriebenen SQL Warehouse-Computeversionen.

Improvements:

  • Die Tooltips in gestapelten Diagrammen zeigen jetzt standardmäßig den Stapelwert und den Prozentsatz an.
  • Die QuickInfos für Diagramme mit mehreren Achsen heben nun das Element hervor, auf das gezeigt wird.
  • Tabellenvisualisierungen für Databricks SQL passen nun den Datentyp eines neuen Abfrageergebnisses an, wenn sie im SQL-Editor bearbeitet werden.
  • Die Abfrageverlaufstabelle des Katalog-Explorers zeigt eine strukturähnliche Ansicht für die Zuordnung von Abfragequellen . Sie können dies verwenden, um zu sehen, welche Entitäten die auszuführende Abfrage-Anweisung ausgelöst haben.

11. April 2024

Aktualisierungen der Benutzeroberfläche

Die in diesem Abschnitt aufgeführten Features sind unabhängig von den oben beschriebenen SQL Warehouse-Computeversionen.

Improvements:

  • Sie können jetzt nach Prozent gruppieren, wenn Sie Visualisierungen in Databricks SQL und Notizbüchern erstellen.
  • Bei neuen Diagrammen (in der öffentlichen Vorschau) können Sie eine einzelne Achse vergrößern, indem Sie auf eine gerade Linie parallel zur Achse klicken und ziehen.
  • Die Benutzeroberfläche für die Positivliste des freigegebenen Unity Catalog-Clusters ist jetzt allgemein verfügbar. Sie können auf der Metastore-Detailseite im Katalog-Explorer darauf zugreifen. Weitere Informationen finden Sie unter Hinzufügen von Elementen zur Positivliste.
  • Formulare zum Erstellen und Bearbeiten externer Speicherorte werden jetzt als ganze Seite geöffnet. Sie enthalten die Option zum Einschließen von Speicheranmeldeinformationen.

Fixes:

  • Ein Problem für Histogramme wurde behoben, bei dem negative Werte falsch als positiv markiert wurden.

4. April 2024

Aktualisierungen der Benutzeroberfläche

Die in diesem Abschnitt aufgeführten Features sind unabhängig von den oben beschriebenen SQL Warehouse-Computeversionen.

Improvements:

  • Verbesserungen an Histogrammen auf Lakeview-Dashboards.
    • Unterstützung von Bezeichnungen hinzugefügt.
    • Bin-Einstellungen werden jetzt beim Wechseln zwischen verschiedenen Feldern beibehalten.
  • Der Beispielkatalog auf der Dashboardauflistungsseite erstellt jetzt Lakeview-Dashboards. Siehe Tutorial: Nutzung von Beispieldashboards.
  • Durch klicken mit der rechten Maustaste auf den Rahmen eines Widgets auf einem Lakeview-Dashboard wird ein Kontextmenü geöffnet.
  • Die linke Navigationsleiste wird für Arbeitsbereichsbenutzer beibehalten, die veröffentlichte Lakeview-Dashboards anzeigen.
  • Filterauswahlen werden beim Navigieren zwischen veröffentlichten und Entwurfsdashboards von Lakeview beibehalten.
  • Spaltennamen können nun in den SQL-Editor eingefügt werden, wenn Sie eine Abfrage über die Registerkarte Daten in einem Lakeview-Dashboard entwurf bearbeiten.
  • Durch das Ersetzen eines Lakeview-Dashboards wird der vorhandene Dashboardname beibehalten und der Inhalt ersetzt.
  • Durch den Wechsel von Visualisierungen zwischen Wärmekarten und anderen Diagrammtypen bleiben die relevanten Felder jetzt besser erhalten.

Fixes:

  • Balkendiagramme mit Farbcodierungen beschränken jetzt das Hinzufügen mehrerer Y-Achsenfelder ordnungsgemäß.
  • Es wurde ein Problem behoben, bei dem die Schaltfläche "Als PNG herunterladen" aus einigen Visualisierungen fehlte.
  • Die Formatierung negativer großer ganzer Zahlen wurde behoben, bei denen bisher das Tausendertrennzeichen fehlte.
  • Die falsche Platzierung der Linie beim Daraufzeigen auf Bezeichnungen in Liniendiagrammen wurde behoben.

28. März 2024

Databricks SQL Version 2024.15 verfügbar

Rolloutzeitplan

  • Vorschaurollout für 2024.15: Zwischen 14. Februar und 4. März
  • Aktueller Rollout für 2024.15: Zwischen dem 25. März und dem 8. April

Änderungen in Version 2024.15

Delta-Updates

  • Delta UniForm ist jetzt allgemein verfügbar: UniForm ist jetzt allgemein verfügbar und verwendet das IcebergCompatV2-Tabellenfeature. Sie können uniForm jetzt für vorhandene Tabellen aktivieren oder aktualisieren. Siehe Lesen von Delta-Tabellen mit Iceberg-Clients.
  • Statistiken zum Datenüberspringen für Delta-Tabellen neu berechnen: Sie können jetzt die im Delta-Log gespeicherten Statistiken neu berechnen, nachdem Sie die für das Datenüberspringen verwendeten Spalten geändert haben. Weitere Informationen finden Sie unter Angeben von Delta-Statistikspalten.

Updates für die SQL-Programmiersprache

  • Deklarieren temporärer Variablen in einer SQL-Sitzung: In dieser Version wird die Möglichkeit eingeführt, temporäre Variablen in einer Sitzung zu deklarieren, die festgelegt und dann in Abfragen referenziert werden kann. Siehe Variablen.
  • Unterstützung für native XML-Dateiformate (Public Preview): Unterstützung für native XML-Dateiformate befindet sich jetzt in der öffentlichen Vorschau. Die XML-Dateiformatunterstützung ermöglicht das Aufnehmen, Abfragen und Analysieren von XML-Daten für die Batchverarbeitung oder das Streaming. Sie kann Schema- und Datentypen automatisch ableiten und entwickeln, SQL-Ausdrücke wie from_xmlunterstützen und XML-Dokumente generieren. Es erfordert keine externen JAR-Dateien und arbeitet nahtlos mit Auto Loader, read_files, COPY INTO und DLT. Siehe Lesen und Schreiben von XML-Dateien.

SQL-Updates für Apache Spark

Databricks SQL 2024.15 umfassen Apache Spark 3.5.0. Weitere Fehlerkorrekturen und Verbesserungen für SQL sind in den Versionshinweisen zu Databricks Runtime 14.3 aufgeführt. Eine vollständige Liste finden Sie unter Apache Spark, indem Sie nach dem [SQL]-Tag suchen.

Aktualisierungen der Benutzeroberfläche

Die in diesem Abschnitt aufgeführten Features sind unabhängig von den oben beschriebenen SQL Warehouse-Computeversionen.

  • Eine neue Registerkarte "Übersicht" auf der Entitätsseite des Katalog-Explorers zeigt wichtige Metadaten wie Dateien, Datenquelle, Besitzer, Tabellenschema und Kommentare an.
  • Lakeview-Dashboard-Aktualisierungen:
    • Lakeview-Dashboards unterstützen jetzt Parameter. Ersteller können über die Registerkarte Daten Parameter für Datasetabfragen hinzufügen und dann mithilfe von Einzelwertselektoren und Datumsauswahloptionen Parameter auf der Canvas festlegen. Weitere Informationen finden Sie unter Arbeiten mit Dashboard-Parametern.
    • Lakeview-Dashboards werden jetzt in der Arbeitsbereichsberechtigungs-API unterstützt. Siehe PATCH /api/workspace/workspace/updatepermissions in der REST-API-Referenz.
    • Steuerungswidgets auf der Canvas wurden in Filterwidgets umbenannt.
    • Kombinationsdiagramme lassen nicht mehr aggregierte Felder auf der X-Achse zu.
    • Die Schaltfläche Link kopieren im Dialogfeld "Freigeben" enthält jetzt Parameter, die in der URL gespeichert sind.
    • Widgets auf veröffentlichten Dashboards zeigen keinen Rahmen mehr an, wenn man mit der Maus darüber fährt.
    • Ein Problem wurde behoben, bei dem sich die Schaltflächen "Databricks Assistant" und "PNG herunterladen" mit visuellen Diagrammen überlappen.
  • Durch das Wechseln von Visualisierungen zwischen Heatmaps und anderen Diagrammtypen bleiben die relevanten Felder jetzt besser erhalten.
  • Balkendiagramme mit Farbcodierungen beschränken jetzt das Hinzufügen mehrerer Y-Achsenfelder ordnungsgemäß.

21. März 2024

  • Die Unity Catalog-Modellherkunft befindet sich jetzt in der Public Preview-Phase.

Die Tabellenansicht im Katalog-Explorer verfügt jetzt über eine Übersicht Registerkarte, um die primären Metadaten zu beschreiben.

  • SQL Warehouses für Notizbücher, die jetzt allgemein verfügbar sind, ermöglichen es Ihnen, die Vorteile der vollständig verwalteten, sofort einsatzbereiten und skalierbaren Rechenkapazitäten für Ihre SQL-Workloads in der umfangreichen, kollaborativen Erstellungsumgebung eines Notizbuchs zu nutzen. Siehe Ein Notizbuch mit einem SQL-Warehouseverwenden.

Die folgenden Korrekturen und Verbesserungen gelten für Lakeview-Dashboards:

  • Erweiterte API-Unterstützung für Lakeview ermöglicht das Erstellen, Abrufen, Aktualisieren und Löschen von Dashboards. Weitere Informationen finden Sie in der REST-API-Referenz unter Lakeview.
  • Es wurde eine Aktualisierungsschaltfläche Katalogbrowser auf der Registerkarte Daten hinzugefügt.
  • Lakeview-Dashboards werden jetzt auf der Seitenleiste des Arbeitsbereichs im Menü Neu vor Dashboards angezeigt. Auf der Seite mit der Dashboardliste wird die Registerkarte Lakeview-Dashboards links neben der Registerkarte Dashboards angezeigt.
  • Die Databricks Assistant-Erfahrung für Lakeview wurde mit einem Eingabefeld und Vorschlägen aktualisiert, um die Auffindbarkeit zu verbessern und benutzern zu helfen, die Aufforderungen zu verstehen, die sie darstellen können.
  • Lakeview-Visualisierungen unterstützen jetzt Medianaggregationen.
  • Die Farbauswahl im Lakeview-Dashboardvisualisierungs-Editor wurde für eine optimierte Benutzeroberfläche beim Erstellen von Tabellen aktualisiert.
  • Die Kreisdiagrammmigration wurde verbessert und unterstützt nur noch Szenarien mit Winkel- oder Farbdefinitionen.
  • Ein Fehler wurde behoben, der die Gruppierung nach Diagrammen mit dem Namen Anzahl verhindert hat. Diagramme können jetzt nach Feldern gruppiert werden, die den Namen Anzahltragen.
  • Bei Balkendiagrammen werden die Layoutsteuerelemente für Gruppe und Stapel jetzt ausgeblendet, wenn sie für die von Benutzenden ausgewählte Konfiguration nicht anwendbar sind.

14. März 2024

Für Lakeview Dashboards gilt:

  • Histogramme unterstützen jetzt benutzerdefinierte kategorisierte Farben.
    • Heatmaps unterstützen jetzt quantitative Skalen.
    • Titel und Beschreibungen werden beim Wechseln zwischen Visualisierungstypen, einschließlich Kombinationsdiagrammen, beibehalten.
    • Sie können jetzt das zugrunde liegende Dataset öffnen, das einem Entwurfsdashboard-Widget zugeordnet ist, indem Sie mit der rechten Maustaste darauf klicken. Der Datensatz wird auf der Registerkarte Daten geöffnet.
  • Neue Diagramme wenden nun Aliase und benutzerdefinierte Farben für Nullwerte in numerischen Spalten an.
  • In neuen Diagrammen werden jetzt Teilstriche gerendert, um den oberen Rand der Y-Achse anzuzeigen.

7. März 2024

  • Beim Anzeigen einer Tabelle im Katalog-Explorer enthält die Schaltfläche Erstellen von eine Option zum Erstellen eines Lakeview-Dashboards anstelle eines Databricks SQL-Dashboards.
  • Histogramme sind jetzt für Lakeview-Dashboards verfügbar. Histogramme werden häufig verwendet, um die Verteilung eines numerischen Felds zu visualisieren.
  • Beim Klonen eines Databricks SQL-Dashboards zum Erstellen eines Lakeview-Dashboards werden jetzt Probleme bei der Konvertierung von Datasets als Fehler im neuen Widget im Lakeview-Dashboard angezeigt.
  • Farbverläufe sind verfügbar, wenn ein numerisches Feld für eine Visualisierung auf einem Lakeview-Dashboard verwendet wird.
  • Farbverläufe werden jetzt im Lakeview-Dashboardvisualisierungs-Editor verfügbar gemacht, wenn ein Feld „Farbe nach“ angegeben wird.
  • Der Titel und die Beschreibung, die einer Visualisierung zugeordnet sind, erscheinen nicht mehr als bearbeitbar, wenn der Viewer keine Bearbeitungsberechtigungen für ein Entwurfs-Lakeview-Dashboard hat.
  • Es wurde ein Problem behoben, bei dem Tooltips in Diagrammen mit mehr als 100 Datenreihen fälschlicherweise alle Serien anzeigten. Jetzt wird nur die fokussierte Datenreihe angezeigt.
  • Verringerte Eingabelatenz im SQL-Editor um 30% durch Leistungsoptimierungen.
  • Beim Verwalten von Abfragen im SQL-Editor wird beim Verschieben einer Abfrage in den Papierkorb automatisch der Tab geschlossen.
  • Es wurde ein Problem im SQL-Editor behoben, bei dem Text beim Anpassen der Seitenbereichsbreite versehentlich ausgewählt wurde.

29. Februar 2024

  • Der Schemabrowser im Katalog-Explorer zeigt jetzt Spalteneinschränkungen für Primär- und Fremdschlüssel an.
  • Die aufbewahrungszeit, die auf der Registerkarte "Linie" im Katalog-Explorer angezeigt wird, wurde auf ein Jahr erhöht.
  • QuickInfos für neue Diagramme in Notebooks werden jetzt immer innerhalb der Visualisierungsgrenze gerendert.
  • Erfahren Sie, wie Sie Lakeview-Dashboards programmgesteuert mithilfe der REST-API verwalten. Siehe Verwalten von Dashboards mit Arbeitsbereichs-APIs.
  • Lakeview-Dashboards unterstützen jetzt Histogramme.
  • Verbesserte Freigabe und Veröffentlichung in Lakeview-Dashboards:
    • Verbesserte Dialogfelder zum Freigeben und Veröffentlichen, sodass die sichere und einfache Freigabe an alle Kontobenutzende möglich ist.
    • Im Arbeitsbereichsbrowser geöffnete Dashboards zeigen das veröffentlichte Dashboard an, falls vorhanden. Viewer können jetzt auch Details zur neuesten veröffentlichten Version anzeigen, einschließlich Herausgeber, Uhrzeit und Anmeldeinformationen.
    • Für Editoren können Sie mit einer neuen Dropdown-Option in der Lakeview Dashboard-Benutzeroberfläche schnell zwischen Entwürfen und veröffentlichten Versionen wechseln.

22. Februar 2024

  • Verbesserungen an der Registerkarte Beispieldaten in der Tabellenansicht des Katalog-Explorers ermöglichen ihnen das Sortieren von Spalten, das Kopieren ausgewählter Daten in die Zwischenablage und das Anzeigen von Zeilennummern. Es kann jetzt besser spezielle Werte anzeigen, z. B. JSON-Objekte, Datumswerte, numerische und Nullwerte.
  • Lakeview-Dashboards unterstützen jetzt das Senden regelmäßiger PDF-Momentaufnahmen des Dashboards an Arbeitsbereichsbenutzer und Benachrichtigungsziele. Siehe Zeitplan und Abonnements.
  • Die Liste der Visualisierungsoptionen im Lakeview-Dropdown-Menü wird nun alphabetisch sortiert.
  • Beim Kopieren von Databricks SQL-Dashboards in Lakeview-Dashboards zeigen Widgets, die nicht konvertiert werden können, jetzt das Visualisierungskonfigurationsauswahlfenster anstelle einer Fehlermeldung.

15. Februar 2024

  • Die Dokumentation für codebasierte Abfragefilter, z. B. SELECT action AS 'action::filter', wurde entfernt. Databricks empfiehlt, Abfragen zu aktualisieren, um dieses Muster zu entfernen.
  • Bei Lakeview-Dashboards zeigen Kreisdiagramme jetzt Segmente gleicher Größe an, wenn kein Winkelfeld angegeben wird.
  • Lakeview unterstützt jetzt Kombinationsdiagramme, die Balken- und Liniendiagramme kombinieren, um zwei verschiedene Werte im selben Diagramm anzuzeigen.
  • Heatmaps, die Farbintensität verwenden, um die Stärke der Korrelation zwischen zwei diskreten Variablen darzustellen, sind jetzt in Lakeview verfügbar.

8. Februar 2024

  • Sie können jetzt zugriff anfordern, wenn Sie einen Link zu einem Lakeview-Dashboard öffnen, für das Sie keine Berechtigungen besitzen.
  • Lakeview-Dashboardfilter verfügen jetzt über explizite Optionen vom Typ Alle und Keine. Ersteller können die Option Alle in einzelnen ausgewählten Filtern ausblenden.
  • Sie können jetzt Mindest- und Höchstwerte für Achsen in Lakeview-Dashboarddiagrammen festlegen.

1. Februar 2024

Databricks SQL Version 2024.10 verfügbar

Rolloutzeitplan

  • Vorschaurollout für 2024.10: Zwischen dem 30. Januar 2024 und dem 5. Februar 2024
  • Aktuelles Rollout für 2024.10: Zwischen dem 13. Februar 2023 und dem 20. Februar 2024

Änderungen in Version 2024.10

  • Behandlung beschädigter Dateien in DML-Befehlen korrigiert: Die DML-Befehle DELETE, UPDATE und MERGE INTO berücksichtigen die Leseoptionen ignoreCorruptFiles und ignoreMissingFiles nicht mehr. Wenn eine nicht lesbare Datei in einer Tabelle auftritt, schlagen diese Befehle jetzt fehl, auch wenn diese Optionen angegeben sind.
  • Parallelität auf Zeilenebene ist allgemein verfügbar und standardmäßig aktiviert: Zeilenebenen-Parallelität reduziert Konflikte zwischen gleichzeitigen Schreibvorgängen, indem Änderungen auf Zeilenebene erkannt werden. Parallelität auf Zeilenebene wird nur für Tabellen ohne Partitionierung unterstützt, die Tabellen mit flüssigem Clustering enthält. Die Parallelität auf Zeilenebene ist in Delta-Tabellen mit aktivierten Löschvektoren standardmäßig aktiviert. Weitere Informationen finden Sie unter Schreibkonflikte mit Parallelität auf Zeilenebene.
  • Flacher Klon für externe Tabellen im Unity-Katalog (öffentliche Vorschau): Sie können jetzt flachen Klon mit externen Tabellen im Unity-Katalog verwenden. Weitere Informationen finden Sie unter Flacher Klon für Unity Catalog-Tabellen.
  • Schnellere Multithread-Statistiksammlung: Die Statistiksammlung ist in kleinen Clustern bis zu zehnmal schneller, wenn CONVERT TO DELTA ausgeführt wird oder Iceberg- und Parquet-Tabellen als Grundlage für das Klonen verwendet werden. Siehe In Delta Lake konvertieren und Parquet und Apache Iceberg Tabellen in Delta Lake klonen.
  • Pushdownfilter in DeltaSource für Delta-Dateien: Für eine bessere Auslastung werden Partitionsfilter für Streamingabfragen von Delta-Tabellen jetzt vor dem Einschränken der Rate nach Delta verschoben.

Aktualisierungen der Benutzeroberfläche

Die in diesem Abschnitt aufgeführten Features sind unabhängig von den oben beschriebenen SQL Warehouse-Computeversionen.

  • Der Dashboardbenutzeroberfläche von Databricks SQL wurde die Menüoption In Lakeview-Dashboard klonen hinzugefügt. Mit diesem Tool können Sie ein neues Lakeview-Dashboard erstellen, das dieselben Abfragen und Visualisierungen in Ihren vorhandenen Databricks SQL-Dashboards enthält. Siehe Klonen eines legacy-Dashboards zu einem AI/BI-Dashboard.
  • Balkendiagramme in Lakeview-Dashboards unterstützen das Stapeln von Balken für eine Normalisierung auf 100 %.
  • Es wurde ein Problem behoben, bei dem das Vergrößern auf einem veröffentlichten Lakeview-Dashboard dazu führte, dass auf falsche Zoomintervalle fokussiert wurde.

24. Januar 2024

  • Das Lakeview-Dashboard-Canvas passt die Anordnung der Widgets automatisch an, um wenn möglich den leeren vertikalen Leerraum zwischen den Zeilen zu entfernen.
  • Reduzierter Leerraum zwischen Titel und Beschreibungstext in Lakeview-Dashboardvisualisierungen.

18. Januar 2024

  • Ein Renderingproblem für Visualisierungen wurde behoben, bei dem Balkendiagramme, die ein einzelnes Datum auf der X-Achse anzeigten, zu einem sehr dünnen Balken führten. Neue Diagrammvisualisierungen rendern wie erwartet.
  • Die Lakeview-Dashboard-Übersichtsseite zeigt Ihre Dashboards standardmäßig an. Sie können Filter auf dieser Seite verwenden, um auf Lakeview-Dashboards zuzugreifen, die anderen Arbeitsbereichsbenutzern gehören.

11. Januar 2024

  • Databricks-SQL-Abfragen und Dashboard-APIs unterstützen das programmgesteuerte Ändern der Rolleneinstellung Ausführen als.

4. Januar 2024

  • Last updated on