Hinweis
Für den Zugriff auf diese Seite ist eine Autorisierung erforderlich. Sie können versuchen, sich anzumelden oder das Verzeichnis zu wechseln.
Für den Zugriff auf diese Seite ist eine Autorisierung erforderlich. Sie können versuchen, das Verzeichnis zu wechseln.
16. - 18. Juli 2025
Diese Features und Verbesserungen wurden mit der Version 2025.29 von Declarative Pipelines veröffentlicht.
Databricks-Runtime-Versionen, die in diesem Release verwendet werden
Kanal:
- CURRENT (Standardwert): Databricks Runtime 16.1
- VORSCHAU: Databricks Runtime 16.4
Hinweis
Da Spark Declarative Pipelines auf Lakeflow-Kanalversionen einem rollierenden Upgradeprozess folgen, werden Kanalupgrades zu unterschiedlichen Zeiten in verschiedenen Regionen bereitgestellt. Ihre Version, einschließlich Databricks-Runtime-Versionen, wird möglicherweise erst nach einer Woche oder mehr nach dem ursprünglichen Veröffentlichungsdatum aktualisiert. Informationen zum Suchen der Databricks-Runtime-Version für eine Pipeline finden Sie unter Runtime-Informationen.
Neue Features und Verbesserungen
Die Funktion „Move Tables Between Lakeflow Declarative Pipelines“ ist jetzt allgemein verfügbar (GA). Auf diese Weise können Benutzer materialisierte Ansichten und Streamingtabellen von einer Pipeline zu einer anderen mit einem SQL-Befehl und einer geringfügigen Codeanpassung verschieben. Siehe Verschieben von Tabellen zwischen deklarativen Lakeflow-Pipelines
ALTER-Befehle können jetzt auf MV/STs ausgeführt werden, die von ETL-Pipelines für Tabellenkommentare, Spaltenkommentare und RLS/CLM erstellt wurden. Im Rahmen dieser Funktion bewahren Pipeline-Updates die Werte von Feldern, die von Benutzern per ALTER geändert werden können, anhand des Spaltennamens als Schlüssel, anstatt sie zu überschreiben. Wir werden weiterhin explizite Definitionen im Quellcode respektieren, und alles, was nicht explizit definiert ist, wird beibehalten. Die folgende Tabelle zeigt dieses Verhalten:
Metadaten auf Spaltenebene:
| Vorgehensweise | Verhalten | Vorhandener Zustand im Dataset | Was im Pipeline-Quellcode oder im Befehl "Erstellen und Ersetzen" definiert ist | Endzustand nach der Pipelineaktualisierung oder nach dem Ausführen des Befehls „Erstellen und Ersetzen“ |
|---|---|---|---|---|
| Merge | Vorhandene Metadaten im Dataset werden nicht entfernt, bevor wir das definierte im Pipeline-Quellcode oder im Befehl "Erstellen und Ersetzen" anwenden. | Spalte X mit Kommentar 1 | Spalte Y mit Kommentar 2 | Spalte X mit Kommentar 1 Spalte Y mit Kommentar 2 |
| Merge | Wenn die Metadaten in der Pipelinequelle festgelegt sind, wird sie beim Aktualisieren zurückgesetzt. | Spalte X mit Kommentar 1 | Spalte X mit Kommentar 3 Spalte Y mit Kommentar 2 | Spalte X mit Kommentar 3 Spalte Y mit Kommentar 2 |
Metadaten auf Tabellenebene:
| Vorgehensweise | Verhalten | Vorhandener Zustand im Dataset | Was im Pipeline-Quellcode oder im Befehl "Erstellen und Ersetzen" definiert ist | Endzustand nach der Aktualisierung der Pipeline oder nach dem Ausführen des Befehls „Create and Replace“ |
|---|---|---|---|---|
| Merge | Vorhandene Metadaten im Dataset werden nicht entfernt, bevor wir das definierte im Pipeline-Quellcode oder im Befehl "Erstellen und Ersetzen" anwenden. | Zeilenfilter 1 | Zeilenfilter 2 | Zeilenfilter 2 |
| Merge | Wenn die Metadaten in der Pipelinequelle festgelegt sind, wird sie beim Aktualisieren zurückgesetzt. | Zeilenfilter 1 | Nichts | Zeilenfilter 1 |
Sie können den Quellcode weiterhin wie zuvor ändern. Dieser Merge-Ansatz bewahrt externe ALTER-Anweisungen, die an der Tabelle vorgenommen wurden.
Dieses neue Zusammenführungsverhalten führt zu einer wichtigen Änderung. Vor der Pipelineaktualisierung wurden vorhandene Zeilenfilter oder Spaltenmasken gelöscht, wenn sie von der Pipelinedefinition nicht eingeschlossen wurden. Jetzt müssen Sie vorhandene Kommentare, Zeilenfilter oder Spaltenmasken explizit mithilfe des Catalog Explorer oder des ALTER-Befehls löschen.
Informationen zur Verwendung der SQL-Befehle finden Sie unter ALTER MATERIALIZED VIEW und ALTER STREAMING TABLE.