Hinweis
Für den Zugriff auf diese Seite ist eine Autorisierung erforderlich. Sie können versuchen, sich anzumelden oder das Verzeichnis zu wechseln.
Für den Zugriff auf diese Seite ist eine Autorisierung erforderlich. Sie können versuchen, das Verzeichnis zu wechseln.
16. - 18. Juli 2025
Diese Features und Verbesserungen wurden mit der Version 2025.29 von Declarative Pipelines veröffentlicht.
Databricks-Runtime-Versionen, die in diesem Release verwendet werden
Kanal:
- CURRENT (Standardwert): Databricks Runtime 16.1
- VORSCHAU: Databricks Runtime 16.4
Hinweis
Da die Veröffentlichungen des Kanals „Spark Declarative Pipelines auf Lakeflow“ einem Rolling-Upgrade-Prozess folgen, werden Kanal-Upgrades zu unterschiedlichen Zeitpunkten in verschiedenen Regionen bereitgestellt. Ihre Version, einschließlich Databricks-Runtime-Versionen, wird möglicherweise erst nach einer Woche oder mehr nach dem ursprünglichen Veröffentlichungsdatum aktualisiert. Informationen zum Suchen der Databricks-Runtime-Version für eine Pipeline finden Sie unter Runtime-Informationen.
Neue Features und Verbesserungen
Die Funktion „Tabellen zwischen Lakeflow Declarative Pipelines verschieben“ ist nun allgemein verfügbar (GA). Auf diese Weise können Benutzer materialisierte Ansichten und Streamingtabellen von einer Pipeline zu einer anderen mit einem SQL-Befehl und einer geringfügigen Codeanpassung verschieben. Siehe Verschieben von Tabellen zwischen deklarativen Lakeflow-Pipelines
ALTER-Befehle können jetzt auf MV/STs ausgeführt werden, die von ETL-Pipelines für Tabellenkommentare, Spaltenkommentare und RLS/CLM erstellt wurden. Im Rahmen dieser Funktion werden bei Pipeline-Aktualisierungen die Werte von Feldern, die von Benutzern per ALTER-Anweisung geändert werden können, anhand des Spaltennamens als Schlüssel beibehalten, anstatt sie zu überschreiben. Wir werden weiterhin explizite Definitionen im Quellcode respektieren, und alles, was nicht explizit definiert ist, wird beibehalten. Die folgende Tabelle zeigt dieses Verhalten:
Metadaten auf Spaltenebene:
| Vorgehensweise | Verhalten | Vorhandener Zustand im Dataset | Was im Pipeline-Quellcode oder im Befehl "Erstellen und Ersetzen" definiert ist | Endzustand nach einer Pipeline-Aktualisierung oder der Ausführung des Befehls „Create and Replace“ |
|---|---|---|---|---|
| Merge | Vorhandene Metadaten im Dataset werden nicht entfernt, bevor wir das definierte im Pipeline-Quellcode oder im Befehl "Erstellen und Ersetzen" anwenden. | Spalte X mit Kommentar 1 | Spalte Y mit Kommentar 2 | Spalte X mit Kommentar 1 Spalte Y mit Kommentar 2 |
| Merge | Wenn die Metadaten in der Pipelinequelle festgelegt sind, wird sie beim Aktualisieren zurückgesetzt. | Spalte X mit Kommentar 1 | Spalte X mit Kommentar 3 Spalte Y mit Kommentar 2 | Spalte X mit Kommentar 3 Spalte Y mit Kommentar 2 |
Metadaten auf Tabellenebene:
| Vorgehensweise | Verhalten | Vorhandener Zustand im Dataset | Was im Pipeline-Quellcode oder im Befehl "Erstellen und Ersetzen" definiert ist | Endzustand nach der Aktualisierung der Pipeline oder nach dem Ausführen des Befehls „Create and Replace“ |
|---|---|---|---|---|
| Merge | Vorhandene Metadaten im Dataset werden nicht entfernt, bevor wir das definierte im Pipeline-Quellcode oder im Befehl "Erstellen und Ersetzen" anwenden. | Zeilenfilter 1 | Zeilenfilter 2 | Zeilenfilter 2 |
| Merge | Wenn die Metadaten in der Pipelinequelle festgelegt sind, wird sie beim Aktualisieren zurückgesetzt. | Zeilenfilter 1 | Nichts | Zeilenfilter 1 |
Sie können den Quellcode weiterhin wie zuvor ändern. Dieser Zusammenführungsansatz bewahrt externe ALTER-Änderungen an der Tabelle.
Dieses neue Zusammenführungsverhalten führt zu einer wichtigen Änderung. Vor der Pipelineaktualisierung wurden vorhandene Zeilenfilter oder Spaltenmasken gelöscht, wenn sie von der Pipelinedefinition nicht eingeschlossen wurden. Jetzt müssen Sie vorhandene Kommentare, Zeilenfilter oder Spaltenmasken explizit mithilfe des Catalog Explorer oder des ALTER-Befehls löschen.
Informationen zur Verwendung der SQL-Befehle finden Sie unter ALTER MATERIALIZED VIEW und ALTER STREAMING TABLE.