Delta Live Tables release 2022.40

28 september - 5 oktober 2022

Deze functies en verbeteringen zijn uitgebracht met de release 2022.40 van Delta Live Tables.

Databricks Runtime-versies die door deze release worden gebruikt

Kanaal:

Als u een ander clusterlabel gebruikt dan default of maintenance in uw pijplijninstellingen, worden fouten veroorzaakt tijdens het maken of bewerken van de pijplijn. Zie Uw rekeninstellingen configureren voor meer informatie over clusterconfiguratie voor Delta Live Tables-pijplijnen.
U kunt nu pijplijnen rechtstreeks vanuit uw Delta Live Tables-notebooks openen of uitvoeren. Zie Een Delta Live Tables-pijplijn openen of uitvoeren vanuit een notebook.
Deze release bevat een belangrijke wijziging in de gegevensstructuur van de pijplijninstellingen die wordt geretourneerd door API-aanvragen voor Delta Live Tables. Deze wijziging retourneert het edition veld als een hoofdletterwaarde. Voorheen werd deze waarde geretourneerd als gemengde hoofdletters. U moet uw clients bijwerken die de edition waarde in API-antwoorden lezen om ervoor te zorgen dat de retourwaarde correct wordt verwerkt. De edition waarde in API-aanvragen is echter niet hoofdlettergevoelig. Uw clients die aanvragen indienen, inclusief dit veld, hoeven niet te worden bijgewerkt.

In deze release wordt een fout opgelost waardoor de gebruikersinterface van Delta Live Tables een pijplijn in een RUNNING status weergeeft, zelfs na een updatefout.
Met deze update wordt een fout opgelost in de APPLY_CHANGES interface bij het opnieuw verwerken van invoergegevens waarbij de gegevens dubbele DELETE bewerkingen met dezelfde waarde in de SEQUENCE kolom bevatten. Dit scenario resulteert in NULL waarden in de doeltabel en het verwijderen van de DeleteVersion waarde. Dit komt overeen met het markeren van de record als NOT-DELETED. Met deze wijziging worden de dubbele DELETE bewerkingen idempotent verwerkt en worden de record altijd gemarkeerd als DELETED.
In deze release wordt een fout opgelost waardoor rijen worden verborgen tijdens de verwerking van SCD-type 2 wanneer een vorige historische record wordt verwijderd die dezelfde kolommen bevat als de volgende historische record.
Met deze update wordt een fout opgelost waardoor een weergave met een expect_or_fail verwachting in de RUNNING status blijft, zelfs als de verwachting mislukt. Met deze oplossing mislukt de pijplijn en gaat deze over naar de FAILED status.