Delen via

Delta Live Tables release 2022.37

  • Artikel

14 - 22 september 2022

Deze functies en verbeteringen zijn uitgebracht met de release 2022.37 van Delta Live Tables.

Databricks Runtime-versies die door deze release worden gebruikt

Kanaal:

  • CURRENT (standaard): Databricks Runtime 10.3.7
  • PREVIEW: Databricks Runtime 11.0.5

Nieuwe functies en verbeteringen in deze release

  • De API-aanvraag voor het bijwerken van een pijplijn starten retourneert nu het request_id veld in de hoofdtekst van het antwoord. Het request_id is een stabiele id voor de oorspronkelijke aanvraag die de update start. Als een update opnieuw wordt geprobeerd of opnieuw wordt gestart, neemt de nieuwe update de request_id.
{
  "update_id": "the ID of the update that was started",
  "request_id": "The ID of the request that started this update"
}

De nieuwe requests API-aanvraag (GET /pipelines/{pipeline_id}/requests/{request_id}) retourneert de status van de pijplijnupdate die is gekoppeld aan request_id. Het antwoord bevat informatie over de meest recente update.

{
   "status": "ACTIVE",
   "latest_update": {
   }
 }

  • Uw Python-code kan nu bewerkingen buiten dlt.table() of dlt.view() functies aanroepenspark.sql, zolang de bewerking niet wordt gelezen vanuit een livetabel.

  • Vermeldingen in het gebeurtenislogboek bevatten nu de maturity eigenschap om de stabiliteit van het gebeurtenisschema aan te geven. Mogelijke waarden zijn stable, evolvingen deprecated. Zie Wat is het gebeurtenislogboek van Delta Live Tables?voor meer informatie over het gebeurtenislogboek van Delta Live Tables.

  • Het foutbericht wordt verbeterd wanneer er incompatibele wijzigingen worden aangebracht in brontabellen die door een streamingtabel worden gebruikt.

  • U kunt nu een clusterbeleid selecteren in de gebruikersinterface van Delta Live Tables wanneer u een pijplijn maakt of bewerkt. Eerder moest het clusterbeleid voor een pijplijn worden ingesteld om de JSON-instellingen van de pijplijn te bewerken.

  • Sneller pijplijn opstarten. Deze release bevat verbeteringen die de SETTING_UP_TABLES stap versnellen wanneer een pijplijn wordt gestart.

Opgeloste fouten in deze release

  • In deze release wordt een fout opgelost waardoor verbeterde automatische schaalaanpassing niet kan worden opgeschaald wanneer er geen niet-actieve clusterexemplaren beschikbaar zijn.