Versão do DLT 2023.43

30 de outubro a 3 de novembro de 2023

Esses recursos e melhorias foram lançados com a versão 2023.43 do DLT.

Note

Os lançamentos são feitos em etapas. Sua versão DLT, incluindo versões do Databricks Runtime, pode não ser atualizada até uma semana ou mais após a data de lançamento inicial.

Versões do Databricks Runtime usadas por esta versão

Channel:

• ATUAL (padrão): Databricks Runtime 12.2.15
• VERSÃO PRÉVIA: Databricks Runtime 13.3.4

Novos recursos e melhorias nesta versão

• Ao exibir um pipeline na interface do usuário do DLT, agora você pode exibir os conjuntos de dados de pipeline em uma exibição tabular, além da visualização do grafo. Você pode usar a exibição tabular para uma visão geral de todos os conjuntos de dados no pipeline, especialmente quando o DAG é muito grande para caber no modo de exibição de grafo. Você também pode encontrar conjuntos de dados específicos usando filtros como o nome e o tipo do conjunto de dados. Consulte os detalhes do Pipeline disponíveis na página de monitoramento.

• Com esta versão, agora você verá uma mensagem de aviso se não usar a LIVE palavra-chave ao referenciar uma tabela no mesmo pipeline.

• Agora você pode gravar em uma tabela de streaming de vários fluxos de origem, permitindo que você adicione e remova fontes de streaming que acrescentam dados a uma tabela de streaming existente sem exigir uma atualização completa ou fazer backup de uma tabela de streaming com dados históricos ausentes. Consulte Usar vários fluxos para gravar em um único destino.

• Agora você já pode adicionar um script de inicialização na lista de permitidos ao cluster que executa um pipeline habilitado para o Catálogo do Unity.