Versão DLT 2024.49

9 de dezembro a 12 de 2024

Esses recursos e melhorias foram lançados com a versão 2024.49 do DLT.

Versões do Databricks Runtime usadas por esta versão

Canal:

• Atual (padrão): Databricks Runtime 15.4
• VERSÃO PRÉVIA: Databricks Runtime 15.4

Observação

Como as versões de canal DLT seguem um processo de atualização sem interrupção, as atualizações de canal são implantadas em diferentes regiões em momentos diferentes. Sua versão, incluindo versões do Databricks Runtime, pode não ser atualizada até uma semana ou mais após a data de lançamento inicial. Para encontrar a versão do Databricks Runtime de um pipeline, veja Informações sobre runtime.

Novos recursos e melhorias

• Importante

  Este recurso está em Versão prévia privada. Para experimentá-lo, entre em contato com o representante do Azure Databricks.

  Agora você já pode configurar a computação de nó único para seus pipelines habilitados para o Catálogo do Unity. Quando você configura a computação de nó único, o número mínimo de nós necessários para executar o pipeline é reduzido de dois nós para um nó, com a execução de trabalhos do Spark no mesmo nó do driver do Spark. Para configurar um cluster de nó único, defina min_workers e max_workers como 0. Consulte Criar uma computação de nó único.

• Esta versão inclui as seguintes alterações quando uma exibição materializada ou uma tabela de streaming é excluída. A exclusão de uma exibição materializada ou tabela de streaming pode ocorrer quando você remove a definição da exibição materializada ou da tabela de streaming de um pipeline ou a exclui no Gerenciador de Catálogos:
  • O tempo para recuperar a exibição materializada ou a definição da tabela de streaming é reduzido para sete dias. Esse é o mesmo período que as tabelas gerenciadas pelo Catálogo Unity. Após o período de sete dias, declarar uma exibição materializada ou uma tabela de streaming com o mesmo nome cria uma nova exibição materializada ou uma tabela de streaming.
  • Os dados subjacentes na exibição materializada excluída ou na tabela de streaming são removidos após 30 dias.

Correções

• Essa versão corrige um bug que causa um erro ao tentar criar uma exibição materializada com um hífen no nome, mesmo ao colocar o nome entre acentos graves. Por exemplo, sem essa correção, a seguinte instrução gera um erro: CREATE MATERIALIZED VIEW my_catalog.my_schema.`mv-hyphen` AS....