Notas de versão do SQL do Databricks

Este artigo lista novos recursos e melhorias do Databricks SQL, juntamente com problemas conhecidos e perguntas frequentes.

Processo de liberação

O Databricks lança atualizações para a interface do usuário do aplicativo Web Databricks SQL continuamente, com todos os usuários recebendo as mesmas atualizações implementadas em um curto período de tempo.

Além disso, o Databricks normalmente lança novas versões de computação do SQL warehouse regularmente. Dois canais estão sempre disponíveis: Preview e Current.

Nota

Os lançamentos são encenados. Sua conta do Databricks pode não ser atualizada com uma nova versão do SQL warehouse ou recurso Databricks SQL até uma semana ou mais após a data de lançamento inicial.

Nota

Databricks SQL Serverless não está disponível no Azure China. O Databricks SQL não está disponível nas regiões do Azure Government.

Canais

Os canais permitem que você escolha entre a versão de computação atual do SQL warehouse ou a versão de visualização. As versões de visualização permitem que você experimente a funcionalidade antes que ela se torne o padrão Databricks SQL. Aproveite as versões de visualização para testar suas consultas de produção e painéis em relação a alterações futuras.

Normalmente, uma versão de visualização é promovida para o canal atual aproximadamente duas semanas depois de ser lançada para o canal de visualização. Alguns recursos, como recursos de segurança, atualizações de manutenção e correções de bugs, podem ser liberados diretamente para o canal atual. De tempos em tempos, o Databricks pode promover uma versão de visualização para o canal atual em um horário diferente. Cada nova versão será anunciada nas secções seguintes.

Para saber como alternar um SQL warehouse existente para o canal de visualização, consulte Canais de visualização. Os recursos listados nas seções de atualizações da interface do usuário são independentes das versões de computação do SQL Warehouse descritas na seção Problemas corrigidos das notas de versão.

Versões disponíveis do Databricks SQL

Canal atual: Databricks SQL versão 2024.40

• Ver funcionalidades em 2024.40.

24 de outubro de 2024

Notas de versão para ferramentas de IA/BI

As notas de versão para painéis de AI/BI e AI/BI Genie foram movidas para notas de versão de AI/BI. Versões e atualizações futuras serão documentadas lá.

Outubro 17, 2024

Os destinos de notificação estão agora disponíveis para o público em geral

Você pode criar e configurar destinos de notificação que os usuários do espaço de trabalho podem adicionar a determinados fluxos de trabalho, como alertas, trabalhos do Databricks e agendas de painel de IA/BI, para enviar e-mails ou webhooks quando um evento é executado. Consulte Gerenciar destinos de notificação.

Atualizações da interface do usuário

Os recursos listados nesta seção são independentes das versões de computação do SQL warehouse descritas acima.

Painéis de IA/BI

• A filtragem cruzada agora é suportada para gráficos de caixa.
• Os controles deslizantes de intervalo agora suportam valores padrão.
• As visualizações de mapas de símbolos agora estão disponíveis em painéis de IA/BI. Consulte Mapa de símbolos.
• As notificações de compartilhamento por e-mail agora podem ser enviadas para grupos com até 100 membros.
• A opção Nenhum está oculta como uma opção selecionável nos menus suspensos Wiget de filtro de valor único e múltiplo .

10 de outubro de 2024

Visualizações materializadas e tabelas de streaming agora estão geralmente disponíveis no Databricks SQL

As tabelas de streaming permitem a ingestão incremental do armazenamento em nuvem e das filas de mensagens, enquanto as visualizações materializadas são visualizações pré-computadas que são atualizadas automática e incrementalmente à medida que novos dados chegam. Consulte Usar exibições materializadas no Databricks SQL e Carregar dados usando tabelas de streaming no Databricks SQL.

Atualizações da interface do usuário

Os recursos listados nesta seção são independentes das versões de computação do SQL warehouse descritas acima.

Painéis de IA/BI

• As visualizações de histograma agora suportam filtragem cruzada.
• As tabelas dinâmicas agora permitem a formatação condicional dos dados.

Gênio de IA/BI

• O Genie agora filtra de forma inteligente colunas, descrições de colunas e consultas SQL de exemplo para ajudar a evitar exceder os limites de token ao gerar uma resposta. Consulte Aviso de limite de token

Insights de consulta

• As novas colunas query_source, executed_ase executed_as_user_id foram adicionadas à tabela do sistema de histórico de consultas. Consulte Referência da tabela do sistema do histórico de consultas.

3 de outubro de 2024

Suporte expandido ao SQL warehouse sem servidor

Armazéns SQL sem servidor agora estão disponíveis na swedencentral região. Veja Funcionalidades com disponibilidade regional limitada.

Atualizações da interface do usuário

Os recursos listados nesta seção são independentes das versões de computação do SQL warehouse descritas acima.

Painéis de IA/BI

• Os clientes agora podem adicionar consultas e visualizações de células SQL em blocos de anotações a painéis de IA/BI.
• Formatos de números personalizados agora se aplicam a dicas de ferramentas em gráficos empilhados por porcentagem.
• O seletor de conjunto de dados no editor de visualização agora mostra erros de carregamento de esquema para conjuntos de dados.
• A filtragem cruzada agora suporta seleção múltipla nos tipos de gráfico de barra, dispersão, mapa de calor e pizza. Use atalhos Command-Shift de teclado ou Ctrl-Shift para selecionar várias seções.

Explorador de Catálogos

• Os comentários gerados por IA agora são suportados para catálogos, esquemas, volumes, modelos e funções e os usuários podem usar o Assistente de bate-papo embutido para ajudar a editar seus comentários.

Funções SQL AI A vector_search() função está agora disponível em Pré-visualização Pública. Ver função vetor_search

26 de setembro de 2024

Suporte expandido ao SQL warehouse sem servidor

Armazéns SQL sem servidor agora estão disponíveis na francecentral região. Veja Funcionalidades com disponibilidade regional limitada.

Atualizações da interface do usuário

Os recursos listados nesta seção são independentes das versões de computação do SQL Warehouse descritas acima.

Painéis de IA/BI

• Os gráficos de caixa já estão disponíveis. Ver Gráfico de caixa.
• Os formatos de números personalizados agora podem ser aplicados a totais em tabelas dinâmicas.
• Agora você pode selecionar várias marcas para filtragem cruzada em visualizações de painel. Segure Shift e clique em diferentes categorias para aplicar filtros em várias seleções.

19 de setembro de 2024

Atualizações da interface do usuário

Os recursos listados nesta seção são independentes das versões de computação do SQL Warehouse descritas acima.

Painéis de IA/BI

• Os cabeçalhos das tabelas dinâmicas podem agora ser ordenados por ordem alfabética.

• Os totais não serão renderizados em tabelas dinâmicas se qualquer medida usar a transformação Nenhum .

• Os widgets de filtro agora são nomeados automaticamente de acordo com os campos de filtro selecionados.

• Os painéis de rascunho agora vêm automaticamente com um espaço Genie de rascunho com base nos conjuntos de dados e visualizações do painel. Ao publicar seu painel, você também pode publicar o espaço Genie associado para que os espectadores possam usá-lo para fazer suas próprias perguntas. Consulte Ativar um espaço Genie no seu painel.

• Correção: Os nomes dos conjuntos de dados agora são atualizados no seletor de conjuntos de dados de configuração de visualização quando o conjunto de dados é renomeado usando Sugerir nome.

Gênio de IA/BI

• Os usuários agora podem solicitar uma revisão de um editor de espaço se não tiverem certeza sobre uma resposta do Genie. Consulte Fornecer feedback de resposta.
• Os editores de espaço Genie agora podem clonar um espaço Genie para criar um novo espaço para testar ou reutilizar instruções e outras configurações de contexto. Veja Clone a Genie space.
• Os editores de espaço Genie agora podem definir e executar perguntas de benchmark para medir a precisão geral de um espaço Genie. Consulte Usar benchmarks em um espaço Genie.

11 de setembro de 2024

Atualizações da interface do usuário

Os recursos listados nesta seção são independentes das versões de computação do SQL Warehouse descritas acima.

Painéis de IA/BI

• Agora você pode incorporar painéis de IA/BI como um iframe em aplicativos fora do Databricks. Consulte Incorporar um painel.
• As configurações rápidas de filtro para os widgets de filtro do seletor de data agora suportam 3, 6 e 9 meses como opções. Clique no ícone de calendário no lado direito do seletor de data para visualizar todas as opções de filtro rápido.
• Você pode expandir widgets para visualizá-los em tela cheia usando o menu kebab widget.
• Agora você pode copiar e compartilhar links diretos para widgets do painel usando o menu kebab do widget.

Editor SQL

Agora você pode usar a sintaxe do marcador de parâmetro nomeado no editor SQL. A sintaxe do marcador de parâmetro nomeado pode ser usada no editor SQL, blocos de anotações e painéis de IA/BI. Consulte Trabalhar com parâmetros de consulta.

Consultas e painéis herdados

Para consultas SQL e painéis herdados, os itens excluídos não aparecem mais nas páginas de listagem. Encontre itens excluídos na pasta de lixo do espaço de trabalho. Os administradores do espaço de trabalho podem visualizar itens excluídos nas pastas de lixo de todos os usuários.

5 de setembro de 2024

Alterações em 2024.40

O Databricks SQL versão 2024.40 inclui as seguintes alterações comportamentais, novos recursos e melhorias.

Mudanças comportamentais

• Alterar para o modo de vinculação de esquema padrão para modos de exibição

  As exibições agora se adaptam às alterações de esquema na consulta subjacente usando a compensação de esquema com regras de transmissão regulares. Esta é uma alteração em relação ao padrão anterior do modo, que gerava erros quando uma transmissão segura não podia ser executada BINDING ao fazer referência à exibição.

  Consulte CREATE VIEW e função de transmissão.

• Não permitir o uso da sintaxe não documentada ! em vez de NOT expressões booleanas externas

  Com esta versão, o uso de ! como sinônimo para NOT fora de expressões booleanas não é mais permitido. Por exemplo, afirmações como as seguintes: CREATE ... IF ! EXISTS, IS ! NULL, uma propriedade ! IN de ! NULL coluna ou campo e ! BETWEEN, deve ser substituído por: CREATE ... IF NOT EXISTS, IS NOT NULL, uma NOT NULL propriedade NOT IN de coluna ou campo e NOT BETWEEN.

  Essa alteração garante consistência, alinha-se com o padrão SQL e torna seu SQL mais portátil.

  O operador ! de prefixo booleano (por exemplo, !is_mgr ou !(true AND false)) não é afetado por essa alteração.

• Não permitir sintaxe de definição de coluna não documentada em modos de exibição

  O Databricks suporta CREATE VIEW com colunas nomeadas e comentários de coluna. Anteriormente, a especificação de tipos de coluna, NOT NULL restrições ou DEFAULT foi permitida. Com esta versão, você não pode mais usar essa sintaxe.

  Essa alteração garante consistência, alinha-se com o padrão SQL e oferece suporte a aprimoramentos futuros.

• Adicionar uma CHECK restrição em uma coluna inválida agora retorna a UNRESOLVED_COLUMN.WITH_SUGGESTION classe de erro

  Para fornecer mensagens de erro mais úteis, no Databricks Runtime 15.3 e superior, uma ALTER TABLE ADD CONSTRAINT instrução que inclui uma CHECK restrição fazendo referência a um nome de coluna inválido retorna o UNRESOLVED_COLUMN. WITH_SUGGESTION classe de erro. Anteriormente, um INTERNAL_ERROR foi devolvido.

Novos recursos e melhorias

• Ativar UniForm Iceberg usando ALTER TABLE

  Agora você pode habilitar o UniForm Iceberg em tabelas existentes sem reescrever arquivos de dados. Consulte Ativar alterando uma tabela existente.

• Funções de validação UTF-8

  Esta versão apresenta as seguintes funções para validar cadeias de caracteres UTF-8:

  • is_valid_utf8 verificado se uma cadeia de caracteres é uma cadeia de caracteres UTF-8 válida.
  • make_valid_utf8 converte uma cadeia de caracteres UTF-8 potencialmente inválida em uma cadeia de caracteres UTF-8 válida usando caracteres de substituição
  • validate_utf8 gera um erro se a entrada não for uma cadeia de caracteres UTF-8 válida.
  • try_validate_utf8 retorna NULL se a entrada não for uma cadeia de caracteres UTF-8 válida.

• to_avro e from_avro funções

  As funções to_avro e from_avro permitem a conversão de tipos SQL para dados binários Avro e vice-versa.

• try_url_decode função

  Esta versão apresenta a função try_url_decode, que decodifica uma cadeia de caracteres codificada por URL. Se a cadeia de caracteres não estiver no formato correto, a função retornará NULL em vez de gerar um erro.

• Opcionalmente, permita que o otimizador dependa de restrições de chave estrangeira não impostas

  Para melhorar o desempenho da consulta, agora você pode especificar a RELY palavra-chave em FOREIGN KEY restrições ao CRIAR ou ALTER uma tabela.

• Suporte para descartar o recurso de tabela de restrições de verificação

  Substituições seletivas usando replaceWhere trabalhos agora executados que excluem dados e inserem novos dados em paralelo, melhorando o desempenho da consulta e a utilização do cluster.

• Execuções de trabalho paralelizadas para substituições seletivas

  Substituições seletivas usando replaceWhere trabalhos agora executados que excluem dados e inserem novos dados em paralelo, melhorando o desempenho da consulta e a utilização do cluster.

• Desempenho aprimorado para feed de dados de alteração com substituições seletivas

  As substituições seletivas usando replaceWhere tabelas com feed de dados de alteração não gravam mais arquivos de dados de alteração separados para dados inseridos. Essas operações usam uma coluna oculta _change_type presente nos arquivos de dados subjacentes do Parquet para registrar alterações sem amplificação de gravação.

• Latência de consulta melhorada para o comando COPY INTO

  Esta versão inclui uma alteração que melhora a latência de consulta para o COPY INTO comando. Essa melhoria é implementada tornando o carregamento do estado pelo armazenamento de estado RocksDB assíncrono. Com essa alteração, você verá uma melhoria nos tempos de início para consultas com estados grandes, como consultas com um grande número de arquivos já ingeridos.

Atualizações da interface do usuário

Os recursos listados nesta seção são independentes das versões de computação do SQL Warehouse descritas acima.

Painéis de IA/BI

• A largura da coluna Valores em tabelas dinâmicas agora é ajustada automaticamente com base na largura dos nomes de valor da célula.
• Foi resolvido um problema que fazia com que o esquema da tabela dinâmica fosse interrompido quando o mesmo campo foi adicionado mais do que uma vez.
• O realce de filtro cruzado agora funciona corretamente no modo escuro.
• Agora há suporte para localizar e substituir no editor SQL na guia Dados . Use atalhos Command-F de teclado ou Ctrl-F para abrir a ferramenta localizar e substituir.
• A hora exibida nos widgets do painel agora respeita o fuso horário do SQL warehouse anexado, em vez do UTC. Esse comportamento é consistente com widgets em painéis herdados.

Visualizações

• Os totais de dicas de ferramenta agora aparecem apenas para gráficos empilhados.

28 de agosto de 2024

Painéis de IA/BI

• Os painéis de IA/BI agora estão disponíveis em geral nas regiões do Azure Government.

• Adicionadas opções de personalização para formatos de números para visualizações de contadores e tabelas dinâmicas.

• Resolvida a sobreposição entre os estilos condicional e padrão. Agora, os estilos são aplicados a partir de apenas uma fonte. A origem pode ser uma condição que avalia ou true a configuração padrão.

• Funcionalidade de zoom fixo para dados temporais com configurações de escala categórica.

• Foram resolvidos problemas de renderização de gráficos para painéis em que vários gráficos usam o mesmo campo de origem, mas aplicam transformações diferentes.

• Os gráficos gerados usando o prompt do Assistente do Databricks não piscam mais quando o autor do painel executa novamente os dados.

Gênio de IA/BI:

Exemplos de consultas SQL agora podem incluir parâmetros. Se o Genie responder à pergunta de um usuário com uma consulta parametrizada, o Genie passará os parâmetros para a consulta para gerar uma resposta. Essa resposta é marcada com um rótulo de ativo confiável. Consulte Adicionar parâmetros em consultas SQL.

22 de agosto de 2024

Painéis de IA/BI

• Ao migrar um painel herdado para um painel de IA/BI, o depósito padrão do novo painel de IA/BI é definido como o último depósito usado no editor SQL ou no painel herdado relacionado.
• Os usuários da conta agora podem percorrer os painéis disponíveis na página de listagem do painel.
• Os gráficos que suportam a formatação de números agora incluem gráficos Pivot e Contador . Consulte Formatação de números em gráficos.
• Nenhum é agora suportado como medida em gráficos dinâmicos .
• Nenhuma transformação agora é suportada para gráficos dinâmicos .

Visualizações

Para configurações agrupadas e de vários campos, as dicas de ferramentas agora mostram totais quando você passa o mouse sobre os elementos do gráfico.

15 de agosto de 2024

Painéis de IA/BI

O log de auditoria agora está disponível para execuções de consultas e e-mails de assinatura do painel. Consulte as ações executeQuery, cancelQuery e getQueryResult para execuções de consulta e a ação sendDashboardSnapshot para instantâneos de email. Consulte Eventos de painéis.

Visualizações

Corrigido um problema em que os números de linha nas visualizações de tabela não eram atualizados depois de alterar o tamanho da página.

Descoberta de dados

A capacidade de expandir e recolher tipos de colunas complexas aninhadas em tabelas do Unity Catalog agora é suportada.

8 de agosto de 2024

Painéis de IA/BI

• Os gráficos que fazem referência ao mesmo conjunto de dados agora suportam filtragem cruzada, que permite clicar em um elemento em um gráfico para filtrar e atualizar dados relacionados em outro gráfico. Consulte Filtragem cruzada.
• A formatação de números personalizados é suportada para a maioria dos gráficos. Consulte Formatação de números em gráficos.
• Resolvido um problema que afetava a rolagem ao selecionar datas no seletor de datas usando a roda do mouse ou a tela sensível ao toque.
• A visualização de tabela agora redefine corretamente os números de linha ao alterar o número de itens por página.
• Os gráficos que usam cores para diferenciar entre categorias agora mantêm seus mapeamentos de cores quando os filtros são aplicados.

1 de agosto de 2024

Atualizações da interface do usuário

Painéis de IA/BI:

• Agora você pode configurar widgets de visualização para usar parâmetros estáticos de widgets. Consulte Parâmetros estáticos do widget.
• Agora você pode definir valores padrão para os seguintes tipos de filtro:
  • Valor único
  • Vários valores
  • Seletor de datas
  • Seletor de intervalo de datas
  • Entrada de texto
• Os visualizadores sem acesso de edição não veem mais a barra de ferramentas para adicionar widgets enquanto visualizam um painel de rascunho.

Visualizações:

• A classificação de tabelas agora é preservada quando os dados são alterados devido à filtragem.

Editor SQL:

• Maior legibilidade adicionando preenchimento adicional entre a última linha de uma consulta e a saída do resultado.

25 de julho de 2024

API REST do Databricks:

• As APIs para gerenciar consultas, alertas, fontes de dados e permissões foram alteradas. A versão legada continuará a ser suportada por seis meses. Este período de transição destina-se a dar-lhe tempo suficiente para migrar as suas aplicações e integrações para a nova versão antes de a versão mais antiga ser eliminada. Consulte Atualizar para a versão mais recente da API SQL do Databricks

Atualizações da interface do usuário

Painéis de IA/BI:

• Os indicadores nulos agora informam os autores do painel sobre nulos ocultos em gráficos.
• Os totais em tabelas dinâmicas agora são calculados no back-end, garantindo precisão mesmo quando os dados visualizados são truncados. Há suporte para totais para todas as agregações.
• Os histogramas agora suportam uma largura de compartimento de zero.
• Os painéis agora podem ser gerenciados usando o Terraform. Para obter detalhes, consulte a documentação do Databricks Terraform.

Gênio de IA/BI:

• Agora você pode adicionar um link para um espaço do Genie a partir de um painel de IA/BI. Quando os visualizadores do painel acessam o link, eles podem usar o espaço Genie para responder às suas perguntas.
• Use a ferramenta Criar um espaço Genie para criar um novo espaço Genie com base em um painel de IA/BI com um clique. O espaço Genie usa seu painel de rascunho atual para criar a estrutura inicial para um espaço Genie.

Julho 18, 2024

Atualizações da interface do usuário

Painéis de IA/BI:

• O assistente agora pode ajudá-lo a editar títulos de eixos de gráficos e controlar a visibilidade de rótulos de dados de gráficos.
• Agora você pode atribuir várias medidas a tabelas dinâmicas.
• Adicionadas mais opções de data/hora relativa, como Últimos 10 segundos e Última hora, para controles de parâmetro datetime.
• Fornecida uma opção Agora nos widgets de controle do seletor de data para filtrar valores de data/hora.
• Tratamento de exceções melhorado para permitir a edição de widgets com erros de carregamento.
• Aumentou o limite de tamanho para filtragem de conjunto de dados em campos a serem executados localmente, sem execução de consulta no back-end, para 100.000 linhas ou 100MB.

Gênio:

• As perguntas de comparação de tempo retornam respostas mais precisas.
• As respostas a perguntas sobre valores classificados agora ocultam colunas de classificação intermediárias para melhorar a legibilidade das respostas.
• O novo tratamento de casos especiais evita a aplicação não intencional de determinadas otimizações.
• O botão Voltar foi substituído por pão ralado para facilitar a navegação.
• Agora você pode expandir e exibir os detalhes da tabela na guia Dados .
• O tratamento melhorado de carateres não ingleses evita envios imediatos prematuros de combinações de teclas especiais.

Explorador de catálogos:

• Um novo assistente de configuração de catálogo agora está disponível para configurar associações de espaço de trabalho, privilégios de catálogo e metadados ao criar um catálogo.

Monitoramento do SQL Warehouse:

• A permissão CAN MONITOR agora está disponível para o público em geral. Ele permite que usuários privilegiados monitorem armazéns SQL, incluindo o histórico de consultas associado e perfis de consulta. Consulte ACLs de ponto de extremidade de pesquisa vetorial.

11 de julho de 2024

Databricks SQL Versão 2024.35 Disponível

Cronograma de lançamento: Lançamento antecipado para 2024.35: Entre 9 e 15 de julho

Alterações em 2024.35

Desativar o mapeamento de colunas com o recurso de soltar

Agora você pode usar DROP FEATURE para desabilitar o mapeamento de colunas em tabelas Delta e fazer downgrade do protocolo de tabela. Consulte Desativar mapeamento de colunas.

Sintaxe e funções de tipo de variante na Pré-visualização Pública

O suporte integrado ao Apache Spark para trabalhar com dados semiestruturados como VARIANT tipo agora está disponível no Spark DataFrames e SQL. Consulte Dados de variantes de consulta.

Suporte de tipo de variante para Delta Lake na visualização pública

Agora você pode usar VARIANT para armazenar dados semiestruturados em tabelas apoiadas pelo Delta Lake. Consulte Suporte a variantes no Delta Lake.

Suporte para diferentes modos de evolução de esquema em visualizações

CREATE VIEW e ALTER VIEW agora permitem que você defina um modo de vinculação de esquema, aprimorando como as exibições lidam com alterações de esquema em objetos subjacentes. Esse recurso permite que as exibições tolerem ou se adaptem a alterações de esquema nos objetos subjacentes. Ele aborda as alterações no esquema de consulta resultantes de modificações nas definições de objeto.

Melhoria de desempenho para algumas funções de janela

Esta versão inclui uma alteração que melhora o desempenho de algumas funções da janela Spark, especificamente funções que não incluem uma ORDER BY cláusula ou um window_frame parâmetro. Nesses casos, o sistema pode reescrever a consulta para executá-la usando uma função agregada. Essa alteração permite que a consulta seja executada mais rapidamente usando agregação parcial e evitando a sobrecarga de funções de janela em execução. O parâmetro spark.databricks.optimizer.replaceWindowsWithAggregates.enabled de configuração do Spark controla essa otimização e é definido como true por padrão. Para desativar essa otimização, defina spark.databricks.optimizer.replaceWindowsWithAggregates.enabled como false.

Suporte para a função adicionada try_mod

Esta versão adiciona suporte para a função PySpark try_mod() . Esta função suporta o cálculo compatível com ANSI SQL do número inteiro restante dividindo dois valores numéricos. Se o argumento divisor for 0, a try_mod() função retornará null em vez de lançar uma exceção. Você pode usar a try_mod() função em vez de mod ou %, que lança uma exceção se o argumento divisor for 0 e ANSI SQL estiver habilitado.

Atualizações da interface do usuário

Painéis de IA/BI:

• Clicar com o botão direito do mouse em um conjunto de dados agora mostra a opção Sugerir nome. Essa ferramenta usa metadados de tabela para renomear automaticamente seu conjunto de dados.
• Você pode optar por ocultar a legenda em um widget de visualização.
• Os títulos de widget que estão truncados agora mostram o título completo ao passar o mouse.
• Os widgets agora mostram um aviso de truncamento se os resultados completos não forem mostrados.
• O Databricks Assistant para criação de visualização reverte para o título original após rejeitar uma recomendação.
• As exibições publicadas e de rascunho do painel agora são capturadas nos logs de auditoria do painel de IA/BI com os nomes dos eventos: getDashboard, getPublishedDashboarde getDashboardDetails. Consulte Eventos de painéis.
• Agora você pode definir valores padrão para os tipos de filtro Valor único e Valores múltiplos . Consulte Filtrar em campos.
• Corrigido um problema que impedia os usuários de alternar do pivô vazio para os outros tipos de gráfico no editor de visualização do painel.
• O texto do cabeçalho da coluna dinâmica não mais estoura se exceder a largura da coluna.

Editor SQL:

O assistente embutido agora está disponível no editor SQL. Clique no ícone do assistente na caixa do editor para alternar a entrada. Digite uma pergunta ou comentário em inglês e pressione Enter (não Shift+Enter, que executa uma consulta) para gerar uma resposta com uma exibição diferente diretamente no editor.

Plataforma:

Uma API para destinos de notificação já está disponível. Agora você pode gerenciar programaticamente destinos de webhook e e-mail para seus alertas e notificações de execução de trabalho. Consulte Destinos de notificação.

4 de julho de 2024

Databricks SQL Versão 2024.30 Disponível

Cronograma de lançamento: Lançamento de pré-visualização para 2024.30: Entre 9 e 15 de julho

Alterações em 2024.30

Lakehouse Federation está geralmente disponível (GA)

Os conectores da Lakehouse Federation nos seguintes tipos de banco de dados agora estão disponíveis ao público em geral (GA):

• MySQL
• PostgreSQL
• Amazon Redshift
• Snowflake
• Microsoft SQL Server
• Sinapse do Azure (SQL Data Warehouse)
• Databricks

Esta versão também apresenta as seguintes melhorias:

• Suporte para autenticação de logon único (SSO) nos conectores Snowflake e Microsoft SQL Server .

• Suporte ao Azure Private Link no conector do SQL Server a partir de ambientes de computação sem servidor. Consulte Etapa 3: Criar regras de ponto de extremidade privado.

• Suporte para pushdowns adicionais (string, matemática, funções diversas).

• Taxa de sucesso de pushdown melhorada em diferentes formas de consulta.

• Recursos adicionais de depuração por pushdown:

  • A EXPLAIN FORMATTED saída exibe o texto da consulta pressionado.
  • A interface do usuário do perfil de consulta exibe o texto da consulta pressionado, os identificadores de nó federado e os tempos de execução da consulta JDBC (no modo detalhado). Consulte Exibir consultas federadas geradas pelo sistema.

DESCRIBE HISTORY agora mostra colunas de agrupamento para tabelas que usam clustering líquido

Quando você executa uma DESCRIBE HISTORY consulta, a operationParameters coluna mostra um clusterBy campo por padrão para CREATE OR REPLACE e OPTIMIZE operações. Para uma tabela Delta que usa clustering líquido, o campo é preenchido clusterBy com as colunas de agrupamento da tabela. Se a tabela não usar agrupamento líquido, o campo estará vazio.

O suporte para chaves primárias e estrangeiras está geralmente disponível

O suporte para chaves primárias e estrangeiras no Databricks Runtime está geralmente disponível. A versão GA inclui as seguintes alterações nos privilégios necessários para usar chaves primárias e estrangeiras:

• Para definir uma chave estrangeira, você deve ter o SELECT privilégio na tabela com a chave primária à qual a chave estrangeira se refere. Você não precisa possuir a tabela com a chave primária, que era exigida anteriormente.
• Descartar uma chave primária usando a CASCADE cláusula não requer privilégios nas tabelas que definem chaves estrangeiras que fazem referência à chave primária. Anteriormente, você precisava possuir as tabelas de referência.
• Descartar uma tabela que inclui restrições agora requer os mesmos privilégios que descartar tabelas que não incluem restrições.

Para saber como usar chaves primárias e estrangeiras com tabelas ou exibições, consulte Cláusula CONSTRAINT, Cláusula ADD CONSTRAINT e Cláusula DROP CONSTRAINT.

O agrupamento líquido é GA

O suporte para clustering líquido agora está disponível em geral usando o Databricks Runtime 15.2 e superior. Veja Utilizar clustering líquido para tabelas Delta.

O alargamento de tipo está na Pré-visualização Pública

Agora você pode habilitar o alargamento de tipo em tabelas apoiadas pelo Delta Lake. As tabelas com alargamento de tipo ativado permitem alterar o tipo de colunas para um tipo de dados mais amplo sem reescrever arquivos de dados subjacentes. Consulte Alargamento de tipos.

Cláusula de evolução de esquema adicionada à sintaxe de mesclagem SQL

Agora você pode adicionar a cláusula a uma instrução de mesclagem SQL para habilitar a WITH SCHEMA EVOLUTION evolução do esquema para a operação. Consulte Sintaxe de evolução do esquema para mesclagem.

Suporte de inventário de vácuo

Agora você pode especificar um inventário de arquivos a serem considerados ao executar o VACUUM comando em uma tabela Delta. Consulte os documentos do OSS Delta.

Suporte para funções de compressão Zstandard

Agora você pode usar as funções zst_compress, zstd_decompress e try_zstd_decompress para compactar e descompactar BINARY dados.

Os planos de consulta na interface do usuário do SQL agora são exibidos corretamente PhotonWriteStage

Quando exibidos na interface do usuário do SQL, write os comandos em planos de consulta exibidos PhotonWriteStage incorretamente como um operador. Com esta versão, a interface do usuário é atualizada para ser exibida PhotonWriteStage como um palco. Esta é apenas uma alteração da interface do usuário e não afeta como as consultas são executadas.

Atualizações da interface do usuário

Painéis de IA/BI:

• Caraterísticas:
  • Os valores padrão agora estão disponíveis para os tipos de filtro Valor único e Valores múltiplos .
  • Os gráficos de contador agora suportam formatação condicional e novos estilos de texto.
  • Adicionadas mais categorias de cores à seção Cor/Grupo por do editor de visualização do painel.
• Correções:
  • As descrições nos widgets agora respeitam o preenchimento esquerdo ao quebrar o texto.
  • As agregações medianas agora são preservadas ao migrar de painéis herdados para painéis de IA/BI.
• Mudança:
  • A opção para criar um painel herdado foi removida do menu Novo na barra lateral do espaço de trabalho e do menu Criar no navegador de arquivos.

Suporte API:

• Agora você pode gerenciar destinos de notificação usando a API REST. Consulte Destinos de notificação.

Gênio de IA/BI:

• Caraterísticas:
  • Os ativos confiáveis já estão disponíveis. Ativos confiáveis são funções de tabela definidas pelo usuário que você pode escrever para fornecer respostas verificadas a perguntas específicas que você antecipa dos usuários. Consulte Usar ativos confiáveis em espaços do AI/BI Genie
• Correções:
  • Tratamento melhorado de colunas com carimbos de data/hora para responder melhor a perguntas de comparação de tempo.
  • Melhor capacidade do Genie de identificar e bloquear com precisão perguntas que não estão relacionadas a um espaço específico do Genie. Isso reduz as ocorrências de Genie fazendo palpites incorretos.
  • Incentivou o uso de instruções SQL geradas pelo Genie para uma correspondência mais flexível em comparação com operadores de ILIKE comparação mais rígidos.

Junho 27, 2024

Filtros de linha e máscaras de coluna no Databricks Visualizações materializadas SQL e tabelas de streaming são visualização pública

Filtros de linha e máscaras de coluna no Databricks, exibições SQL materializadas e tabelas de streaming são Visualização Pública. A versão Public Preview inclui as seguintes alterações:

• Você pode adicionar filtros de linha e máscaras de coluna a uma exibição Databricks SQL Materialized ou tabela de streaming.

  • Você pode definir exibições materializadas do Databricks, SQL ou tabelas de streaming em tabelas que incluem filtros de linha e máscaras de coluna.

  Consulte CREATE MATERIALIZED VIEW e CREATE STREAMING TABLE.

Atualizações da interface do usuário

Painéis de IA/BI:

• A API para listar painéis já está disponível. Consulte Listar painéis.
• Corrigido um problema em que os histogramas ocasionalmente não suportavam larguras decimais.
• Adicionado suporte para personalizar o tamanho e a opacidade do ponto de dispersão.

Visualizações:

• Interatividade aprimorada na exibição de dicas de ferramentas ao passar o mouse sobre gráficos de pizza, dispersão e mapa de calor com muitos pontos de dados.

Explorador de Catálogos:

• Uma interface do usuário renovada do Catalog Explorer facilita a descoberta e o favorito dos ativos recentes do Catálogo Unity na visualização de Acesso Rápido. A experiência de navegação também foi simplificada, permitindo que você explore detalhes de computação, armazenamento, credenciais, conexões, DBFS e gerenciamento usando as Configurações no canto superior esquerdo da tela. Delta Sharing, Clean Rooms e External Data agora têm páginas dedicadas.

Junho 20, 2024

Atualizações da interface do usuário

Painéis de IA/BI:

• Os widgets criados pelo Databricks Assistant agora vêm com um título.
• Os usuários agora podem ajustar o tamanho dos pontos e a opacidade em gráficos de dispersão.
• Os valores nulos agora são formatados de forma consistente em gráficos de contador, pivô e tabela.
• Texto de dica de tela em branco melhorado quando os conjuntos de dados foram criados.
• Corrigido um problema em que os painéis não conseguiam executar consultas novamente depois de serem reabertos a partir do navegador de arquivos.
• Corrigido um problema que dificultava o arrastamento de widgets de caixa de texto.

Editor SQL:

• O editor SQL agora descarta corretamente o rascunho da consulta ao fechar uma consulta não salva.
• Melhor desempenho do editor SQL visando o preenchimento automático, os tempos de carregamento de página e a capacidade de resposta geral da interface do usuário.
• As mensagens de erro no editor SQL para acessar uma consulta excluída ou para nenhuma permissão na consulta agora são exibidas por guia.

6 de junho de 2024

Correção para exibições materializadas do Databricks SQL e tabelas de streaming

O problema que faz com que ALTER SCHEDULE as consultas no Databricks SQL materializem exibições e tabelas de streaming para entrar em vigor somente depois que a próxima operação REFRESH tiver sido corrigida. Agora, ALTER SCHEDULE as consultas são aplicadas imediatamente. Consulte Agendar atualizações de exibição materializadas.

Visualizações materializadas e tabelas de streaming no Databricks SQL são Visualização Pública

Visualizações materializadas e tabelas de streaming no Databricks SQL são Visualização Pública e estão disponíveis para todos os clientes. A versão de pré-visualização pública inclui as seguintes alterações:

• REFRESH de exibições materializadas e tabelas de streaming no Databricks SQL agora é síncrono por padrão. Consulte REFRESH (MATERIALIZED VIEW ou STREAMING TABLE).

  • Os erros que ocorrem durante uma operação de atualização de uma exibição materializada do Databricks SQL ou tabela de streaming são retornados no Editor SQL.

  Para saber como usar exibições materializadas e tabelas de streaming no Databricks SQL, consulte Usar exibições materializadas no Databricks SQL e Carregar dados usando tabelas de streaming no Databricks SQL.

Atualizações da interface do usuário

Dashboards:

• Os usuários da conta agora podem baixar dados de visualização de painéis publicados
• Os painéis não publicados agora podem ser publicados usando a lista suspensa Rascunho/Publicação na parte superior de um painel.
• Corrigido um problema em que os parâmetros nomeados limite não eram detetados.

Visualizações:

• Renderização de box-plot melhorada no modo escuro.

Informações sobre consultas:

• Para todos os blocos de anotações anexados a armazéns SQL, você pode acessar o perfil de consulta clicando em Ver desempenho na célula que contém a consulta. Se a célula incluir várias consultas, um link para o perfil de consulta para cada instrução será fornecido.

30 de maio de 2024

Novo nível de permissão para armazéns SQL

Pode monitorar permissão permite que os usuários monitorem armazéns SQL, incluindo o histórico de consultas associado e perfis de consulta. A permissão Pode monitorar agora está em Visualização Pública. Consulte ACLs de ponto de extremidade de pesquisa vetorial.

Atualizações da interface do usuário

Melhorias no painel:

• Adicionado um menu de kebab aos widgets do painel para baixar imagens e dados.
• Os usuários podem migrar parâmetros herdados do painel, com backup de consulta e parâmetros da lista suspensa para painéis.

23 de maio de 2024

Atualizações da interface do usuário

• Agora você pode selecionar vários itens no espaço de trabalho para mover ou excluir. Quando vários objetos são selecionados, uma barra de ações é exibida e fornece opções para mover ou excluir itens. Além disso, você pode selecionar vários itens usando o mouse e arrastá-los para um novo local. As permissões existentes em objetos ainda se aplicam durante operações de movimentação e exclusão em massa.
• Agora você pode marcar os ativos do Catálogo Unity como favoritos no Catalog Explorer e no Schema Browser. Isso inclui catálogos, esquemas, tabelas, modelos, volumes e funções. Os ativos do Catálogo Unity que você marca como favoritos são facilmente acessíveis na página inicial do Azure Databricks.

Atualizações do painel:

• Os gráficos de combinação de eixo duplo agora exibem corretamente as legendas da barra no eixo direito e as legendas de linha de acordo.
• Os gráficos de eixo duplo agora mostram corretamente os rótulos nas barras.

Atualizações de visualizações:

• Os rótulos de formato condicional do editor de tabela para if e then agora suportam o modo escuro.
• O ícone de link aberto redundante foi removido das dicas de ferramentas de formato do editor de tabelas.
• O rótulo da cor da fonte padrão no editor de tabela agora se alinha automaticamente.

Maio 16, 2024

Cronograma de distribuição

• Lançamento de pré-visualização para 2024.25: Concluído a 1 de maio
• Lançamento atual para 2024.25: Entre 14 e 21 de maio

Nota

Uma atualização para a biblioteca Python panda (versão 2.0.3) causou uma alteração no Databricks SQL versão 2024.20. O Azure Databricks não implantou a versão 2024.20 no canal atual. Em vez disso, o canal de visualização foi atualizado para 2024.25 em 1º de maio de 2025. O lançamento atual do canal vai diretamente de 2024.15 a 2024.25.

Alterações em 2024.25

Governação de dados

Os controles de passagem de credenciais e de acesso à tabela de metastore do Hive foram preteridos.

A passagem de credenciais e os controles de acesso à tabela de metastore do Hive são modelos herdados de governança de dados. Atualize para o Unity Catalog para simplificar a segurança e a governança de seus dados, fornecendo um local central para administrar e auditar o acesso aos dados em vários espaços de trabalho em sua conta. Veja O que é o Unity Catalog?.

O suporte para passagem de credenciais e controles de acesso à tabela de metastore do Hive será removido em uma próxima versão do DBR.

Recursos da linguagem SQL

A cláusula * (estrela) agora é suportada na cláusula WHERE.

Agora você pode usar a cláusula de estrela (*) na WHERE cláusula para fazer referência a todas as colunas da SELECT lista. Por exemplo, SELECT * FROM VALUES(1, 2) AS T(a1, a2) WHERE 1 IN(T.*).

Suporte para armazenamento Cloudflare R2 para evitar taxas de saída entre regiões desde 2024.15

Agora você pode usar o Cloudflare R2 como armazenamento em nuvem para dados registrados no Unity Catalog. O Cloudflare R2 destina-se principalmente a casos de uso do Delta Sharing nos quais você deseja evitar as taxas de saída de dados cobradas pelos provedores de nuvem quando os dados cruzam regiões.

O armazenamento Cloudflare R2 suporta todos os dados Databricks e ativos de IA suportados no Azure Data Lake Storage Gen2.

Consulte Usar réplicas do Cloudflare R2 ou migrar o armazenamento para o R2 e Criar uma credencial de armazenamento para se conectar ao Cloudflare R2.

Atualizações da interface do usuário

Os recursos listados nesta seção são independentes das versões de computação do SQL Warehouse descritas acima.

Atualizações de descoberta de dados: o assistente de atualização do metastore do Hive para o Unity Catalog oferece suporte à atualização de tabelas gerenciadas do metastore do Hive usando computação multiuso ou armazéns SQL. A atualização de mais de 20 tabelas cria um novo bloco de anotações que contém os SYNC comandos AND ALTER TABLE que executam a conversão.

Atualizações do painel:

• A funcionalidade de eixo duplo agora está disponível para os tipos de gráficos de Área, Barra, Linha e Dispersão.
  • Quando você habilita um gráfico de eixo duplo, o título e o intervalo do eixo não são mais copiados para o eixo secundário.
  • O último campo identificado na configuração de visualização é automaticamente realocado para o eixo y do lado direito.

9 de maio de 2024

Correções do Editor SQL:

• Os recursos da área de transferência da tabela de resultados da configuração de administrador agora se aplicam à nova tabela de resultados do editor SQL.

Melhorias no painel:

• Os parâmetros baseados em consulta permitem que os autores definam uma lista de valores selecionáveis que os visualizadores podem usar como parâmetros para outras visualizações em uma tela de painel. Consulte Usar parâmetros baseados em consulta.
• A ordem das colunas nos arquivos baixados de um widget de tabela agora é preservada.
• O editor de tabelas agora inclui dicas de ferramentas de foco que exibem os nomes das colunas.
• Ao mudar de outros tipos de visualização para um histograma, a codificação de informações agora é melhor preservada.

Correções do painel:

• Corrigido um problema em que um único filtro de altura de grade exibia uma barra de rolagem de estouro desnecessária.
• Corrigido um problema que causava visualizações renderizadas incorretamente em painéis publicados em que uma coluna de conjunto de dados referenciada era excluída.

2 de maio de 2024

Atualizações do painel:

• Consultas e visualizações agora podem ser copiadas para um novo painel do editor SQL. Você ainda pode adicionar visualizações a painéis herdados a partir do editor SQL. Consulte Editar, baixar ou adicionar a um painel.
• Os painéis agora manterão um cache de resultados de 24 horas para otimizar os tempos de carregamento iniciais. Consulte Otimização e cache de conjuntos de dados.
• Os gráficos de barras com X categórico e Y quantitativo agora são classificados em respostas do Databricks Assistant.
• Corrigido o problema de migração com histograma COUNT (*) herdado para garantir uma migração precisa.
• Implementada a capacidade de misturar tipos numéricos e tipos de data em um widget de filtro.
• Ao criar gráficos, o Assistente Databricks agora sugere automaticamente colunas relevantes à medida que você digita.

Atualizações de visualização:

• A cor selecionada pelo usuário para tabelas agora persiste nos modos claro e escuro em gráficos herdados.
• A lógica de truncamento de dados foi melhorada para melhorar o desempenho em gráficos de combinação, pizza, mapa de calor e histograma.
• Uma marca de escala agora é sempre exibida na parte superior de um eixo quantitativo para gráficos básicos.

23 de abril de 2024

Atualizações da interface do usuário:

• Para todas as caixas de diálogo Compartilhar na interface do usuário, o All Users grupo foi renomeado para All Workspace Users. O novo nome reflete com mais precisão o escopo do grupo, que sempre incluiu usuários atribuídos ao espaço de trabalho. Nenhuma alteração é feita na associação ao grupo como parte dessa renomeação.

Melhorias no painel:

• Quando o SQL warehouse de um painel é iniciado, uma caixa de diálogo é exibida para explicar o tempo de espera.
• A posição de rolagem é preservada ao alternar entre as guias Tela e Dados.
• A clonagem de um painel herdado para criar um painel do Lakeview agora oferece suporte a alguma conversão de parâmetros. Consulte Ajustar parâmetros herdados.
• Datas relativas, como Hoje, Amanhã e 7 dias atrás, agora são suportadas para parâmetros de data e hora.
• Os controles deslizantes de intervalo de números podem ser adicionados como filtros em um painel.
• Os histogramas agora podem exibir dados desagregados.
• Os gráficos de dispersão agora suportam codificação de tamanho.

Correções do painel:

• A codificação de cores temporais agora pode alterar as atribuições de cores corretamente.

Atualizações de visualização:

• Os formatos de topo de ferramentas personalizados agora funcionam corretamente para gráficos de vários eixos.
• A tag de visualização Novos gráficos é removida quando os usuários não alteraram a alternância nos últimos 14 dias.

18 de abril de 2024

Os painéis Lakeview estão geralmente disponíveis

Os painéis Lakeview agora são a ferramenta de painel padrão. Eles foram renomeados como Dashboards na interface do usuário. Os painéis SQL do Databricks agora são chamados de painéis herdados. Os nomes das ferramentas de API relacionadas não foram alterados.

• Melhorias no painel:
  • Os logs de auditoria estão disponíveis para os painéis do Lakeview. Consulte Eventos de painéis.
  • Os dados baixados dos painéis respeitam os parâmetros aplicados.
  • O Assistente de Databricks está ativado na guia Dados sem adicionar conjuntos de dados primeiro.
  • Gráficos de barras empilhadas com vários campos Y podem suportar a classificação do eixo X com base na soma dos valores do eixo Y.
  • Alterne entre funções de escala Linear e Log(Simétrica) nos menus do eixo de visualização.
  • O tamanho padrão do widget de filtro agora é mais compacto.
  • O tempo de carregamento inicial para o widget de filtro de entrada de texto foi reduzido.
  • Conversões automáticas de gráficos aprimoradas ao migrar de painéis herdados.
• Correções do painel:
  • O aviso de configurações de visualização restritas não mostra se o painel foi compartilhado com outras pessoas.
  • As mensagens de erro no editor SQL da guia Dados agora estão habilitadas para o modo escuro.

Atualizações da interface do usuário

Os recursos listados nesta seção são independentes das versões de computação do SQL warehouse descritas acima.

Melhorias:

• As dicas de ferramentas em gráficos empilhados agora exibem o valor da pilha e a porcentagem por padrão.
• As dicas de ferramentas para gráficos de vários eixos agora destacam o item pairado.
• As visualizações de tabela para Databricks SQL agora adaptam o tipo de dados de um novo resultado de consulta quando editadas no editor SQL.
• A tabela Histórico de Consultas do Catalog Explorer mostra uma exibição em forma de árvore para atribuição de Fonte de Consulta. Você pode usar isso para ver quais entidades acionaram a instrução de consulta a ser executada.

11 de abril de 2024

Atualizações da interface do usuário

Os recursos listados nesta seção são independentes das versões de computação do SQL warehouse descritas acima.

Melhorias:

• Agora você pode agrupar por porcentagem ao criar visualizações em Databricks SQL e notebooks.
• Para novos gráficos (na Pré-visualização Pública), pode aumentar o zoom ao longo de um único eixo clicando e arrastando numa linha reta paralela ao eixo.
• A interface do usuário Allowlist do cluster compartilhado do Unity Catalog agora está disponível para o público em geral. Você pode acessá-lo na página de detalhes da Metastore no Catalog Explorer. Consulte Como adicionar itens à lista de permissões.
• Os formulários para criar e editar locais externos agora são abertos como uma página inteira. Eles incluem a opção de incluir uma credencial de armazenamento.

Correções:

• Corrigido um problema para gráficos de histograma em que valores negativos eram erroneamente marcados como positivos.

4 de abril de 2024

Atualizações da interface do usuário

Os recursos listados nesta seção são independentes das versões de computação do SQL warehouse descritas acima.

Melhorias:

• Melhorias nos gráficos de histograma nos painéis do Lakeview.

  • Adicionado suporte para etiquetas.
  • As configurações do compartimento agora são mantidas ao alternar entre campos diferentes.

• A galeria de exemplos na página de listagem do painel agora cria painéis do Lakeview. Consulte Tutorial: Usar painéis de exemplo.

• Clicar com o botão direito do mouse na borda de um widget em um painel do Lakeview abre um menu de contexto.

• A barra de navegação do lado esquerdo é mantida para usuários do espaço de trabalho que visualizam painéis publicados do Lakeview.

• As seleções de filtros são mantidas ao navegar entre os painéis publicados e rascunhos do Lakeview.

• Os nomes das colunas agora podem ser inseridos no editor SQL ao editar uma consulta na guia Dados em um painel de rascunho do Lakeview.

• A substituição de um painel Lakeview mantém o nome do painel existente e substitui o conteúdo.

• Alternar visualizações entre mapas de calor e outros tipos de gráficos agora preserva melhor os campos relevantes.

Correções:

• Os gráficos de barras com codificações de cores agora restringem corretamente a adição de vários campos do eixo Y.
• Resolvido um problema em que o botão Baixar como PNG estava ausente de algumas visualizações.
• Formatação corrigida para números inteiros grandes negativos que faltavam anteriormente milhares de separadores.
• Corrigido o posicionamento incorreto da linha de foco ao passar o mouse sobre rótulos em gráficos de linha.

28 de março de 2024

Databricks SQL versão 2024.15 disponível

Cronograma de distribuição

• Lançamento de pré-visualização para 2024.15: entre 14 de fevereiro e 4 de março
• Lançamento atual para 2024.15: entre 25 de março e 8 de abril

Alterações em 2024.15

Atualizações Delta

• Delta UniForm agora está disponível em geral: UniForm agora está disponível em geral e usa o recurso de tabela IcebergCompatV2. Agora você pode habilitar ou atualizar o UniForm em tabelas existentes. Consulte Usar UniForm para ler tabelas Delta com clientes Iceberg.
• Recalcular estatísticas de pulo de dados para tabelas Delta: agora você pode recalcular estatísticas armazenadas no log Delta depois de alterar as colunas usadas para pular dados. Consulte Especificar colunas de estatísticas delta.

Atualizações de linguagem SQL

• Declarar variáveis temporárias em uma sessão SQL: esta versão introduz a capacidade de declarar variáveis temporárias em uma sessão que pode ser definida e, em seguida, referida em consultas. Consulte Variáveis.
• Suporte ao formato de arquivo XML nativo (Visualização pública): o suporte ao formato de arquivo XML nativo agora está em Visualização pública. O suporte ao formato de arquivo XML permite a ingestão, consulta e análise de dados XML para processamento em lote ou streaming. Ele pode inferir e evoluir automaticamente esquemas e tipos de dados, suporta expressões SQL como from_xml, e pode gerar documentos XML. Ele não requer frascos externos e funciona perfeitamente com Auto Loader, read_files, COPY INTOe Delta Live Tables. Consulte Ler e gravar arquivos XML.

Atualizações do Apache Spark SQL

O Databricks SQL 2024.15 inclui o Apache Spark 3.5.0. Correções de bugs adicionais e melhorias para SQL estão listadas na nota de lançamento do Databricks Runtime 14.3. Consulte Apache Spark e procure a [SQL] tag para obter uma lista completa.

Atualizações da interface do usuário

Os recursos listados nesta seção são independentes das versões de computação do SQL warehouse descritas acima.

• Uma nova guia de visão geral na página de entidade do Catalog Explorer mostra metadados importantes, como tamanho do arquivo, fonte de dados, proprietário, esquema de tabela e comentários.

• Atualizações do painel Lakeview:

  • Os painéis do Lakeview agora suportam parâmetros. Os autores podem adicionar parâmetros a consultas de conjunto de dados a partir da guia Dados e, em seguida, definir parâmetros na tela usando seletores de valor único e seletores de data. Consulte Trabalhar com parâmetros do painel.
  • Os painéis do Lakeview agora são suportados na API de permissões do espaço de trabalho. Consulte PATCH /api/workspace/workspace/updatepermissions na referência da API REST.
  • Os widgets de controle na tela foram renomeados para Widgets de filtro .
  • Os gráficos de combinação não permitem mais campos desagregados no eixo x.
  • O botão Copiar link na caixa de diálogo Compartilhar agora inclui parâmetros armazenados na URL.
  • Os widgets nos painéis publicados não mostram mais bordas ao passar o mouse.
  • Resolvido um problema em que os botões Databricks Assistant e Download PNG se sobrepõem aos visuais do gráfico.

• Alternar visualizações entre heatmaps e outros tipos de gráficos agora preserva melhor os campos relevantes.

• Os gráficos de barras com codificações de cores agora restringem corretamente a adição de vários campos do eixo Y.

Março 21, 2024

• A linhagem de modelos do Unity Catalog está agora em Pré-visualização Pública.

A exibição de tabela no Catalog Explorer agora tem uma guia Visão geral para descrever seus metadados primários.

• Os armazéns SQL para blocos de anotações, agora disponíveis em geral, permitem que você aproveite a computação totalmente gerenciada, instantânea e escalável para suas cargas de trabalho SQL no ambiente de criação avançado e colaborativo de um bloco de anotações. Consulte Usar um bloco de anotações com um depósito SQL.

As seguintes correções e melhorias se aplicam aos painéis do Lakeview:

• O suporte expandido à API para o Lakeview adiciona a capacidade de criar, obter, atualizar e reciclar painéis. Consulte Lakeview na referência da API REST.
• Adicionado um botão de atualização para o navegador Catálogo na guia Dados.
• Os painéis do Lakeview agora aparecem antes de Painéis no menu Novo na barra lateral do espaço de trabalho. Na página de listagem do painel, a guia Lakeview dashboards aparece à esquerda da guia Dashboards .
• A experiência do Databricks Assistant para Lakeview foi atualizada com uma caixa de entrada e sugestões para melhorar a capacidade de descoberta e ajudar os usuários a entender os prompts que podem colocar.
• As visualizações Lakeview agora suportam agregações medianas.
• Atualizado o seletor de cores no editor de visualização do painel Lakeview para uma experiência de usuário mais simplificada ao criar tabelas.
• Migração melhorada de gráficos circulares para suportar exclusivamente cenários com definições de ângulo ou cor.
• Corrigido um bug que impedia o agrupamento por gráficos chamados count. Os gráficos agora podem ser agrupados por campos chamados count.
• Para gráficos de barras, os controles de layout de grupo e pilha agora ficam ocultos quando não são aplicáveis à configuração selecionada pelo usuário.

Março 14, 2024

Para painéis Lakeview:

• Os histogramas agora suportam cores categóricas personalizadas.

  • Os mapas de calor agora suportam escalas quantitativas.
  • Os títulos e descrições são mantidos ao alternar entre tipos de visualização, incluindo gráficos de combinação.
  • Agora você pode abrir o conjunto de dados subjacente associado a um widget de painel de rascunho clicando com o botão direito do mouse nele. O conjunto de dados é aberto na guia Dados .

• Novos gráficos agora aplicam aliases e cores personalizadas para valores nulos em colunas numéricas.

• Novos gráficos agora renderizam marcas de escala para mostrar a parte superior do eixo y.

7 de março de 2024

• Ao exibir uma tabela no Gerenciador de Catálogos, o botão Criar inclui uma opção para criar um painel Lakeview em vez de um painel SQL do Databricks.

• Os histogramas agora estão disponíveis para painéis do Lakeview. Os histogramas são comumente usados para visualizar a distribuição de um campo numérico.

• Ao clonar um painel SQL do Databricks para criar um painel do Lakeview, os problemas de conversão do conjunto de dados agora aparecem como erros no novo widget no painel do Lakeview.

• Os gradientes de cor estão disponíveis quando um campo numérico é usado para uma visualização em um painel do Lakeview.

• Os gradientes de cor agora são expostos no editor de visualização do painel Lakeview quando um campo Cor por é especificado.

• O título e a descrição associados a uma visualização não serão mais editáveis se o visualizador não tiver privilégios de edição em um painel de rascunho do Lakeview.

• Corrigido um problema em que as dicas de ferramentas em gráficos com mais de 100 séries mostravam incorretamente todas as séries. Agora, apenas a série focada é mostrada.

• Reduziu a latência de digitação no editor SQL em 30% através de otimizações de desempenho.

• Ao gerenciar consultas no editor SQL, mover uma consulta para a lixeira fecha automaticamente a guia.

• Corrigido um problema no editor SQL em que o texto era selecionado acidentalmente ao ajustar a largura do painel lateral.

29 de fevereiro de 2024

• O navegador de esquema no Catalog Explorer agora exibe restrições de chave primária e estrangeira da coluna.

• O tempo de retenção mostrado na guia Linhagem no Catalog Explorer foi aumentado para um ano.

• As dicas de ferramentas em novos gráficos em blocos de anotações agora são sempre renderizadas dentro do limite de visualização.

• Saiba como gerenciar programaticamente os painéis do Lakeview usando a API REST. Consulte Gerenciar painéis com APIs de espaço de trabalho.

• Os painéis do Lakeview agora suportam histogramas.

• Compartilhamento e publicação aprimorados nos painéis do Lakeview:

  • Diálogos de compartilhamento e publicação aprimorados, permitindo o compartilhamento seguro e fácil para qualquer usuário da conta.
  • Os painéis abertos a partir do navegador do espaço de trabalho mostram o painel publicado, se ele existir. Agora, os espectadores também podem ver detalhes da versão publicada mais recente, incluindo editor, hora e credenciais.
  • Para os editores, um novo alternador suspenso na interface do usuário do Lakeview Dashboard permite que você se mova rapidamente entre as versões de rascunho e publicadas.

22 de fevereiro de 2024

• As melhorias na guia Dados de Exemplo no modo de exibição de tabela do Gerenciador de Catálogos permitem classificar colunas, Copiar dados selecionados para a área de transferência e exibir números de linha. Agora ele pode exibir melhor valores especiais, como objetos JSON, datas, valores numéricos e nulos.

• Os painéis do Lakeview agora suportam o envio de instantâneos PDF periódicos do painel para usuários do espaço de trabalho e destinos de notificação. Consulte Agendas e assinaturas.

• A lista de opções de visualização no seletor suspenso Lakeview agora está ordenada em ordem alfabética.

• Ao copiar painéis SQL do Databricks para painéis do Lakeview, os widgets que não podem ser convertidos agora mostram o seletor de configuração de visualização em vez de uma mensagem de erro.

Fevereiro 15, 2024

• A documentação para filtros de consulta baseados em código, como SELECT action AS 'action::filter', foi removida. O Databricks recomenda a atualização de consultas para remover esse padrão.

• Para painéis Lakeview, os gráficos de pizza agora exibem fatias de tamanho igual quando nenhum campo de ângulo é especificado.

• Lakeview agora suporta gráficos de combinação, que combinam gráficos de barras e linhas para mostrar dois valores diferentes no mesmo gráfico.

• Os gráficos de mapa de calor, que usam a intensidade de cor para mostrar a magnitude da correlação entre duas variáveis discretas, agora estão disponíveis no Lakeview.

8 de fevereiro de 2024

• Agora você pode solicitar acesso ao abrir um link para um painel do Lakeview no qual você não tem permissões.
• Os filtros do painel do Lakeview agora têm opções explícitas de Tudo e Nenhum . Os autores podem optar por ocultar a opção Tudo em filtros de seleção única.
• Agora você pode definir valores mínimos e máximos para eixos nos gráficos do painel do Lakeview.

1 de fevereiro de 2024

Databricks SQL Versão 2024.10 Disponível

Cronograma de distribuição

• Lançamento de pré-visualização para 2024.10: entre 30 de janeiro de 2024 e 5 de fevereiro de 2024
• Lançamento atual para 2024.10: Entre 13 de fevereiro de 2023 e 20 de fevereiro de 2024

Alterações em 2024.10

• Corrigido tratamento de arquivos corrompidos em comandos DML: Os comandos DELETEDML , UPDATEe MERGE INTO não respeitam mais as opções ignoreCorruptFiles de leitura e ignoreMissingFiles. Ao encontrar um arquivo ilegível em uma tabela, esses comandos agora falham, mesmo que essas opções sejam especificadas.
• A simultaneidade no nível da linha é Geralmente Disponível e ativada por padrão: A simultaneidade no nível da linha reduz os conflitos entre as operações de gravação simultâneas detetando alterações no nível da linha. A simultaneidade em nível de linha só é suportada em tabelas sem particionamento, o que inclui tabelas com clustering líquido. A simultaneidade em nível de linha é habilitada por padrão em tabelas Delta com vetores de exclusão habilitados. Consulte Conflitos de gravação com simultaneidade em nível de linha.
• Clone superficial para tabelas externas do Unity Catalog (Visualização pública): agora você pode usar clone superficial com tabelas externas do Unity Catalog. Consulte Clone superficial para tabelas do Catálogo Unity.
• Coleta de estatísticas multi-threaded mais rápida: A coleta de estatísticas é até 10 vezes mais rápida em pequenos clusters ao executar CONVERT TO DELTA ou clonar a partir de tabelas Iceberg e Parquet. Consulte Converter em Delta Lake e clonar incrementalmente tabelas de Parquet e Iceberg para Delta Lake.
• Filtros pushdown no DeltaSource em arquivos Delta: Para uma melhor utilização, os filtros de partição em tabelas Delta transmitindo consultas agora são empurrados para Delta antes do limite de taxa.

Atualizações da interface do usuário

Os recursos listados nesta seção são independentes das versões de computação do SQL Warehouse descritas acima.

• A guia Modo de exibição Admin nas páginas de listagem de objetos SQL do Databricks (consultas, painéis e alertas) foi removida. Os usuários administradores do espaço de trabalho podem visualizar todos os objetos de suas respetivas páginas de listagem. Consulte Acessar e gerenciar consultas salvas, Painéis herdados e O que são alertas SQL do Databricks?.

• A página de histórico de consultas exibe consultas das últimas 24 horas por padrão. Consulte Histórico de consultas.

• Uma opção de menu, Clone to Lakeview dashboard, foi adicionada à interface do usuário do painel SQL do Databricks. Você pode usar essa ferramenta para criar um novo painel Lakeview que inclua as mesmas consultas e visualizações em seus painéis SQL Databricks existentes. Consulte Clonar um painel herdado em um painel de IA/BI.

• Os gráficos de barras nos painéis do Lakeview suportam barras de empilhamento para normalizar para 100%.

• Corrigido um problema em que o zoom em um painel do Lakeview publicado resultava no foco em intervalos de zoom incorretos.

24 de janeiro de 2024

• A tela do painel Lakeview ajusta automaticamente o posicionamento do widget para remover o espaço em branco vertical vazio entre as linhas quando possível.
• Espaço em branco reduzido entre o texto do título e da descrição nas visualizações do painel do Lakeview.

18 de janeiro de 2024

• Corrigido um problema de renderização para visualizações em que gráficos de barras mostrando uma única data no eixo x resultavam em uma barra muito fina. Novas visualizações de gráficos são renderizadas conforme o esperado.

• A página de listagem do painel Lakeview mostra seus painéis por padrão. Você pode usar filtros nessa página para acessar painéis do Lakeview pertencentes a outros usuários do espaço de trabalho.

11 de janeiro de 2024

• As APIs de Consultas SQL e Dashboard do Databricks suportam a alteração programaticamente da configuração Executar como função.

• O Lakeview suporta a exportação e importação de painéis como arquivos para facilitar a reprodução de painéis de rascunho em espaços de trabalho. Consulte Exportar, importar ou substituir um painel

4 de janeiro de 2024

• Introdução de diagramas de relacionamento de entidade de chave primária e chave estrangeira no Gerenciador de Catálogos. Consulte Exibir o diagrama de relacionamento de entidade.

21 de dezembro de 2023

• O tipo de visualização Lakeview Counter mostra cores ao comparar BigInt valores nos campos principais Valor e Destino .

• As dicas de ferramentas que aparecem ao alternar a visibilidade da coluna em tabelas no Lakeview foram melhoradas. Comportam-se como esperado e não persistem.

• Os usuários agora podem usar o Databricks Assistant para criar visualizações no Lakeview. Consulte Criar visualizações com o Databricks Assistant.

• Para novos gráficos, os gráficos do tipo mapa de calor respeitam a configuração Y inversa.

• Corrigido um problema de desempenho de renderização para blocos de anotações com um grande número de visualizações.

14 de dezembro de 2023

• Corrigido um bug em que os painéis do Lakeview não apareciam na página de listagem do Lakeview sem uma atualização manual da página.
• Use a tecla escape para cancelar a criação de um widget Lakeview ao colocá-lo na tela.
• O Catalog Explorer agora exibe índices de Pesquisa Vetorial na interface do usuário como parte da visualização pública do Mosaic AI Vetor Search .

7 de dezembro de 2023

Atualizações da interface do usuário

• Os painéis Lakeview podem ser adicionados aos favoritos para acesso rápido.

• Copiar e colar atalhos de teclado são suportados durante a elaboração de um painel do Lakeview. Além disso, a tecla delete remove widgets selecionados.

• Títulos e descrições aprimorados do widget Lakeview para evitar o recorte de texto durante o carregamento.

• Corrigido o problema de formatação da visualização em que valores inteiros grandes eram exibidos por engano como flutuadores.

• Corrigido um problema com os painéis SQL do Databricks em que as exibições de gráficos expandidas às vezes mostravam gráficos em branco.

• Gráficos de barras com campos quantitativos nos eixos X e Y tornam os rótulos de dados mais legíveis.

• Corrigido o problema no Editor SQL para que as tabelas com a palavra stream no título não entrem mais em conflito com a palavra-chave reservada. Essas tabelas agora aparecem como esperado no navegador de esquema e não são realçadas por erros.

• A página de histórico de consultas agora suporta redimensionamento de colunas e seleções de colunas.

• A página de histórico de consultas suporta duas novas colunas: Fonte da consulta e Tipo de fonte da consulta.

• As opções de BI, como o Tableau e o Power BI, são mais fáceis de encontrar no Catalog Explorer em páginas qualificadas.

30 de novembro de 2023

Atualizações da interface do usuário

Os recursos listados nesta seção são independentes das versões de computação do SQL Warehouse descritas acima.

• Os gráficos de pizza no Lakeview agora podem ter atribuições de cores personalizadas.

• As transformações de visualização no Lakeview agora são mantidas ao alternar entre tipos de campo compatíveis.

• Adicionadas configurações de título para os canais angulares do gráfico de pizza Lakeview.

• A lista suspensa do conjunto de dados Lakeview agora pode ser pesquisada para facilitar a navegação.

• Lakeview suporta exibição numérica completa para valores abaixo de 10.000, eliminando abreviaturas.

• Adicionada capacidade de código de cores para campos de data categóricos no Lakeview.

• Os usuários do Lakeview agora podem destacar legendas de gráficos com o cursor para copiar e colar os valores.

• Os gráficos de pizza no Lakeview agora apresentam uma opção de alternância de rótulo.

• Padronizou uma cor azul padrão em todas as visualizações do Lakeview.

• Os ícones de coluna Lakeview em transformações agora correspondem consistentemente ao método de transformação usado.

• Os controles no painel de edição do Lakeview agora são encapsulados automaticamente para melhorar a legibilidade.

• Lançado um editor de cores aprimorado para visualizações do Lakeview.

• O controle para as condições da fonte da tabela no Lakeview agora está envolvido para melhorar a readabilidade.

• Compatibilidade melhorada com o modo escuro para etiquetas em novos gráficos.

• Novos gráficos agora priorizam consistentemente a exibição de rótulos dentro das barras.

• Corrigido um bug em que algumas ações do menu do botão direito do mouse não estavam funcionando no Editor SQL.

16 de novembro de 2023

Atualizações da interface do usuário

Os recursos listados nesta seção são independentes das versões de computação do SQL Warehouse descritas acima.

• As consultas, alertas e painéis do Databricks SQL têm um novo agendador e interface de agendamento.

• Os widgets Lakeview agora são mais fáceis de redimensionar devido a uma zona de gatilho de redimensionamento maior.

• Os administradores do espaço de trabalho agora podem alterar o proprietário de um painel do Lakeview. No modo de edição em um painel do Lakeview:

  • Clique em Compartilhar
  • Clique em
  • Clique em Atribuir novo proprietário

• Os usuários podem ativar ou desativar rótulos no Lakeview.

Visualizações:

• Novos rótulos de gráficos agora preferem fortemente estar dentro de uma barra quando possível.
• Novos rótulos de gráficos agora aparecem corretamente em barras empilhadas que são largas o suficiente para mostrar o rótulo inteiro.
• As cores dos rótulos dentro dos gráficos de barras agora são mais consistentes.

9 de novembro de 2023

Alterações em 2023.50:

Destaques:

• Agora você pode usar a invocação de parâmetro nomeado em SQL e Python UDF.

Atualizações da linguagem SQL: As seguintes funções internas foram adicionadas:

• from_xml: Analisa um XML STRING em um STRUCTarquivo .
• schema_of_xml: Deriva um esquema de um XML STRING.
• session_user: Retorna o usuário conectado.
• try_reflect: Retorna NULL em vez da exceção se um método Java falhar.

As seguintes funções incorporadas foram melhoradas:

• invocação de funções. Argumentos de tabela para funções suportam particionamento e ordenação: agora você pode usar PARTITION BY e ORDER BY cláusulas para controlar como os argumentos de tabela são passados para uma função.
• mode: Suporte para um parâmetro opcional forçando um resultado determinístico.
• to_char: Novo suporte para DATE, TIMESTAMPe BINARY.
• to_varchar: Novo suporte para DATE, TIMESTAMPe BINARY.
• array_insert() é baseada em 1 para índices negativos: A array_insert função é baseada em 1 para índices positivos e negativos. Ele agora insere um novo elemento no final das matrizes de entrada para o índice -1.

Atualizações da interface do usuário

Os recursos listados nesta seção são independentes das versões de computação do SQL warehouse descritas acima.

Visualizações:

• As dicas de ferramentas para novos gráficos mostram apenas itens pairados para gráficos de alta cardinalidade.
• Novos gráficos alinham automaticamente gráficos de eixo duplo em zero.
• Os gráficos alteraram o rótulo girado e a direção do ângulo do texto do eixo de -90 para 90 graus.
• Os gráficos agora usam a largura do rótulo para decidir a rotação.

Painéis Lakeview:

• Correção: As linhas da tabela nos painéis do Lakeview não adicionam mais preenchimento vertical quando apenas um pequeno número de linhas é retornado.
• A clonagem de um novo widget do painel do Lakeview primeiro tenta colocar o clone à direita do original, desde que haja espaço suficiente na tela. Se não houver espaço suficiente disponível, o clone é colocado abaixo do original.
• Agora você pode reatribuir o proprietário de um painel do Lakeview por meio da caixa de diálogo Compartilhar.

Editor SQL: O preenchimento automático agora é menos agressivo e descarta automaticamente no final das instruções

2 de novembro de 2023

Melhorias:

A seguir estão as melhorias na linhagem do painel Lakeview:

• Adicionados ícones distintos para tabelas, vistas e vistas materializadas.
• Adicionado suporte para rolagem vertical no caso de muitas fontes de dados upstream.
• Mensagem de erro melhorada quando o visualizador não tem permissões no objeto upstream.
• Mensagens esclarecidas em torno de tabelas de dados de exemplo e dados HMS.
• Tags de valor chave adicionadas às fontes de dados upstream.

Correção:

• Corrigido um problema em novos gráficos que impedia a renderização depois de renomear uma série com valores booleanos.

26 de outubro de 2023

Alterações no Databricks SQL versão 2023.45

Destaques:

• A E/S preditiva para atualizações agora está disponível para o público em geral. Consulte O que é E/S preditiva?
• Os vetores de exclusão agora estão geralmente disponíveis. Consulte O que são vetores de exclusão?

Otimizações de consulta:

• Removida a junção externa se todas forem funções agregadas distintas. Faísca-42583
• Otimização da ordem dos predicados de filtragem. Faísca-40045

Atualizações da função SQL:

• Adicionado suporte para resolução implícita de alias de coluna lateral em Aggregate. Faísca-41631
• Suporte para alias de coluna lateral implícito em consultas com Window. Faísca-42217
• Suporte para Datasketches HLLSketch. Consulte hll_sketch_agg função agregada.
• Adicionada a try_aes_decrypt() função. Consulte try_aes_decrypt função.
• Suporte para o modo CBC para aes_encrypt() e aes_decrypt(). Veja aes_decrypt função.
• Adicione aliases de função 3-args DATE_ADD e DATE_DIFF.
• Adicionado suporte para aes_encrypt IVs e AAD. Faísca-43290
• Implemente funções de bitmap. Faísca-44154
• Adicionado o to_varchar alias para to_char. Consulte to_varchar função.
• Suporte adicionado array_compact . Veja array_compact função.
• Suporte para udf luhn_check. Veja luhn_check função.
• Adicionado suporte ao analisador de argumentos nomeados para funções internas. Faísca-44059
• Suporte para TABLE a regra do analisador de argumentos para TableValuedFunction. Faísca-44200
• array_insert agora falha com o índice 0. Faísca-43011
• Valores adicionados NULL para INSERT com listas especificadas pelo usuário de menos colunas do que a tabela de destino. Faísca-42521
• DECODE função retorna resultados errados quando passado NULL. FAÍSCA-41668

Atualizações da interface do usuário

Melhorias:

• O editor Lakeview SQL agora suporta atalhos de teclado para executar consultas.

• Os filtros no Lakeview agora listam seleções rápidas de intervalo de datas relativas para os últimos 7, 14, 28, 30, 60 e 90 dias.

• Os períodos nos nomes dos campos de dados não resultam mais em gráficos em branco.

• O navegador de esquema herdado agora funciona com o Unity Catalog.

• Implementei melhorias de desempenho para carregar apenas a guia ativa no Editor SQL, diminuindo o tempo de carregamento inicial em até 20%.

• Os comentários de tabela gerados por IA no Catalog Explorer agora estão geralmente disponíveis.

Correções:

• As barras em gráficos de barras temporais agora estão centralizadas sobre a marca de escala de data.
• Os modelos de rótulo de dados com expressões agregadas agora usam as formatters numéricas adequadas.
• O zoom em novos gráficos agora funciona com uma escala definida como categórica usando dados temporais.

Novo artigo:

• Lançado um novo artigo mostrando todas as visualizações do Lakeview, incluindo capturas de tela e notas mostrando como recriar cada uma das visualizações em cada captura de tela. Consulte Tipos de visualização de painel.

19 de outubro de 2023

Melhorias:

• Arrastar e soltar no navegador de esquema já está disponível.

• O modal Selecionar tabela nos painéis do Lakeview facilita a seleção de todas as tabelas em um catálogo ou esquema e agora usa previsões de pesquisa de preenchimento automático à medida que você digita.

Correções:

• As instruções de dica de ferramenta de seleção de legenda especificam o uso de usuários de cmd Mac e usuários de Windows .ctrl

• Visibilidade aprimorada de mensagens truncadas nos painéis do Lakeview quando os dados renderizados excedem os limites.

• Gráficos com dados truncados exibem cores consistentes como visto no editor.

12 de outubro de 2023

Melhorias:

• Os valores de filtro de texto contendo caracteres especiais agora são filtrados corretamente nos painéis do Lakeview.

• Novos gráficos suportam @@name rótulos de dados em gráficos de dispersão.

• Formatos de porcentagem personalizados se aplicam a dicas de ferramentas de gráficos agrupados em novos gráficos.

• A interface do usuário da extensão de vinculação do espaço de trabalho é GA.

Correções:

• Renderização de rótulos aprimorada em novos gráficos para evitar que os rótulos se espalhem para fora dos limites do gráfico.
• Aumento do contraste de linhas tick e grid em novos gráficos para melhorar a visibilidade.
• Aumento do espaçamento entre rótulos de eixos para melhorar a legibilidade em novos gráficos.

5 de outubro de 2023

Melhorias:

• Dicas de ferramentas precisas foram adicionadas para ações do modo de publicação e linhagem de data nos painéis do Lakeview.

• A formatação condicional e os modelos de link nas visualizações de tabela do Lakeview agora suportam colunas ocultas.

• Posicionamento otimizado da etiqueta para gráficos temporais de barra larga para melhorar a clareza em novos gráficos.

• A visualização do contador no Lakeview mantém suas transformações mesmo depois que outros campos são removidos, garantindo consistência.

• Passar o mouse sobre uma série em um gráfico agora escurece a série ao redor na dica de ferramenta para melhorar a legibilidade em novos gráficos.

• Novos gráficos usando valores percentuais agora exibem dicas de ferramentas com valores absolutos.

• Adicionado suporte de preenchimento automático para a criação de volumes.

• Fechar uma guia inativa não alterna mais as guias.

• A execução selecionada indica claramente ao realçar o texto.

Correções:

• Texto de mensagem de erro melhorado em Tabelas Dinâmicas quando os dados são truncados.

• Corrigido um erro de renderização em Tabelas Dinâmicas em que as cores não eram exibidas ao usar tipos de dados BigInt.

• Ao baixar PNGs em novos gráficos com vários itens de legenda, remova o símbolo de cor para entradas de legenda de estouro.

• As linhas em novos gráficos manterão uma espessura consistente mesmo no limite de visualização mais alto.

• No Lakeview, se nenhum conjunto de dados existir, o seletor de conjunto de dados no Canvas estará vazio.

• As Tabelas Delta Live são detetadas corretamente pelo SQL Parser e não aparecerão como tabelas inválidas no Navegador de Esquema.

• Dicas de ferramentas foram adicionadas à barra lateral.

28 de setembro de 2023

Melhorias:

• Os painéis publicados do Lakeview agora têm um botão de atualização.

• Mensagens de erro aprimoradas para usuários que não têm acesso a um painel do Lakeview.

• A configuração do filtro nos painéis do Lakeview agora lista os campos válidos na parte superior da lista de seleção.

• O download de um gráfico como PNG a partir de um painel do Lakeview agora mantém o título e a descrição.

• A melhoria do histórico de tabelas delta no Catalog Explorer inclui a adição de filtros para intervalo de datas, usuário e tipo de operação, bem como colunas classificáveis e links embutidos para Trabalhos e Blocos de Anotações associados.

• Suporte ao modo escuro adicionado em legendas, dicas de ferramentas e visualização de tabelas.

Correção:

• As seleções de filtros não são mais limpas ao atualizar um painel do Lakeview.

21 de setembro de 2023

Melhorias:

• O desempenho de renderização da Tabela Dinâmica foi melhorado.
• Novo padrão DuBois para exibições tabulares de linhagem na interface do usuário.

14 de setembro de 2023

Melhoria:

• Os nomes de arquivo agora são preservados ao baixar PNGs em novas visualizações de gráficos. Consulte Novas visualizações de gráficos no Databricks.

7 de setembro de 2023

Databricks SQL versão 2023.40 disponível

Cronograma de distribuição

• Lançamento de pré-visualização para 2023.40: entre 5 de setembro de 2023 e 11 de setembro de 2023
• Lançamento atual para 2023.40: Entre 18 de setembro de 2023 e 25 de setembro de 2023

Alterações em 2023.40:

• As tags agora estão disponíveis com o Catálogo Unity.
• O Databricks Runtime retornará um erro se um arquivo for modificado entre o planejamento e a chamada da consulta.
• Suporte ao driver ODBC/JDBC do Azure Databricks.
• Habilite a rotulagem de colunas de séries temporais.
• Novas funções SQL bitmap.
• Funções de encriptação melhoradas.
• Suporte do Catálogo Unity para REFRESH FOREIGN.
• INSERT BY NAME agora é suportado.
• Partilhe visualizações materializadas com a Delta Sharing.

Atualizações da interface do usuário

Melhorias:

• Novos gráficos estão agora disponíveis, com desempenho de renderização mais rápido, cores bonitas e interatividade aprimorada. Consulte Novas visualizações de gráficos no Databricks.

• Na visualização de gráfico do Perfil de Consulta, agora você pode exibir o tipo de associação em qualquer nó que contenha uma associação no plano de consulta.

• O Data Explorer é renomeado para Catalog Explorer para reconhecer o fato de que você pode usá-lo para trabalhar com todos os objetos protegíveis no Unity Catalog, não apenas com objetos de dados. Consulte O que é o Catalog Explorer?.

• A API de execução de instrução SQL do Databricks agora é GA com Databricks SQL Versão 2023.35 e superior. A API permite que você envie instruções SQL para execução em um armazém SQL Databricks, verifique o status e busque resultados ou cancele uma execução de instrução SQL em execução. Consulte API de execução de instruções.

31 de agosto de 2023

Novo recurso:

• A marcação para o Catálogo Unity está em Visualização pública. Você pode usar tags para simplificar a pesquisa e a descoberta de seus ativos de dados. Consulte Aplicar tags a objetos protegíveis do Unity Catalog.

24 de agosto de 2023

Melhoria:

• O Preenchimento automático para de sugerir recomendações depois de pressionar a barra de espaço.
• O Schema Browser não vê live mais Delta Live Tables como tabelas quebradas.

16 de agosto de 2023

Melhoria:

• A lista suspensa Catálogo no editor SQL agora é fechada quando você alterna entre guias. Anteriormente, quando você trocava de guia, a lista suspensa permanecia aberta.

10 de agosto de 2023

Melhoria:

• O Preenchimento automático agora suporta a nova sintaxe para definir tags do Catálogo Unity. Para obter informações sobre comandos, consulte Referência da linguagem SQL.

3 de agosto de 2023

Melhorias:

• O Editor de Mônaco subjacente agora usa a versão 37.1.
• Suporte de preenchimento automático para SHOW ARCHIVED FILES FOR comandos Delta.

27 de julho de 2023

Melhorias:

• O editor SQL agora é compatível com caracteres de nova linha do Windows, garantindo que a formatação da consulta funcione como esperado em todos os casos.
• Pode abrir a navegação do perfil de consulta a partir dos resultados do bloco de notas. Para consultas, execute sua consulta com o SQL warehouse.

20 de julho de 2023

Databricks SQL versão 2023.35 disponível

Cronograma de distribuição

• Lançamento de pré-visualização para 2023.35: Entre 18 de julho de 2023 e 24 de julho de 2023
• Lançamento atual para 2023.35: Entre 31 de julho de 2023 e 8 de agosto de 2023

Alterações em 2023.35:

• Confiabilidade aprimorada para VACUUM clone superficial no Unity Catalog.
• Suporte para Python UDFs em SQL.
• Delta Lake UniForm for Iceberg está em pré-visualização pública.
• O agrupamento de líquidos do Lago Delta está em Visualização Pública.
• Suporte de arquivo para Delta Lake.
• Suporte à cláusula IDENTIFIER.
• Suporte ao Catálogo Unity para Python e Pandas User-Defined Functions (UDFs).

Melhoria:

• A popularidade da tabela no Catalog Explorer está disponível para todos os usuários do Catálogo Unity.

13 de julho de 2023

Melhoria:

• Os usuários do Catálogo Unity agora podem visualizar informações adicionais da tabela no Gerenciador de Catálogos, como tabelas ingressadas com freqüência, usuários frequentes de uma determinada tabela e blocos de anotações e painéis usados com freqüência.

22 de junho de 2023

Pré-visualização Pública:

• O Databricks SQL agora suporta grandes modelos de linguagem (LLMs) hospedados em pontos de extremidade de serviço de modelo. Ligue ai_query() para acessar seu LLM. Esta função só está disponível no Public Preview no Databricks SQL Pro e Serverless. Para participar do Public Preview, envie o formulário de inscrição do AI Functions Public Preview.

15 de junho de 2023

Novo recurso:

• As tarefas SQL em Jobs agora estão disponíveis ao público em geral. Você pode orquestrar consultas, painéis e alertas na página Trabalhos. Consulte Tarefa SQL para trabalhos.
• Um novo navegador de esquema está agora em Visualização Pública, com uma UX atualizada, uma guia For You e filtros aprimorados. O navegador de esquema está disponível em Databricks SQL, Catalog Explorer e notebooks. Consulte Procurar dados.

8 de junho de 2023

DBSQL versão 2023.30 disponível

Alterações em 2023.30

• Novas funções internas do SQL, como array_prepend(array, elem), try_aes_decrypt(expr, key [, mode [, padding]])e sql_keywords() .
• Agora você pode usar o clone superficial para criar novas tabelas gerenciadas do Unity Catalog a partir de tabelas gerenciadas existentes do Unity Catalog. Consulte Clone superficial para tabelas do Catálogo Unity.
• Agora você pode usar CLONE e CONVERT TO DELTA com tabelas Iceberg que têm partições definidas em colunas truncadas dos tipos int, long, e string. Não há suporte para colunas truncadas do tipo decimal .
• START VERSION agora foi preterido para ALTER SHARE.

Atualizações da interface do usuário

Correção:

• A visualização de contador agora suporta formatação ao usar Big Integers.

1 de junho de 2023

Melhorias:

• Os dados binários agora serão renderizados como uma cadeia de caracteres hexadecimal ao usar o formato de seta.

• Na API de instrução SQL, o formato CSV agora é suportado para a EXTERNAL_LINKS disposição. Isso permite que os clientes extraiam até 100 GiB de dados em formato CSV com URLs pré-assinadas, enquanto o INLINE limite para JSON é de 16 MiB.

• O Azure Databricks SQL Pro está disponível em todas as regiões da China. O SQL Pro agora é o depósito padrão na interface do usuário. O padrão da API ainda é Clássico.

29 de maio de 2023

Novo recurso:

• Agora você pode usar a interface do usuário adicionar dados para carregar dados de um caminho de armazenamento de objetos na nuvem definido como um local externo do Catálogo Unity. Para obter mais informações, consulte Carregar dados usando um local externo do Catálogo Unity.

25 de maio de 2023

Melhorias:

• Agora você pode alternar o painel de resultados de preenchimento automático.
• Desative a tecla enter para que ela não aceite mais sugestões de preenchimento automático. Em Configurações do Usuário DBSQL, clique em Configurações do Editor e, em seguida, em Configurações do Novo Editor. Desativar a tecla Enter aceita sugestões de preenchimento automático.

Correções:

• Os cabeçalhos de tabela classificados agora têm cores.
• As linhas do gráfico agora são renderizadas corretamente.

18 de maio de 2023

Melhoria:

• Na API de instrução SQL, a EXTERNAL_LINKS disposição agora oferece suporte ao JSON_ARRAY formato. Você pode extrair até 100 GiB de dados no formato JSON com URLs pré-assinadas. O INLINE limite para JSON é de 16 MiB.

11 de maio de 2023

Novo recurso:

• O Navegador de Esquema agora está disponível em geral no Gerenciador de Catálogos.

Melhorias:

• A exibição do painel de detalhes da tabela de foco é menos sensível.
• A tecla de escape agora fecha o painel de preenchimento automático.
• As definições de exibição agora têm realce de sintaxe na guia de detalhes do Catalog Explorer.

Correções:

• As tabelas dinâmicas agora são renderizadas corretamente em dispositivos Windows.
• As sugestões de conclusão agora seguem corretamente o caso da primeira palavra-chave.

4 de maio de 2023

Databricks SQL Versão 2023.26 Disponível

Cronograma de distribuição

• Lançamento de pré-visualização para 2023.26: entre 19 de abril de 2023 e 25 de abril de 2023
• Lançamento atual para 2023.26: Entre 3 de maio de 2023 e 10 de maio de 2023

Alterações em 2023.26

• O Photon retorna um erro se um arquivo for modificado entre o planejamento e a execução da consulta.
• Novos recursos e suporte estendido para recursos de E/S preditiva. Consulte Databricks Runtime 13.0 (EoS).
• Use o conector do Azure Databricks para se conectar a outro espaço de trabalho do Azure Databricks.
• CREATE TABLE LIKE para tabelas Delta.
• Novos campos de coluna de metadados que indicam o início e o comprimento do bloco de ficheiros.
• Novas funções geoespaciais H3. Ver funções geoespaciais H3.
• Novas funções internas do SQL. Consulte Databricks Runtime 13.0 (EoS).

Atualizações da interface do usuário

Melhorias:

• Os administradores podem alterar os proprietários do armazém usando a interface do usuário ou a API. Consulte Gerenciar um depósito SQL.
• O Catalog Explorer agora exibe entidades de serviço de conta em listas de usuários para ativos no Unity Catalog. Por exemplo, as entidades de serviço de conta ficam visíveis ao editar privilégios ou alterar proprietários no Gerenciador de Catálogos.
• Os rótulos de gráficos personalizados suportam a capacidade de fazer referência a qualquer coluna dentro do conjunto de dados.
• Os filtros do painel agora carregam nomes de coluna, mesmo ao usar consultas que não têm informações de catálogo ou esquema.

27 de abril de 2023

Melhorias:

• O editor SQL agora depende do editor de Mônaco para uma experiência de edição mais confiável.
• A página de listagem do Histórico do SQL (Consultas) agora inclui o Dubois Design System.

20 de abril de 2023

Melhorias:

• Apresenta novas tabelas dinâmicas que permitem agregar mais de 64 mil resultados.
• As tabelas e visualizações do Databricks SQL agora suportam BigInt, decimais de 38 bits e caracteres não UTF-8. Para números, a configuração padrão agora é precisão de dígitos definida pelo usuário.
• O preenchimento automático agora sugere junções passadas frequentes para tabelas do Unity Catalog, alimentadas por dados de linhagem do Unity Catalog no Databricks Runtime 12.0 e superior.

Novo recurso:

• Retornar texto gerado por um modelo de linguagem grande (LLM) selecionado dado o prompt com ai_generate_text. Esta função só está disponível como visualização pública no Databricks SQL Pro e Serverless. Para participar da visualização pública, preencha e envie o formulário de inscrição do AI Functions Public Preview.

13 de abril de 2023

Novo recurso:

• O TIMESTAMP_NTZ tipo representa valores que compreendem os campos ano, mês, dia, hora, minuto e segundo. Todas as operações são realizadas independentemente do fuso horário. Consulte TIMESTAMP_NTZ tipo.

Melhorias:

• Os usuários agora podem enviar resultados formatados em alertas usando a QUERY_RESULT_TABLE tag em uma mensagem de alertas personalizada.
• Os usuários agora podem visualizar o tamanho dos dados do arquivo para tabelas do Catálogo Unity no Gerenciador de Catálogos.

6 de abril de 2023

Databricks SQL Versão 2023.20 Disponível

Cronograma de distribuição

• Lançamento de pré-visualização para 2023.20: entre 15 de março de 2023 e 23 de março de 2023
• Lançamento atual para 2023.20: Entre 27 de março de 2023 e 3 de abril de 2023

Alterações em 2023.20

• A evolução do esquema Delta Lake suporta a especificação de colunas de origem em instruções de mesclagem.
• Remova todos os elementos NULL de uma matriz usando array_compact.
• Para acrescentar elementos a uma matriz, use array_append.
• Para anonimizar valores de cadeia de caracteres confidenciais, use a função mask.
• As condições de erro comuns agora retornam SQLSTATE.
• Invoque funções geradoras com valor de tabela na cláusula regular FROM de uma consulta.
• Use as from_protobuf funções e to_protobuf para trocar dados entre os tipos binário e struct. Consulte Buffers de protocolo de leitura e gravação.
• Consistência aprimorada para o comportamento de confirmação Delta para transações vazias relacionadas a update, deletee merge comandos.
• Mudança de comportamento
  • O recurso de alias de coluna lateral introduz alterações de comportamento durante a resolução de nomes. Consulte Alterações de comportamento.

Atualizações da interface do usuário

Melhorias:

• O Catalog Explorer agora suporta a exclusão de metastore do Hive.
• A mensagem para o estado inicial do editor de visualização mudou de Colunas obrigatórias ausentes para Sem dados.

3 de abril de 2023

Novo recurso:

• A página Criar ou modificar tabela a partir do carregamento de ficheiros suporta agora carregamentos de ficheiros JSON. Para obter mais informações, consulte Criar ou modificar uma tabela usando o upload de arquivo.

30 de março de 2023

Melhorias:

• Na página de monitoramento de depósito, agora você pode exibir o histórico de consultas para o intervalo de tempo selecionado, juntamente com seus gráficos de escala. Você também pode exibir consultas atualmente em execução e enfileiradas, sessões SQL ativas, o status do depósito e a contagem de cluster atual. Consulte Monitorar um SQL warehouse.
• O agrupamento de mapas agora está desativado por padrão nos mapas de marcadores.
• Foram adicionadas dicas de ferramentas para truncamento de visualização e limites de renderização.

Correções:

• Os gráficos agora respeitam a ordem original quando a classificação é desativada para os valores do eixo e o gráfico tem o grupo por coluna.

23 de março de 2023

Melhorias:

• As visualizações agora suportam a limitação de tempo por semana.
• Total agora calcula todos os dados além das 100 X 100 células até 64k resultados em tabelas dinâmicas de blocos de anotações.
• Os usuários agora podem formatar valores de célula na nova tabela dinâmica de blocos de anotações.
• Linhagem de arquivo, consulta e repositório de recursos estão disponíveis.

16 de Março de 2023

Melhoria:

• Suporte para GROUP BY ALL sintaxe.

9 de março de 2023

Novo recurso:

• A API de Execução de Instrução SQL do Databricks agora está disponível em Visualização Pública. A Execução de Instruções fornece pontos de extremidade que estão executando instruções SQL em um armazém SQL do Databricks. Ele também pode verificar o status, buscar resultados e cancelar uma instrução SQL em execução.

Melhoria:

• O console de administração do SQL foi combinado com as configurações gerais de administração para criar uma experiência unificada para usuários administradores. Todas as configurações de administração do SQL agora são acessadas no console de administração.
• Os destinos de alerta agora são chamados de destinos de notificação.

Correções:

• As tabelas não exibem mais duas barras de rolagem.
• Os títulos de widgets em branco não são mais substituídos nos painéis.

2 de março de 2023

Correção:

• Agora você pode usar URLs relativas em tabelas para acessar painéis.

23 de fevereiro de 2023

Melhoria:

• TINYINT agora é suportado em tabelas de resultados em blocos de anotações.

Correção:

• Corrigido um bug em que a rolagem no modal de filtro do painel de criação resultava em um erro.

16 de fevereiro de 2023

Melhorias:

• Os rótulos de dados nos gráficos agora mostram mais caracteres para evitar truncar descrições.
• O preenchimento automático agora reconhece range() e Python funções UDF create .
• O preenchimento automático agora evita iniciar trechos em decimais e em comentários de código.

Correções:

• Os utilizadores podem agora aumentar o zoom nos mapas.
• Nos blocos de notas, as cores são agora corretamente atribuídas aos gráficos.

2 de fevereiro de 2023

Melhorias:

• Suporte para DESCRIBE DETAILS no editor.
• Velocidade de carregamento do navegador de esquema melhorada.
• Agora você pode visualizar uma lista de colunas possíveis no painel lateral de um SELECT *arquivo .

26 de janeiro de 2023

Melhoria:

• As mensagens de erro da sua consulta agora incluem links para o tópico de documentação relacionado que descreve o erro.

19 de janeiro de 2023

Melhorias:

• Agora você pode encontrar um painel Novidades que destaca os principais aprimoramentos. Você pode abrir e fechar este painel clicando no ícone de presente.
• Os administradores agora podem alterar a propriedade dos armazéns SQL.
• Agora você pode filtrar várias visualizações em um painel clicando em Adicionar>Filtro e selecionando a consulta e as colunas para filtragem.

12 de janeiro de 2023

Melhorias:

• Os títulos dos widgets de visualização nos painéis agora estão formatados como Nome da visualização - Nome da consulta por padrão.
• Adicionadas funções geoespaciais H3 à referência do painel em linha.
• Adicionadas referências embutidas para sintaxe SQL como CREATE TABLE e OVER.

Correções:

• As alternâncias de classificação e inversão agora estão disponíveis quando a escala do eixo X está definida como automática.
• Os mapas de calor e as tabelas dinâmicas agora são responsivos para determinados casos de borda.
• As marcas de escala do eixo Y categórico agora são classificadas por padrão.
• Os rascunhos de consulta não são mais perdidos depois de fazer uma atualização do navegador.

8 de dezembro de 2022

• Os alertas SQL do Azure Databricks agora oferecem suporte a alertas para agregações de colunas de resultados de consulta, como SUM, COUNTe AVG.
• O título de visualização padrão agora é 'VisualizationName - QueryName' ao criar novos widgets em painéis.

17 de novembro de 2022

Alertas:

• O Chatworks, o Mattermost e o Google Hangouts Chat não são mais destinos de notificação.

Melhoria:

• O eixo y agora exibe números como porcentagens ao verificar os valores percentuais.
• A configuração do administrador do espaço de trabalho para desabilitar a interface do usuário de dados de carregamento agora se aplica à nova interface do usuário de dados de carregamento. Essa configuração se aplica às personas Data Science & Engineering, Databricks Mosaic AI e Databricks SQL.

Correções:

• Corrigido um problema nos alertas do Databricks SQL em comparação com valores nulos avaliados incorretamente.
• Corrigido um problema em que as barras de rolagem em tabelas dinâmicas desaparecia.
• Corrigido um problema em que o navegador de esquema não podia ser redimensionado com guias estouradas.

10 de novembro de 2022

Melhoria:

• Agora você pode criar um filtro de painel que funciona em várias consultas ao mesmo tempo. No modo Editar painel, escolha Adicionar, Filtrar e Novo Filtro de Painel.
• O preenchimento automático agora suporta CREATE MATERIALIZED VIEW.

Correção:

• Corrigido um problema em que rolar até o final de um conjunto de resultados paginados do painel enviava um erro.
• Corrigido um problema em que a mudança de um gráfico de barras empilhado para um gráfico de linhas mantinha a propriedade de empilhamento.
• Corrigidas chamadas de busca duplicadas.

3 de novembro de 2022

Melhoria:

• Ao solicitar acesso no Databricks SQL, a permissão padrão agora é "pode ser executado".

Correções:

• Corrigido um problema em que a classificação usando created_at a API Consultas e painéis não retornava a ordem de classificação correta.
• Corrigido um problema em que as colunas que contêm URLs com formatação HTML tinham larguras de coluna excessivamente amplas.
• Corrigido um problema em que WHERE a palavra-chave não era realçada.

27 de outubro de 2022

Melhorias:

• O limite de linhas para transferir resultados de consultas para o Excel foi aumentado de 64.000 linhas para 100.000 linhas. Os limites de download do CSV e TSV permanecem inalterados (cerca de 1 GB de dados).

• O preenchimento automático agora suporta LIST sintaxe, URLs e credenciais.

• Painéis de sugestões Fix-me consolidados e modernizados.

• Um novo tipo de depósito, Databricks SQL Pro, é introduzido para Databricks SQL. Esse tipo de depósito permite que um Databricks SQL Warehouse use integração de trabalhos, federação de consultas, recursos geoespaciais e E/S preditiva.

Correções:

• Corrigido um problema em que o banner de aviso no editor sobrepunha visualizações de altura total.
• Corrigido um problema em que a largura da coluna da tabela não era preservada quando as colunas da tabela eram movidas.
• Corrigido um problema em que o link para o painel em notificações pop-up era quebrado se uma visualização fosse adicionada do editor SQL.

20 de outubro de 2022

Melhorias:

• Agora você pode encontrar a barra de progresso da consulta no rodapé e a edição de uma ação de visualização no menu kebab.
• O preenchimento automático agora suporta viagem no tempo Delta e fornece preenchimento automático de coluna ao definir uma chave estrangeira.

Correção:

• Corrigido um problema em que adicionar várias visualizações a um painel em rápida sucessão resultava em visualizações que não apareciam no painel.

13 de outubro de 2022

Melhorias:

• Agora você pode remover mensagens de erro relatadas.
• COMMENT ON A instrução agora é suportada no editor.
• Agora você pode usar Cmd+P ou Ctr+P (para PC) como um atalho para a pesquisa de topo. Use Cmd+I ou Ctr+I (para PC) para Adicionar parâmetros.

11 de outubro de 2022

Melhorias:

• A interface do usuário add data fornece acesso a configurações comuns de fontes de dados e interfaces do usuário de upload de arquivos. Consulte Carregar ficheiros para o Azure Databricks.
• Você pode carregar pequenos arquivos para o Delta Lake usando uma interface do usuário. Consulte Criar ou modificar uma tabela usando o upload de arquivos.

6 de outubro de 2022

Melhorias:

• EXTERNAL agora é uma propriedade de tabela reservada. Comandos CREATE TABLE ... TBLPROPERTIES e ALTER TABLE ... SET TBLPROPERTIES falha se EXTERNAL for especificado nas propriedades.
• O strfmt in format_string(strfmt, obj, ...) e printf(strfmt, obj, ...) não suporta mais o uso de 0$ como primeiro argumento. O primeiro argumento deve ser referenciado ao 1$ usar um índice de argumento para indicar a posição do argumento na lista de argumentos.
• Os segmentos do gráfico de pizza agora têm uma borda fina para delinear diferentes segmentos.
• Agora você pode usar Cmd+I (para Mac) ou Ctr+I (para PC) como um atalho para Adicionar parâmetro. Use Cmd+P ou Ctr+P (para PC) como atalho para a pesquisa global.
• Um botão de feedback está disponível para mensagens de erro de consulta boas ou ruins.
• As sugestões de Fix me estão agora disponíveis como Quick fix.

Correções:

• lpad e rpad as funções agora funcionam corretamente com BINARY entradas de cadeia de caracteres. A saída de e rpad para BINARY entradas de cadeia de caracteres agora é uma BINARY cadeia de lpad caracteres.
• Corrigido um problema em que as atualizações manuais de alertas não funcionavam.
• Alterações revertidas para o dimensionamento automático do contador para corrigir problemas de formatação.

29 de setembro de 2022

Melhorias:

• Agora você pode solicitar acesso a consultas, alertas e painéis SQL do Databricks dos proprietários desses ativos.
• Agora você pode filtrar por duração da consulta e tipo de instrução na página Histórico de consultas.
  • Para usar o filtro de duração da consulta, insira uma quantidade de tempo e escolha uma unidade de tempo. O resultado do histórico retorna consultas que são executadas por mais tempo do que o tempo especificado.
  • Para usar o filtro de tipo de instrução, escolha um tipo de instrução na lista suspensa. O resultado do histórico retorna consultas contendo essa instrução.

Correção:

• Corrigido um problema em que nem todas as tags HTML suportadas funcionavam em modelos de alerta personalizados. Todas as tags estão disponíveis conforme documentado.
• Corrigido um problema em que a notificação de visualização funcionava do sistema. Por exemplo, clicar duas vezes para reduzir o zoom em uma visualização não era exibido anteriormente.
• Corrigido um problema em que a troca dos eixos em um gráfico não era refletida no nome do gráfico.

22 de setembro de 2022

Melhorias:

• Widgets de contador do mesmo tamanho terão o mesmo tamanho de fonte quando vários widgets de contador forem exibidos em um painel.
• Gráficos de combinação atualizados para que, ao usar eixo duplo, apenas o mesmo tipo de gráfico (por exemplo, linha, barra) possa ser usado no mesmo eixo. Os aliases de série também são aplicados ao eixo.
• Adicionado suporte de preenchimento automático para chaves substitutas e LIST operações.

Correção:

• Corrigido o problema em que os parâmetros de texto não eram aceitos Null como um valor válido.

15 de setembro de 2022

Correção:

• Corrigido um problema em que a visualização do histórico de consultas a partir da página de listagem de armazéns SQL não funcionava.

8 de setembro de 2022

Melhoria:

• Apresentando o novo cartão 'Open Source Integrations' nas homepages DSE/SQL que exibe opções de integração de código aberto, como Delta Live Tables e dbt core.

Correção:

• Corrigido um problema em que os menus suspensos de parâmetros eram bloqueados pela guia de visualização.

1 de setembro de 2022

Melhorias:

• Introdução de uma nova interface do usuário simplificada para adicionar parâmetros e filtros. Escolha e escolha adicionar um filtro ou parâmetro.
• Os parênteses de tokens SQL, como 'OVER()' agora são preenchidos automaticamente.

Correções:

• Corrigido um problema em que a visualização do painel em tela cheia ignorava a paleta de cores.
• Corrigido um problema em que digitar rapidamente e, em seguida, usar o atalho Executar executava o texto da consulta anterior, em vez do texto da consulta recém-digitado.
• Corrigido o problema em que, usando o comando do teclado, ctrl+enter para executar consultas enviava consultas duplicadas.

25 de agosto de 2022

Correção:

• Corrigido um problema em que os filtros do painel não eram atualizados quando os parâmetros de consulta eram alterados.

18 de agosto de 2022

• Para Databricks SQL, o Unity Catalog (Public Preview) está disponível no canal de visualização. Para obter mais informações, consulte O que é o Unity Catalog?.

• Documentação: A documentação da API de alertas foi lançada.

• Visualizações: os usuários agora podem definir valores padrão para filtros de data. Sempre que o filtro é atualizado em uma consulta ou painel, o valor padrão é aplicado.

• Correções:

  • Corrigido um problema em que as alterações de aplicação não funcionavam se um painel ainda estivesse sendo recarregado.
  • Corrigido um problema em que as colunas eram muito estreitas quando uma consulta não devolve resultados.

11 de agosto de 2022

Melhorias:

• Os usuários podem receber e-mails quando suas atualizações falham. Para habilitar essas notificações, navegue até a guia Configurações do SQL do console de administração. Em E-mails de falha, escolha o tipo de objeto (consulta, painel ou alerta) para o qual deseja receber notificações de falha. Os relatórios de falhas são enviados de hora em hora.
• Visualizações
  • Apresentamos uma nova e moderna paleta de cores para visualizações e painéis. Para alterar um painel para a nova paleta de cores, vá para o seu painel, clique em -> -> e selecione a Paleta de Cores Databricks. Os administradores do SQL também podem definir a nova paleta de cores como a opção padrão para um espaço de trabalho acessando - -> do espaço de trabalho -> e selecionando a nova paleta.

Correções:

• Corrigido um problema em que a seleção anterior de para aplicar um filtro não funcionava se uma consulta já estivesse sendo executada.

4 de agosto de 2022

Melhorias:

• Ao clonar um painel, agora há uma opção para saber se as consultas também devem ser clonadas.
• O conteúdo dos separadores é sincronizado nos separadores do navegador. O estado da sua consulta estará agora sincronizado em todos os separadores do navegador. Isso significa que, se você estiver trabalhando em query1 na guia 1 do navegador e, em seguida, alternar para a guia 2 do navegador, você verá query1 no estado em que a deixou enquanto estava na guia original do navegador.

Correção:

• Os rótulos para cadeias de caracteres vazias no gráfico de pizza agora refletem que a cadeia de caracteres está vazia em vez do índice do valor.

28 de julho de 2022

• Alertas
  • Os modelos de e-mail de alerta personalizados foram atualizados para não permitir determinadas tags HTML que podem representar um risco de segurança. Tags e atributos HTML não permitidos são automaticamente limpos. Por exemplo,
  • Os usuários agora podem inscrever outros usuários para alertas sem precisar criar um destino de notificação, que requer permissões de administrador.
• Downloads: Os usuários agora podem baixar até aproximadamente 1 GB de dados de resultados do Databricks SQL em formato CSV e TSV, contra 64.000 linhas anteriormente.
• Visualizações
  • Agora você pode editar visualizações diretamente no painel. No modo de edição, clique no menu kebab e selecione Editar visualização para começar a editar a visualização.
  • Ao baixar resultados associados a uma visualização aproveitando agregações, os resultados baixados também são agregados. A opção para baixar está se movendo do kebab inferior para o kebab associado à guia. Os resultados baixados são da execução mais recente da consulta que criou a visualização.
• Editor SQL: as tabelas de resultados agora exibem uma mensagem quando os dados exibidos pela tabela no navegador foram limitados a 64.000 linhas. O download de TSV e CSV ainda terá até aproximadamente 1 GB de dados.
• Filtros de consulta:
  • Os filtros de consulta foram atualizados para funcionar dinamicamente no lado do cliente ou do servidor para otimizar o desempenho. Os filtros de consulta anteriores (agora legados) operavam apenas no lado do cliente. Os usuários ainda podem usar filtros herdados com a :: sintaxe, se desejarem.
  • Os filtros atualizados são mais simples: os usuários clicam no botão +Adicionar filtro e selecionam uma coluna em uma lista suspensa. Anteriormente, os usuários tinham que modificar o texto da consulta diretamente.
  • Os valores relevantes são realçados para facilitar a visualização de quais seleções dentro de um filtro retornarão resultados dadas outras seleções de filtro.
• Histórico de consultas: os detalhes da consulta no Histórico de Consultas agora mostram a Origem da Consulta, que é a origem da consulta executada.

21 de julho de 2022

• Notificações no compartilhamento: os usuários agora serão notificados por e-mail sempre que um painel, consulta ou alerta for compartilhado com eles.
• Experiência aprimorada do editor SQL por meio do novo kit de ferramentas do editor incorporado
  • Realce de erro de sintaxe em tempo real (por exemplo, palavra-chave errada, tabela não existe e sugestões para corrigir o erro)
  • Ajuda de contexto: em foco (por exemplo, nome completo da tabela, painel de funções detalhado) e mensagens de erro de execução embutida (por exemplo, linha de realce com erro pós-execução)
  • Classificação inteligente de sugestões (por exemplo, preenchimento automático de parâmetros, fórmula de classificação, correspondência menos ruidosa)

14 de julho de 2022

• Agora você pode carregar arquivos TSV usando a interface do usuário, Create Table além de arquivos CSV.
• O Databricks SQL agora oferece a opção de notificar os usuários por e-mail sempre que um painel, consulta ou alerta é compartilhado com eles.
• As tabelas de visualização agora incluem opcionalmente números de linha exibidos ao lado dos resultados.
• Ao selecionar uma região geográfica para a visualização Chloropleth, você obtém dicas embutidas para os valores aceitos.

23 de junho de 2022

• Alteração do nome do ponto de extremidade SQL: o Databricks alterou o nome do ponto de extremidade SQL para o SQL warehouse porque é mais do que apenas um ponto de entrada da API para executar comandos SQL. Um armazém SQL é um recurso de computação para todas as suas necessidades de armazenamento de dados, uma parte integrante da plataforma Databricks. Os recursos de computação são recursos de infraestrutura que proporcionam capacidades de processamento na cloud.
• Para visualizações Choropleth, as seleções de campo Coluna chave e Destino no editor de visualização foram renomeadas para Coluna geográfica e Tipo geográfico. Esta mudança de nome para compreensibilidade não introduz quaisquer mudanças de comportamento em Coropletos novos ou existentes.
• A opção limitar 1000 consultas foi movida de uma caixa de seleção no editor de consultas SQL para uma caixa de seleção no botão executar.
• As consultas em cache na tabela Histórico de Consultas agora são marcadas com uma marca Cache.
• A atualização manual de um painel usa o depósito do painel (se disponível) em vez do depósito de cada consulta individual.
• A atualização de um alerta sempre usa o depósito do alerta, independentemente da configuração Executar como Visualizador/Proprietário.

9 de junho de 2022

• Quando você passa o mouse no seletor de ponto de extremidade, o nome completo do ponto de extremidade é exibido como uma dica de ferramenta.
• Quando você filtra no navegador de esquema do editor SQL, o termo de pesquisa agora é realçado nos resultados da pesquisa.
• A caixa de diálogo Fechar tudo no editor SQL agora exibe uma lista de consultas não salvas.
• Para reabrir a última guia fechada no editor SQL, use este novo atalho de teclado: <Cmd> + <Shift> + <Option> + T
• Agora você pode adicionar rótulos de dados a gráficos de combinação.
• A lista de operações de agregação de visualização agora inclui variância e desvio padrão.

26 de maio de 2022

Melhorias na criação:

• Agora você pode ignorar agregações ao criar visualizações. Isso é particularmente útil quando sua consulta já inclui uma agregação. Por exemplo, se a sua consulta for SELECT AVG(price_per_sqft), isStudio, location GROUP BY location, isStudio, o editor de gráficos anteriormente exigia especificar explicitamente outra camada de agregação.
• Ao criar painéis, você agora tem a capacidade de:
  • Widgets de caixa de texto duplicados
  • Expandir o tamanho do painel de caixa de texto de edição
• A agregação padrão para a coluna de erro quando você cria visualizações é o desvio padrão.

Correções:

• As ações de edição para visualizações só estão disponíveis quando o painel está no modo de edição. As ações de edição não estão mais disponíveis como uma ação do modo de exibição.
• Quando você cria uma nova consulta, ela é aberta em uma guia à direita imediata da guia em foco, em vez de no final da lista.
• O modal de consulta aberta mostra qual consulta já está aberta e fornece a opção de alternar o foco para essa guia de consulta.
• Os gráficos Sankey & Sunburst não tratam mais 0 como nulo.

19 de maio de 2022

• Problema corrigido: Quando você tem o foco do editor SQL aberto em uma guia de visualização específica e compartilha o link para outro usuário, o usuário terá o mesmo foco no editor SQL quando clicar no link compartilhado.
• Melhorias:
  • O Microsoft Teams é agora um destino de notificação suportado.
  • Os parâmetros Intervalo de Datas, Intervalo de Data e Hora e Intervalo de Data e Hora (com segundos) agora suportam a opção de designar o dia inicial da semana, com o domingo como padrão.

12 de maio de 2022

• As visualizações agora suportam a vinculação de tempo diretamente na interface do usuário. Agora você pode alternar facilmente entre compartimentos anuais, mensais, diários ou horários de seus dados alterando um valor suspenso em vez de adicionar e modificar uma date_trunc() função no próprio texto da consulta.
• Os painéis agora têm consistência de cores por padrão. Se tiver a mesma série em vários gráficos, a série terá sempre a mesma cor em todos os gráficos – sem necessitar de qualquer configuração manual.

3 de maio de 2022

• Ao compartilhar um painel com um usuário ou grupo, agora também fornecemos a capacidade de compartilhar todas as consultas upstream usadas por visualizações e parâmetros.
  • Quando você não tiver permissão para compartilhar uma ou mais das consultas upstream, receberá uma mensagem de aviso informando que nem todas as consultas podem ser compartilhadas.
  • As permissões concedidas ao compartilhar um painel não substituem, negam ou expandem as permissões existentes nas consultas upstream. Por exemplo, se um usuário ou grupo tiver permissões CAN RUN como Proprietário no painel compartilhado, mas tiver apenas permissões Executar como Visualizador em uma consulta upstream, as permissões efetivas nessa consulta upstream serão Executar como Visualizador.

27 de abril de 2022

• O layout do painel agora é mantido ao exportar para PDF sob demanda e gerar e-mails de assinatura agendados.

17 de março de 2022

• Gráficos inclui uma nova opção de visualização de combinação. Isso permite que você crie gráficos que incluem barras e linhas.

10 de março de 2022

• O Unity Catalog (Preview) permite que você gerencie a governança e o acesso aos seus dados no nível da conta. Você pode gerenciar metastores e permissões de dados centralmente e atribuir um metastore a vários espaços de trabalho em sua conta. Você pode gerenciar e interagir com dados e objetos do Catálogo Unity usando o Databricks SQL Catalog Explorer ou o editor SQL, e você pode usar dados do Catálogo Unity em painéis e visualizações. Veja O que é o Unity Catalog?.

Nota

O Unity Catalog requer pontos de extremidade SQL para usar a versão 2022.11, que está no canal de visualização.

• O Compartilhamento Delta (Visualização) permite que você compartilhe dados somente leitura com destinatários fora da sua organização. O Databricks SQL suporta consultar dados do Delta Sharing e usá-los em visualizações e painéis.
• Cada vez que um painel é atualizado manualmente ou em uma agenda, todas as consultas no painel e upstream, incluindo aquelas usadas por parâmetros, são atualizadas. Quando uma visualização individual é atualizada, todas as consultas upstream, incluindo aquelas usadas por parâmetros, são atualizadas.

3 de março de 2022

• A visualização da coorte foi atualizada de tal forma que as coortes são interpoladas a partir dos valores min e max em vez de 0 e 100. Agora é muito mais fácil distinguir coortes dentro do intervalo real de dados disponíveis. Anteriormente, se todos os números estivessem próximos, eles usavam a mesma cor. Agora, os números que estão próximos uns dos outros são mais propensos a usar cores diferentes porque a coorte é dividida do intervalo máximo a mínimo para formar cada série.
• É mais fácil ver se uma agenda de assinatura do painel está ativa ou pausada. Quando você clica em Assinar, se a agenda de assinatura do painel estiver pausada, a mensagem Esta agenda foi pausada será exibida. Quando uma agenda de assinatura do painel é pausada, você pode se inscrever ou cancelar a assinatura do painel, mas os instantâneos agendados não são enviados e as visualizações do painel não são atualizadas.
• Quando visualiza o Histórico de Consultas, pode agora ordenar a lista por duração. Por padrão, as consultas são classificadas por hora de início.

24 de fevereiro de 2022

• No Gerenciador de Catálogos, agora você pode exibir as permissões que os usuários ou grupos têm em uma tabela, exibição, esquema ou catálogo. Clique no objeto e, em seguida, clique em Permissões e use a nova caixa de filtro.

17 de fevereiro de 2022

• As visualizações ficaram um pouco mais inteligentes! Quando uma consulta resulta em uma ou duas colunas, um tipo de visualização recomendado é selecionado automaticamente.
• Agora você pode criar histogramas para visualizar a frequência com que cada valor ocorre dentro de um conjunto de dados e para entender se um conjunto de dados tem valores agrupados em torno de um pequeno número de intervalos ou mais espalhados.
• No Histórico de Consultas e no Perfil de Consulta, agora você pode expandir para largura total a cadeia de caracteres de consulta e a mensagem de erro de uma consulta com falha. Isso facilita a análise de planos de consulta e a solução de problemas de consultas com falha.
• Em visualizações de barra, linha, área, pizza e mapa de calor, agora você pode executar a agregação diretamente na interface do usuário de configuração de visualização, sem a necessidade de modificar a consulta em si. Ao aproveitar esses novos recursos, a agregação é executada em todo o conjunto de dados, em vez de ser limitada às primeiras 64.000 linhas. Ao editar uma visualização criada antes desta versão, você verá uma mensagem que diz This visualization uses an old configuration. New visualizations support aggregating data directly within the editor. Se quiser aproveitar os novos recursos, você deve recriar a visualização. Consulte Habilitar agregação em uma visualização.

10 de fevereiro de 2022

• Agora você pode definir uma paleta de cores personalizada para um painel. Todas as visualizações que aparecem nesse painel usarão a paleta especificada. A definição de uma paleta personalizada não afeta como uma visualização aparece em outros painéis ou no editor SQL.

  Você pode especificar valores hexadecimais para uma paleta ou importar cores de outra paleta, seja fornecida pelo Databricks ou criada por um administrador de espaço de trabalho.

  Quando uma paleta é aplicada a um painel, todas as visualizações exibidas nesse painel usarão a paleta de cores selecionada por padrão, mesmo se você configurar cores personalizadas ao criar a visualização. Para substituir esse comportamento, consulte Personalizar cores para uma visualização.

• Os administradores do espaço de trabalho agora podem criar uma paleta de cores personalizada usando o console de administração. Depois que a paleta de cores personalizada é criada, ela pode ser usada em painéis novos e existentes. Para usar uma paleta de cores personalizada para um painel ou personalizá-la, você pode editar as configurações do painel.

• Quando você adiciona uma visualização que usa parâmetros a um painel a partir do menu SQL , a visualização agora usa parâmetros no nível do painel por padrão. Isso corresponde ao comportamento quando você adiciona um widget usando o botão Adicionar visualização em um painel.

• Quando visualiza o histórico de consultas e filtra a lista por uma combinação de parâmetros, o número de consultas correspondentes é agora apresentado.

• Nas visualizações, foi corrigido um problema em que o intervalo do eixo Y não podia ser ajustado para valores específicos.

3 de fevereiro de 2022

• O editor SQL com guias agora está habilitado por padrão para todos os usuários. Para obter mais informações ou desativar o editor com guias, consulte Editar várias consultas.

• Os assinantes de e-mail do painel agora recebem uma imagem embutida mostrando o instantâneo do painel, em vez de um anexo. Um PDF do instantâneo é anexado ao e-mail.

• Agora você pode equilibrar a confiabilidade e os custos configurando a política de instância spot para pontos de extremidade SQL. A política de instâncias spot determina se os trabalhadores usam apenas instâncias sob demanda ou uma combinação de instâncias sob demanda e spot. O custo otimizado (o padrão) usa principalmente instâncias spot e uma instância sob demanda. Confiabilidade otimizada usa apenas instâncias sob demanda. Anteriormente, as instâncias sob demanda eram sempre usadas para pontos de extremidade SQL. Para manter esse comportamento, defina a política de instância spot como Confiabilidade otimizada. Consulte Configurar política de instância spot.

27 de janeiro de 2022

• Foram feitas melhorias na forma como pode visualizar, partilhar e importar o perfil de uma consulta. Consulte Perfil de consulta.

• A visualização Detalhes agora permite renomear colunas da mesma forma que a visualização Tabela.

• Agora você pode fechar uma guia no editor SQL clicando nela pelo meio.

• Os seguintes atalhos de teclado foram adicionados ao editor SQL com guias:

  • Feche todos os separadores: Cmd+Option+Shift+A (macOS) / Ctrl+Option+Shift+A (Windows)
  • Feche outros separadores: Cmd+Option+Shift+W (macOS) / Ctrl+Option+Shift+W (Windows)

  Esses atalhos de teclado fornecem uma alternativa para clicar com o botão direito do mouse em uma guia para acessar as mesmas ações. Para exibir todos os atalhos de teclado, clique no ícone Teclado no editor SQL com guias.

20 de janeiro de 2022

• A formatação padrão para tipos de dados inteiros e flutuantes em tabelas foi atualizada para não incluir vírgulas. Isso significa que, por padrão, valores como 10002343 não terão mais vírgulas. Para formatar esses tipos para exibição com vírgulas, clique em Editar Visualização, expanda a área da coluna e modifique o formato para incluir uma vírgula.
• Para melhor se alinhar com os limites de renderização do navegador, as visualizações agora exibem um máximo de 10.000 pontos de dados. Por exemplo, um gráfico de dispersão exibirá um máximo de 10.000 pontos. Se o número de pontos de dados tiver sido limitado, será exibido um aviso.

13 de janeiro de 2022

• Corrigimos um problema em que o botão Salvar no editor SQL às vezes era desativado. O botão Salvar agora está sempre ativado e inclui um asterisco (*) quando alterações não salvas são detetadas.

15 de dezembro de 2021

• Databricks SQL está geralmente disponível. Isso representa um marco importante no fornecimento da primeira plataforma lakehouse que unifica cargas de trabalho de dados, IA e BI em um só lugar. Com o GA, você pode esperar o mais alto nível de estabilidade, suporte e prontidão empresarial do Databricks para cargas de trabalho de missão crítica. Leia o blog de anúncio da AG para saber mais.
• Os alertas agora são agendados independentemente das consultas. Quando você cria um novo alerta e cria uma consulta, você também é solicitado a criar uma agenda para o alerta. Se você tinha um alerta existente, duplicamos o agendamento da consulta original. Essa alteração também permite que você defina alertas para as consultas Executar como Proprietário e Executar como Visualizador . Executar como Proprietário As consultas são executadas na agenda de alerta designada com a credencial do proprietário da consulta. Executar como consultas do Visualizador são executadas na agenda de alerta designada com a credencial do criador do alerta. Consulte O que são alertas Databricks SQL? e Agendar uma consulta.
• Agora você pode reordenar parâmetros no editor SQL e em painéis.
• A documentação para criar visualizações de mapa de calor foi expandida. Consulte Opções de mapa de calor.

9 de dezembro de 2021

• Ao criar uma visualização de tabela, agora você pode definir a cor da fonte de uma coluna como um valor estático ou um intervalo de valores com base nos valores do campo da coluna. O valor literal é comparado com o limiar. Por exemplo, para colorir resultados cujos valores excedam 500000, crie o limite > 500000, em vez de > 500,000. Consulte Formatar condicionalmente cores de coluna.
• Os ícones no navegador de esquema do editor SQL com guias agora permitem que você distinga entre tabelas e exibições.

1 de dezembro de 2021

• Agora você pode aplicar parâmetros de configuração SQL no nível do espaço de trabalho. Esses parâmetros se aplicam automaticamente a todos os pontos de extremidade SQL novos e existentes no espaço de trabalho. Consulte Configurar parâmetros SQL.

18 de novembro de 2021

• Ao exibir o histórico de uma consulta, agora você pode filtrar consultas na entidade de serviço que as executou. Consulte Ver histórico de consultas.

• Agora você pode abrir o editor SQL usando um atalho na barra lateral. Para abrir o editor SQL, clique em Editor SQL.

• Se você tiver permissão para criar clusters de Ciência de Dados & Engenharia, agora poderá criar pontos de extremidade SQL clicando em Criar na barra lateral e clicando em Ponto de Extremidade SQL.

• Os administradores agora podem transferir a propriedade de uma consulta, painel ou alerta para um usuário diferente por meio da interface do usuário. Veja:

  • Transferir a propriedade de uma consulta
  • Transferir a propriedade de um painel herdado
  • Transferir a propriedade de um alerta

4 de novembro de 2021

• Em uma visualização de Mapa (Choropleth), o número máximo de etapas de gradiente para cores na legenda foi aumentado de 11 para 20. O padrão é 5 etapas de gradiente, incluindo a cor mínima e a cor máxima.
• O editor SQL com guias agora oferece suporte ao gerenciamento de guias em massa. Se clicar com o botão direito do rato num separador, verá a opção Fechar outros, Fechar à esquerda, Fechar à direita e Fechar tudo. Observe que, se você clicar com o botão direito do mouse na primeira ou na última guia, não verá as opções para Fechar à esquerda ou Fechar à direita.

28 de outubro de 2021

• Ao exibir uma tabela no Gerenciador de Catálogos, você tem duas opções para simplificar a interação com a tabela:
  • Clique em Criar > consulta para criar uma consulta que seleciona todas as colunas e retorna as primeiras 1000 linhas.
  • Clique em Criar > Painel Rápido para abrir uma página de configuração onde você pode selecionar colunas de interesse e criar um painel e consultas de suporte que forneçam algumas informações básicas usando essas colunas e mostrem parâmetros no nível do painel e outros recursos.

19 de outubro de 2021

• Novos atalhos de teclado estão agora disponíveis no editor com separadores:
  • Abrir novo separador:
    • Windows: Cmd+Alt+T
    • Mac: Cmd+Option+T
  • Fechar separador atual
    • Windows: Cmd+Alt+W
    • Mac: Cmd+Option+W
  • Abrir caixa de diálogo de consulta
    • Windows: Cmd+Alt+O
    • Mac: Cmd+Option+O

23 de setembro de 2021

• Agora você pode criar um novo painel clonando um painel existente, desde que tenha a permissão PODE EXECUTAR, PODE EDITAR e PODE GERENCIAR no painel e em todas as consultas upstream. Consulte Clonar um painel herdado.
• Agora você pode usar GROUP BY em uma visualização com várias colunas do eixo Y. Consulte Gráfico de dispersão.
• Agora você pode usar {{ @@yPercent}} para formatar rótulos de dados em um gráfico de barras empilhadas não normalizado. Consulte Gráfico de barras.
• Se você usar a autenticação SAML e sua credencial SAML expirar dentro de alguns minutos, você será solicitado proativamente a fazer login novamente antes de executar uma consulta ou atualizar um painel. Isso ajuda a evitar interrupções devido a uma credencial que expira durante a execução da consulta.

20 de setembro de 2021

• Agora você pode transferir a propriedade de painéis, consultas e alertas usando a API REST de Permissões. Consulte Consultar ACLs.

16 de setembro de 2021

• Nos resultados da consulta, BIGINT os resultados agora são serializados como cadeias de caracteres quando maiores que 9007199254740991. Isso corrige um problema em que BIGINT os resultados podiam ser truncados nos resultados da consulta. Outros resultados inteiros ainda são serializados como números. A formatação de números em rótulos de eixos e dicas de ferramentas não se aplica a BIGINT resultados serializados como cadeias de caracteres. Para obter mais informações sobre tipos de dados no Databricks SQL, consulte Tipo BIGINT.

7 de setembro de 2021

A Databricks está implementando as mudanças que se seguem ao longo de uma semana. Seu espaço de trabalho pode não estar habilitado para essas alterações até depois de 7 de setembro.

• O Databricks SQL agora está em Visualização Pública e habilitado para todos os usuários em novos espaços de trabalho.

  Nota

  Se seu espaço de trabalho foi habilitado para Databricks SQL durante a Visualização Pública, ou seja, antes da semana que começa em 7 de setembro de 2021, os usuários mantêm o direito atribuído antes dessa data, a menos que você o altere. Em outras palavras, se um usuário não teve acesso ao Databricks SQL durante a Visualização Pública, ele não o terá agora, a menos que um administrador o forneça a ele.

• Os administradores podem gerenciar quais usuários têm acesso ao Databricks SQL atribuindo o direito de acesso ao Databricks SQL (databricks-sql-accessna API) a usuários ou grupos. Por padrão, novos usuários têm esse direito.

  Os administradores podem limitar um usuário ou grupo a acessar apenas o Databricks SQL e impedi-los de acessar Data Science & Engineering ou Databricks Mosaic AI removendo o direito de Acesso ao Espaço de Trabalho (workspace-accessna API) do usuário ou grupo. Por padrão, novos usuários têm esse direito.

  Importante

  Para fazer logon e acessar o Azure Databricks, um usuário deve ter o direito de acesso ao Databricks SQL ou ao espaço de trabalho (ou ambos).

• Um pequeno ponto de extremidade SQL clássico chamado Starter Endpoint é pré-configurado em todos os espaços de trabalho, para que você possa começar a criar painéis, visualizações e consultas imediatamente. Para lidar com cargas de trabalho mais complexas, você pode facilmente aumentar seu tamanho (para reduzir a latência) ou o número de clusters subjacentes (para lidar com mais usuários simultâneos). Para gerenciar custos, o ponto de extremidade inicial é configurado para encerrar após 120 minutos ocioso.

• Para ajudá-lo a começar a trabalhar rapidamente, uma nova experiência de integração guiada está disponível para administradores e usuários. O painel de integração é visível por padrão, e você sempre pode ver quantas tarefas de integração restam na barra lateral. Clique nas tarefas à esquerda para reabrir o painel de integração.

• Você pode começar a usar o Databricks SQL rapidamente com dois conjuntos de dados avançados em um catálogo somente leitura chamado SAMPLES, que está disponível em todos os espaços de trabalho. Ao aprender sobre o Databricks SQL, você pode usar esses esquemas para criar consultas, visualizações e painéis. Nenhuma configuração é necessária e todos os usuários têm acesso a esses esquemas.

  • O nyctaxi esquema contém dados de viagem de trips táxi na tabela.
  • O tpch esquema contém dados de receita de varejo e cadeia de suprimentos nas tabelas a seguir:
    • customer
    • lineitem
    • nation
    • orders
    • part
    • partsupp
    • region
    • supplier

  Clique em Executar sua primeira consulta no painel de integração para gerar uma nova consulta do nyctaxi esquema.

• Para saber mais sobre como visualizar dados no Databricks SQL sem necessidade de configuração, você pode importar painéis da Galeria de Exemplos de Painel. Esses painéis são alimentados pelos conjuntos de dados no SAMPLES catálogo.

  Para exibir a Galeria de Exemplos de Painel, clique em Importar painel de exemplo no painel de integração.

• Agora você pode criar e soltar funções SQL nativas usando os comandos CREATE FUNCTION e DROP FUNCTION .

2 de setembro de 2021

• Os usuários com a permissão CAN EDIT em um painel agora podem gerenciar a agenda de atualização e a lista de assinaturas do painel. Anteriormente, a permissão CAN MANAGE era necessária. Para obter mais informações, consulte Atualizar automaticamente um painel.

• Por padrão, as visualizações não são mais redimensionadas dinamicamente com base no número de resultados retornados, mas mantêm a mesma altura, independentemente do número de resultados. Para retornar ao comportamento anterior e configurar uma visualização para redimensionar dinamicamente, habilite Redimensionar dinamicamente a altura do painel nas configurações da visualização no painel. Para obter mais informações, consulte Opções de tabela.

• Se você tiver acesso a mais de um espaço de trabalho na mesma conta, poderá alternar espaços de trabalho de dentro do Databricks SQL. Clique no canto inferior esquerdo do seu espaço de trabalho do Azure Databricks e, em seguida, selecione um espaço de trabalho para alternar para ele.

12 de agosto de 2021

• Agora, um administrador pode encerrar a consulta de outro usuário enquanto ela está em execução. Para obter mais informações, consulte Encerrar uma consulta em execução.

05 de agosto de 2021

• Formatação de resultados melhorada EXPLAIN
  • Explicar os resultados é mais fácil de ler
  • Formatado como monoespaçado sem quebra automática de linha

29 de julho de 2021

• Fazer malabarismos com várias consultas ficou mais fácil com o suporte para várias guias no editor de consultas. Para usar o editor com guias, consulte Editar várias consultas.

08 de julho de 2021

• Os widgets de visualização em painéis agora têm títulos e descrições para que você possa adaptar o título e a descrição das visualizações usadas em vários painéis ao próprio painel.
• A barra lateral foi atualizada para melhorar a visibilidade e a navegação:
  • Os armazéns agora são Pontos de Extremidade SQL e o Histórico é renomeado para Histórico de Consultas.
  • As configurações da conta (anteriormente chamadas de Usuários) foram movidas para Conta. Ao selecionar Conta, você pode alterar o espaço de trabalho do Azure Databricks e fazer logout.
  • As configurações do usuário foram movidas para Configurações e divididas em Configurações e SQL Admin Console. O SQL Admin Console é visível apenas para administradores.
  • O ícone de ajuda foi alterado para Ajuda.

01 de julho de 2021

• O novo Catalog Explorer permite que você explore e gerencie facilmente permissões em bancos de dados e tabelas. Os usuários podem exibir detalhes do esquema, visualizar dados de exemplo e ver detalhes e propriedades da tabela. Os administradores podem exibir e alterar proprietários de objetos de dados e os proprietários de objetos de dados podem conceder e revogar permissões. Para obter detalhes, consulte O que é o Catalog Explorer?.
• Os eixos Y nos gráficos horizontais foram atualizados para refletir a mesma ordem das tabelas. Se você selecionou anteriormente a ordem inversa, você pode usar a alternância Ordem inversa na guia eixo Y para reverter a nova ordem.

23 de junho de 2021

• Configure facilmente pontos de extremidade SQL com entidades de serviço. Agora há um controle que ajuda você a configurar uma entidade de serviço na configuração global de pontos de extremidade SQL. Consulte Configurar uma entidade de serviço.
• As visualizações temporárias agora são suportadas.

17 de junho de 2021

• Photon, o novo mecanismo de execução vetorizada do Databricks, agora está ativado por padrão para pontos de extremidade SQL recém-criados (interface do usuário e API REST). O fóton acelera de forma transparente
  • Escreve nas tabelas Parquet e Delta.
  • Muitas consultas SQL. Consulte Limitações.
• Gerencie facilmente usuários e grupos com CREATE GROUP, DROP GROUP, ALTER GROUP, SHOW GROUPSe SHOW USERS comandos. Para obter detalhes, consulte Instruções de segurança e Mostrar instruções.
• O navegador de esquemas do editor de consultas é mais rápido e rápido em esquemas com mais de 100 tabelas. Em tais esquemas, o navegador de esquema não carregará todas as colunas automaticamente; A lista de tabelas ainda é exibida normalmente, mas as colunas são carregadas somente quando você clica em uma tabela. Essa alteração afeta o preenchimento automático da consulta no editor de consultas, pois depende dessas informações para mostrar sugestões. Até que você expanda uma tabela e carregue suas colunas, essas sugestões não estarão disponíveis.

03 de junho de 2021

• Os administradores de espaços de trabalho do Azure Databricks recém-habilitados agora recebem o direito ao Databricks SQL por padrão e não precisam mais conceder a si mesmos o direito de acesso ao Databricks SQL usando o console de administração.
• O Photon agora está em visualização pública e habilitado por padrão para novos pontos de extremidade SQL.
• O balanceamento de carga de vários clusters agora está em visualização pública.
• Agora você pode habilitar a colaboração em painéis e consultas com outros membros da sua organização usando a permissão CAN EDIT. Consulte Listas de controle de acesso.

26 de maio de 2021

• O SQL Analytics é renomeado para Databricks SQL. Essa alteração tem os seguintes impactos voltados para o cliente:

  • As referências na interface do usuário da Web foram atualizadas.

  • O direito de conceder acesso ao Databricks SQL foi renomeado:

    • UI: Acesso ao Databricks SQL (anteriormente acesso ao SQL Analytics)
    • API SCIM:databricks-sql-access (anteriormente sql-analytics-access)

    Usuários, grupos e entidades de serviço com o direito anterior foram migrados para o novo direito.

  • As tags para eventos de log de auditoria relacionados ao Databricks SQL foram alteradas:

    • O prefixo para eventos Databricks SQL agora é databrickssql.
    • changeSqlAnalyticsAcl é agora changeDatabricksSqlAcl.
• Atualizações do painel
  • O nome do arquivo de exportação do painel foi atualizado para ser o nome do painel + carimbo de data/hora, em vez de um UUID.
  • O limite de registros de exportação foi aumentado de 22k para 64k.

20 de maio de 2021

• Agora você pode usar sua própria chave do Azure Key Vault para criptografar as consultas SQL, o Databricks e o histórico de consultas armazenados no Azure Databricks. Se você já configurou sua própria chave para um espaço de trabalho para criptografar dados para serviços gerenciados (blocos de anotações e segredos), nenhuma ação adicional será necessária. A mesma chave gerenciada pelo cliente para serviços gerenciados agora também criptografa as consultas SQL do Databricks e o histórico de consultas. Consulte Chaves gerenciadas pelo cliente para serviços gerenciados. Essa alteração afeta apenas os novos dados armazenados em repouso. Não é garantido que as consultas SQL do Databricks e o histórico de consultas que foram armazenados antes de hoje sejam criptografados com essa chave.

  Os resultados da consulta SQL do Databricks são armazenados em sua instância raiz de armazenamento de Blob do Azure que o Azure Databricks criou durante a configuração do espaço de trabalho e não são criptografados pela sua chave de serviços gerenciados. No entanto, você pode usar sua própria chave para criptografá-los. Consulte Chaves gerenciadas pelo cliente para raiz DBFS.

  Esta funcionalidade está disponível com o plano Premium.

• A guia Execuções passadas agora mostra o tempo relativo.

13 de maio de 2021

• O Databricks SQL não tenta mais adivinhar tipos de coluna. Anteriormente, uma coluna com o formato xxxx-yy-dd era automaticamente tratada como uma data, mesmo que fosse um código de identificação. Agora, essa coluna não é mais tratada automaticamente como uma data. Você deve especificar isso na consulta, se desejar. Essa alteração pode fazer com que algumas visualizações que dependiam do comportamento anterior não funcionem mais. Nesta versão, você pode alterar >a opção Configurações>de compatibilidade com versões anteriores para retornar ao comportamento anterior. Em uma versão futura, removeremos essa capacidade.

• O editor de consultas agora tem um indicador de progresso da consulta. As alterações de estado agora são visíveis em uma barra de progresso continuamente atualizada.

  

06 de maio de 2021

• Agora você pode baixar o conteúdo do painel como um PDF. Consulte Download como PDF.

• Um usuário administrador agora tem acesso de visualização a todas as consultas e painéis. Nessa exibição, um administrador pode visualizar e excluir qualquer consulta ou painel. No entanto, o administrador não pode editar a consulta ou o painel se ele não for compartilhado com o administrador. Consulte Visualização de administrador de consulta e modo de exibição de administrador de painel herdado.

• A capacidade de aumentar a simultaneidade de pontos finais com o balanceamento de carga de vários clusters agora está disponível para todas as contas. Você pode criar pontos de extremidade que são dimensionados automaticamente entre as contagens de cluster mínima e máxima especificadas. Os pontos de extremidade sobrecarregados aumentarão e os pontos de extremidade subcarregados diminuirão.

29 de abril de 2021

• As opções de consulta e os detalhes agora estão organizados em um conjunto de guias à esquerda do editor de consultas:

  • Fontes de dados: selecione entre as fontes de dados e o esquema disponíveis. Consulte Criar uma consulta.

    

  • Execuções anteriores: Visualize execuções anteriores executadas no editor SQL. Isso não mostra execuções agendadas. Consulte Escrever consultas e explorar dados no editor SQL.

    

  • Informações da consulta: defina a descrição da consulta, exiba informações sobre a consulta e defina a agenda de atualização. Consulte Escrever consultas e explorar dados no editor SQL e Agendar uma consulta.

    

22 de abril de 2021

• Corrigido um problema em que os pontos de extremidade estavam inacessíveis e pareciam ter sido excluídos devido a um erro interno.

16 de abril de 2021

O Databricks SQL mantém a compatibilidade com a semântica do Apache Spark SQL. Esta versão atualiza a semântica para corresponder às do Apache Spark 3.1. Anteriormente, o Databricks SQL estava alinhado à semântica do Apache Spark 3.0.

• As funções de agregação estatística, incluindo std, stddev, , stddev_samp, variance, skewnessvar_samp, kurtosis, covar_samp, e corr, retornam NULL em vez de quando DivideByZero ocorre durante a avaliação da expressão, por exemplo, quando stddev_samp aplicadas em um único conjunto de Double.NaN elementos. Antes deste lançamento, ele retornaria Double.NaN.
• grouping_id() Devolve valores longos. Antes desta versão, esta função retornava valores int.
• O plano de consulta explicar os resultados agora está formatado.
• from_unixtime, unix_timestamp,to_unix_timestamp, to_timestamp, e to_date falhará se o padrão datetime especificado for inválido. Antes deste lançamento, eles retornaram NULL.
• As fontes de dados Parquet, ORC, Avro e JSON lançam a exceção org.apache.spark.sql.AnalysisException: "Coluna(s) duplicada(s) encontrada(s) no esquema de dados em leitura se detetarem nomes duplicados em colunas de nível superior, bem como em estruturas aninhadas."
• Structs e mapas são envolvidos pelos {} colchetes em strings. Por exemplo, a show() ação e a CAST expressão usam esses parênteses. Antes desta versão, os parênteses d eram usados para o mesmo fim.
• Elementos NULL de estruturas, matrizes e mapas são convertidos em "null" ao convertê-los em strings. Antes desta versão, NULL os elementos eram convertidos em cadeias de caracteres vazias.
• A soma dos estouros de coluna do tipo decimal retorna null. Antes desta versão, no caso, a soma da coluna de tipo decimal pode retornar resultado nulo ou incorreto, ou até mesmo falha no tempo de execução (dependendo da execução real do plano de consulta).
• IllegalArgumentException é retornado para os literais de intervalo incompletos, por exemplo, INTERVAL '1', , INTERVAL '1 DAY 2'que são inválidos. Antes desta versão, esses literais resultam em NULLs.
• O carregamento e o salvamento de carimbos de data/hora de e para arquivos do Parquet falham se os carimbos de data/hora forem anteriores 1900-01-01 00:00:00Ze carregados (salvos) como o INT96 tipo. Antes deste lançamento, as ações não falham, mas podem levar à mudança dos carimbos de data/hora de entrada devido à redefinição de base de/para Juliano para/do calendário gregoriano proléptico.
• As schema_of_json funções e schema_of_csv retornam o esquema no formato SQL no qual os nomes de campo são citados. Antes desta versão, a função retorna uma cadeia de caracteres de catálogo sem aspas de campo e em minúsculas.
• CHAR,CHARACTER, e VARCHAR tipos são suportados no esquema de tabela. A varredura e a inserção da tabela respeitam a semântica char/varchar. Se char/varchar for usado em locais diferentes do esquema de tabela, uma exceção será lançada (CAST é uma exceção que simplesmente trata char/varchar como string como antes).
• As seguintes exceções são lançadas para tabelas do catálogo externo do Hive:
  • ALTER TABLE .. ADD PARTITIONPartitionsAlreadyExistException lança se já existir uma nova partição.
  • ALTER TABLE .. DROP PARTITIONNoSuchPartitionsException lança para partições não existentes.

13 de abril de 2021

• Taxa de transferência de consulta aprimorada com enfileiramento de ponto de extremidade SQL. As consultas enviadas a um ponto de extremidade SQL agora entram em fila quando o ponto de extremidade já está saturado com consultas em execução. Isso melhora a taxa de transferência da consulta, não sobrecarregando o ponto de extremidade com solicitações. Você pode visualizar o desempenho aprimorado na tela de monitoramento de endpoint.

01 de abril de 2021

• Encontre rapidamente o tempo gasto na compilação, execução e busca de resultados para uma consulta no Histórico de Consultas. Consulte Perfil de consulta. Anteriormente, essas informações só estavam disponíveis clicando em uma consulta e abrindo a guia Detalhes da Execução.
• Os pontos de extremidade SQL não são mais dimensionados além do máximo de clusters especificados. Todos os clusters alocados para um ponto de extremidade SQL são reciclados após 24 horas, o que pode criar uma breve janela na qual há um cluster adicional.

18 de março de 2021

• O preenchimento automático no editor de consultas agora oferece suporte à sintaxe SQL do Databricks e reconhece contexto e alias. Consulte Criar uma consulta.
• As solicitações JDBC e ODBC não falham mais com erros de sessão inválidos depois que a sessão expira no servidor. Os clientes de BI agora podem se recuperar perfeitamente quando ocorrem tempos limite de sessão.

11 de março de 2021

• Os administradores e usuários em espaços de trabalho recém-habilitados para o Databricks SQL não têm mais acesso automático ao Databricks SQL. Para habilitar o acesso ao Databricks SQL, o administrador deve:
  1. Vá para a página de configurações de administrador.
  2. Clique na guia Usuários .
  3. Na linha da conta, clique na caixa de seleção Acesso ao Databricks SQL .
  4. Clique em Confirmar.
  5. Repita as etapas 3 e 4 para conceder aos usuários acesso ao Databricks SQL ou conceder acesso a grupos.
• Crie facilmente consultas, painéis e alertas selecionando Novo > [Consulta | Painel | Alerta] na parte superior da barra lateral.
• O Editor de Consultas agora salva rascunhos e você pode reverter para uma consulta salva. Consulte Escrever consultas e explorar dados no editor SQL.
• Não é mais possível criar fontes de dados externas.
• A confiabilidade do gráfico de monitoramento de ponto de extremidade SQL foi melhorada. O gráfico não mostra mais mensagens de erro espúrias intermitentemente.

04 de março de 2021

• A documentação da API de Consultas, Painéis e Alertas já está disponível. Consulte Referência da API REST do Databricks.

• As atualizações agendadas do painel agora são sempre executadas. As atualizações são realizadas no aplicativo Web, portanto, você não precisa mais manter o painel aberto em um navegador. Consulte Atualizar automaticamente um painel.

• Os novos pontos de extremidade SQL criados usando a API do SQL Warehouse agora têm a Parada Automática habilitada com um tempo limite padrão de duas horas.

• Os usuários do Tableau Online agora podem se conectar a pontos de extremidade SQL. Veja o novo guia de início rápido do Tableau Online.

26 de fevereiro de 2021

O novo conector do Power BI para Azure Databricks, lançado em pré-visualização pública em setembro de 2020, é agora GA. Fornece:

• Configuração de conexão simples: o novo conector Power BI Azure Databricks é integrado ao Power BI e você o configura usando uma caixa de diálogo simples com alguns cliques.
• Autenticação baseada em credenciais do Microsoft Entra ID — não é mais necessário que os administradores configurem tokens PAT.
• Importações mais rápidas e chamadas de metadados otimizadas, graças ao novo driver ODBC do Azure Databricks, que vem com melhorias significativas de desempenho.
• O acesso aos dados do Azure Databricks através do Power BI respeita o controlo de acesso à tabela do Azure Databricks e as permissões da conta de armazenamento do Azure associadas à sua identidade de ID do Microsoft Entra.

Para obter mais informações, consulte Conectar o Power BI ao Azure Databricks.

25 de fevereiro de 2021

• Definir permissões em um ponto de extremidade SQL agora é mais rápido. É uma etapa logo após a criação de um novo ponto de extremidade SQL e facilmente acessível quando você edita um ponto de extremidade existente. Consulte Conectar-se a um SQL warehouse e Gerenciar um SQL warehouse.
• Para reutilizar as configurações de visualização, agora você pode duplicar uma visualização. Consulte Clonar uma visualização.
• Os resultados da consulta agora são armazenados em sua conta em vez da conta do Azure Databricks.
• Para evitar o vazamento de informações listando todas as permissões definidas em um objeto, para executar SHOW GRANTS [<user>] <object> você deve ser:
  • Um administrador do Databricks SQL ou o proprietário do <object>.
  • O usuário especificado em [<user>].

7 de janeiro de 2021

• Para reduzir as despesas em pontos finais inativos, os novos pontos finais de SQL têm, agora, a Paragem Automática ativada com um tempo limite predefinido de duas horas. Quando o tempo limite for atingido, o ponto final é interrompido. Pode editar o período do tempo limite ou desativar a Paragem Automática a qualquer momento.
• Com a exceção dos parâmetros de consulta do tipo TEXT, as aspas deixaram de ser adicionadas aos parâmetros de consulta. Se tiver utilizado Dropdown List, Query Based Dropdown List ou quaisquer parâmetros de consulta do tipo Date, tem de adicionar aspas para que a consulta funcione. Por exemplo, se a consulta for SELECT {{ d }}, então, agora, esta consulta tem de ser SELECT '{{ d }}'.

18 de novembro de 2020

A Databricks tem o prazer de apresentar o Public Preview of Databricks SQL, um ambiente intuitivo para executar consultas ad-hoc e criar painéis sobre dados armazenados em seu data lake. O Databricks SQL capacita sua organização a operar uma arquitetura lakehouse multinuvem que fornece desempenho de armazenamento de dados com economia de data lake. Databricks SQL:

• Integra-se nas ferramentas de BI que já utiliza, como o Tableau e o Microsoft Power BI, para consultar os dados mais completos e recentes no seu data lake.
• Complementa as ferramentas de BI existentes com uma interface nativa de SQL através da qual os analistas de dados e os cientistas de dados podem consultar dados de data lakes diretamente com o Azure Databricks.
• Permite-lhe partilhar informações de consultas através de visualizações ricas e de dashboards de arrastar e largar com alertas automáticos para alterações importantes a dados.
• Usa o Connect to a um SQL warehouse para trazer confiabilidade, qualidade, escala, segurança e desempenho ao seu data lake, para que você possa executar cargas de trabalho de análise tradicionais usando seus dados mais recentes e completos.
• Introduz o privilégio para simplificar a administração de USAGE acesso a dados. Para usar um objeto em um esquema, você deve receber o privilégio USAGE nesse esquema, além de quaisquer privilégios necessários para executar a ação. O USAGE privilégio pode ser concedido a esquemas ou ao catálogo. Relativamente a áreas de trabalho que já utilizam o controlo de acesso a tabelas, o privilégio USAGE é concedido automaticamente ao grupo de utilizadores na raiz CATALOG. Consulte Privilégios de metastore do Hive e objetos protegíveis (legado) para obter detalhes.

Consulte O que é armazenamento de dados no Azure Databricks? para obter detalhes.

Problemas corrigidos

• Editor SQL. O editor SQL agora persistirá o texto selecionado e a posição de rolagem ao alternar entre guias de consulta.
• Editor SQL. Se você clicar em 'Executar' em uma consulta no editor SQL, navegue para outra página e retorne enquanto a consulta ainda estiver em execução, o editor exibirá o estado correto da consulta. Se a consulta for concluída enquanto você estiver em outra página, os resultados da consulta estarão disponíveis ao retornar à página do editor SQL.
• Agora você pode usar o MySQL 8.0 como um metastore externo.
• DESCRIBE DETAIL comandos em tabelas Delta não falham mais com java.lang.ClassCastException: java.sql.Timestamp cannot be cast to java.time.Instant.
• A leitura de arquivos do Parquet com INT96 carimbos de data/hora não falha mais.
• Quando um usuário tem a permissão CAN RUN em uma consulta e a executa, se a consulta foi criada por outro usuário, o histórico de consultas exibe o executor da consulta como o usuário.
• Os valores nulos agora são ignorados ao renderizar um gráfico, melhorando a usabilidade dos gráficos. Por exemplo, anteriormente, as barras em um gráfico de barras pareciam muito pequenas quando valores nulos estavam presentes. Agora, os eixos são definidos com base apenas em valores não nulos.

Problemas conhecidos

• As leituras de origens de dados que não do Data Lake nos pontos finais SQL multicluster com carga balanceada podem ser inconsistentes.
• As tabelas delta acessadas no Databricks SQL carregam suas propriedades de esquema e tabela para o metastore configurado. Se estiver a utilizar um metastore externo, poderá ver as informações do Delta Lake no mesmo. O Delta Lake tenta manter estas informações o mais atualizadas possíveis e envida os melhores esforços nesse sentido. Para garantir que as informações são atualizadas no metastore, também pode utilizar o comando DESCRIBE <table>.
• O Databricks SQL não suporta deslocamentos de zona como 'GMT+8' como fusos horários de sessão. A solução alternativa é usar um fuso https://en.wikipedia.org/wiki/List_of_tz_database_time_zoneshorário baseado em região ) como 'Etc/GMT+8' em vez disso. Consulte DEFINIR FUSO HORÁRIO para obter mais informações sobre como definir fusos horários.

Perguntas mais frequentes (FAQ)

• Como as cargas de trabalho do Databricks SQL são cobradas?
• Onde os pontos de extremidade SQL são executados?
• Posso usar pontos de extremidade SQL de blocos de anotações SQL do espaço de trabalho Ciência de Dados e Engenharia?
• Foi-me concedido acesso aos dados utilizando uma credencial de fornecedor de serviços na nuvem. Por que não consigo acessar esses dados no Databricks SQL?

Como as cargas de trabalho do Databricks SQL são cobradas?

As cargas de trabalho do Databricks SQL são cobradas de acordo com o Standard Jobs Compute SKU.

Onde os pontos de extremidade SQL são executados?

Como os clusters do Azure Databricks, os pontos de extremidade SQL são criados e gerenciados em sua conta do Azure. Os pontos de extremidade SQL gerenciam clusters otimizados para SQL automaticamente em sua conta e são dimensionados para corresponder à demanda do usuário final.

Posso usar pontos de extremidade SQL de blocos de anotações SQL do espaço de trabalho Ciência de Dados e Engenharia?

N.º Você pode usar pontos de extremidade SQL de consultas Databricks SQL, ferramentas de BI e outros clientes JDBC e ODBC.

Foi-me concedido acesso aos dados utilizando uma credencial de fornecedor de serviços na nuvem. Por que não consigo acessar esses dados no Databricks SQL?

No Databricks SQL, todo o acesso aos dados está sujeito ao controle de acesso aos dados, e um administrador ou proprietário de dados deve primeiro conceder os privilégios apropriados.