Прочитать на английском

Поделиться через

Заметки о выпуске версии Databricks SQL 2023

  • Статья

Ниже описаны улучшения и обновления в Databricks SQL с января по декабрь 2023 года.

21 декабря 2023 г.

  • Тип визуализации счётчика Lakeview отображает цвета при сравнении значений BigInt между полями основного значения и целевого.
  • Подсказки, которые отображаются при переключении видимости столбцов в таблицах Lakeview, были улучшены. Они ведут себя как ожидалось бы и не остаются.
  • Теперь пользователи могут использовать Помощник Databricks для создания визуализаций в Lakeview. См. Создавайте визуализации с помощью Databricks Assistant.
  • Для новых диаграмм диаграммы типа тепловой карты учитывают настройку обратный Y.
  • Исправлена проблема с производительностью визуализации в записных книжках с большим количеством визуализаций.

14 декабря 2023 г.

  • Исправлена ошибка, из-за которой панели мониторинга Lakeview не отображались на странице описания Lakeview без обновления страницы вручную.
  • Используйте клавишу Esc, чтобы отменить создание виджета Lakeview при его размещении на холсте.
  • Обозреватель каталогов теперь отображает индексы векторного поиска в пользовательском интерфейсе в рамках общедоступной предварительной версии Mosaic AI Vector Search.

7 декабря 2023 г.

Обновления пользовательского интерфейса

  • Панели мониторинга Lakeview можно добавлять в избранное для быстрого доступа.
  • При разработке панели мониторинга Lakeview поддерживаются сочетания клавиш для копирования и вставки. Кроме того, ключ удаления удаляет выбранные мини-приложения.
  • Обновили заголовки и описания мини-приложений Lakeview, чтобы предотвратить обрезание текста при загрузке.
  • Исправлена проблема форматирования визуализации, из-за которой большие целые значения ошибочно отображались в виде с плавающей запятой.
  • Исправлена проблема с панелями мониторинга SQL Databricks, в которых развернутые представления диаграмм иногда отображались пустыми диаграммами.
  • Линейчатые диаграммы с количественными полями на осях X и Y отображают более понятные метки данных.
  • Исправлена проблема в редакторе SQL, чтобы таблицы с словом stream в заголовке больше не конфликтуют с зарезервированным ключевым словом. Теперь эти таблицы отображаются в соответствии с ожиданиями в браузере схемы и не отмечены ошибками.
  • Страница журнала запросов теперь поддерживает изменение размера столбцов и выбор столбцов.
  • Страница журнала запросов поддерживает два новых столбца: источник запроса и тип источника запроса .
  • Параметры бизнес-аналитики, такие как Tableau и Power BI, проще найти в обозревателе каталогов на соответствующих страницах.

30 ноября 2023 г.

Обновления пользовательского интерфейса

Перечисленные в этом разделе функции не зависят от вычислительных версий хранилища SQL, описанных выше.

  • Круговые диаграммы в Lakeview теперь могут иметь настраиваемые цветовые настройки.
  • Преобразования визуализации в Lakeview теперь сохраняются при переключении между совместимыми типами полей.
  • Добавлены параметры заголовка для угловых каналов круговой диаграммы Lakeview.
  • Выпадающий список набора данных Lakeview теперь поддерживает поиск для упрощения навигации.
  • Lakeview поддерживает полное числовое отображение значений менее 10 000, устраняя аббревиатуры.
  • Добавлена возможность раскрашивать по цвету категориальные поля с датами в Lakeview.
  • Теперь пользователи Lakeview могут выделять условные обозначения диаграммы с помощью курсора для копирования и вставки значений.
  • Круговые диаграммы в Lakeview теперь имеют возможность переключения отображения меток.
  • Стандартизован цвет синего цвета по умолчанию для всех визуализаций Lakeview.
  • Значки столбцов Lakeview в преобразованиях теперь последовательно соответствуют используемому методу преобразования.
  • Элементы управления в панели редактирования Lakeview теперь автоматически упаковываются для повышения удобочитаемости.
  • Выпущен расширенный редактор цветов для визуализаций Lakeview.
  • Настройки шрифта таблицы в Lakeview теперь адаптированы для улучшения читаемости.
  • Улучшена совместимость темного режима для меток в новых диаграммах.
  • Новые диаграммы теперь последовательно приоритизируют отображение меток внутри столбцов.
  • Исправлена ошибка, из-за которой некоторые действия меню правой кнопкой мыши не работали в редакторе SQL.

16 ноября 2023 г.

Обновления пользовательского интерфейса

Перечисленные в этом разделе функции не зависят от вычислительных версий хранилища SQL, описанных выше.

  • Мини-приложения Lakeview теперь проще изменять размер из-за более крупной зоны триггера изменения размера.
  • Теперь администраторы рабочего пространства могут изменить владельца информационной панели Lakeview. В режиме редактирования на панели мониторинга Lakeview:
    • Щелкните Поделиться
    • Щелкните значок шестеренки
    • Щелкните Назначить нового владельца
  • Пользователи могут переключать метки в Lakeview или отключать их.

Визуализации:

  • Новые метки диаграмм теперь предпочтительно располагаются внутри столбца, когда это возможно.
  • Новые метки диаграмм теперь отображаются правильно на сложенных столбцах, которые достаточно широки, чтобы показать всю метку.
  • Цвета меток внутри линейчатых диаграмм теперь более согласованны.

9 ноября 2023 г.

Изменения в версии 2023.50:

Основные моменты:

обновления языка SQL: добавлены следующие встроенные функции:

  • from_xml: преобразует XML STRING в STRUCT.
  • schema_of_xml: наследует схему из XML-STRING.
  • session_user: возвращает пользователя, вошедшего в систему.
  • try_reflect: возвращает NULL вместо исключения в случае ошибки метода Java.

Были улучшены следующие встроенные функции:

  • вызов функции. Аргументы таблицы для функций поддерживают секционирование и упорядочивание. Теперь можно использовать предложения PARTITION BY и ORDER BY для управления передачем аргументов таблицы функции.
  • mode: Поддержка необязательного параметра, обеспечивающего детерминированный результат.
  • to_char: новая поддержка DATE, TIMESTAMPи BINARY.
  • to_varchar: новая поддержка DATE, TIMESTAMPи BINARY.
  • array_insert() основан на 1 для отрицательных индексов: функция array_insert основана на 1 для положительных и отрицательных индексов. Теперь он вставляет новый элемент в конец входных массивов для индекса -1.

Обновления пользовательского интерфейса

Перечисленные в этом разделе функции не зависят от описанных выше вычислительных версий хранилища SQL.

Визуализации:

  • Подсказки новых диаграмм отображают только наведенные элементы для диаграмм высокой кардинальности.
  • Новые диаграммы автоматически выравнивают диаграммы с двумя осями по нулю.
  • Диаграммы изменили повернутую метку и направление угла текста оси с -90 до 90 градусов.
  • Диаграммы теперь используют ширину метки для определения поворота.

Lakeview: Панели мониторинга

  • Исправление: строки таблиц на панелях мониторинга Lakeview больше не добавляют вертикальное заполнение, если возвращаются только небольшое количество строк.
  • Клонирование нового мини-приложения Lakeview на информационной панели сначала пытается расположить клон справа от оригинала, если на холсте достаточно места. Если недостаточно места, клон помещается ниже исходного.
  • Теперь вы можете переназначить владельца панели мониторинга Lakeview с помощью диалогового окна "Общий доступ".

редактор SQL : автозавершение теперь менее агрессивно и автоматически закрывается в конце инструкций

2 ноября 2023 г.

Улучшения:

Ниже приведены улучшения в истории панели Lakeview:

  • Добавлены различные значки для таблиц, представлений и материализованных представлений.
  • Добавлена поддержка вертикальной прокрутки в случае большого количества источников данных вышестоящего потока.
  • Улучшено сообщение об ошибке, если средство просмотра не имеет разрешений на вышестоящий объект.
  • Уточнено сообщение, связанное с примерами таблиц данных и данными HMS.
  • Добавлены теги ключевых значений для исходных источников данных.

исправление :

  • Исправлена проблема в новых диаграммах, которая препятствовала отрисовке после переименования ряда, содержащего логические значения.

26 октября 2023 г.

Изменения в Databricks SQL версии 2023.45

Основные моменты:

Оптимизация запросов :

  • Удалено внешнее соединение, если все агрегатные функции различны. SPARK-42583
  • Оптимизирован порядок фильтрации предикатов. SPARK-40045

Обновления SQL функций:

  • Добавлена поддержка неявного разрешения псевдонимов для боковых столбцов в Aggregate. SPARK-41631
  • Поддержка неявного бокового псевдонима столбца в запросах с окном. SPARK-42217
  • Поддержка для Datasketches HLLSketch. См. агрегатную функцию hll_sketch_agg.
  • Добавлена функция try_aes_decrypt(). См. try_aes_decrypt функцию.
  • Поддержка режима CBC для aes_encrypt() и aes_decrypt(). См. функциюaes_decrypt.
  • Добавьте псевдонимы трёхаргументных функций DATE_ADD и DATE_DIFF.
  • Добавлена поддержка aes_encrypt IVs и AAD. SPARK-43290
  • Реализуйте функции растрового изображения. SPARK-44154
  • Добавлен псевдоним to_varchar для to_char. См. функцияto_varchar.
  • Добавлена поддержка array_compact. См. функцию.
  • Поддержка udf luhn_check. См. функцию luhn_check.
  • Добавлена поддержка анализатора именованных аргументов для встроенных функций. SPARK-44059
  • Поддержка правила синтаксического анализа аргументов TABLE для TableValuedFunction. SPARK-44200
  • array_insert теперь завершается ошибкой, когда индекс равен 0. SPARK-43011
  • Добавлены NULL значения для INSERT с заданными пользователем списками, имеющими меньше столбцов, чем в целевой таблице. SPARK-42521
  • функция DECODE возвращает неправильные результаты при передаче NULL. SPARK-41668

Обновления пользовательского интерфейса

Улучшения:

  • Редактор SQL Lakeview теперь поддерживает сочетания клавиш для выполнения запросов.
  • Фильтры в Lakeview теперь перечисляют быстрые относительные диапазоны дат за последние 7, 14, 28, 30, 60 и 90 дней.
  • Периоды в именах полей данных больше не приводят к пустым диаграммам.
  • Теперь браузер устаревшей схемы работает с каталогом Unity.
  • Реализованы улучшения производительности для загрузки только активной вкладки в редакторе SQL, уменьшая начальное время загрузки до 20%.
  • Комментарии к таблицам, созданные ИИ в обозревателе каталогов, теперь общедоступны.

исправления:

  • Столбцы на временных линейчатых диаграммах теперь центрированы над отметкой даты.
  • Шаблоны меток данных с агрегатными выражениями теперь используют правильные числовые формататоры.
  • Масштабирование новых диаграмм теперь работает при помощи категориальной шкалы, основанной на временных данных.

новая статья:

  • Выпущена новая статья со всеми визуализациями Lakeview, включая снимки экрана и заметки, показывающие, как воссоздать каждую визуализацию на каждом снимке экрана. См. типы визуализаций панели мониторинга.

19 октября 2023 г.

Улучшения:

  • Теперь доступно перетаскивание в браузере схем.
  • Модал "Выбор таблицы" на панелях мониторинга Lakeview упрощает выбор из всех таблиц в каталоге или схеме и теперь использует прогнозы автоматического завершения поиска при вводе.

исправления:

  • Инструкции по выбору условных обозначений указывают, что пользователи Mac используют cmd, а пользователи Windows используют ctrl.
  • Повышение видимости усеченных сообщений на панелях мониторинга Lakeview при отображении данных, превышающих лимиты.
  • Диаграммы с усеченными данными отображают согласованные цвета, как показано в редакторе.

12 октября 2023 г.

Улучшения:

  • Значения текстового фильтра, содержащие специальные символы, теперь правильно фильтруются в панелях мониторинга Lakeview.
  • Новые диаграммы поддерживают метки данных @@name на диаграммах рассеяния.
  • Настраиваемые процентные форматы применяются к подсказкам сгруппированных диаграмм в новых диаграммах.
  • Пользовательский интерфейс расширения привязки рабочей области вышел в общий доступ.

исправления:

  • Улучшенная отрисовка меток на новых диаграммах, чтобы предотвратить утечку меток за пределами границ диаграммы.
  • Увеличен контраст отметок и линий сетки на новых диаграммах для улучшения видимости.
  • Увеличил интервал метки оси для повышения удобочитаемости на новых диаграммах.

5 октября 2023 г.

Улучшения:

  • Точные подсказки добавлены для действий в режиме публикации и линейки дат на панелях мониторинга Lakeview.
  • Условный формат и шаблоны ссылок в визуализациях таблиц Lakeview теперь поддерживают скрытые столбцы.
  • Оптимизировано расположение меток для темпоральных диаграмм с широкими столбцами для повышения ясности в новых схемах.
  • Визуализация счетчиков в Lakeview сохраняет преобразования даже после удаления других полей, обеспечивая согласованность.
  • При наведении указателя мыши на ряд в диаграмме окружающие ряды в подсказке становятся менее заметными, чтобы улучшить удобочитаемость в новых диаграммах.
  • Новые диаграммы, использующие процентные значения, теперь отображают подсказки с абсолютными значениями.
  • Добавлена функция автозаполнения для создания томов.
  • Закрытие неактивной вкладки больше не переключает вкладки.
  • Выбранный режим четко отображается при выделении текста.

исправления:

  • Улучшена формулировка сообщения об ошибке в сводных таблицах при усечении данных.
  • Исправлена ошибка отрисовки в таблицах сводной таблицы, где цвета не отображались при использовании типов данных BigInt.
  • При загрузке PNG в новых диаграммах с многочисленными пунктами легенды был удален цветной символ для переполняющихся пунктов легенды.
  • Линии в новых диаграммах будут поддерживать согласованную толщину даже на самой верхней границе представления.
  • В Lakeview, если набор данных не существует, окно выбора набора данных на холсте остается пустым.
  • DLT правильно определяются анализатором SQL и не отображаются как недопустимые таблицы в браузере схем.
  • Подсказки добавлены в боковое меню.

28 сентября 2023 г.

Улучшения:

  • Опубликованные панели мониторинга Lakeview теперь имеют кнопку обновления.
  • Улучшены сообщения об ошибках для пользователей, у которых нет доступа к панели мониторинга Lakeview.
  • Конфигурация фильтра на панелях мониторинга Lakeview теперь содержит допустимые поля в верхней части списка выбора.
  • Скачивание диаграммы в виде PNG на панели мониторинга Lakeview теперь сохраняет заголовок и описание.
  • Улучшение истории таблиц Delta в обозревателе каталогов включает добавление фильтров для диапазона дат, пользователя и типа операции, а также сортируемых столбцов и встроенных ссылок на связанные задания и записные книжки.
  • Поддержка темного режима, добавленная в условные обозначения, подсказки и визуализацию таблиц.

исправление :

  • Выбор фильтров больше не очищается при обновлении информационной панели Lakeview.

21 сентября 2023 г.

Улучшения:

  • Производительность отрисовки сводной таблицы улучшена.
  • Новый шаблон DuBois для табличных представлений родословных в пользовательском интерфейсе.

14 сентября 2023 г.

Улучшение :

  • Имена файлов теперь сохраняются при скачивании PNG в новых визуализациях диаграмм. См. визуализацию в Databricks SQL.

7 сентября 2023 г.

Доступна версия Databricks SQL 2023.40

расписание развертывания

  • Предварительный выпуск версии 2023.40: с 5 по 11 сентября 2023 г.
  • Текущее развертывание для 2023.40: между 18 сентября 2023 г. и 25 сентября 2023 г.

Изменения в 2023.40:

  • Теги теперь доступны в каталоге Unity.
  • Databricks Runtime возвращает ошибку, если файл изменяется между планированием запросов и вызовом.
  • Поддержка драйвера ODBC/JDBC для Azure Databricks.
  • Включите метки столбцов временных рядов.
  • Новые битмапные функции SQL.
  • Улучшены функции шифрования.
  • Поддержка каталога Unity для REFRESH FOREIGN.
  • INSERT BY NAME теперь поддерживается.
  • Предоставление общего доступа к материализованным представлениям с помощью Delta Sharing.

Обновления пользовательского интерфейса

Улучшения:

  • Новые диаграммы теперь доступны, благодаря более быстрой отрисовки, красивым цветам и улучшенной интерактивности. См. визуализацию в Databricks SQL.
  • В графическом представлении профиля запроса теперь можно просмотреть тип соединения на любом узле, содержащем соединение в плане запроса.
  • Обозреватель данных переименован в обозреватель каталогов, чтобы распознать тот факт, что его можно использовать для работы со всеми защищаемыми объектами в каталоге Unity, а не только с объектами данных. См. Что такое обозреватель каталогов?.
  • API выполнения инструкций Databricks SQL теперь имеет статус GA с версии Databricks SQL 2023.35 и выше. API позволяет отправлять инструкции SQL для выполнения в хранилище DATAbricks SQL, проверять состояние и получить результаты или отменять выполнение выполняемой инструкции SQL. См. API выполнения инструкций.

31 августа 2023 г.

Новая функция:

24 августа 2023 г.

Улучшение :

  • Автозавершение перестает предлагать рекомендации после нажатия пробела.
  • Обозреватель схем больше не отображает live DLT как сломанные таблицы.

16 августа 2023 г.

Улучшение :

  • Выпадающее меню каталога в редакторе SQL теперь закрывается, когда переключаете вкладки. Ранее при переключении вкладок раскрывающийся список оставался открытым.

10 августа 2023 г.

Улучшение :

  • Автозаполнение теперь поддерживает новый синтаксис для задания тегов каталога Unity. Сведения о командах см. в справочнике по языку SQL.

3 августа 2023 г.

Улучшения:

  • В базовом редакторе Монако теперь используется версия 37.1.
  • Поддержка автозавершения для команд SHOW ARCHIVED FILES FOR Delta.

27 июля 2023 г.

Улучшения:

  • Редактор SQL теперь совместим с новыми символами Windows, гарантируя, что форматирование запросов работает должным образом во всех случаях.
  • Вы можете открыть навигацию по профилю запроса из результатов блокнота. Для запросов запустите запрос с помощью хранилища SQL.

20 июля 2023 г.

Доступна версия Databricks SQL 2023.35

расписание развертывания

  • Предварительный выпуск версии 2023.35: в период между 18 июля 2023 г. и 24 июля 2023 г.
  • Текущее развертывание версии 2023.35: между 31 июля 2023 г. и 8 августа 2023 г.

Изменения в 2023.35:

  • Улучшенная надежность для VACUUM с поверхностным клонированием в каталоге Unity.
  • Поддержка определяемых пользователем функций Python в SQL.
  • Delta Lake UniForm for Iceberg находится в общедоступной предварительной версии.
  • Жидкая кластеризация Delta Lake доступна в предварительной общедоступной версии.
  • Поддержка архивации для Delta Lake.
  • поддержка пункта IDENTIFIER.
  • Поддержка Unity Catalog для пользовательских функций на Python и Pandas (UDFs).

Улучшение :

  • Популярность таблицы в обозревателе каталогов доступна всем пользователям каталога Unity.

13 июля 2023 г.

Улучшение :

  • Теперь пользователи каталога Unity могут просматривать дополнительные сведения о таблицах в обозревателе каталогов, такие как часто присоединенные таблицы, частые пользователи данной таблицы и часто используемые записные книжки и панели мониторинга.

22 июня 2023 г.

Предварительная общедоступная версия:

  • Databricks SQL теперь поддерживает большие языковые модели (LLM), размещенные на конечных точках обслуживания моделей. Вызовите ai_query() для доступа к LLM. Эта функция доступна только в общедоступной предварительной версии в Databricks SQL Pro и без сервера. Чтобы принять участие в общедоступной предварительной версии, отправьте форму регистрации функций ИИ .

15 июня 2023 г.

Новая функция:

  • Теперь задачи SQL в заданиях доступны для всеобщего использования. С помощью страницы заданий можно управлять запросами, панелями мониторинга и оповещениями. См. задачу SQL для работ.
  • Теперь новый браузер схемы находится в общедоступной предварительной версии с обновленным пользовательским интерфейсом, вкладкой для вас и улучшенными фильтрами. Браузер схемы доступен в Databricks SQL, обозревателе каталогов и записных книжках. См. обзор данных.

8 июня 2023 г.

Доступно DBSQL версии 2023.30

Изменения в 2023.30

  • Новые встроенные функции SQL, такие как array_prepend(array, elem), try_aes_decrypt(expr, key [, mode [, padding]])и sql_keywords() .
  • Теперь можно использовать неглубокое клонирование для создания новых управляемых таблиц каталога Unity из уже существующих. См. поверхностное клонирование таблиц в Unity Catalog.
  • Теперь можно использовать CLONE и CONVERT TO DELTA с таблицами Iceberg, которые имеют разделы, определённые для обрезанных столбцов типов int, longи string. Усеченные столбцы типа decimal не поддерживаются.
  • START VERSION теперь не рекомендуется использовать для ALTER SHARE.

Обновления пользовательского интерфейса

исправление :

  • Визуализация счетчиков теперь поддерживает форматирование при работе с большими числами.

1 июня 2023 г.

Улучшения:

  • Двоичные данные теперь будут отображаться в виде шестнадцатеричной строки при использовании формата стрелки.
  • В API SQL Statement формат CSV теперь поддерживается для параметра EXTERNAL_LINKS. Это позволяет клиентам извлекать до 100 ГиБ данных в формате CSV с предварительно подписанными URL-адресами, а ограничение INLINE для JSON составляет 16 МиБ.
  • Azure Databricks SQL Pro доступен во всех регионах Китая. SQL Pro теперь является хранилищем по умолчанию в пользовательском интерфейсе. По умолчанию API по-прежнему является классическим.

29 мая 2023 г.

Новая функция:

25 мая 2023 г.

Улучшения:

  • Теперь можно переключить панель результатов автозаполнения.
  • Отключите клавишу ввода, чтобы она больше не принимала предложения автозаполнения. В разделе параметры пользователя DBSQLщелкните параметры редактора, а затем параметры нового редактора. Отключить прием предложений автозаполнения клавишей Enter.

исправления:

  • Теперь у отсортированных заголовков таблицы есть цвета.
  • Теперь линии диаграммы отображаются правильно.

18 мая 2023 г.

Улучшение :

  • В API операторов SQL возможность EXTERNAL_LINKS теперь поддерживает формат JSON_ARRAY. Вы можете извлечь до 100 ГиБ данных в формате JSON с предварительно подписанными URL-адресами. Ограничение INLINE для JSON составляет 16 МиБ.

11 мая 2023 г.

Новая функция:

  • Браузер схем теперь доступен в обозревателе каталогов.

Улучшения:

  • Панель с подробной информацией при наведении курсора на таблицу стала менее чувствительной.
  • клавиша Escape теперь закрывает панель автозаполнения.
  • Теперь определения представлений имеют подсветку синтаксиса на вкладке 'Сведения' в обозревателе каталогов.

исправления:

  • Сводные таблицы теперь правильно отрисовываются на устройствах Windows.
  • Предложения по завершению теперь правильно соответствуют примеру первого ключевого слова.

4 мая 2023 г.

Databricks SQL версия 2023.26 доступна

расписание развертывания

  • Предварительное развертывание версии 2023.26: с 19 апреля 2023 г. по 25 апреля 2023 г.
  • Текущее развертывание для 2023.26: с 3 мая 2023 г. по 10 мая 2023 г.

Изменения в версии 2023.26

  • Фотон возвращает ошибку, если файл изменяется между планированием запросов и выполнением.
  • Новые функции и расширенная поддержка функций прогнозного ввода-вывода. См. Databricks Runtime 13.0 (EoS).
  • Используйте соединитель Azure Databricks для подключения к другой рабочей области Azure Databricks.
  • функция CREATE TABLE LIKE для таблиц Delta.
  • Новые поля столбца метаданных, обозначающие начало и длину блока файлов.
  • Новые геопространственные функции H3. См. геопространственные функции H3.
  • Новые встроенные функции SQL. См. Databricks Runtime 13.0 (EoS).

Обновления пользовательского интерфейса

Улучшения:

  • Администраторы могут изменять владельцев хранилища с помощью пользовательского интерфейса или API. См. управление хранилищем SQL.
  • Обозреватель каталогов теперь отображает принципы обслуживания учетной записи в списках пользователей активов в Unity Catalog. Например, служебные учетные записи отображаются при редактировании привилегий или изменении владельцев в Каталог-обозревателе.
  • Пользовательские метки диаграмм поддерживают возможность ссылаться на любой столбец в наборе данных.
  • Фильтры панели мониторинга теперь загружают имена столбцов, даже если используются запросы, у которых нет сведений о каталоге или схеме.

27 апреля 2023 г.

Улучшения:

  • Редактор SQL теперь использует редактор Монако для более надежного редактирования.
  • Страница истории SQL (запросы) теперь включает дизайнерскую систему Dubois.

20 апреля 2023 г.

Улучшения:

  • Представлена новая сводная таблица, которая позволяет агрегировать более 64k результатов.
  • Таблицы и визуализации Databricks SQL теперь поддерживают BigInt, 38-битные десятичные числа и символы, не являющиеся UTF-8. Для чисел теперь значение по умолчанию — это пользовательская точность чисел.
  • Автозаполнение теперь предлагает частые прошлые соединения для таблиц каталога Unity, на базе данных происхождения каталога Unity в Databricks Runtime 12.0 и более поздних версий.

Новая функция:

  • Возвращает текст, сгенерированный выбранной крупной языковой моделью (LLM) по заданному запросу ai_generate_text. Эта функция доступна только в виде общедоступной предварительной версии в Databricks SQL Pro и без сервера. Чтобы принять участие в общедоступной предварительной версии, заполните и отправьте форму регистрации функций ИИ общедоступной предварительной версии.

13 апреля 2023 г.

Новая функция:

  • Тип TIMESTAMP_NTZ представляет значения, состоящие из полей года, месяца, дня, часа, минуты и секунды. Все операции выполняются независимо от часового пояса. См. тип TIMESTAMP_NTZ.

Улучшения:

  • Теперь пользователи могут отправлять форматированные результаты в оповещениях с помощью тега QUERY_RESULT_TABLE в пользовательском сообщении оповещений.
  • Теперь пользователи могут просматривать размер данных файла для таблиц каталога Unity в обозревателе каталогов.

6 апреля 2023 г.

Доступна версия Databricks SQL 2023.20

расписание развертывания

  • Развертывание предварительной версии для 2023.20: между 15 марта 2023 г. и 23 марта 2023 г.
  • Текущее внедрение для 2023.20: между 27 марта 2023 г. и 3 апреля 2023 г.

Изменения в версии 2023.20

  • Эволюция схемы Delta Lake поддерживает указание исходных столбцов в инструкциях слияния.
  • Удалите все элементы NULL из массива с помощью array_compact.
  • Чтобы добавить элементы в массив, используйте array_append.
  • Чтобы анонимизировать конфиденциальные строковые значения, используйте функцию маски .
  • Распространенные условия ошибки теперь возвращают SQLSTATE.
  • Вызывайте функции-генераторы, возвращающие табличные значения, в стандартной секции FROM запроса.
  • Используйте функции from_protobuf и to_protobuf для обмена данными между двоичными типами и типами структур данных. См. буферы протокола чтения и записи.
  • Улучшена согласованность поведения фиксации в Delta для пустых транзакций, связанных с командами update, deleteи merge.
  • Изменение поведения
    • Функция псевдонимов боковой колонки приводит к изменениям в процессе разрешения имен. См. раздел изменения поведения.

Обновления пользовательского интерфейса

Улучшения:

  • Обозреватель каталогов теперь поддерживает удаление хранилища метаданных Hive.
  • Сообщение для начального состояния редактора визуализации изменилось с «Не хватает обязательных столбцов» на «Нет данных».

3 апреля 2023 г.

Новая функция:

30 марта 2023 г.

Улучшения:

  • На странице мониторинга хранилища теперь можно просмотреть журнал запросов для выбранного диапазона времени вместе с диаграммами масштабирования. Вы также можете просматривать текущие и очередные запросы, активные сеансы SQL, состояние хранилища и текущее число кластеров. См. Мониторинг хранилища SQL.
  • Кластеризация карт по умолчанию отключена в картах маркеров.
  • Добавлены подсказки для сокращения визуализации и ограничения рендеринга.

исправления:

  • Диаграммы теперь учитывают исходный порядок при отключении сортировки для значений осей, а диаграмма содержит группу по столбцу.

23 марта 2023 г.

Улучшения:

  • Визуализации теперь поддерживают бинирование времени по неделям.
  • Total теперь обрабатывает все данные сверх матрицы 100 X 100 ячеек до 64 тыс. результатов в сводных таблицах блокнотов.
  • Теперь пользователи могут форматировать значения ячеек в новой сводной таблице записных книжек.
  • Доступны данные о файлах, запросах и хранилищах компонентов.

16 марта 2023 г.

Улучшение :

  • Поддержка синтаксиса GROUP BY ALL.

9 марта 2023 г.

Новая функция:

  • API выполнения инструкций Databricks SQL теперь доступен в публичной предварительной версии. Выполнение запросов предоставляет конечные точки, которые выполняют SQL-запросы в SQL-хранилище Databricks. Он также может проверить состояние, получить результаты и отменить запущенную инструкцию SQL.

Улучшение :

  • Консоль администрирования SQL была объединена с общими параметрами администратора для создания единого интерфейса для пользователей администрирования. Все параметры администратора SQL теперь доступны из консоли администрирования.
  • Теперь назначения оповещений называются назначениями уведомлений.

исправления:

  • Таблицы больше не отображают две полосы прокрутки.
  • Пустые заголовки мини-приложений больше не перезаписываются на панелях мониторинга.

2 марта 2023 г.

исправление :

  • Теперь можно использовать относительные URL-адреса в таблицах для доступа к панелям мониторинга.

23 февраля 2023 г.

Улучшение :

  • TINYINT теперь поддерживается в таблицах результатов в ноутбуках.

исправление :

  • Исправлена ошибка, из-за которой прокрутка в модальном окне фильтрации панели мониторинга приводила к ошибке.

16 февраля 2023 г.

Улучшения:

  • Метки данных на диаграммах теперь отображают больше символов, чтобы избежать усечения описаний.
  • Автозаполнение теперь распознает функции range() и Python UDF create.
  • Автозаполнение теперь избегает инициации фрагментов в десятичных числах и в комментариях кода.

исправления:

  • Теперь пользователи могут увеличить масштаб карт.
  • В записных книжках цвета теперь правильно назначаются диаграммам.

2 февраля 2023 г.

Улучшения:

  • Поддержка DESCRIBE DETAILS в редакторе.
  • Улучшена скорость загрузки обозревателя схем.
  • Теперь на боковой панели SELECT *можно просмотреть список возможных столбцов.

26 января 2023 г.

Улучшение :

  • Теперь сообщения об ошибках запроса содержат ссылки на соответствующий раздел документации, описывающий ошибку.

19 января 2023 г.

Улучшения:

  • Теперь вы можете найти панель "Что нового", которая выделяет ключевые улучшения. Чтобы открыть и закрыть эту панель, щелкните значок подарка.
  • Теперь администраторы могут изменить владение хранилищами SQL.
  • Теперь можно отфильтровать несколько визуализаций на панели мониторинга, щелкнув Добавить>фильтр и выбрав запрос и столбцы для фильтрации.

12 января 2023 г.

Улучшения:

  • Названия мини-приложений визуализации на панелях мониторинга теперь форматируются как имя визуализации — имя запроса по умолчанию.
  • Добавлены геопространственные функции H3 в справочник встроенной панели.
  • Добавлены встроенные ссылки на синтаксис SQL, такие как CREATE TABLE и OVER.

исправления:

  • Сортировка и обратные переключатели теперь доступны при автоматическом масштабировании оси X.
  • Тепловые карты и сводные таблицы теперь реагируют на определенные пограничные случаи.
  • Теперь штрихи на категориальной оси Y отсортированы по умолчанию.
  • Черновики запросов больше не теряются после обновления браузера.