DLT релиз 2024.33

19 августа – 23 августа 2024 г.

Эти функции и улучшения были выпущены с выпуском DLT 2024.33.

Версии среды выполнения Databricks, используемые этим выпуском

Channel:

  • CURRENT (По умолчанию): Databricks Runtime 14.1
  • ПРЕДВАРИТЕЛЬНАЯ ВЕРСИЯ: Databricks Runtime 15.2

Note

Так как выпуски канала DLT следуют последовательному процессу обновления, обновления каналов развертываются в разных регионах в разные времена. Ваш релиз, включая версии Databricks Runtime, может не обновляться в течение недели или более после первоначальной даты выхода. Сведения о версии среды выполнения Databricks для конвейера см. в разделе Информация о среде выполнения.

Новые функции и улучшения в этом выпуске

  • Теперь можно использовать кластеризации жидкости при создании материализованных представлений или потоковых таблиц в конвейерах. См. ссылки на DLT SQL и Python. Чтобы использовать жидкостную кластеризацию, конвейер должен быть настроен для использования канала предварительного просмотра .

  • Теперь можно читать поток изменений данных из потоковых таблиц, которые выступают в качестве целевых таблиц AutoCDC или AUTO CDC FROM SNAPSHOT обработки и которые публикуются в каталоге Unity. Вы считываете поток данных о изменениях из целевой потоковой таблицы идентично тому, как это делаете с другими таблицами Delta. Чтобы прочитать поток данных изменений в другом конвейере, конвейер должен быть настроен для работы с каналом предварительной версии. Ознакомьтесь с лентой данных об изменениях из целевой таблицы AUTO CDC.