Поделиться через

2021 мая

  • Статья

Эти функции и улучшения для Azure Databricks были выпущены в мае 2021 г.

Примечание.

Выпуски являются поэтапными. Ваша учетная запись Azure Databricks может быть обновлена только через неделю или более после первоначальной даты выпуска.

Databricks Mosaic AI: собственное и совместное решение для полного жизненного цикла машинного обучения

27 мая 2021 г.

Новый пользователь Машинного обучения, который можно выбрать на боковой панели пользовательского интерфейса Azure Databricks, обеспечивает легкий доступ к новой специализированной среде ML, включая реестр моделей и четыре новые функции в общедоступной предварительной версии:

  • Новая страница панели мониторинга с удобными ресурсами, недавно используемым содержимым и ссылками для начала работы.
  • Новая страница экспериментов, на которой можно централизованно выполнять обнаружение и администрирование экспериментов.
  • AutoML — способ автоматического создания моделей ML на основе данных и ускорения перехода к производству.
  • Хранилище компонентов — способ каталогизации компонентов ML и их предоставления для практического обучения и обслуживания, а также их повторного использования. С помощью поиска компонентов на основе происхождения данных, при котором используются автоматически регистрируемые источники данных, компоненты можно сделать доступными для практического обучения и обслуживания с помощью упрощенного развертывания модели, не требующего изменений в клиентском приложении.

Дополнительные сведения см. в статье ИИ и машинное обучение в Databricks.

Аналитика SQL переименована в Databricks SQL

27 мая 2021 г.

Аналитика SQL переименована в Databricks SQL. Дополнительные сведения см. в разделе Заметки о выпуске Databricks SQL.

Создание конвейеров ETL и управление ими с помощью динамических таблиц Delta (общедоступная предварительная версия)

26 мая 2021 г.

Команда Databricks рада представить Delta Live Tables — облачную службу, которая делает разработку методом извлечения, преобразования и загрузки (ETL) простым, надежным и масштабируемым процессом. Delta Live Tables:

  • Предоставляет интуитивно понятный и знакомый декларативный интерфейс для создания конвейеров.
  • Позволяет отслеживать конвейеры обработки данных, визуализировать зависимости и управлять конвейерами и зависимостями в разных средах.
  • Обеспечивает разработку на основе тестирования, применение ограничений, связанных с качеством данных, и применение единых политик обработки ошибок данных.
  • Автоматизирует развертывание ваших конвейеров обработки данных, чтобы вы могли легко обновлять, откатывать и поэтапно повторно обрабатывать данные.

Дополнительные сведения см. в разделе "Что такое разностные динамические таблицы".

Точечные виртуальные машины Azure уже общедоступны

24 мая 2021 г.

Возможность создания кластеров Azure Databricks с помощью Точечных виртуальных машин Azure стала общедоступной. Теперь вы можете воспользоваться преимуществом значительно более дешевых точечных экземпляров Azure и снизить совокупную стоимость владения (TCO) Azure Databricks. Точечные экземпляры Azure применимы в следующих случаях:

Шифрование запросов и журнала запросов Databricks SQL с помощью собственного ключа (общедоступная предварительная версия)

20 мая 2021 г.

Дополнительные сведения см. в статье Заметки о выпуске Databricks SQL 7.4.

Увеличенное ограничение числа универсальных кластеров, работа которых прервана

18 мая 2021 г.: версия 3.46

Теперь в рабочей области Azure Databricks вы можете использовать до 150 универсальных кластеров, работа которых была завершена. Ранее их количество было ограничено 120. Дополнительные сведения см. в разделе "Завершение вычисления". Ограничение на количество завершенных кластеров всех назначений, возвращаемых запросом API кластеров, также равно 150.

Увеличено ограничение для числа закрепленных кластеров

18 мая 2021 г.: версия 3.46

Теперь в рабочей области Azure Databricks может быть до 70 закрепленных кластеров. Ранее их количество было ограничено 50. Дополнительные сведения см. в разделе "Закрепление вычислений"

Управление местом хранения результатов записной книжки (общедоступная предварительная версия)

18 мая 2021 г.: версия 3.46

Теперь вы можете хранить все результаты записной книжки в корневом экземпляре службы хранилища Azure независимо от размера или типа выполнения. По умолчанию некоторые результаты для интерактивных записных книжек хранятся в Azure Databricks. Новая конфигурация позволяет хранить их в корневом экземпляре службы хранилища Azure в вашей учетной записи. Дополнительные сведения см. в разделе "Настройка расположения хранилища результатов записной книжки".

Эта функция не влияет на записные книжки, выполняемые как задания, результаты которых всегда хранятся в корневом экземпляре службы хранилища Azure.

Шифрование записных книжек и секретных данных на уровне управления с помощью собственного ключа (общедоступная предварительная версия)

10 мая 2021 г.

Рабочая область Azure Databricks состоит из плоскости управления, размещенной в управляемой подписке Azure Databricks, и плоскости вычислений, развернутой в подписке Azure. Уровень управления хранит данные управляемых служб, в том числе команды записной книжки, секреты и другие данные конфигурации рабочей области. По умолчанию эти данные шифруются с помощью управляемого ключом Azure Databricks, но теперь можно добавить ключ из экземпляра Azure Key Vault для шифрования этих данных. Подробные сведения см. в статье Включение ключей, управляемых клиентом, для управляемых служб.

Прекращение поддержки Databricks Runtime серии 7.4

3 мая 2021 г.

Поддержка Databricks Runtime 7.4, Databricks Runtime 7.4 для Машинного обучения и Databricks Runtime 7.4 for Genomics прекращена 3 мая. См. статью "Жизненные циклы поддержки Databricks".

Пользователи репозиториев теперь могут интегрироваться с Azure DevOps, используя личные маркеры доступа

3-10 мая 2021 г.: версия 3.45

Помимо маркеров доступа к идентификатору Microsoft Entra, теперь можно использовать личный маркер доступа для проверки подлинности с помощью Azure DevOps. Дополнительные сведения см. в разделе "Настройка папок Git Databricks (Repos)".