Поделиться через

2021 мая

  • Статья

Эти функции и улучшения для Azure Databricks были выпущены в мае 2021 г.

Примечание.

Выпуски являются поэтапными. Ваша учетная запись Azure Databricks может быть обновлена только через неделю или более после первоначальной даты выпуска.

Databricks Machine Learning: выполняемое в месте хранения данных решение для совместной работы, поддерживающее весь жизненный цикл машинного обучения

27 мая 2021 г.

Новый пользователь Машинного обучения, который можно выбрать на боковой панели пользовательского интерфейса Azure Databricks, обеспечивает легкий доступ к новой специализированной среде ML, включая реестр моделей и четыре новые функции в общедоступной предварительной версии:

  • Новая страница панели мониторинга с удобными ресурсами, недавно используемым содержимым и ссылками для начала работы.
  • Новая страница экспериментов, на которой можно централизованно выполнять обнаружение и администрирование экспериментов.
  • AutoML — способ автоматического создания моделей ML на основе данных и ускорения перехода к производству.
  • Хранилище компонентов — способ каталогизации компонентов ML и их предоставления для практического обучения и обслуживания, а также их повторного использования. С помощью поиска компонентов на основе происхождения данных, при котором используются автоматически регистрируемые источники данных, компоненты можно сделать доступными для практического обучения и обслуживания с помощью упрощенного развертывания модели, не требующего изменений в клиентском приложении.

Дополнительные сведения см. в разделе ИИ и Машинное обучение в Databricks.

Аналитика SQL переименована в Databricks SQL

27 мая 2021 г.

Аналитика SQL переименована в Databricks SQL. Дополнительные сведения см. в разделе Заметки о выпуске Databricks SQL.

Создание конвейеров ETL и управление ими с помощью динамических таблиц Delta (общедоступная предварительная версия)

26 мая 2021 г.

Команда Databricks рада представить Delta Live Tables — облачную службу, которая делает разработку методом извлечения, преобразования и загрузки (ETL) простым, надежным и масштабируемым процессом. Delta Live Tables:

  • Предоставляет интуитивно понятный и знакомый декларативный интерфейс для создания конвейеров.
  • Позволяет отслеживать конвейеры обработки данных, визуализировать зависимости и управлять конвейерами и зависимостями в разных средах.
  • Обеспечивает разработку на основе тестирования, применение ограничений, связанных с качеством данных, и применение единых политик обработки ошибок данных.
  • Автоматизирует развертывание ваших конвейеров обработки данных, чтобы вы могли легко обновлять, откатывать и поэтапно повторно обрабатывать данные.

Дополнительные сведения см. в разделе "Что такое разностные динамические таблицы".

Точечные виртуальные машины Azure уже общедоступны

24 мая 2021 г.

Возможность создания кластеров Azure Databricks с помощью Точечных виртуальных машин Azure стала общедоступной. Теперь вы можете воспользоваться преимуществом значительно более дешевых точечных экземпляров Azure и снизить совокупную стоимость владения (TCO) Azure Databricks. Точечные экземпляры Azure применимы в следующих случаях:

Шифрование запросов и журнала запросов Databricks SQL с помощью собственного ключа (общедоступная предварительная версия)

20 мая 2021 г.

Дополнительные сведения см. в статье Заметки о выпуске Databricks SQL 7.4.

Увеличенное ограничение числа универсальных кластеров, работа которых прервана

18 мая 2021 г.: версия 3.46

Теперь в рабочей области Azure Databricks вы можете использовать до 150 универсальных кластеров, работа которых была завершена. Ранее их количество было ограничено 120. Дополнительные сведения см. в разделе "Завершение вычисления". Ограничение на количество завершенных кластеров всех назначений, возвращаемых запросом API кластеров, также равно 150.

Увеличено ограничение для числа закрепленных кластеров

18 мая 2021 г.: версия 3.46

Теперь в рабочей области Azure Databricks может быть до 70 закрепленных кластеров. Ранее их количество было ограничено 50. Дополнительные сведения см. в разделе "Закрепление вычислений"

Управление местом хранения результатов записной книжки (общедоступная предварительная версия)

18 мая 2021 г.: версия 3.46

Теперь вы можете хранить все результаты записной книжки в корневом экземпляре службы хранилища Azure независимо от размера или типа выполнения. По умолчанию некоторые результаты для интерактивных записных книжек хранятся в Azure Databricks. Новая конфигурация позволяет хранить их в корневом экземпляре службы хранилища Azure в вашей учетной записи. Дополнительные сведения см. в разделе "Настройка расположения хранилища результатов записной книжки".

Эта функция не влияет на записные книжки, выполняемые как задания, результаты которых всегда хранятся в корневом экземпляре службы хранилища Azure.

Шифрование записных книжек и секретных данных на уровне управления с помощью собственного ключа (общедоступная предварительная версия)

10 мая 2021 г.

Рабочая область Azure Databricks состоит из плоскости управления, размещенной в управляемой подписке Azure Databricks, и плоскости вычислений, развернутой в подписке Azure. Уровень управления хранит данные управляемых служб, в том числе команды записной книжки, секреты и другие данные конфигурации рабочей области. По умолчанию эти данные шифруются с помощью управляемого ключом Azure Databricks, но теперь можно добавить ключ из экземпляра Azure Key Vault для шифрования этих данных. Подробные сведения см. в статье Включение ключей, управляемых клиентом, для управляемых служб.

Прекращение поддержки Databricks Runtime серии 7.4

3 мая 2021 г.

Поддержка Databricks Runtime 7.4, Databricks Runtime 7.4 для Машинного обучения и Databricks Runtime 7.4 for Genomics прекращена 3 мая. См. статью о жизненном цикле поддержки среды выполнения Databricks.

Пользователи репозиториев теперь могут интегрироваться с Azure DevOps, используя личные маркеры доступа

3-10 мая 2021 г.: версия 3.45

Помимо маркеров доступа к идентификатору Microsoft Entra, теперь можно использовать личный маркер доступа для проверки подлинности с помощью Azure DevOps. Дополнительные сведения см. в разделе "Настройка папок Git Databricks (Repos)".