Поделиться через


Использование вычислений

В этой статье объясняется, как подключиться к вычислениям в рабочей области Azure Databricks. Вам нужен доступ к вычислениям для запуска рабочих нагрузок инженерии данных, обработки и анализа данных.

Кто может получить доступ к вычислительным ресурсам или создать их?

Возможность доступа или создания вычислений зависит от прав пользователя.

  • Если рабочая область включена для бессерверных вычислений для записных книжек, все пользователи в рабочей области имеют доступ к бессерверному вычислительному ресурсу для выполнения интерактивных рабочих нагрузок в записных книжках и рабочих процессах.

  • Администраторы рабочей области могут создавать любой тип вычислений. Они также наследуют разрешение CAN MANAGE для всех вычислительных ресурсов, созданных в рабочей области.

  • Пользователи, не являющиеся администраторами с правами на создание неограниченного кластера, имеют доступ ко всем параметрам конфигурации при создании вычислительных ресурсов. Они могут получить доступ к вычислениям, которые им предоставили разрешения, и могут создать любой тип новых вычислений. Дополнительные сведения о доступных параметрах конфигурации см . в справочнике по конфигурации вычислений. Администраторы рабочей области могут назначать это право любому пользователю, группе или субъекту-службе. См. раздел "Управление правами".

  • Пользователи, не являющиеся администраторами без разрешения на создание неограниченного кластера, могут получать доступ только к вычислительным ресурсам, которым они предоставляют разрешения или вычисления, которые они создают с помощью политик, которым они назначены разрешения.

Использование бессерверных вычислений

Если рабочая область включена для бессерверных вычислений, вы автоматически получите доступ к бессерверному вычислительному ресурсу в любой из доступных записных книжек. Бессерверные вычислительные ресурсы предоставляют доступ по запросу к масштабируемым вычислительным ресурсам в записных книжках, позволяя немедленно писать и запускать код Python или SQL.

Чтобы подключиться к бессерверным вычислениям, щелкните раскрывающееся меню Connect в записной книжке и выберите "Бессерверный". В новых записных книжках подключенные вычислительные ресурсы автоматически по умолчанию по умолчанию бессерверны при выполнении кода, если другой ресурс не выбран.

Дополнительные сведения о включении см. в разделе "Включение бессерверных вычислений".

Использование вычислений, настроенных другим пользователем

Если у вас нет неограниченных разрешений на создание кластера, у вас есть доступ только к политикам вычислений и вычислений, предоставленным администраторам рабочей области. Пользователи могут иметь любое из этих разрешений для вычислений:

  • CAN ATTACH TO: Позволяет подключить записную книжку для вычислений и просмотра метрик вычислений и пользовательского интерфейса Spark.
  • CAN RESTART: позволяет запускать, перезапускать и завершать вычисления. Также включает разрешения CAN ATTACH TO.
  • CAN MANAGE: позволяет изменять сведения о вычислениях, разрешениях и размерах. Также включает разрешения CAN ATTACH TO и CAN RESTART.
  • НЕТ РАЗРЕШЕНИЙ: нет разрешений для вычислений.

Если у вас есть разрешения на подключение к вычислительным ресурсам, его можно выбрать из раскрывающегося меню Connect в открытой записной книжке или в раскрывающемся меню вычислений при создании нового задания. Дополнительные сведения о разрешениях вычислений см. в разделе "Разрешения вычислений".

Создание новых вычислений с помощью политики

Если у вас есть разрешение на политику вычислений, можно создать собственные вычислительные ресурсы. Политики имеют минимальные параметры конфигурации и предназначены для эффективного использования параметров по умолчанию. Если вы хотите изменить любые параметры, вы можете узнать о каждом параметре в справочнике по параметрам конфигурации.

  1. Нажмите кнопку "Создать>кластер" на боковой панели рабочей области.
  2. Выберите политику в раскрывающемся меню политики .
  3. (Необязательно) Обновите имя вычисления.
  4. (Необязательно) Настройте все доступные параметры.
  5. Нажмите кнопку "Создать вычисления".

Теперь у вас есть вычислительный ресурс, который можно использовать для выполнения рабочих нагрузок.

Политики

Администраторы рабочей области могут создавать политики вычислений в рабочей области и управлять ими. Если у вас нет доступа к политике, которая позволяет создавать необходимые вычислительные ресурсы, обратитесь к администратору рабочей области. Дополнительные сведения о политиках см. в статье "Создание политик вычислений и управление ими".

Рабочая область может иметь настраиваемые политики или использовать политики Azure Databricks по умолчанию. К политикам по умолчанию относятся следующие:

  • Личные вычислительные ресурсы. Позволяет пользователям создавать отдельный вычислительный ресурс с минимальными параметрами конфигурации.
  • Общие вычислительные ресурсы: позволяет пользователям создавать более крупный ресурс с несколькими узлами, предназначенный для совместного использования несколькими пользователями.
  • Power User Compute: позволяет пользователям создавать большие ресурсы с несколькими узлами. Политика предназначена для однопользовательских рабочих нагрузок, требующих большего объема вычислительных ресурсов, чем личные вычислительные ресурсы.
  • Вычисление заданий. Позволяет пользователям создавать вычисления по умолчанию общего назначения для заданий.

По умолчанию у всех пользователей есть доступ к политике персональных вычислений. Если вы не видите политику личных вычислений, ваша организация удалила ее из рабочей области.

Неограниченное создание вычислительных ресурсов

Если вы являетесь администратором рабочей области или пользователем с правами на создание неограниченного кластера, вы можете создать вычислительные ресурсы с помощью политики Неограниченного действия. Это дает доступ ко всем параметрам вычислений в новом пользовательском интерфейсе вычислений. Справочные сведения обо всех доступных параметрах см . в справочнике по конфигурации вычислений.