Настройка начальных пулов в Microsoft Fabric
В этой статье объясняется, как настроить начальные пулы в Microsoft Fabric для рабочих нагрузок аналитики. Начальные пулы — это быстрый и простой способ использования Spark на платформе Microsoft Fabric в течение нескольких секунд. Сеансы Spark можно использовать сразу, а не ожидать, пока Spark настроит узлы для вас, что поможет вам быстрее использовать данные и получить аналитические сведения.
Начальные пулы имеют кластеры Spark, которые всегда включены и готовы к вашим запросам. Они используют узлы среднего размера и могут масштабироваться на основе требований рабочей нагрузки.
Максимальное число узлов для автомасштабирования можно указать на основе требований к проектированию данных или рабочей нагрузке для обработки и анализа данных. На основе настроенных максимальных узлов система динамически получает и удаляет узлы в качестве изменения требований к вычислительным ресурсам задания, что приводит к эффективному масштабированию и повышению производительности.
Можно также задать максимальное ограничение для исполнителей в начальных пулах и с включенным динамическим выделением, система настраивает количество исполнителей в зависимости от объема данных и потребностей вычислений на уровне заданий. Этот процесс позволяет сосредоточиться на рабочих нагрузках, не беспокоясь о оптимизации производительности и управлении ресурсами.
Примечание.
Чтобы настроить начальный пул, вам нужен доступ администратора к рабочей области.
Настройка начальных пулов
Чтобы управлять начальным пулом, связанным с рабочей областью, выполните следующие действия.
Перейдите в рабочую область и выберите параметры рабочей области.
Затем выберите параметр Инжиниринг данных/Science, чтобы развернуть меню.
Выберите параметр StarterPool.
Можно задать максимальное значение конфигурации узла для начальных пулов разрешенным числом на основе приобретенной емкости или уменьшить конфигурацию максимального узла по умолчанию до меньшего значения при выполнении небольших рабочих нагрузок.
В следующем разделе перечислены различные конфигурации по умолчанию и максимальные ограничения узлов, поддерживаемые для начальных пулов на основе SKU емкости Microsoft Fabric:
Номер SKU | Единицы емкости | Виртуальные ядра Spark | Размер узла | Максимальные узлы по умолчанию | Максимальное количество узлов |
---|---|---|---|---|---|
F2 | 2 | 4 | Средние | 1 | 1 |
F4 | 4 | 8 | Средние | 1 | 1 |
F8 | 8 | 16 | Средние | 2 | 2 |
F16 | 16 | 32 | Средние | 3 | 4 |
F32 | 32 | 64 | Средние | 8 | 8 |
F64 | 64 | 128 | Средняя | 10 | 16 |
(Пробная емкость) | 64 | 128 | Средняя | 10 | 16 |
F128 | 128 | 256 | Средняя | 10 | 32 |
F256 | 256 | 512 | Средняя | 10 | 64 |
F512 | 512 | 1024 | Средняя | 10 | 128 |
F1024 | 1024 | 2048 | Средняя | 10 | 200 |
F2048 | 2048 | 4096 | Средняя | 10 | 200 |
Примечание.
Чтобы настроить начальный пул, вам нужен доступ администратора к рабочей области.
Связанный контент
- Дополнительные сведения см. в общедоступной документации Apache Spark.
- Начало работы с параметрами администрирования рабочей области Spark в Microsoft Fabric.