Список записных книжек для управления Кластерами больших данных SQL Server

  • Статья

Эта страница представляет собой индекс записных книжек для Кластеров больших данных SQL Server. Эти исполняемые записные книжки (.ipynb) могут использоваться для управления Кластерами больших данных для SQL Server 2019.

Важно!

Поддержка надстройки "Кластеры больших данных" Microsoft SQL Server 2019 будет прекращена. Мы прекратим поддержку Кластеров больших данных SQL Server 2019 28 февраля 2025 г. Все существующие пользователи SQL Server 2019 с Software Assurance будут полностью поддерживаться на платформе, а программное обеспечение будет по-прежнему поддерживаться с помощью SQL Server накопительных обновлений до этого времени. Дополнительные сведения см. в записи блога объявлений и в статье о параметрах больших данных на платформе Microsoft SQL Server.

Вы можете управлять Кластерами больших данных SQL Server с помощью записных книжек Jupyter. При этом все записные книжки проверяют наличие собственных зависимостей. Команда Выполнить все ячейки может завершиться успешно или вызвать исключение с указанием гиперссылки на другую записную книжку для решения проблемы с отсутствующей зависимостью. Перейдите по гиперссылке на целевую записную книжку, щелкните Выполнить все ячейки. После успешного завершения вернитесь к исходной записной книжке и выберите Запустить все ячейки.

Если все зависимости установлены и команда Запустить все записные книжки завершается сбоем, каждая записная книжка анализирует результаты. Если это возможно, отображается сообщение с гиперссылкой на инструкции по устранению проблемы.

Установка и удаление служебных программ в Кластерах больших данных

Ниже приведен набор записных книжек, которые полезны для установки и удаления программ командной строки. Они также предоставляют пакеты для управления Кластерами больших данных SQL Server.

Имя Описание
SOP012 — установка unixodbc для Mac Используйте эту записную книжку при возникновении ошибок с использованием brew install odbc для SQL Server.
SOP036 — установка интерфейса командной строки kubectl Используйте эту записную книжку для установки интерфейса командной строки kubectl независимо от операционной системы.
SOP037 — удаление интерфейса командной строки kubectl Используйте эту записную книжку для удаления интерфейса командной строки kubectl независимо от операционной системы.
SOP038 — установка интерфейса командной строки Azure Используйте эту записную книжку для установки интерфейса командной строки Azure CLI независимо от операционной системы.
SOP040 — обновление pip в песочнице Python ADS Используйте эту записную книжку для обновления pip в песочнице Python ADS.
SOP059 — установка модуля Python Kubernetes Используйте эту записную книжку для установки модулей Kubernetes с помощью Python.
SOP060 — удаление модуля Kubernetes Используйте эту записную книжку для удаления модулей Kubernetes с помощью Python.
SOP062 — удаление модулей ipython-sql и pyodbc Используйте эту записную книжку для установки модулей ipython-sql и pyodbc.
SOP069 — установка ODBC для SQL Server Используйте эту записную книжку для установки драйвера ODBC, так как для некоторых подкоманд в azdata требуется драйвер ODBC SQL Server.

Резервное копирование и восстановление Кластеров больших данных

Ниже приведен набор записных книжек, которые полезны для операций резервного копирования и восстановления в Кластерах больших данных SQL Server.

Имя Описание
SOP008 — резервное копирование HDFS-файлов в Azure Data Lake Store 2-го поколения с помощью distcp Эта стандартная рабочая процедура (SOP) выполняет резервное копирование данных из файловой системы HDFS кластера больших данных в указанную учетную запись Azure Data Lake Store 2-го поколения. Включите параметр "Иерархическое пространство имен" в учетной записи Azure Data Lake Store 2-го поколения.

Управление сертификатами в Кластерах больших данных

Ниже приведен набор записных книжек для управления сертификатами в Кластерах больших данных.

Имя Описание
CER001 — создание сертификата корневого ЦС Создайте сертификат корневого ЦС. Рассмотрите возможность использования одного сертификата корневого ЦС для всех непроизводственных кластеров в каждой среде, так как при таком подходе сокращается количество сертификатов корневого ЦС, которые необходимо передать клиентам, подключающимся к этим кластерам.
CER002 — скачивание имеющегося сертификата корневого ЦС Используйте эту записную книжку, чтобы скачать созданный сертификат корневого ЦС из кластера.
CER003 — отправка имеющегося сертификата корневого ЦС CER003 — отправка имеющегося сертификата корневого ЦС.
CER004 — скачивание и отправка имеющегося сертификата корневого ЦС Скачивание и отправка имеющегося сертификата корневого ЦС.
CER005 — установка нового сертификата корневого ЦС Эта записная книжка создает новый сертификат корневого ЦС.
CER010 — локальная установка созданного корневого ЦС Эта записная книжка локально скопирует (из кластера больших данных) созданный сертификат корневого ЦС, установленный с помощью записной книжки CER001 — создание сертификата корневого ЦС или CER003 — отправка имеющегося сертификата корневого ЦС, а затем установит сертификат корневого ЦС в локальное хранилище сертификатов этого компьютера.
CER020 — создание сертификата прокси-сервера управления Эта записная книжка создает сертификат для конечной точки прокси-сервера управления.
CER021 — создание сертификата Knox Эта записная книжка создает сертификат для конечной точки шлюза Knox.
CER022 — создание сертификата прокси-сервера приложения Эта записная книжка создает сертификат для конечной точки прокси-сервера развертывания приложения.
CER023 — создание главного сертификата Эта записная книжка создает сертификат для главной конечной точки.
CER024 — создание сертификата контроллера Эта записная книжка создает сертификат для конечной точки контроллера.
CER025 — отправка существующего сертификата прокси-сервера управления Эта записная книжка отправляет существующий сертификат прокси-сервера управления.
CER026 — отправка существующего сертификата шлюза Эта записная книжка отправляет сформированный извне сертификат шлюза в кластер.
CER027 — отправка существующего сертификата прокси-сервера Службы приложений Эта записная книжка отправляет сформированный извне сертификат Службы приложений в кластер.
CER028 — отправка существующих главных сертификатов Эта записная книжка отправляет сформированный извне главный сертификат в кластер.
CER028 — отправка существующего сертификата контроллера Эта записная книжка отправляет сформированный извне сертификат контроллера в кластер.
CER030 — подписывание сертификата прокси-сервера управления с помощью созданного ЦС Эта записная книжка подписывает сертификат, созданный с помощью записной книжки CER020 — создание сертификата прокси-сервера управления с использованием сертификата корневого ЦС, созданного с помощью записной книжки CER001 — создание сертификата корневого ЦС или CER003 — отправка имеющегося сертификата корневого ЦС.
CER031 — подписывание сертификата Knox с помощью созданного ЦС Эта записная книжка подписывает сертификат, созданный с помощью записной книжки CER021 — создание сертификата Knox с использованием сертификата корневого ЦС, созданного с помощью записной книжки CER001 — создание сертификата корневого ЦС или CER003 — отправка имеющегося сертификата корневого ЦС.
CER032 — подписывание сертификата прокси-сервера приложения с помощью созданного ЦС Эта записная книжка подписывает сертификат, созданный с помощью записной книжки CER022 — создание сертификата прокси-сервера приложения с использованием сертификата корневого ЦС, созданного с помощью записной книжки CER001 — создание сертификата корневого ЦС или CER003 — отправка имеющегося сертификата корневого ЦС.
CER033 — подписывание главного сертификата с помощью созданного ЦС Эта записная книжка подписывает сертификат, созданный с помощью записной книжки CER023 — создание главного сертификата с использованием сертификата корневого ЦС, созданного с помощью записной книжки CER001 — создание сертификата корневого ЦС или CER003 — отправка имеющегося сертификата корневого ЦС
CER034 — подписывание сертификата контроллера с помощью созданного ЦС Эта записная книжка подписывает сертификат, созданный с помощью записной книжки CER024 — создание сертификата контроллера с использованием сертификата корневого ЦС, созданного с помощью записной книжки CER001 — создание сертификата корневого ЦС или CER003 — отправка существующего сертификата корневого ЦС.
CER040 — установка подписанного сертификата прокси-сервера управления Эта записная книжка устанавливает в кластер больших данных сертификат, подписанный с помощью записной книжки CER030 — подписывание сертификата прокси-сервера управления с помощью созданного ЦС.
CER041 — установка подписанного сертификата Knox Эта записная книжка устанавливает в кластер больших данных сертификат, подписанный с помощью записной книжки CER031 — подписывание сертификата Knox с помощью созданного ЦС.
CER042 — установка подписанного сертификата прокси-сервера приложения Эта записная книжка устанавливает в кластер больших данных сертификат, подписанный с помощью записной книжки CER032 — подписывание сертификата прокси-сервера приложения с помощью созданного ЦС.
CER043 — установка подписанного главного сертификата Эта записная книжка устанавливает в кластер больших данных сертификат, подписанный с помощью записной книжки CER033 — подписывание сертификата контроллера с помощью корневого ЦС кластера. Обратите внимание, что в конце этой записной книжки главные группы pod будут перезапущены для загрузки новых сертификатов.
CER044 — установка подписанного сертификата контроллера Эта записная книжка устанавливает в кластер больших данных сертификат, подписанный с помощью записной книжки CER034 — подписывание сертификата контроллера с помощью корневого ЦС кластера. Обратите внимание, что в конце этой записной книжки модуль pod контроллера и все модули pod, использующие PolyBase (модули pod главного пула и пула вычислений), будут перезапущены для загрузки новых сертификатов.
CER050 — ожидание работоспособности BDC Эта записная книжка будет ожидать, пока кластер больших данных не вернется в состояние работоспособности после перезапуска модуля pod контроллера и модулей pod, использующих Polybase, для загрузки новых сертификатов.
CER100 — настройка кластера с помощью самозаверяющих сертификатов Эта записная книжка создаст новый корневой ЦС в кластере больших данных и новые сертификаты для каждой конечной точки (конечные точки управления, шлюза, прокси приложения и контроллера). Подпишите каждый новый сертификат с помощью созданного корневого ЦС, за исключением сертификата контроллера (подписанного с помощью имеющегося корневого ЦС кластера), а затем установите каждый сертификат в кластере больших данных. Скачайте созданный корневой ЦС в хранилище сертификатов Доверенных корневых центров сертификации этого компьютера. Все созданные самозаверяющие сертификаты будут храниться в модуле pod контроллера в расположении test_cert_store_root.
CER101 — настройка кластера с помощью самозаверяющих сертификатов с использованием имеющегося корневого ЦС Эта записная книжка будет использовать имеющийся созданный корневой ЦС в кластере больших данных (переданный с помощью CER003) и создаст новые сертификаты для каждой конечной точки (управления, шлюза, прокси-сервера приложения и контроллера), а затем подпишет каждый новый сертификат с помощью созданного корневого ЦС, за исключением сертификата контроллера (подписанного с помощью имеющегося корневого ЦС кластера), и установит каждый сертификат в кластер больших данных. Все созданные самозаверяющие сертификаты будут храниться в модуле pod контроллера (в расположении test_cert_store_root). После выполнения этой записной книжки любой доступ по протоколу https:// к кластеру больших данных с этого компьютера (и любого компьютера, устанавливающего новый корневой ЦС) будет отображаться как безопасный. В главе средства выполнения записных книжек задание CronJob (OPR003), созданное для запуска развертывания приложений, установит корневой ЦС кластера, чтобы обеспечить безопасное получение токенов JWT и файла swagger.json.
CER102 — настройка кластера с помощью самозаверяющих сертификатов с использованием существующего корневого ЦС кластера больших данных Эта записная книжка настроит кластер с использованием самозаверяющих сертификатов с помощью существующего ЦС кластера больших данных. Дополнительные сведения см. в записной книжке.
CER103 — настройка кластера с использованием подписанных извне сертификатов Эта записная книжка предназначена для замены сертификатов конечной точки созданными и подписанными за пределами кластера больших данных. Дополнительные сведения см. в записной книжке.

Служебные программы для шифрования неактивных данных в Кластерах больших данных

В этом разделе приводится ряд записных книжек для управления шифрованием неактивных данных в Кластерах больших данных.

Имя Описание
SOP0124 — перечисление ключей для шифрования неактивных данных Используйте эту записную книжку для получения списка всех ключей HDFS.
SOP0128 — включение зон шифрования HDFS в кластерах больших данных Используйте эту записную книжку для включения зон шифрования HDFS при обновлении версии накопительного пакета обновления 6 или более ранней до версии 8. Не требуется для новых развертываний накопительного пакета обновления 8 или более поздней версии или при обновлении до накопительного пакета обновления 9.
SOP0125 — удаление ключа для шифрования неактивных данных Используйте эту записную книжку для удаления ключей зоны шифрования HDFS. Будьте осторожны!
SOP0126 — ключи резервного копирования для шифрования неактивных данных Используйте эту записную книжку для резервного копирования ключей зоны шифрования HDFS.
SOP0127 — восстановление ключей для шифрования неактивных данных Используйте эту записную книжку для восстановления ключей зоны шифрования HDFS.

Чередование паролей

Записные книжки для управления сменой паролей в Кластерах больших данных.

Имя Описание
PASS001 — обновление пароля контроллера домена администратора обновления При использовании этой записной книжки предполагается, что пароль DSA уже обновлен в контроллере домена. Запустите эту записную книжку с указанными параметрами, чтобы обновить кластер больших данных с использованием нового пароля DSA. Группа pod контроллера будет перезапущена.

Дальнейшие действия

Дополнительные сведения о Кластеры больших данных SQL Server см. в статье Общие сведения о Кластеры больших данных SQL Server 2019.