Руководство. Настройка зеркального отображения Microsoft Fabric из SQL Server

Зеркальное отображение в Fabric — это корпоративная облачная технология SaaS без использования ETL. В этом разделе вы узнаете, как создать зеркальную базу данных SQL Server, которая непрерывно создает реплицированную копию данных SQL Server в OneLake, доступную только для чтения.

Предпосылки

• Установите или используйте существующий SQL Server экземпляр, локальный или в облаке.
  • В качестве руководства мы рекомендуем использовать копию одной из существующих баз данных или любой существующей тестовой или базы данных разработки, которые можно быстро восстановить из резервной копии.
• Установите средство запросов T-SQL, как SQL Server Management Studio (SSMS) или расширение MSSQL для Visual Studio Code.
• Для использования Fabric требуется имеющаяся мощность. Если вы этого не сделали, запустите пробную версию Fabric.
  • Вместимость Fabric должна быть активной и находиться в рабочем состоянии. Приостановленная или удаленная емкость предотвращает зеркалирование Fabric, и данные не реплицируются.
• Необходимы параметры клиента Fabric. Убедитесь, что включены следующие два параметра клиента Fabric :
  • субъекты-службы могут использовать API-интерфейсы Fabric
  • Пользователи могут получить доступ к данным, хранящимся в OneLake, с приложениями, внешними для Fabric
• Просмотрите ограничения платформы в Microsoft Fabric зеркальных базах данных на основе SQL Server.
• Шлюз данных локальной сети или шлюз данных виртуальной сети в сети экземпляра SQL Server. Сеть шлюза данных должна подключаться к экземпляру SQL Server через частную конечную точку или разрешаться правилом брандмауэра.

Принципал базы данных для Fabric

Затем необходимо создать механизм аутентификации для службы Fabric в экземпляре SQL Server.

Это можно сделать с помощью логина и сопоставленного пользователя базы данных.

Использование имени входа и сопоставленного пользователя базы данных

Fabric будет использовать выделенное имя входа для подключения к исходному SQL Server экземпляру.

Следуйте этим инструкциям, чтобы создать имя входа и пользователя базы данных для зеркального отображения базы данных в SQL Server 2025 или SQL Server 2016-2022.

SQL Server 2025

1. Для зеркального отображения данных из SQL Server 2025 необходимо иметь роль участника или администратора в рабочей области при создании зеркальной базы данных на портале Fabric. Во время создания автоматически предоставляется управляемому удостоверению SQL Server разрешение "Чтение и запись" на зеркальной базе данных. У пользователей с ролью участника нет разрешения повторного доступа, необходимого для выполнения этого шага.

   Начиная с SQL Server 2025 г., разрешения, необходимые для входа в систему Fabric, :

   • Следующие разрешения в пользовательской базе данных:
     • SELECT
     • ИЗМЕНЕНИЕ ЛЮБОГО ВНЕШНЕГО ЗЕРКАЛА
     • ПРОСМОТР СОСТОЯНИЯ ПРОИЗВОДИТЕЛЬНОСТИ БАЗЫ ДАННЫХ
     • ПРОСМОТР СОСТОЯНИЯ БЕЗОПАСНОСТИ БАЗЫ ДАННЫХ

2. Подключитесь к экземпляру SQL Server с помощью средства запроса T-SQL, например SQL Server Management Studio (SSMS) или расширения MSSQL для Visual Studio Code.

3. Подключитесь к master базе данных. Создайте имя входа сервера и назначьте соответствующие разрешения.

   Это важно

   Для экземпляров SQL Server в группе доступности Always On учетная запись должна быть создана во всех экземплярах SQL Server. Главный объект fabric_login должен иметь один и тот же идентификатор безопасности в каждом экземпляре реплики.

   • Создайте имя входа fabric_loginс проверкой подлинности SQL. Вы можете выбрать любое имя для этого имени входа. Укажите собственный надежный пароль. Выполните следующий скрипт T-SQL в master базе данных:

   --Run in the master database
   USE [master];
   CREATE LOGIN [fabric_login] WITH PASSWORD = '<strong password>';
   

   • Кроме того, войдите в систему как администратор Microsoft Entra и создайте имя входа с проверкой подлинности Microsoft Entra ID на основе существующей учетной записи (рекомендуется). Выполните следующий скрипт T-SQL в master базе данных:

   --Run in the master database
   USE [master];
   CREATE LOGIN [bob@contoso.com] FROM EXTERNAL PROVIDER;
   

4. Подключитесь к пользовательской базе данных, которая будет зеркально отображаться в Microsoft Fabric. Создайте пользователя базы данных, подключенного к имени входа, и предоставьте минимальные необходимые привилегии:

   • Для входа с проверкой подлинности SQL:

   --Run in the user database
   CREATE USER [fabric_user] FOR LOGIN [fabric_login];
   
   GRANT SELECT, ALTER ANY EXTERNAL MIRROR, VIEW DATABASE PERFORMANCE STATE, VIEW DATABASE SECURITY STATE
      TO [fabric_user];
   

   • Или, для входа с проверкой подлинности Microsoft Entra (рекомендуется):

   --Run in the user database
   CREATE USER [bob@contoso.com] FOR LOGIN [bob@contoso.com];
   
   GRANT SELECT, ALTER ANY EXTERNAL MIRROR, VIEW DATABASE PERFORMANCE STATE, VIEW DATABASE SECURITY STATE
      TO [bob@contoso.com];
   

SQL Server 2016-2022

Для версий SQL Server 2016-2022, администратор должен быть участником серверной роли sysadmin, чтобы настроить CDC. Роль sysadmin сервера также требуется для дальнейшего обслуживания CDC. Зеркалирование использует CDC, если оно уже включено для базы данных и таблиц, которые нужно зеркалировать. Ниже описано, как создать fabric_login имя входа и добавить его в роль сервера sysadmin для настройки CDC. Если CDC уже существует, вам не нужно временно добавлять субъект в fabric_loginsysadmin роль сервера. После настройки CDC для включения зеркального отображения необходимо наличие разрешений CONNECT на уровне сервера и SELECT и CONNECT на уровне базы данных для репликации данных.

1. Подключитесь к экземпляру SQL Server с помощью средства запроса T-SQL, например SQL Server Management Studio (SSMS) или расширения MSSQL для Visual Studio Code.

2. Подключитесь к master базе данных. На этом шаге вы создадите имя входа сервера и назначите соответствующие разрешения.

   Если CDC уже включен в контексте зеркального отображения базы данных и таблиц, fabric_login не обязательно должен быть членом роли сервера sysadmin. Если CDC еще не включен, fabric_login должен быть членом роли сервера sysadmin для настройки CDC.

   Это важно

   Для экземпляров SQL Server в группе доступности Always On имя входа должно быть создано во всех экземплярах SQL Server. Повторите следующие действия для каждого экземпляра реплики. Главный объект fabric_login должен иметь один и тот же идентификатор безопасности в каждом экземпляре реплики.

   Вы можете выбрать любое имя для этого имени входа. Членство в роли сервера sysadmin экземпляра SQL Server 2016-2022 требуется для включения или отключения отслеживания изменений данных.

   • Выполните следующий скрипт T-SQL в master базе данных, чтобы создать имя для входа fabric_loginс проверкой подлинности SQL. Укажите собственный надежный пароль.

   --Run in the master database
   USE [master];
   CREATE LOGIN [fabric_login] WITH PASSWORD = '<strong password>';
   GRANT CONNECT SQL TO [fabric_login];
   ALTER SERVER ROLE [sysadmin] ADD MEMBER [fabric_login];
   

   • Кроме того, войдите в систему как администратор Microsoft Entra и создайте проверенный вход с помощью Microsoft Entra ID из существующей учетной записи. Выполните следующий скрипт T-SQL в master базе данных:

   --Run in the master database
   USE [master];
   CREATE LOGIN [bob@contoso.com] FROM EXTERNAL PROVIDER;
   GRANT CONNECT SQL TO [fabric_login];
   ALTER SERVER ROLE [sysadmin] ADD MEMBER [bob@contoso.com];
   

3. Для управления CDC требуется членство в роли db_owner в базе данных-источнике для зеркального отображения.

   Подключитесь к пользовательской базе данных, которая будет зеркально отображаться в Microsoft Fabric. Создайте пользователя базы данных, подключенного к имени входа, и предоставьте минимальные необходимые привилегии.

   • Для входа с проверкой подлинности SQL:

   --Run in the user database
   CREATE USER [fabric_user] FOR LOGIN [fabric_login];
   GRANT CONNECT, SELECT TO [fabric_user];
   

   • Или для входа с проверкой подлинности Microsoft Entra (рекомендуется):

   --Run in the user database
   CREATE USER [bob@contoso.com] FOR LOGIN [bob@contoso.com];
   GRANT CONNECT, SELECT TO [bob@contoso.com];
   

4. После включения CDC можно удалить fabric_login из роли сервера sysadmin.

   • Для входа с проверкой подлинности SQL:

   --Run in the master database
   USE [master];
   ALTER SERVER ROLE [sysadmin] DROP MEMBER [fabric_login];
   

   • Или для входа с аутентификацией через Microsoft Entra (рекомендуется):

   --Run in the master database
   USE [master];
   ALTER SERVER ROLE [sysadmin] DROP MEMBER [bob@contoso.com];
   

Подключение к SQL Server

Инструкции и требования для настройки зеркальной базы данных Fabric из SQL Server отличаются начиная с SQL Server 2025 года.

Начиная с SQL Server 2025 года сервер с поддержкой Azure Arc является частью необходимой конфигурации для связи с Fabric. До SQL Server 2025 Azure Arc не требуется, и репликация основана на Change Data Capture (CDC).

SQL Server 2025

Подключить сервер к Azure Arc и включить управляемую идентичность

Чтобы настроить зеркалирование Fabric, необходимо настроить Azure Arc для вашего экземпляра SQL Server 2025.

1. Если это еще не так, подключите сервер к Azure Arc и установите расширение Azure для SQL Server.

   • Выполните действия, описанные в разделе Quickstart — подключение гибридного компьютера с серверами с поддержкой Azure Arc.
   • Расширение Azure для SQL Server устанавливается автоматически при подключении экземпляра SQL Server к Azure Arc.
   • Для экземпляров SQL Server, работающих в группе доступности Always On, все узлы должны быть подключены к Azure Arc.

2. Если еще не настроено, следует настроить Управляемую идентификацию для SQL Server, включенную с помощью Azure Arc, которая обеспечивает исходящую проверку подлинности, необходимую для зеркального отражения Fabric.

3. Подключитесь к локальному экземпляру SQL Server 2025. При подключении выберите сертификат сервера trust.

4. Просмотр управляемых удостоверений:

   --Run in the master database
   USE [master];
   SELECT *
   FROM sys.dm_server_managed_identities;
   

   Это должно возвращать 1 строку с правильным client_id и tenant_id. Identity_type должно иметь значение "Назначаемое системой".

Добавление разрешений для управляемых удостоверений в Microsoft Fabric

Управляемое удостоверение для SQL Server создается и разрешения предоставляются автоматически Microsoft Fabric.

Однако для SQL Server экземпляров, работающих в группе доступности AlwaysOn, необходимо предоставить управляемое удостоверение, назначаемое системой (SAMI) каждого дополнительного узла, Contributor разрешения для рабочей области Fabric. Управляемое удостоверение создается расширением Azure для SQL Server при подключении экземпляра SQL к Azure Arc, и каждое из них должно вручную получить разрешения Fabric.

1. На портале Fabric предоставьте разрешения Fabric управляемому удостоверению каждого вторичного узла.

   1. В рабочей области Fabric выберите "Управление доступом".

      

   2. Выберите " Добавить людей или группы".

   3. В диалоговом окне "Добавление людей" найдите имена серверов для каждого узла в группе доступности.

   4. Назначьте каждой учетной записи роль участника.

      

Настройка локального или шлюза данных виртуальной сети

Проверьте требования к сети для Fabric, чтобы получить доступ к SQL Server. Для зеркального отображения данных необходимо установить локальный шлюз данных или создать шлюз данных виртуальной сети . Убедитесь, что локальная сеть компьютера шлюза может подключиться к экземпляру SQL Server. Дополнительные сведения см. в разделе Как защитить данные в зеркальных базах данных Microsoft Fabric из SQL Server.

Чтобы использовать локальный шлюз данных, выполните следующие действия.

1. Скачайте локальный шлюз данных из Официального центра загрузки Майкрософт.
2. Запустите установку. Следуйте инструкциям по установке локального шлюза данных.
   • Укажите адрес электронной почты учетной записи Майкрософт.
   • Имя: MyOPDG или любое нужное имя.
   • Ключ восстановления: укажите надежный ключ восстановления.

Создание зеркального SQL Server

1. Откройте портал «Fabric».
2. Используйте существующую рабочую область или создайте новую рабочую область.
3. Перейдите в панель Создания. Щелкните значок "Создать".
4. Прокрутите страницу, чтобы выбрать базу данных Mirrored SQL Server.
5. Введите имя базы данных SQL Server для зеркального отображения, а затем выберите Create.

Подключите Fabric к экземпляру SQL Server

Чтобы включить зеркальное отображение, необходимо подключиться к экземпляру SQL Server из Fabric, чтобы инициировать подключение из Fabric. Ниже приведены инструкции по созданию подключения к SQL Server.

1. В разделе Новые источники выберите базу данных SQL Server. Или выберите существующее SQL Server подключение из концентратора OneLake.

2. Если выбрано подключение New, введите сведения о подключении к экземпляру SQL Server.

   • Server. Полный путь к имени сервера, который Fabric использует для доступа к экземпляру SQL Server, то же самое, что и для SSMS.

   Подсказка

   В экземплярах SQL Server в группе доступности Always On используйте прослушиватель Always On для сервера.

   • Database. Введите имя SQL Server.
     • Подключение: создание нового подключения.
     • Имя подключения: автоматическое имя предоставляется. Его можно изменить.
     • Шлюз данных: Выберите шлюз данных, настроенный в соответствии с вашим сценарием.
     • Тип проверки подлинности: выберите метод проверки подлинности и укажите основного пользователя, которого вы настроили в разделе "Использование имени входа и сопоставленного пользователя базы данных".
     • Установите флажок "Использовать зашифрованное подключение ".

3. Нажмите Подключиться.

SQL Server 2016-2022

Подготовка экземпляра SQL Server

1. Служба SQL Server Agent должна быть запущена. Настоятельно рекомендуется настроить автоматическое запуск.
2. Измененная запись данных (CDC) будет автоматически включена и настроена зеркальным отображением Fabric для каждой требуемой таблицы в базе данных. Просмотрите известные проблемы и ошибки с CDC. CDC требует, чтобы каждая таблица содержит первичный ключ.

Настройка локального или шлюза данных виртуальной сети

Проверьте требования к сети для Fabric, чтобы получить доступ к SQL Server. Для зеркального отображения данных необходимо установить локальный шлюз данных или создать шлюз данных виртуальной сети . Убедитесь, что сеть шлюза данных может подключиться к экземпляру SQL Server. Дополнительные сведения см. в разделе Как: Защитить данные зеркальных баз данных Microsoft Fabric от SQL Server.

Чтобы использовать локальный шлюз данных, выполните следующие действия.

1. Скачайте локальный шлюз данных, см. раздел "Скачать локальный шлюз данных" из Официального центра загрузки Майкрософт.
2. Запустите установку. Следуйте инструкциям по установке локального шлюза данных.
   • Укажите адрес электронной почты учетной записи Майкрософт.
   • Имя: MyOPDG или любое нужное имя.
   • Ключ восстановления: укажите надежный ключ восстановления.

Создание зеркального SQL Server

1. Откройте портал «Fabric».
2. Используйте существующую рабочую область или создайте новую рабочую область.
3. Перейдите в панель Создания. Щелкните значок "Создать".
4. Прокрутите страницу, чтобы выбрать базу данных Mirrored SQL Server.
5. Введите имя базы данных SQL Server для зеркального отображения, а затем выберите Create.

Подключите Fabric к экземпляру SQL Server

Чтобы включить зеркальное отображение, необходимо подключиться к экземпляру SQL Server из Fabric, чтобы инициировать подключение из Fabric. Ниже приведены инструкции по созданию подключения к SQL Server.

1. В разделе Новые источники выберите базу данных SQL Server. Или выберите существующее SQL Server подключение из концентратора OneLake.

2. Если выбрано подключение New, введите сведения о подключении к экземпляру SQL Server.

   • Server: Полный путь к полностью квалифицированному имени сервера, который Fabric использует для доступа к вашему экземпляру SQL Server — такой же, как и для SSMS.

   Подсказка

   Для экземпляров SQL Server в группе доступности AlwaysOn используйте прослушиватель Always On для Server.

   • Database. Введите имя SQL Server.
     • Подключение: создание нового подключения.
     • Имя подключения: автоматическое имя предоставляется. Его можно изменить.
     • Шлюз данных: Выберите имя локального шлюза данных, настроенного в соответствии с вашим сценарием.
     • Тип проверки подлинности: выберите метод проверки подлинности и укажите основного пользователя, которого вы настроили в разделе "Использование имени входа и сопоставленного пользователя базы данных".

3. Нажмите Подключиться.

Настройка вторичных реплик групп доступности AlwaysOn

Этот раздел требуется только в том случае, если исходная база данных для зеркального отображения SQL Server в Fabric входит в группу доступности AlwaysOn.

Если исходная база данных находится в группе доступности AlwaysOn, для настройки вторичных реплик необходимо выполнить дополнительные действия. Повторите эти действия для каждой вторичной реплики, чтобы подготовить всю группу доступности. Для каждой реплики требуется настроить задания агента SQL, чтобы CDC вел себя правильно, когда эта реплика является первичной.

1. Переключение группы доступности на вторичную реплику.

2. Используйте предоставленный скрипт для создания в системной базе данных экземпляра msdb вторичной реплики заданий очистки и захвата, если они еще не существуют. Эти задания важны для поддержания исторических данных, сохраненных CDC.

   В следующем скрипте замените <YOUR DATABASE NAME> на имя пользовательской базы данных, которая будет реплицироваться. Выполните следующий пример T-SQL в пользовательской базе данных:

   DECLARE @db nvarchar(128) = '<YOUR DATABASE NAME>';
   
   DECLARE @capture nvarchar(128) = N'cdc.' + @db + N'_capture';
   DECLARE @cleanup nvarchar(128) = N'cdc.' + @db + N'_cleanup';
   -- Names may differ. Run `SELECT * FROM msdb.dbo.sysjobs WHERE category_id = 13 or category_id = 16` to see if these names exist.
   
    IF NOT EXISTS (SELECT name, job_id FROM msdb.dbo.sysjobs WHERE name = @capture)
    BEGIN
        -- Create the capture job
        EXEC sys.sp_cdc_add_job @job_type = N'capture';
        PRINT 'CDC capture job has been created.';
    END
    ELSE
    BEGIN
        PRINT 'CDC capture job already exists.';
        -- Start capture job is running
        IF NOT EXISTS (SELECT j.name, j.enabled, ja.start_execution_date, ja.stop_execution_date
            FROM msdb.dbo.sysjobs AS j
            LEFT JOIN msdb.dbo.sysjobactivity AS ja ON j.job_id = ja.job_id
            WHERE j.name = @capture and ((ja.start_execution_date IS NOT NULL and ja.stop_execution_date IS NULL)) or j.enabled <> 0)
        BEGIN
            EXEC msdb.dbo.sp_start_job @job_name = @capture;
            PRINT 'CDC capture job started running.';
        END
        ELSE
        BEGIN
            PRINT 'CDC capture job already running.';
        END
    END
   
    IF NOT EXISTS (SELECT name,job_id FROM msdb.dbo.sysjobs WHERE name = @cleanup)
    BEGIN
        -- Create the cleanup job
        EXEC sys.sp_cdc_add_job @job_type = N'cleanup';
        PRINT 'CDC cleanup job has been created.';
    END
    ELSE
    BEGIN
        -- Ensure that the cleanup job is properly scheduled (default schedule)
        IF NOT EXISTS (SELECT j.name, j.enabled, ja.start_execution_date, ja.stop_execution_date
            FROM msdb.dbo.sysjobs AS j
            LEFT JOIN msdb.dbo.sysjobactivity AS ja ON j.job_id = ja.job_id
            WHERE j.name = @cleanup and j.enabled <> 0)
        BEGIN
            EXEC msdb.dbo.sp_update_job @job_name = @cleanup, @enabled = 1;
            PRINT 'CDC cleanup job updated to enabled.';
        END
        ELSE
        BEGIN
            PRINT 'CDC cleanup job already enabled.';
        END
        PRINT 'CDC cleanup job already exists.';
    END
   

   Задания захвата и очистки для CDC запускаются немедленно и создаются с параметрами по умолчанию. Дополнительные сведения о заданиях см. в разделе sys.sp_cdc_add_job (Transact-SQL).

3. Каждое задание выполняется по умолчанию на каждой реплике группы доступности, даже если она является вторичной репликой. Это приведет к возникновению ошибок в журналах, так как пользовательские базы данных на вторичных репликах не записываются. Включите два задания CDC на первичных репликах и отключите их на вторичных репликах. Следуйте инструкциям в разделе "Отслеживание измененных данных" в группах доступности AlwaysOn.

Это важно

Все детализированные средства безопасности, установленные в исходной базе данных, должны быть перенастроены в зеркальной базе данных в Microsoft Fabric. Дополнительные сведения см. в разделе Как: Защитить данные зеркальных баз данных Microsoft Fabric в SQL Server.

Запуск процесса зеркалирования

1. Экран "Настройка зеркального отображения" позволяет зеркально отображать все данные в базе данных по умолчанию.

   • Зеркальное отображение всех данных означает, что все новые таблицы, созданные после запуска зеркального отображения, будут зеркально отображаться.

   • При необходимости выберите только определенные объекты для зеркального отображения. Отключите параметр "Зеркальное отображение всех данных ", а затем выберите отдельные таблицы из базы данных.

   В этом руководстве мы выбираем параметр "Зеркальное отображение всех данных ".

2. Выберите "Создать зеркальную базу данных". Начинается зеркальное отображение.

3. Подождите 2-5 минут. Затем выберите "Мониторинг репликации" , чтобы просмотреть состояние.

4. Через несколько минут состояние должно измениться на "Выполнение", что означает синхронизацию таблиц.

   Если таблицы и соответствующее состояние репликации не отображаются, подождите несколько секунд и обновите панель.

5. После завершения первоначального копирования таблиц дата появится в столбце Последнее обновление.

6. Теперь, когда ваши данные работают в полном объёме, доступны различные сценарии аналитики по всему Fabric.

Мониторинг зеркального отображения структуры

После настройки зеркального отображения вы будете перенаправлены на страницу состояния зеркального отображения . Здесь можно отслеживать текущее состояние репликации.

Для получения дополнительной информации и подробностей о состояниях репликации см. раздел Мониторинг зеркальной репликации баз данных в Fabric.

Проверка данных в OneLake

Когда зеркальное отображение Fabric запущено, теперь можно делать запросы к базе данных SQL Server в Microsoft Fabric. Дополнительные сведения см. в разделе Исследование данных в зеркальной базе данных с использованием Microsoft Fabric.

Снимок экрана запроса данных в зеркальной базе данных SQL Server с использованием аналитической конечной точки SQL.

Оптимизация производительности

Теперь, когда зеркальное отображение настроено и работает, узнайте, как оптимизировать производительность исходной и зеркальной базы данных из SQL Server в Microsoft Fabric.

Связанный контент

• Мирроринг SQL Server
• Что такое дублирование в системе Fabric?