Подключение к Teradata и управление ими в Microsoft Purview
В этой статье описано, как зарегистрировать Teradata, а также как проверить подлинность Teradata и взаимодействовать с ним в Microsoft Purview. Дополнительные сведения о Microsoft Purview см. в вводной статье.
Поддерживаемые возможности
Извлечение метаданных | Полная проверка | Добавочное сканирование | Сканирование с заданной областью | Классификация | Присвоение подписей | Политика доступа | Линии | Общий доступ к данным | Динамическое представление |
---|---|---|---|---|---|---|---|---|---|
Да | Да | Нет | Да | Да | Нет | Нет | Да* | Нет | Нет |
* Помимо происхождения в ресурсах в источнике данных, также поддерживается происхождение, если набор данных используется в качестве источника или приемника в фабрике данных или конвейере Synapse.
Поддерживаемые версии базы данных Teradata — от 12.x до 17.x.
При сканировании источника Teradata Microsoft Purview поддерживает:
Извлечение технических метаданных, включая:
- Сервер
- Databases
- Таблицы, включая столбцы, внешние ключи, индексы и ограничения
- Представления, включая столбцы
- Хранимые процедуры, включая набор данных параметров и результирующий набор
- Функции, включая набор данных параметров
Получение статического происхождения данных о связях ресурсов между таблицами и представлениями.
При настройке проверки можно выбрать проверку всего сервера Teradata или область проверку на подмножество баз данных, соответствующих заданным именам или шаблонам имен.
Известные ограничения
При удалении объекта из источника данных в настоящее время при последующей проверке соответствующий ресурс в Microsoft Purview автоматически не удаляется.
Необходимые разрешения для сканирования
Microsoft Purview поддерживает обычную проверку подлинности (имя пользователя и пароль) для сканирования Teradata. Пользователю должно быть предоставлено разрешение SELECT для каждой отдельной системной таблицы, указанной ниже:
grant select on dbc.tvm to [user];
grant select on dbc.dbase to [user];
grant select on dbc.tvfields to [user];
grant select on dbc.udtinfo to [user];
grant select on dbc.idcol to [user];
grant select on dbc.udfinfo to [user];
Чтобы получить типы данных столбцов представления, Microsoft Purview выдает инструкцию подготовки для select * from <view>
каждого из запросов представления и анализирует метаданные, содержащие сведения о типах данных для повышения производительности. Для этого требуется разрешение SELECT data для представлений. Если разрешение отсутствует, просмотр типов данных столбцов будет пропущен.
Для классификации пользователю также требуется разрешение на чтение таблиц и представлений для получения примеров данных.
Предварительные требования
Учетная запись Azure с активной подпиской. Создайте учетную запись бесплатно.
Активная учетная запись Microsoft Purview.
Для регистрации источника данных и управления им на портале управления Microsoft Purview требуются разрешения администратора источника и читателя данных. Дополнительные сведения о разрешениях см. в статье Управление доступом в Microsoft Purview.
Настройте последнюю локальную среду выполнения интеграции. Дополнительные сведения см. в руководстве по созданию и настройке локальной среды выполнения интеграции.
Убедитесь, что JDK 11 установлен на компьютере, где установлена локальная среда выполнения интеграции. Перезапустите компьютер после установки JDK, чтобы он вступил в силу.
Убедитесь, что на локальном компьютере среды выполнения интеграции установлен Распространяемый компонент Visual C++ (версия Visual Studio 2012 с обновлением 4 или более поздней). Если это обновление не установлено, его можно скачать здесь.
Скачайте драйвер Teradata JDBC на компьютере, где работает локальная среда выполнения интеграции. Запишите путь к папке, который будет использоваться для настройки проверки.
Примечание.
Драйвер должен быть доступен локальной среде выполнения интеграции. По умолчанию локальная среда выполнения интеграции использует учетную запись локальной службы "NT SERVICE\DIAHostService". Убедитесь, что у него есть разрешения "Чтение и выполнение" и "Вывод списка содержимого папки" для папки драйвера.
Регистрация
В этом разделе описывается, как зарегистрировать Teradata в Microsoft Purview с помощью портала управления Microsoft Purview.
Действия по регистрации
Откройте портал управления Microsoft Purview, выполнив следующие действия.
- Перейдите непосредственно к https://web.purview.azure.com учетной записи Microsoft Purview и выберите ее.
- Открытие портал Azure, поиск и выбор учетной записи Microsoft Purview. Нажмите кнопку портала управления Microsoft Purview .
Выберите Карта данных в области навигации слева.
Выберите Зарегистрировать
В разделе Регистрация источников выберите Teradata. Нажмите кнопку Продолжить.
На экране Регистрация источников (Teradata) выполните следующие действия.
Введите имя , которое источник данных будет указан в каталоге.
Введите имя узла , чтобы подключиться к источнику Teradata. Он также может быть IP-адресом сервера.
Выберите коллекцию или создайте новую (необязательно)
Завершите регистрацию источника данных.
Проверка
Выполните приведенные ниже действия, чтобы проверить Teradata для автоматической идентификации ресурсов. Дополнительные сведения о сканировании в целом см. в статье Введение в сканирование и прием данных.
Создание и запуск сканирования
В Центре управления выберите Среды выполнения интеграции. Убедитесь, что настроена локальная среда выполнения интеграции. Если она не настроена, выполните описанные здесь действия, чтобы настроить локальную среду выполнения интеграции.
Перейдите на вкладку Карта данных на левой панели на портале управления Microsoft Purview.
Выберите зарегистрированный источник Teradata.
Выберите Создать сканирование.
Укажите следующие сведения:
Имя: имя сканирования
Подключение через среду выполнения интеграции. Выберите настроенную локальную среду выполнения интеграции.
Учетные данные. Выберите учетные данные для подключения к источнику данных. Убедитесь, что:
- При создании учетных данных выберите Обычная проверка подлинности.
- Укажите имя пользователя для подключения к серверу базы данных в поле Ввода имени пользователя.
- Сохраните пароль сервера базы данных в секретном ключе.
Дополнительные сведения об учетных данных см. здесь по ссылке.
Схема: перечисление подмножества импортируемых баз данных, выраженных в виде списка, разделенного точкой с запятой. Например:
schema1; schema2
. Все пользовательские базы данных импортируются, если этот список пуст. Все системные базы данных (например, SysAdmin) и объекты по умолчанию игнорируются.Допустимые шаблоны имен баз данных, использующие синтаксис выражений SQL LIKE, включают использование %. Пример:
A%; %B; %C%; D
- Начните с A или
- Заканчивается на B или
- Содержать C или
- Равный D
Использование символов NOT и специальных символов недопустимо
Расположение драйвера. Укажите путь к расположению драйвера JDBC на компьютере, где запущена локальная среда выполнения интеграции, например
D:\Drivers\Teradata
. Это путь к допустимому расположению jar-папки. Убедитесь, что драйвер доступен локальной среде выполнения интеграции. Дополнительные сведения см. в разделе предварительных требований.Сведения о хранимой процедуре. Управляет количеством сведений, импортированных из хранимых процедур.
- Сигнатура: имя и параметры хранимых процедур.
- Код, сигнатура: имя, параметры и код хранимых процедур.
- Происхождение, код, сигнатура: имя, параметры и код хранимых процедур, а также происхождение данных, производных от кода.
- Нет: сведения о хранимой процедуре не включаются.
Максимальный объем доступной памяти: Максимальный объем памяти (в ГБ), доступный на виртуальной машине клиента для использования процессами сканирования. Это зависит от размера проверяемого источника Teradata.
Примечание.
Как правило, предоставьте 2 ГБ памяти для каждых 1000 таблиц.
Нажмите Продолжить.
Выберите набор правил сканирования для классификации. Вы можете выбрать системный набор правил по умолчанию, существующие настраиваемые наборы правил или создать новый встроенный набор правил .
Выберите триггер сканирования. Вы можете настроить расписание или запустить проверку один раз.
Просмотрите проверку и выберите Сохранить и запустить.
Просмотр проверок и запусков сканирования
Чтобы просмотреть существующие проверки, выполните приведенные далее действия.
- Перейдите на портал управления Microsoft Purview. В левой области выберите Карта данных.
- Выберите источник данных. Список существующих проверок для этого источника данных можно просмотреть в разделе Последние проверки или просмотреть все проверки на вкладке Сканирование .
- Выберите сканирование с результатами, которые вы хотите просмотреть. На панели отображаются все предыдущие запуски сканирования, а также состояние и метрики для каждого запуска сканирования.
- Выберите идентификатор запуска, чтобы проверка сведения о выполнении проверки.
Управление проверками
Чтобы изменить, отменить или удалить сканирование:
Перейдите на портал управления Microsoft Purview. В левой области выберите Карта данных.
Выберите источник данных. Список существующих проверок для этого источника данных можно просмотреть в разделе Последние проверки или просмотреть все проверки на вкладке Сканирование .
Выберите проверку, которой вы хотите управлять. Далее вы можете:
- Измените сканирование, выбрав Изменить проверку.
- Отмените выполняемую проверку, выбрав Отмена выполнения проверки.
- Удалите сканирование, выбрав Удалить сканирование.
Примечание.
- При удалении сканирования ресурсы каталога, созданные на основе предыдущих проверок, не удаляются.
- Ресурс больше не будет обновляться с изменениями схемы, если исходная таблица изменилась и вы повторно просканируете исходную таблицу после изменения описания на вкладке Схема Microsoft Purview.
Линии
После сканирования источника Teradata можно просмотреть каталог данных или выполнить поиск в каталоге данных , чтобы просмотреть сведения об активе.
Перейдите на вкладку asset — lineage (Ресурс —> происхождение), и при необходимости вы увидите связь активов. Сведения о поддерживаемых сценариях происхождения происхождения данных Teradata см. в разделе поддерживаемых возможностей . Дополнительные сведения о происхождении данных в целом см. в руководстве пользователя по происхождению данных и происхождению данных.
Дальнейшие действия
Теперь, когда вы зарегистрировали источник, следуйте приведенным ниже руководствам, чтобы узнать больше о Microsoft Purview и ваших данных.