Обнаружение данных в каталоге Unity

Обнаружение данных — это возможность для пользователей в организации находить, понимать и доверять ресурсам данных в каталоге. Как администратор, вы формируете обнаружимость через включённый опыт просмотра, метаданные тегирования и сигналы доверия, которые вы применяете, а также семантический слой, определяющий значение ваших данных. На этой странице представлен обзор возможностей обнаружения данных в Unity Catalog и ссылки на подробную документацию по каждому из них.

Страница обнаружения

Страница Discover — это специально отобранный опыт просмотра, где пользователи находят данные по доменам и поддоменам или по типу активов, а также исследуют рекомендуемые ИИ ресурсы. Кураторы организуют и выделяют самые ценные активы для своей организации, чтобы потребители могли просматривать данные так, чтобы они понимали бизнес.

Чтобы открыть страницу Discover , нажмите Открывайте информацию в боковой панели.

Страница Discover объединяет несколько возможностей для поиска и организации данных:

• Домены и поддомены: бизнес-ориентированная иерархия, которая группирует связанные активы, чтобы пользователи могли просматривать данные по бизнес-зонам.
• Страницы: Управляемые страницы, определяющие бизнес-концепции и термины. Genie One ссылается на эти страницы как на определение источника истины, когда им нужно объяснить ответ на деловом термине.
• Рекомендации на базе ИИ: популярные и ценные активы появлялись автоматически, чтобы помочь кураторам выделить лучшие данные в масштабе.
• Пользовательское курирование: разделы, определяемые куратором, которые выделяют и организуют самые ценные активы для определённой области или всей организации.

Используйте следующие страницы, чтобы узнать больше о странице Discover и основных функциях на ней:

Страница	Описание
Страница обнаружения	Просматривайте отобранные данные по домену или типу активов и ищите по каталогу.
Домены и поддомены	Организуйте активы данных в бизнес-ориентированную иерархию, которую потребители просматривают на странице Discover.
Страницы	Создайте и управляйте страницами, определяющими бизнес-концепции, представленными на странице Discover.

Куратор и потребительский образ

Пользователи взаимодействуют со страницей Discover как одна из двух персон:

• Куратор: создаёт и управляет доменами, назначает им активы, настраивает страницу Discover и позволяет другим членам организации просматривать данные по бизнес-целям. Для Pages куратор может редактировать, публиковать и управлять любой страницей в домене. Для этих действий требуется MANAGE DISCOVERY разрешение, которое администраторы аккаунта могут предоставить на уровне аккаунта, домена или субдомена. См. разрешения кураторов.
• Потребитель: использует страницу Discover для поиска кураторских активов, организованных по домену или типу активов, а также исследует рекомендуемые ИИ активы. Для Pages потребитель может создавать и публиковать страницы, а также просматривать, комментировать и предлагать правки опубликованных страниц в домене, к которому доступен. Инструкции для потребителей.

Обозреватель каталогов

Если страница Discover показывает кураторский подмножество ваших данных, то Catalog Explorer показывает всё в каталогах в иерархии каталогов, а не бизнес-ориентированной. Это интерфейс для прямого просмотра и проверки объектов данных, включая детали, которые не появляются в кураторском представлении: свойства объектов, права доступа, примерные данные и происхождение. Направляйте пользователей на страницу Discover , когда им нужны ресурсы, которые предлагает ваша организация, и на Catalog Explorer, когда им нужна полная картина или нужно осмотреть и настроить конкретный объект.

Чтобы открыть обозреватель каталогов, щелкните Каталог на боковой панели.

Страница	Описание
обозреватель каталогов	Просматривайте и проверяйте объекты Unity Catalog, а также просматривайте их детали, разрешения и взаимосвязи.
Изучить объекты базы данных	Найдите и изучите каталоги, схемы, таблицы и другие объекты базы данных в Catalog Explorer.

Семантика каталога Unity

Семантика Unity Catalog — это набор инструментов, которые помогают вам определить стандартные бизнес-метрики, термины и организационные структуры поверх данных каталога. Это помогает вашей организации и её инструментам искусственного интеллекта работать на основе единой интерпретации значения ваших данных. Семантика Unity Catalog состоит из следующих компонентов:

• Метричные представления определяют и управляют многоразовыми бизнес-KPI.
• Домены и поддомены организуют активы в бизнес-ориентированную иерархию для просмотра на странице Discover .
• Страницы дают каждой бизнес-концепции и термину авторитетное определение.
• Сертификация и отметки по списку — какие активы ваша организация уже проверила, а какие устарели.

Эти определения составляют слой онтологии джинна, смоделированный человеком: бизнес-контекст, который вы четко определяете и управляете. Genie One объединяет этот смоделированный контекст с контекстом, который он автоматически выводит из ваших активов и использования, формируя единый контекстный слой, на который он опирается для ответов на вопросы.

Используйте следующие страницы, чтобы узнать больше о семантике Unity Catalog и её компонентах:

Страница	Описание
Виды метрик	Определять и управлять согласованными, повторно используемыми бизнес-KPI как объекты Unity Catalog.
Домены и поддомены	Организуйте активы данных в бизнес-ориентированную иерархию, которую потребители просматривают на странице Discover.
Страницы	Автор управлял страницами, определяющими бизнес-концепции для людей, и Genie One.
Пометьте данные как сертифицированные или устаревшие	Дайте понять, какие активы данных ваша организация доверяет, а какие устарели.

Tagging

Теги — это атрибуты, которые вы применяете к защищённым объектам Unity Catalog для их организации и категоризации, что облегчает поиск и фильтрацию данных. С управляемыми тегами администраторы отмечают определённые ключи тегов как управляемые и определяют набор разрешённых значений для каждого.

Например, регулируемый sensitivity тег может допускать только public, internal, или restricted, поэтому один и тот же тег применяется одинаково по всему каталогу.

Страница	Описание
Применение тегов к защищаемым объектам каталога Unity	Применяйте и управляйте тегами на объектах каталога для организации и категоризации ваших данных.
Управляемые теги	Отметьте определённые ключи тегов как управляемые и определите их разрешённые значения для согласованного тегирования.

Lineage

Lineage отслеживает, как данные передаются между таблицами, столбцами и AI-активами, чтобы пользователи могли отслеживать, откуда берутся данные и как они используются, прежде чем доверять им. Unity Catalog автоматически фиксирует происхождение для запросов, выполняемых на Azure Databricks, и отображает их в Catalog Explorer.

Страница	Описание
Происхождение в каталоге Unity	Фиксируйте и просматривайте, как данные передаются между таблицами, столбцами, тетрадями и другими активами.
Внешнее происхождение	Отслеживайте родословную для данных, которые перемещаются между Azure Databricks и внешними системами.

Сертификация и выведение из эксплуатации

Вы можете сертифицировать актив данных, чтобы показать, что он соответствует стандартам вашей организации, или устарить его, чтобы предупредить, что он устаревший и не должен использоваться. Эти сигналы появляются рядом с активом в рабочем пространстве и влияют на то, как он появляется в поиске, чтобы пользователи могли решать, стоит ли доверять активу до его использования.

Например, синяя галочка рядом с активом данных означает, что он был сертифицирован.

Страница	Описание
Пометьте данные как сертифицированные или устаревшие	Применяйте системные теги для маркировки активов как сертифицированные или устаревшие активы.