使用 Unity 目录进行数据管理

Unity Catalog 是 Azure Databricks 中数据和人工智能的统一治理层。 它提供了一个统一的平台,控制访问、发现资产、追踪血统、分类敏感数据,并监控组织内的质量,无论数据存放在哪里。 Unity Catalog 将模型、函数和其他 AI 资产作为可保护对象来管理,就像它管理你的表格和卷一样。

本章介绍了管理您的数据和AI资产的Unity Catalog功能。 人工智能的运行时控制,如模型流量路由、设置护栏以及监控AI使用情况和成本,均通过 Unity AI Gateway涵盖AI治理。 安全性和合规性中介绍了相关的安全主题,例如身份验证、网络、加密和隐私 合规性

从这里开始

以下资源可帮助你了解 Unity 目录、设置它并遵循建议的做法。

主题 DESCRIPTION
什么是 Unity Catalog? 了解 Unity 目录对象模型及其管理数据和 AI 资产的方式。
开始使用 Unity Catalog 设置 Unity Catalog 并创建您的第一个受治理资产。
Unity Catalog 最佳做法 遵循使用 Unity Catalog 设置和管理治理的最佳实践。

治理功能

以下功能涵盖使用 Unity 目录管理数据和 AI 资产的主要领域。

能力 DESCRIPTION
访问控制 使用特权、基于属性的访问控制以及行筛选器和列掩码授予和管理对数据和 AI 资产的精细访问权限。
管理标记 定义和控制用于对安全对象进行分类和组织的标记。
数据发现 通过目录资源管理器、AI 生成的注释以及认证和已弃用的标记,帮助用户找到所需的数据和 AI 资产。
数据与人工智能的传承 捕捉并可视化数据如何在组织中流动,直至列级,包括消耗数据的模型。
数据分类 自动扫描并标记 Unity Catalog 中各个表里的敏感数据,例如 PII。
数据质量监视 检测目录或架构中的异常,并分析各个表的统计属性。
审核 跟踪谁访问了你的数据,以及他们使用审核日志执行的操作。
数据共享 使用 OpenSharing、Clean Room 和 Databricks 市场跨组织和平台安全地共享数据和 AI 资产。
使用 Unity AI 网关进行 AI 治理 通过Unity AI Gateway管理AI运行时交互,包括模型API、编码代理、代理、AI流量和护栏。

帐户和元存储管理员可以在治理中心的数据 页上 看到数据资产的合并摘要,包括资产使用情况、分类覆盖率和数据质量。