Unity Catalog 是 Azure Databricks 中数据和人工智能的统一治理层。 它提供了一个统一的平台,控制访问、发现资产、追踪血统、分类敏感数据,并监控组织内的质量,无论数据存放在哪里。 Unity Catalog 将模型、函数和其他 AI 资产作为可保护对象来管理,就像它管理你的表格和卷一样。
本章介绍了管理您的数据和AI资产的Unity Catalog功能。 人工智能的运行时控制,如模型流量路由、设置护栏以及监控AI使用情况和成本,均通过 Unity AI Gateway涵盖AI治理。 安全性和合规性中介绍了相关的安全主题,例如身份验证、网络、加密和隐私 合规性。
从这里开始
以下资源可帮助你了解 Unity 目录、设置它并遵循建议的做法。
| 主题 | DESCRIPTION |
|---|---|
| 什么是 Unity Catalog? | 了解 Unity 目录对象模型及其管理数据和 AI 资产的方式。 |
| 开始使用 Unity Catalog | 设置 Unity Catalog 并创建您的第一个受治理资产。 |
| Unity Catalog 最佳做法 | 遵循使用 Unity Catalog 设置和管理治理的最佳实践。 |
治理功能
以下功能涵盖使用 Unity 目录管理数据和 AI 资产的主要领域。
| 能力 | DESCRIPTION |
|---|---|
| 访问控制 | 使用特权、基于属性的访问控制以及行筛选器和列掩码授予和管理对数据和 AI 资产的精细访问权限。 |
| 管理标记 | 定义和控制用于对安全对象进行分类和组织的标记。 |
| 数据发现 | 通过目录资源管理器、AI 生成的注释以及认证和已弃用的标记,帮助用户找到所需的数据和 AI 资产。 |
| 数据与人工智能的传承 | 捕捉并可视化数据如何在组织中流动,直至列级,包括消耗数据的模型。 |
| 数据分类 | 自动扫描并标记 Unity Catalog 中各个表里的敏感数据,例如 PII。 |
| 数据质量监视 | 检测目录或架构中的异常,并分析各个表的统计属性。 |
| 审核 | 跟踪谁访问了你的数据,以及他们使用审核日志执行的操作。 |
| 数据共享 | 使用 OpenSharing、Clean Room 和 Databricks 市场跨组织和平台安全地共享数据和 AI 资产。 |
| 使用 Unity AI 网关进行 AI 治理 | 通过Unity AI Gateway管理AI运行时交互,包括模型API、编码代理、代理、AI流量和护栏。 |
帐户和元存储管理员可以在治理中心的数据 页上 看到数据资产的合并摘要,包括资产使用情况、分类覆盖率和数据质量。