Partager via

Inscrire une base de données Lakebase dans le catalogue Unity

Important

La mise à l’échelle automatique Lakebase est en version bêta dans les régions suivantes : eastus2, westeurope, westus.

La version Autoscaling de Lakebase est la dernière de Lakebase, offrant l'autoscaling, la mise à l'échelle à zéro, la bifurcation et la restauration instantanée. Pour la comparaison des fonctionnalités avec Lakebase Provisioned, consultez le choix entre les versions.

L’inscription d’une base de données Lakebase dans Unity Catalog crée un catalogue en lecture seule qui représente votre base de données Postgres, ce qui permet la gouvernance unifiée des données et l’analytique inter source sur vos charges de travail lakehouse et transactionnelles.

Pourquoi s’inscrire dans le catalogue Unity

L’inscription offre plusieurs avantages :

Gouvernance unifiée : appliquez les contrôles de gouvernance du catalogue Unity ( autorisations, suivi de traçabilité et journaux d’audit) à vos données Lakebase en même temps que vos données lakehouse.

Requêtes inter sources : interrogez à la fois les tables de catalogue Unity et les bases de données Lakebase à partir d’une seule interface SQL, ce qui permet l’analytique qui combine des données transactionnelles et analytiques.

Découverte centralisée : parcourez et découvrez des bases de données, des schémas et des tables Lakebase via l’Explorateur de catalogues en même temps que d’autres sources de données dans votre espace de travail.

Flux de travail intégrés : utilisez des données Lakebase dans des tableaux de bord et des applications Databricks sans changer de contexte ou gérer des connexions distinctes.

Fonctionnement

L’inscription crée un catalogue de catalogue Unity en lecture seule qui reflète votre structure de base de données Postgres, fournissant un accès aux métadonnées à vos objets de base de données (schémas, tables, vues) via la couche de gouvernance du catalogue Unity.

Vous lancez l’inscription à partir de l’Explorateur de catalogues plutôt qu’à partir de l’interface Lakebase, qui s’intègre naturellement au flux de travail de création de catalogue de Unity Catalog.

Après l’inscription :

  • Votre base de données Lakebase apparaît sous la forme d’un catalogue dans le catalogue Unity
  • Les autorisations du catalogue Unity contrôlent qui peut afficher et interroger la base de données
  • Le catalogue reste en lecture seule : vous gérez la base de données réelle via Lakebase

Prerequisites

  • Un projet Lakebase existant avec au moins une base de données
  • CREATE CATALOG privilèges sur le metastore du catalogue Unity
  • Un entrepôt SQL serverless pour interroger le catalogue enregistré

Inscrire une base de données

Pour inscrire une base de données Lakebase dans le catalogue Unity :

  1. Utilisez le sélecteur d’applications pour accéder à Lakehouse.
  2. Dans l’Explorateur de catalogues, cliquez sur l’icône plus et créez un catalogue.
  3. Entrez un nom de catalogue (par exemple, lakebase_catalog).
  4. Sélectionnez Lakebase Postgres comme type de catalogue, puis choisissez l’option de mise à l’échelle automatique .
  5. Sélectionnez votre projet, votre branche et votre base de données Postgres.
  6. Cliquez sur Créer.

Inscrire la base de données LKB dans le catalogue Unity

Le catalogue s’affiche dans l’Explorateur de catalogues, où vous pouvez parcourir des schémas, des tables et des vues, et les interroger à l’aide d’entrepôts SQL.

Explorer les bases de données inscrites

Après l’inscription, accédez à votre catalogue dans l’Explorateur de catalogues pour parcourir les schémas, les tables et les vues. Cliquez sur n’importe quelle table pour afficher les détails du schéma, les exemples de données et les informations de traçabilité.

Unity Catalog synchronise automatiquement les métadonnées à partir de votre base de données Lakebase. Lorsque vous ajoutez ou modifiez des tables dans Lakebase, actualisez l’affichage catalogue pour afficher les mises à jour.

Interroger des bases de données inscrites

Interrogez les bases de données Lakebase inscrites à l’aide d’entrepôts SQL ou d’un outil qui se connecte au catalogue Unity :

-- Query a registered :re[LKB] database
SELECT * FROM chatbot_catalog.public.conversations
WHERE created_at >= current_date - INTERVAL 7 DAYS;

-- Join :re[LKB] and lakehouse data
SELECT
  c.conversation_id,
  c.user_id,
  c.agent_response,
  u.user_name,
  u.subscription_tier
FROM chatbot_catalog.public.conversations c
JOIN main.user_analytics.users u
  ON c.user_id = u.user_id;

Le catalogue en lecture seule garantit que les requêtes ne modifient pas votre base de données Lakebase via le catalogue Unity. Pour modifier des données, utilisez l’Éditeur SQL Lakebase ou connectez-vous directement à votre base de données.

Contrôle d’accès et autorisations

Les autorisations du catalogue Unity contrôlent l’accès aux bases de données Lakebase inscrites :

  • Propriété du catalogue : l’utilisateur qui inscrit la base de données devient le propriétaire du catalogue
  • Accès en lecture : Accorder USE CATALOG et SELECT accorder des privilèges pour permettre aux autres utilisateurs d’interroger la base de données
  • Administrateur metastore : les administrateurs metastore peuvent gérer tous les catalogues inscrits

Pour accorder l’accès à une base de données inscrite :

-- Grant read access to a group
GRANT USE CATALOG ON CATALOG chatbot_catalog TO `ai-engineering`;
GRANT SELECT ON CATALOG chatbot_catalog TO `ai-engineering`;

Les autorisations définies dans Unity Catalog contrôlent l’accès aux requêtes via des entrepôts SQL. Les connexions directes à votre base de données Lakebase utilisent des rôles et des autorisations Postgres indépendamment.

Annuler l’inscription d’une base de données

Pour dissocier une base de données Lakebase d'Unity Catalog, sélectionnez le catalogue dans l’explorateur de catalogues, cliquez sur l'icône à trois points, puis sélectionnez Supprimer.

La suppression du catalogue le supprime du catalogue Unity, mais n’affecte pas votre base de données Lakebase. La base de données reste accessible via Lakebase et les connexions Postgres directes.

Note

Si vous avez créé des tables synchronisées à partir de la base de données inscrite, supprimez d’abord ces tables. Chaque table source ne peut être utilisée que pour créer 20 tables synchronisées et les tables synchronisées en attente de suppression comptent vers cette limite.

Limites

Accès en lecture seule : les catalogues inscrits à partir de bases de données Lakebase sont en lecture seule. Vous ne pouvez pas modifier les données par le biais de requêtes De catalogue Unity.

Base de données unique par catalogue : chaque catalogue de catalogue Unity représente une base de données Lakebase. Pour exposer plusieurs bases de données, inscrivez-les séparément.

Synchronisation des métadonnées : Le catalogue Unity met en cache les métadonnées pour réduire les demandes Postgres. Les nouveaux objets peuvent ne pas apparaître immédiatement. Cliquez sur Actualiser l’icône de schéma pour déclencher une actualisation complète.

Isolation des branches : les catalogues enregistrent des bases de données de branches spécifiques. Pour accéder aux données de plusieurs branches, inscrivez une base de données à partir de chaque branche en tant que catalogue distinct.

Étapes suivantes

  • Last updated on