Herstellen einer Verbindung mit verwalteten Erfassungsquellen

Von Lakeflow Connect verwaltete Erfassungsverbindungen speichern Authentifizierungsdaten für Ihre Datenquellen in Unity Catalog. Jeder Benutzer mit der Berechtigung USE CONNECTION für die Verbindung kann verwaltete Ingestionspipelines aus Quellen wie Salesforce und SQL Server erstellen.

Ein Administratorbenutzer muss die Verbindung erstellen, wenn die Benutzer, die Pipelines erstellen, Nichtadministratorbenutzer sind oder programmgesteuerte Schnittstellen verwenden. Diese Schnittstellen erfordern, dass Benutzer beim Erstellen einer Pipeline eine vorhandene Verbindung angeben.

Alternativ können Administratoren eine Verbindung und eine Pipeline gleichzeitig in der Datenaufnahme-UI erstellen. Siehe Managed Connectors in Lakeflow Connect.

Aufnahme im Vergleich zu Partnerverbundverbindungen

Lakeflow Connect bietet vollständig verwaltete Eingabeverbindungen für Unternehmensanwendungen und Datenbankquellen. Lakehouse Federation ermöglicht es Ihnen, externe Datenquellen abzufragen, ohne Ihre Daten zu verschieben. Sie können Verbindungen sowohl für Aufnahme als auch für die Abfrageföderation im Katalog-Explorer erstellen.

Berechtigungsanforderungen

Die Benutzerberechtigungen, die zum Herstellen einer Verbindung mit einer verwalteten Aufnahmequelle erforderlich sind, hängen von der von Ihnen ausgewählten Schnittstelle ab:

Szenario Unterstützte Schnittstellen Erforderliche Benutzerberechtigungen
Ein Administratorbenutzer erstellt gleichzeitig eine Verbindung und eine Aufnahmepipeline. Datenaufnahme-UI
  • CREATE CONNECTION im Metastore
  • USE CATALOG für den Zielkatalog
  • (SaaS-Apps) USE SCHEMA und CREATE TABLE für ein vorhandenes Schema oder CREATE SCHEMA für den Zielkatalog
  • (Datenbanken) USE SCHEMA, CREATE TABLE, CREATE VOLUME auf einem vorhandenen Schema oder CREATE SCHEMA im Zielkatalog
Ein Administratorbenutzer erstellt eine Verbindung für Nicht-Administratorbenutzer, mit der Pipelines erstellt werden. Administrator:
  • Katalog-Explorer

Nicht-Administrator:
  • Datenaufnahme-UI
  • Deklarative Automatisierungspakete
  • Databricks-APIs
  • Databricks-SDKs
  • Databricks-Befehlszeilenschnittstelle
Administrator:
  • CREATE CONNECTION im Metastore

Nicht-Administrator:
  • USE CONNECTION bei einer bestehenden Verbindung
  • USE CATALOG für den Zielkatalog
  • (SaaS-Apps) USE SCHEMA und CREATE TABLE für ein vorhandenes Schema oder CREATE SCHEMA für den Zielkatalog
  • (Datenbanken) USE SCHEMA, CREATE TABLE, CREATE VOLUME auf einem vorhandenen Schema oder CREATE SCHEMA im Zielkatalog

Verbindung erstellen

Schritt-für-Schritt-Anleitungen zum Erstellen einer Unity Catalog-Verbindung für eine bestimmte verwaltete Ingestionsquelle finden Sie auf der Seite „Verbindung erstellen“ des jeweiligen Connectors in der Dokumentation zu verwalteten Connectors.

Nächste Schritte

Nachdem Sie eine Verbindung mit Ihrer verwalteten Aufnahmequelle im Katalog-Explorer erstellt haben, kann jeder Benutzer mit den Berechtigungen für die USE CONNECTION Verbindung eine Aufnahmepipeline auf folgende Weise erstellen:

  • Ingestion-Assistent (nur unterstützte Connectoren)
  • Deklarative Automatisierungspakete
  • Databricks-APIs
  • Databricks-SDKs
  • Databricks-Befehlszeilenschnittstelle

Anweisungen zum Erstellen von Pipelines finden Sie in der Dokumentation zum verwalteten Connector.