Unity-catalogus gebruiken met gestructureerd streamen

Gebruik Structured Streaming met Unity Catalog om gegevensbeheer te beheren voor uw incrementele en streamingworkloads in Azure Databricks. In dit document vindt u een overzicht van de ondersteunde functionaliteit en worden aanbevolen procedures voorgesteld voor het gebruik van Unity Catalog en Structured Streaming.

Welke functionaliteit voor gestructureerd streamen biedt Unity Catalog ondersteuning?

Unity Catalog voegt geen expliciete limieten toe voor structured streaming-bronnen en sinks die beschikbaar zijn in Azure Databricks. Met het gegevensbeheermodel van Unity Catalog kunt u gegevens streamen uit beheerde en externe tabellen in Unity Catalog. U kunt ook externe locaties gebruiken die worden beheerd door Unity Catalog om te communiceren met gegevens met behulp van objectopslag-URI's. U kunt schrijven naar externe tabellen met behulp van tabelnamen of bestandspaden. U moet communiceren met beheerde tabellen in Unity Catalog met behulp van de tabelnaam.

Gebruik externe locaties die worden beheerd door Unity Catalog bij het opgeven van paden voor structured streaming-controlepunten. Zie Verbinding maken naar opslag in de cloud met behulp van Unity Catalog voor meer informatie over het veilig verbinden van opslag met Unity Catalog.

Ondersteuning voor gestructureerde streamingfuncties verschilt, afhankelijk van de Databricks Runtime-versie die u uitvoert en of u de toegewezen of gedeelde clustertoegangsmodus gebruikt. Zie Streaming-beperkingen voor Unity Catalog voor meer informatie.

Zie zelfstudie: Een end-to-end lakehouse-analysepijplijn uitvoeren voor een end-to-end demo met structured streaming in Unity Catalog.

Welke functionaliteit voor gestructureerd streamen wordt niet ondersteund in Unity Catalog?

Zie Streaming-beperkingen voor Unity Catalog voor een lijst met structured streaming-functies die niet worden ondersteund in Unity Catalog.