Verbinding maken met gegevensbronnen vanuit Azure Databricks

  • Artikel

Dit artikel bevat koppelingen naar alle verschillende gegevensbronnen in Azure die kunnen worden verbonden met Azure Databricks. Volg de voorbeelden in deze koppelingen om gegevens uit de Azure-gegevensbronnen (bijvoorbeeld Azure Blob Storage, Azure Event Hubs, enzovoort) te extraheren in een Azure Databricks-cluster en analytische taken op deze gegevensbronnen uit te voeren.

Vereisten

  • U moet een Azure Databricks-werkruimte en een Spark-cluster hebben. Volg de instructies in Aan de slag.

Gegevensbronnen voor Azure Databricks

De volgende lijst bevat de gegevensbronnen in Azure die u kunt gebruiken met Azure Databricks. Zie Gegevensbronnen voor Azure Databricks voor een volledige lijst met gegevensbronnen die kunnen worden gebruikt met Azure Databricks.

  • Azure SQL database (Azure SQL-database)

    Deze koppeling biedt de DataFrame-API voor het maken van verbinding met SQL-databases met behulp van JDBC en het beheren van de parallelle uitvoering van leesbewerkingen via de JDBC-interface. In dit onderwerp vindt u gedetailleerde voorbeelden met behulp van de Scala-API, met afgekorte Python- en Spark SQL-voorbeelden aan het einde.

  • Azure Data Lake Storage

    Deze koppeling bevat voorbeelden van het gebruik van de Azure Active Directory-service-principal voor verificatie met Azure Data Lake Storage. Het bevat ook instructies voor het openen van de gegevens in Azure Data Lake Storage vanuit Azure Databricks.

  • Azure Blob Storage

    Deze koppeling bevat voorbeelden van het rechtstreeks openen van Azure Blob Storage vanuit Azure Databricks met behulp van een toegangssleutel of de SAS voor een bepaalde container. De koppeling biedt ook informatie over het openen van de Azure Blob Storage vanuit Azure Databricks met behulp van de RDD-API.

  • Azure Cosmos DB

    Deze koppeling bevat instructies voor het gebruik van de Azure Cosmos DB Spark-connector van Azure Databricks voor toegang tot gegevens in Azure Cosmos DB.

  • Azure Event Hubs

    Deze koppeling bevat instructies voor het gebruik van de Azure Event Hubs Spark-connector van Azure Databricks voor toegang tot gegevens in Azure Event Hubs.

  • Azure SQL Data Warehouse

    Deze koppeling bevat instructies voor het gebruik van de Azure SQL Data Warehouse-connector om verbinding te maken vanuit Azure Databricks.

Volgende stappen

Zie Gegevensbronnen voor Azure Databricks voor meer informatie over bronnen van waaruit u gegevens kunt importeren in Azure Databricks.