외부 시스템에 연결
Azure Databricks는 많은 클라우드 네이티브 데이터 시스템에 대한 기본 제공 통합뿐만 아니라 확장 가능한 JDBC 지원을 제공하여 다른 데이터 시스템에 연결합니다.
이 섹션에 설명된 커넥터는 주로 외부 데이터 시스템의 단일 테이블에 대한 연결을 구성하는 데 중점을 줍니다. 이러한 드라이버 중 일부를 사용하여 외부 시스템에도 데이터를 다시 쓸 수 있습니다.
읽기 전용 데이터 연결의 경우 Databricks는 외부 시스템에서 Azure Databricks에 전체 데이터베이스를 동기화하고 Unity 카탈로그의 제어를 받는 Lakehouse Federation을 사용하는 것이 좋습니다. 레이크하우스 페더레이션이란?을 참조하세요.
또한 파트너 연결은 널리 사용되는 많은 엔터프라이즈 데이터 시스템에 통합을 제공합니다. 많은 파트너 연결 솔루션은 데이터 원본에 연결할 뿐만 아니라 쉽게 ETL을 통해 레이크하우스의 데이터를 최신 상태로 유지할 수 있습니다. Databricks Partner Connect란?을 참조하세요.
JDBC를 사용하여 Azure Databricks에 연결하는 데이터 원본은 무엇인가요?
JDBC를 사용하여 여러 데이터 원본에 연결할 수 있습니다. Databricks Runtime에는 여러 JDBC 데이터베이스용 드라이버가 포함되어 있지만 원하는 데이터베이스에 연결하려면 드라이버 또는 다른 드라이버 버전을 설치해야 할 수 있습니다. 지원되는 데이터베이스는 다음과 같습니다.
- Azure Databricks에서 PostgreSQL 쿼리
- Azure Databricks에서 MySQL 쿼리
- Azure Databricks에서 MariaDB 쿼리
- Azure Databricks에서 SQL Server 쿼리
- Databricks 커넥터를 사용하여 다른 Databricks 작업 영역에 연결
Azure Databricks는 어떤 데이터 서비스와 통합되나요?
다음 데이터 서비스를 사용하려면 연결 설정, 보안 자격 증명 및 네트워킹 설정을 구성해야 합니다. Azure 계정 또는 Azure Databricks 작업 영역에서 관리자 또는 고급 사용자 권한이 필요할 수 있습니다. 일부는 또한 Azure Databricks 라이브러리를 만들어 클러스터에 설치해야 합니다.