Matillion 연결

Matillion ETL은 Azure Databricks를 비롯한 클라우드 데이터베이스 플랫폼을 위해 특별히 빌드된 ETL/ELT 도구입니다. Matillion ETL에는 강력한 푸시다운 ETL/ELT 기능을 갖춘 최신 브라우저 기반 UI가 있습니다.

Databricks SQL 웨어하우스(이전의 Databricks SQL 엔드포인트) 및 Azure Databricks 클러스터를 Matillion과 통합할 수 있습니다.

Partner Connect를 사용하여 Matillion에 연결

이 섹션에서는 Partner Connect를 사용하여 Azure Databricks 작업 영역의 기존 SQL 웨어하우스 또는 클러스터를 Matillion에 연결하는 프로세스를 단순화하는 방법을 설명합니다.

요구 사항

Partner Connect 사용에 대한 요구 사항을 참조하세요.

연결 단계

Partner Connect를 사용하여 Matillion에 연결하려면 이 섹션의 단계를 수행합니다.

팁

기존 Matillion 계정이 있는 경우 Databricks는 Matillion에 수동으로 연결하는 것이 좋습니다. Partner Connect의 연결 환경이 새 파트너 계정에 최적화되어 있기 때문입니다.

1. 사이드바에서 파트너 연결을 클릭합니다 .

2. Matillion 타일을 클릭합니다.

   이메일 상자에는 Azure Databricks 계정의 이메일 주소가 표시됩니다. Matillion은 이 이메일 주소를 사용하여 새 Matillion 계정을 만들거나 기존 Matillion 계정에 로그인하라는 메시지를 표시합니다.

3. Matillion ETL에 연결 또는 로그인을 클릭합니다.

   Matillion Hub를 표시하는 새 탭이 브라우저에서 열립니다.

4. Matillion 화면상의 지침을 완료하여 14일 평가판 Matillion 계정을 만들거나 기존 Matillion 계정에 로그인합니다.

   Important

   조직의 누군가가 이미 Matillion으로 계정을 만들었다는 오류가 표시되면 조직의 관리자 중 한 명에게 연락하여 조직의 Matillion 계정에 사용자를 추가하도록 합니다. 사용자가 추가되면 사용자의 기존 Matillion 계정에 로그인합니다.

5. 화면상의 지침에 따라 작업 세부 정보를 제공한 다음 계속을 클릭합니다.

6. 화면상의 지침에 따라 조직을 만든 다음 계속을 클릭합니다.

7. 만든 조직을 클릭한 다음 Matillion ETL 인스턴스 추가를 클릭합니다.

8. Azure에서 계속을 클릭합니다.

   Azure Portal이 열립니다.

9. 6단계부터 Matillion ETL 설명서의 Azure ARM 템플릿에서 Matillion ETL 시작을 따릅니다.

10. Matillion ETL 설명서의 지침을 따릅니다.

    Matillion ETL이 브라우저에서 열리고 프로젝트 만들기 대화 상자가 표시됩니다.

11. Matillion 설명서의 Databricks 프로젝트에서 Delta Lake 만들기를 따릅니다.

    다음 지침 내의 Delta Lake 연결 섹션에 있는 설정에 대해 다음 정보를 입력합니다.

    • 작업 영역 ID에 Azure Databricks 작업 영역별 URL의 작업 영역 ID를 입력합니다. 첫 번째 "점"(.) 뒤의 아무 것도 포함하지 마세요. 작업 영역 인스턴스 이름, URL 및 ID를 참조하세요.
    • 사용자 이름에 token 단어를 입력합니다.
    • 암호의 경우 Azure Databricks 개인용 액세스 토큰의 값을 입력합니다.

    작업 영역 ID를 가져오고 개인용 액세스 토큰을 생성하려면 다음을 수행합니다.

    1. 브라우저에서 Partner Connect 탭으로 돌아갑니다.

    2. 작업 영역 ID를 기록해 둡니다.

    3. 새 토큰 생성을 클릭합니다.

       브라우저에서 Azure Databricks UI의 설정 페이지를 표시하는 새 탭이 열립니다.

    4. 새 토큰 생성을 클릭합니다.

    5. 필요에 따라 설명(주석) 및 만료 기간을 입력합니다.

    6. 생성을 클릭합니다.

    7. 생성된 개인용 액세스 토큰을 복사하여 안전한 위치에 저장합니다.

    8. 브라우저에서 Matillion 탭으로 돌아갑니다.

    이 지침 안의 Delta Lake 기본값에 있는 설정에서 클러스터에 대해 SQL 웨어하우스 또는 클러스터의 이름을 선택합니다.

12. 다음 단계를 계속합니다.

수동으로 Matillion에 연결

이 섹션에서는 Azure Databricks 작업 영역의 기존 SQL 웨어하우스 또는 클러스터를 Matillion에 수동으로 연결하는 방법을 설명합니다.

참고 항목

Partner Connect를 사용해 Matillion에 연결하여 환경을 간소화할 수 있습니다.

요구 사항

수동으로 Matillion과 통합하기 전에 다음이 있어야 합니다.

• 등록된 Matillion Hub 계정.

• Azure Marketplace 또는 ARM(Azure Resource Manager)을 사용하여 시작할 수 있는 Matillion ETL 인스턴스.

• Azure Databricks 개인용 액세스 토큰 또는 Microsoft Entra ID 토큰입니다.

  참고 항목

  보안 모범 사례로, 자동화된 도구, 시스템, 스크립트 및 앱을 사용하여 인증하는 경우 Databricks는 작업 영역 사용자 대신 서비스 주체에 속한 개인용 액세스 토큰을 사용하는 것이 좋습니다. 서비스 주체에 대한 토큰을 만들려면 서비스 주체에 대한 토큰 관리를 참조하세요.

연결 단계

Matillion에 수동으로 연결하려면 다음을 수행합니다.

1. 작업 영역 내에서 사용하려는 기존 컴퓨팅 리소스(SQL 웨어하우스 또는 클러스터)의 이름을 가져옵니다. 나중에 해당 이름을 선택하여 컴퓨팅 리소스와 Matillion ETL 인스턴스 간의 연결을 완료합니다.

   • 작업 영역에서 SQL 웨어하우스를 보려면 사이드바에서 SQL Warehouse를 클릭합니다 . 새 SQL 웨어하우스를 만들려면 SQL 웨어하우스 만들기를 참조하세요.
   • 작업 영역에서 클러스터를 보려면 사이드바에서 컴퓨팅을 클릭합니다 . 클러스터를 만들려면 컴퓨팅 구성 참조를 참조하세요.

2. Matillion 설명서의 Matillion ETL 인스턴스에 연결하고 로그인합니다.를 따릅니다.

3. Matillion 설명서의 Databricks 프로젝트에서 Delta Lake 만들기를 따릅니다.

   다음 지침 내의 Delta Lake 연결 섹션에 있는 설정에 대해 다음 정보를 입력합니다.

   • 작업 영역 ID에 Azure Databricks 작업 영역별 URL의 작업 영역 ID를 입력합니다. 첫 번째 "점"(.) 뒤의 아무 것도 포함하지 마세요. 작업 영역 인스턴스 이름, URL 및 ID를 참조하세요.
   • 사용자 이름에 token 단어를 입력합니다.
   • 암호의 경우 Azure Databricks 개인용 액세스 토큰 또는 Microsoft Entra ID 토큰을 입력합니다.

   이 지침 안의 Delta Lake 기본값에 있는 설정에서 클러스터에 대해 SQL 웨어하우스 또는 클러스터의 이름을 선택합니다.

4. 다음 단계를 계속합니다.

다음 단계

Matillion 웹 사이트에서 다음 리소스 중 하나 이상을 살펴봅니다.

• Matillion ETL 제품 개요
• UI 및 기본 함수
• 설명서
• 지원