Azure Databricks에 Tableau 커넥트

  • 아티클

이 문서에서는 Azure Databricks를 Tableau Desktop에 연결하는 방법을 보여 줍니다. 다른 Tableau 버전에 대한 정보가 포함되어 있습니다. 파트너 커넥트 통해 연결하거나 수동으로 연결할 수 있습니다.

Tableau에서 Azure Databricks를 데이터 원본으로 사용하는 경우 대규모 데이터 집합으로 확장해 강력한 대화형 분석을 제공하여 데이터 과학자 및 데이터 엔지니어의 기여를 비즈니스 분석가에게 제공할 수 있습니다.

Tableau Desktop을 사용하여 보고서 및 시각화를 빌드하는 방법에 대한 자세한 내용은 자습서: Tableau Desktop 시작을 참조하세요.

요구 사항

Partner Connect를 사용하여 Tableau Desktop에 연결

파트너 커넥트 사용하여 몇 번의 클릭만으로 Tableau Desktop과 클러스터 또는 SQL 웨어하우스를 연결할 수 있습니다.

  1. Azure Databricks 계정, 작업 영역 및 로그인한 사용자가 모두 Partner Connect에 대한 요구 사항을 충족하는지 확인합니다.
  2. 사이드바에서 파트너 커넥트 클릭합니다파트너 커넥트 단추.
  3. Tableau 타일을 클릭합니다.
  4. 파트너에 연결 대화 상자에서 컴퓨팅의 경우 연결하려는 Azure Databricks 컴퓨팅 리소스의 이름을 선택합니다.
  5. 연결 파일 다운로드를 선택합니다.
  6. Tableau Desktop을 시작하는 다운로드한 연결 파일을 엽니다.
  7. Tableau Desktop에서 인증 자격 증명을 입력한 다음 로그인을 클릭합니다.
    • Microsoft Entra ID 토큰을 사용하려면 사용자 이름에 대한 토큰과 암호에 대한 Microsoft Entra ID 토큰을 입력합니다.
    • Azure Databricks 개인용 액세스 토큰을 사용하려면 사용자 이름에 대한 토큰과 암호에 대한 개인 액세스 토큰을 입력합니다.
    • Microsoft Entra ID 자격 증명을 사용하려면 커넥트 편집을 클릭하고 데이터 탭에서 데이터베이스를 두 번 클릭한 다음 인증 목록에서 Microsoft Entra ID를 선택합니다.

      • Tableau Desktop 2021.1 이상의 경우:

        1. Microsoft Entra ID(이전의 Azure Active Directory) B2B 게스트 계정 또는 Azure Government의 Azure Databricks를 사용하지 않는 경우 OAuth 엔드포인트로 입력 https://login.microsoftonline.com/common 하기만 하면 됩니다.

        인증 구성

        1. Azure Government에서 Microsoft Entra ID B2B 게스트 계정 또는 Azure Databricks를 사용하는 경우 관리자에게 문의하여 전용 Microsoft Entra ID 웨어하우스를 가져옵니다.

        참고 항목

        관리자가 아닌 경우 관리자 승인 필요 오류가 표시됩니다. 전역 관리자, 클라우드 애플리케이션 관리자 또는 애플리케이션 관리자에게 Tableau에 연결할 수 있는 권한을 부여해 달라고 요청한 다음 다시 로그인을 시도합니다.

        Microsoft Entra ID 계정에 관리자 동의 워크플로가 사용하도록 설정된 경우 Tableau Desktop에서 Tableau에 대한 액세스를 요청하라는 메시지를 표시합니다. 전역 관리자, 클라우드 애플리케이션 관리자 또는 애플리케이션 관리자가 요청을 승인한 후 다시 로그인을 시도합니다.

Tableau Desktop에 성공적으로 연결한 후 여기에서 중지할 수 있습니다. 이 문서의 나머지 정보는 Tableau Desktop에 수동으로 연결, Linux에서 Tableau Server 설정, Tableau Online 사용 방법, Tableau를 사용한 모범 사례 및 문제 해결과 같은 Tableau에 대한 추가 정보를 다룹니다.

Tableau Desktop에 수동으로 연결

다음 지침에 따라 Tableau Desktop을 사용하여 클러스터 또는 SQL 웨어하우스에 연결합니다.

참고 항목

Tableau Desktop을 사용하여 더 빠르게 연결하려면 Partner Connect를 사용합니다.

  1. Tableau Desktop을 시작합니다.

  2. 파일 > 새로 만들기를 클릭합니다.

  3. 데이터 탭에서 데이터에 연결을 클릭합니다.

  4. 커넥터 목록에서 Databricks를 클릭합니다.

  5. 서버 호스트 이름 및 HTTP 경로를 입력합니다.

  6. 인증의 경우 인증 방법을 선택하고 인증 자격 증명을 입력한 다음 로그인을 클릭합니다.

    • Microsoft Entra ID 토큰을 사용하려면 개인용 액세스 토큰을 선택하고 암호에 대한 Microsoft Entra ID 토큰을 입력합니다.

    • Azure Databricks 개인용 액세스 토큰을 사용하려면 개인 액세스 토큰을 선택하고 암호에 대한 개인 액세스 토큰을 입력합니다.

    • Microsoft Entra ID 자격 증명을 사용하려면 Microsoft Entra ID를 선택합니다.

      Tableau Desktop 2021.1 이상의 경우:

      • Microsoft Entra ID(이전의 Azure Active Directory) B2B 게스트 계정 또는 Azure Government의 Azure Databricks를 사용하지 않는 경우 OAuth 엔드포인트로 입력 https://login.microsoftonline.com/common 하기만 하면 됩니다.

        인증 구성

        • Azure Government에서 Microsoft Entra ID B2B 게스트 계정 또는 Azure Databricks를 사용하는 경우 관리자에게 문의하여 전용 Microsoft Entra ID 웨어하우스를 가져옵니다.

      참고 항목

      관리자가 아닌 경우 관리자 승인 필요 오류가 표시됩니다. 전역 관리자, 클라우드 애플리케이션 관리자 또는 애플리케이션 관리자에게 Tableau에 연결할 수 있는 권한을 부여해 달라고 요청한 다음 다시 로그인을 시도합니다.

      Microsoft Entra ID 계정에 관리자 동의 워크플로가 사용하도록 설정된 경우 Tableau Desktop에서 Tableau에 대한 액세스를 요청하라는 메시지를 표시합니다. 전역 관리자, 클라우드 애플리케이션 관리자 또는 애플리케이션 관리자가 요청을 승인한 후 다시 로그인을 시도합니다.

    작업 영역에 Unity 카탈로그를 사용하도록 설정한 경우 기본 카탈로그를 추가로 설정합니다. 고급 탭에서 연결 속성에 대해 Catalog=<catalog-name>을 추가합니다. 기본 카탈로그를 변경하려면 초기 SQL 탭에서 USE CATALOG <catalog-name>을 입력합니다.

Tableau Desktop에 성공적으로 연결한 후 여기에서 중지할 수 있습니다. 이 문서의 나머지 정보는 Linux에서 Tableau Server 설정, Tableau Online 사용 방법, Tableau를 사용한 모범 사례 및 문제 해결과 같은 Tableau에 대한 추가 정보를 다룹니다.

Tableau Server on Linux

다음을 포함하도록 /etc/odbcinst.ini을 편집합니다.

[Simba Spark ODBC Driver 64-bit]
Description=Simba Spark ODBC Driver (64-bit)
Driver=/opt/simba/spark/lib/64/libsparkodbc_sb64.so

참고 항목

Tableau Server on Linux는 64비트 처리 아키텍처를 권장합니다.

Tableau Online에서 통합 문서 게시 및 새로 고침

이 문서에서는 Tableau Desktop에서 Tableau Online으로 통합 문서를 게시하고 데이터 원본이 변경되면 업데이트된 상태로 유지하는 방법을 안내합니다. Tableau Desktop의 통합 문서와 Tableau Online 계정이 필요합니다.

  1. Tableau Desktop에서 통합 문서의 데이터를 추출합니다. Tableau Desktop에서 게시할 통합 문서가 표시된 상태에서 데이터 ><data-source-name>> 데이터 추출을 클릭합니다.
  2. 데이터 추출 대화 상자에서 추출을 클릭합니다.
  3. 추출된 데이터를 저장할 로컬 컴퓨터의 위치로 이동시킨 다음 저장을 클릭합니다.
  4. 통합 문서의 데이터 원본을 Tableau Online에 게시합니다. Tableau Desktop에서 서버 > 데이터 원본 게시 ><data-source-name>를 클릭합니다.
  5. Tableau Server 로그인 대화 상자가 표시되면 Tableau Online 링크를 클릭하고 화면의 지시에 따라 Tableau Online에 로그인합니다.
  6. Tableau Online에 데이터 원본 게시 대화 상자의 새로 고침 사용 안 함 옆에 있는 편집 링크를 클릭합니다.
  7. 표시되는 플라이아웃 상자에서 인증의 경우 새로 고침 사용 안 함 상태로 변경하여 새로 고침 액세스를 허용합니다.
  8. 이 플라이아웃 외부의 아무 곳이나 클릭하여 숨깁니다.
  9. 게시된 데이터 원본을 사용하도록 통합 문서 업데이트를 선택합니다.
  10. 게시를 클릭합니다. 데이터 원본이 Tableau Online에 표시됩니다.
  11. Tableau Online의 게시 완료 대화 상자에서 일정을 클릭하고 화면의 지시를 따릅니다.
  12. Tableau Online에 통합 문서를 게시합니다. Tableau Desktop에서 게시할 통합 문서가 표시된 상태에서 서버 > 통합 문서 게시를 클릭합니다.
  13. Tableau Online에 통합 문서 게시 대화 상자에서 게시를 클릭합니다. 통합 문서가 Tableau Online에 표시됩니다.

Tableau Online은 설정한 일정에 따라 데이터 원본의 변경 내용을 확인하고 변경 내용이 감지되면 게시된 통합 문서를 업데이트합니다.

자세한 정보는 Tableau 웹 사이트에서 다음을 참조하세요.

모범 사례 및 문제 해결

Tableau 쿼리를 최적화하기 위한 두 가지 기본 작업은 다음과 같습니다.

  • 단일 차트 또는 대시보드에서 쿼리 및 시각화되는 레코드 수를 줄입니다.
  • 단일 차트 또는 대시보드에서 Tableau에서 보내는 쿼리 수를 줄입니다.

먼저 시도할 것을 결정하는 것은 대시보드에 따라 달라집니다. 동일한 대시보드에 있는 개별 사용자에 대한 여러 차트가 있는 경우 Tableau가 Azure Databricks에 너무 많은 쿼리를 보낼 가능성이 높습니다. 차트가 몇 개뿐이지만 로드하는 데 시간이 오래 걸리는 경우 Azure Databricks에서 반환되는 레코드가 너무 많아 효과적으로 로드할 수 없을 수도 있습니다.

Tableau Desktop 및 Tableau Server 모두에서 사용할 수 있는 Tableau 성능 기록을 사용하면 특정 워크플로 또는 대시보드를 실행할 때 대기 시간을 발생시키는 프로세스를 식별하여 성능 병목 현상이 있는 위치를 파악할 수 있습니다.

성능 기록을 사용하여 Tableau 이슈 디버그

예를 들어 쿼리 실행이 문제인 경우 쿼리하는 데이터 엔진 프로세스 또는 데이터 원본과 관련이 있다는 것을 알 수 있습니다. 시각적 레이아웃이 느리게 수행되는 경우 VizQL임을 알 수 있습니다.

성능 기록에 대기 시간이 쿼리 실행 중이라고 표시되면 Azure Databricks에서 결과를 반환하거나 ODBC/커넥터 오버레이가 데이터를 VizQL용 SQL 처리하는 데 너무 많은 시간이 소요되는 것일 수 있습니다. 이 경우 모든 항목을 하나의 대시보드로 밀어 넣고 빠른 필터에 의존하는 대신 반환되는 항목을 분석하고 그룹, 세그먼트 또는 아티클당 대시보드를 갖도록 분석 패턴을 변경해야 합니다.

정렬 또는 시각적 레이아웃으로 인해 성능이 저하되는 경우 대시보드에서 반환하려는 표시 수가 문제일 수 있습니다. Azure Databricks는 100만 개의 레코드를 신속하게 반환할 수 있지만 Tableau는 레이아웃을 계산하고 결과를 정렬하지 못할 수 있습니다. 이런 문제가 있는 경우 쿼리를 집계하고 하위 수준으로 드릴합니다. Tableau는 실행 중인 컴퓨터의 물리적 리소스에 의해서만 제한되므로 더 강력한 컴퓨터를 사용해 볼 수도 있습니다.

성능 레코더에 대한 자세한 자습서는 성능 기록 만들기를 참조하세요.

Tableau Server 대비 Tableau Desktop의 성능

일반적으로 Tableau Desktop에서 실행되는 워크플로는 Tableau Server보다 더 빠르지 않습니다. Tableau Desktop에서 실행되지 않는 대시보드는 Tableau Server에서 실행되지 않습니다. 기억해야 할 중요한 정보입니다.

실제로 Tableau Server는 문제를 해결할 때 고려해야 할 프로세스가 더 많기 때문에 Desktop에서 작업하는 것이 훨씬 더 나은 문제 해결 기술입니다. Tableau Desktop에서 작동하지만 Tableau Server에서는 작동하지 않는 경우 Tableau Desktop에 없는 Tableau Server의 프로세스로 이슈를 안전하게 좁혀 나갈 수 있습니다.

구성

기본적으로 연결 URL의 매개 변수는 Simba ODBC DSN의 매개 변수를 재정의합니다. Tableau에서 ODBC 구성을 사용자 지정할 수 있는 두 가지 방법이 있습니다.

  • 단일 데이터 원본에 대한 .tds 파일:

    1. 데이터 원본 저장의 지침에 따라 데이터 원본에 대한 .tds 파일을 내보냅니다.
    2. .tds 파일에서 속성 줄 odbc-connect-string-extras=''을 찾아 매개 변수를 설정합니다. 예를 들어 AutoReconnect 및 UseNativeQuery을 사용하려면 줄을 odbc-connect-string-extras='AutoReconnect=1,UseNativeQuery=1'로 변경할 수 있습니다.
    3. 연결을 다시 연결하여 .tds 파일을 다시 로드합니다.

    컴퓨팅 리소스는 큰 결과를 수집하기 위해 더 적은 힙 메모리를 사용하도록 최적화되어 Simba ODBC의 기본값보다 페치 블록당 더 많은 행을 제공할 수 있습니다. RowsFetchedPerBlock=100000'속성 값에 odbc-connect-string-extras을 추가합니다.

  • 모든 데이터 원본에 대한 .tdc 파일:

    1. .tdc 파일을 만든 적이 없는 경우 TableauTdcExample.tdc를 폴더 Document/My Tableau Repository/Datasources에 추가할 수 있습니다.
    2. 대시보드를 공유할 때 작동하도록 모든 개발자의 Tableau Desktop 설치에 파일을 추가합니다.

차트 최적화(워크시트)

Tableau 워크시트의 성능을 개선하는 데 도움이 되는 다양한 전략적인 차트 최적화가 있습니다.

자주 변경되지 않고 상호 작용할 수 없는 필터의 경우 컨텍스트 필터를 사용하여 실행 시간을 단축합니다. 또 다른 좋은 규칙은 쿼리의 case/when 문 대신 if/else 문을 사용하는 것입니다.

Tableau는 필터를 데이터 원본으로 푸시다운하여 쿼리 속도를 크게 향상시킬 수 있습니다. 데이터 원본 푸시다운 필터에 대한 자세한 정보는 매개 변수를 사용하여 여러 데이터 원본에서 필터링 및 여러 데이터 원본에서 데이터 필터를 참조하세요.

전체 데이터 집합을 검사해야 하므로 테이블 계산을 방지하는 것이 가장 좋습니다. 테이블 계산에 대한 자세한 정보는 테이블 계산을 사용하여 값 변환을 참조하세요.

대시보드 최적화

다음은 Tableau 대시보드의 성능을 향상시키기 위해 적용할 수 있는 다양한 팁과 문제 해결 연습입니다.

Azure Databricks에 연결된 Tableau 대시보드와 관련된 일반적인 이슈의 원인은 다양한 사용자, 함수 또는 세그먼트를 제공하는 개별 대시보드에서 빠른 필터를 사용하는 것입니다. 대시보드의 모든 차트에 전역 빠른 필터를 연결할 수 있습니다. 그것은 좋은 기능이긴 하지만 빠르게 문제를 일으킬 수 있는 기능입니다. 5개의 차트가 있는 대시보드에서 하나의 전역 빠른 필터를 사용하면 최소 10개의 쿼리가 Azure Databricks로 전송됩니다. 이렇게 하면 더 많은 필터가 추가되고, Spark가 동일한 순간에 시작하는 많은 동시 쿼리를 처리하도록 빌드되지 않았기 때문에 심각한 성능 문제가 발생할 수 있습니다. 이 문제는 사용 중인 Azure Databricks 클러스터 또는 SQL 웨어하우스가 대용량 쿼리를 처리할 만큼 충분히 크지 않을 때 더 문제가 됩니다.

첫 번째 단계로 Tableau 성능 기록을 사용하여 이슈의 원인이 될 수 있는 문제를 해결하는 것이 좋습니다.

정렬 또는 시각적 레이아웃으로 인해 성능이 저하되는 경우 대시보드에서 반환하려는 표시 수가 문제일 수 있습니다. Azure Databricks는 100만 개의 레코드를 신속하게 반환할 수 있지만 Tableau는 레이아웃을 계산하고 결과를 정렬하지 못할 수 있습니다. 이런 문제가 있는 경우 쿼리를 집계하고 하위 수준으로 드릴합니다. Tableau는 실행 중인 컴퓨터의 물리적 리소스에 의해서만 제한되므로 더 강력한 컴퓨터를 사용해 볼 수도 있습니다.

Tableau에서 드릴다운하는 방법에 대한 자세한 내용은 세부 정보 드릴다운을 참조하세요.

일반적으로 많은 세분화된 표시를 보는 것은 인사이트를 제공하지 않기 때문에 분석 패턴이 좋지 않은 경우가 많습니다. 더 높은 수준의 집계에서 드릴다운하는 것이 더 합리적이며 처리 및 시각화해야 하는 레코드 수가 줄어듭니다.

작업을 사용하여 대시보드 최적화

"ocean boiled" 대시보드와 동일한 분석 및 정보를 얻기 위해 그룹에서 세그먼트로 문서를 드릴하려면 Tableau 작업을 사용할 수 있습니다. 작업을 통해 표시(예: 맵의 상태)를 클릭하고 클릭한 상태에 따라 필터링하는 다른 대시보드로 보낼 수 있습니다. 이렇게 하면 하나의 대시보드에 많은 필터가 있어야 하는 필요성이 줄어들고 필터링할 조건자를 얻을 때까지 레코드를 생성하지 않도록 작업을 설정할 수 있으므로 생성해야 하는 레코드 수가 줄어듭니다.

자세한 정보는 작업 및 대시보드 성능을 더 향상시키는 6가지 팁을 참조하세요.

캐싱

데이터 캐싱은 워크시트 또는 대시보드의 성능을 향상시키는 좋은 방법입니다.

Tableau의 캐싱

Tableau에는 데이터가 라이브 연결 또는 추출에 있는지 여부에 관계없이 데이터로 돌아가기 전에 다음 과 같은 4개의 캐싱 계층이 있습니다.

  • 타일: 다른 사용자가 정확히 동일한 대시보드를 로드하고 아무 것도 변경되지 않는 경우 Tableau는 차트에 동일한 타일을 다시 사용하려고 합니다. 이는 Google Maps 타일과 유사합니다.
  • 모델: 타일을 사용할 수 없는 경우 시각화를 생성하는 데 사용되는 수학 계산이 있습니다. Tableau Server는 동일한 모델을 사용하려고 합니다.
  • 추상: 쿼리의 집계 결과도 저장됩니다. 이것은 세 번째 "방어" 수준입니다. 쿼리가 이전 쿼리에서 Sum(Sales), Count(orders), Sum(Cost)을 반환하고 이후 쿼리에서 Sum(Sales)만 원하는 경우 Tableau는 해당 결과를 가져와 사용합니다.
  • 네이티브 캐시: 쿼리가 다른 쿼리와 정확히 동일한 경우 Tableau는 동일한 결과를 사용합니다. 이것은 캐싱의 마지막 수준입니다. 이 작업이 실패하면 Tableau가 데이터로 이동합니다.

Tableau의 캐싱 빈도

Tableau에는 캐싱에 대한 관리 설정이 더 많거나 적게 있습니다. 서버가 새로 고침 빈도 낮음으로 설정된 경우 Tableau는 최대 12시간 동안 캐시에 데이터를 유지합니다. 새로 고침 빈도 높음으로 설정된 경우 Tableau는 모든 페이지 새로 고침의 데이터로 돌아갑니다.

동일한 대시보드를 다시 사용하는 고객(예: "월요일 아침 파이프라인 보고서")은 대시보드가 모두 동일한 캐시를 사용하도록 새로 고침 빈도 낮음으로 설정된 서버에 있어야 합니다.

Tableau의 캐시 온난화

Tableau에서 대시보드를 보기 전에 보낼 대시보드에 대한 구독을 설정하여 캐시를 워밍할 수 있습니다. 구독 이메일에 대한 이미지를 생성하기 위해 대시보드를 렌더링해야 하기 때문입니다. 구독을 사용하여 Tableau Server 캐시 워밍을 참조하세요.

Tableau Desktop: 오류가 The drivers... are not properly installed 표시됩니다.

이슈: Tableau Desktop을 Databricks에 연결하려고 하면 드라이버 링크 및 설치 지침을 찾을 수 있는 드라이버 다운로드 페이지 링크 연결 대화 상자에 오류 메시지가 표시됩니다.

원인: Tableau Desktop 설치 시 지원되는 드라이버가 실행되고 있지 않습니다.

해결 방법: Databricks ODBC 드라이버 버전 2.6.15 이상을 다운로드합니다.

참고 항목: 오류 "드라이버가... Tableau 웹 사이트에 제대로 설치되지 않았습니다."

추가 리소스